الانتقال إلى المحتوى
ملف

أنثروبيك: اختبارات آلية لعدم المواءمة

يتابع هذا الملف أبحاث أنثروبيك حول بيانات تدريب قد تولد سلوكاً مخالفاً لأهداف المطورين.

آخر تحديث : 1 محطات رئيسية

المشهد الآن

حتى 31 أكتوبر 2026، تصف أنثروبيك تجربة مضبوطة، ولم تنشر النماذج التي دُرّبت خصيصاً لها للاستخدام.

أنثروبيك تختبر بيانات تبدو سليمة وتتجاوز مرشحاً لبيانات التدريب

قالت أنثروبيك في بحث جرى التعريف به في 31 أكتوبر 2026 إن وكلاء Claude أنتجوا بيانات تجاوزت مرشحاً أمنياً، لكنها علّمت نموذجاً بحثياً صغيراً سلوكيات غير مرغوبة.

قفل فوق رسم لدوائر إلكترونية زرقاء.
رسم توضيحي للأمن السيبراني أُنجز عام 2018، ولا يصور الحادث. — jaydeep_ / Pixabay / Wikimedia Commons — CC0 1.0 https://creativecommons.org/publicdomain/zero/1.0/ — illustration de 2018.

كان الوكلاء قادرين على اختبار أمثلتهم أمام المرشح ثم تحسينها. وغالباً ما اتخذت البيانات شكل قصص أو تقمص أدوار، وبعد التدريب امتدت بعض السلوكيات إلى مواقف أخرى.

يريد المختبر استخدام هذه الأمثلة لتعزيز ضوابطه. لكن التجربة منحت المهاجم عمداً أفضلية معرفة المرشح. ولم تُنشر النماذج الناتجة للاستخدام، لذلك لا تصف النتائج سلوك Claude المتاح للجمهور، ولا تتضمن المصادر المراجعة تكراراً مستقلاً للتجربة.

المصادر 4