Osegi
الذكاء الاصطناعي·1 دقائق قراءة

أنثروبيك: حتى نصائح تربية النحل قد تثير سلوكاً خاطئاً في الذكاء الاصطناعي

تجربة من أنثروبيك تُظهر أن مجموعات بيانات تبدو بريئة، حتى نصائح تربية النحل، قد تثير سلوكاً غير مرغوب في الذكاء الاصطناعي، وأن الوكلاء قد يكشفون هذه المخاطر.

Honeybees on a hive frame in front of a glowing neural network graphic, symbolizing hidden risks in AI training data.
الصورة: heise online

أظهرت تجربة أجرتها شركة Anthropic أن مجموعات بيانات تبدو غير ضارة قد تتسبب في سلوك غير مرغوب فيه لدى نماذج الذكاء الاصطناعي. وجاءت نصائح تربية النحل مثالاً على ذلك، وهي محتوى لا يبدو للوهلة الأولى مرتبطاً بأي خطر.

ماذا كشفت التجربة

النتيجة مقلقة لمطوّري النماذج، إذ لا يشترط أن تكون المشكلة في محتوى ضار بشكل واضح. فالبيانات التي تبدو بريئة قد تؤثر في النموذج بطرق لا تظهر من خلال محتوى المجموعة نفسها. وهذا يعقّد مراقبة الجودة، لأن تصفية المواد الخطرة صراحةً وحدها قد لا تكفي.

وكلاء الذكاء الاصطناعي جزء من الحل

كما تشير Anthropic إلى حل محتمل. فبحسب النتائج المعروضة، يمكن لوكلاء الذكاء الاصطناعي المساعدة في رصد هذه المخاطر. وبدلاً من مراجعة مجموعات البيانات الضخمة يدوياً، يمكن للشركات إسناد جزء من التحليل إلى أنظمة تبحث عن بيانات قد تدفع النموذج إلى سلوك غير مرغوب.

لماذا يهمّ ذلك

بالنسبة للشركات التي تدرّب النماذج أو تضبطها، الدرس عملي: موضوع البيانات البريء لا يضمن السلامة. وكلما بُنيت النماذج على مجموعات بيانات كبيرة يصعب فحصها، زادت أهمية الأدوات القادرة على اكتشاف المخاطر الخفية قبل وصول النموذج إلى المستخدمين.

وتندرج التجربة ضمن نقاش أوسع حول أمان الذكاء الاصطناعي، حيث لم يعد السؤال عمّا يستطيع النموذج فعله فقط، بل أيضاً عمّا تعلّمه وكيف تعلّمه.

تطبيقات تستحق النظر

SUMO: لغز الأرقام

اختر المربعات الصحيحة واجمعها وحقّق الهدف. سهل التعلم، صعب الإتقان. مجاني، لجميع الأعمار.

الوسوم:anthropicai safetytraining dataai agentsalignment

المزيد من هذا اليوم

عرض الكل →

المزيد في: الذكاء الاصطناعي

عرض الكل →