أنثروبيك: حتى نصائح تربية النحل قد تثير سلوكاً خاطئاً في الذكاء الاصطناعي
تجربة من أنثروبيك تُظهر أن مجموعات بيانات تبدو بريئة، حتى نصائح تربية النحل، قد تثير سلوكاً غير مرغوب في الذكاء الاصطناعي، وأن الوكلاء قد يكشفون هذه المخاطر.

أظهرت تجربة أجرتها شركة Anthropic أن مجموعات بيانات تبدو غير ضارة قد تتسبب في سلوك غير مرغوب فيه لدى نماذج الذكاء الاصطناعي. وجاءت نصائح تربية النحل مثالاً على ذلك، وهي محتوى لا يبدو للوهلة الأولى مرتبطاً بأي خطر.
ماذا كشفت التجربة
النتيجة مقلقة لمطوّري النماذج، إذ لا يشترط أن تكون المشكلة في محتوى ضار بشكل واضح. فالبيانات التي تبدو بريئة قد تؤثر في النموذج بطرق لا تظهر من خلال محتوى المجموعة نفسها. وهذا يعقّد مراقبة الجودة، لأن تصفية المواد الخطرة صراحةً وحدها قد لا تكفي.
وكلاء الذكاء الاصطناعي جزء من الحل
كما تشير Anthropic إلى حل محتمل. فبحسب النتائج المعروضة، يمكن لوكلاء الذكاء الاصطناعي المساعدة في رصد هذه المخاطر. وبدلاً من مراجعة مجموعات البيانات الضخمة يدوياً، يمكن للشركات إسناد جزء من التحليل إلى أنظمة تبحث عن بيانات قد تدفع النموذج إلى سلوك غير مرغوب.
لماذا يهمّ ذلك
بالنسبة للشركات التي تدرّب النماذج أو تضبطها، الدرس عملي: موضوع البيانات البريء لا يضمن السلامة. وكلما بُنيت النماذج على مجموعات بيانات كبيرة يصعب فحصها، زادت أهمية الأدوات القادرة على اكتشاف المخاطر الخفية قبل وصول النموذج إلى المستخدمين.
وتندرج التجربة ضمن نقاش أوسع حول أمان الذكاء الاصطناعي، حيث لم يعد السؤال عمّا يستطيع النموذج فعله فقط، بل أيضاً عمّا تعلّمه وكيف تعلّمه.
تطبيقات تستحق النظر
اختر المربعات الصحيحة واجمعها وحقّق الهدف. سهل التعلم، صعب الإتقان. مجاني، لجميع الأعمار.
تحدّث مع شريك محادثة بالذكاء الاصطناعي؛ تعود كل جملة مصحّحة ومشروحة بلغتك. 9 لغات، من A1 إلى C2.
افتح رسائل EDIFACT وX12 مع شرح كل مقطع، وحوّلها إلى JSON/XML، وصدّرها إلى PDF وExcel. يعمل محليًا دون رفع.
المزيد من هذا اليوم
عرض الكل →
كانفا توسّع شراكتها مع OpenAI بعد أيام من إطلاق نموذج Brush

تسريب بيانات 168 راكبًا على طائرة الرئيس الكوري الجنوبي

كوريا الجنوبية تغرّم غوغل وآبل بسبب إلزام المطورين بالدفع داخل التطبيقات

MOVIN تجمع 10 مليارات وون لبنية بيانات الحركة للذكاء الاصطناعي المادي
المزيد في: الذكاء الاصطناعي
عرض الكل →
OpenAI تدمج Chat وWork وتوحّد حدود استخدام ChatGPT وCodex

الهند تتحول إلى أكبر سوق لـ ChatGPT مع تضاعف عدد المستخدمين

OpenAI تدمج ChatGPT Work في محادثات ChatGPT المعتادة
