يقوم Openai بإطلاق برنامج لتصميم معايير “الخاصة بـ” خاصة بالمجال “

يعتقد Openai ، مثل العديد من مختبرات الذكاء الاصطناعي ، أن معايير الذكاء الاصطناعي مكسورة. تقول إنها تريد إصلاحها من خلال برنامج جديد.

يسمى البرنامج ، الذي يطلق عليه برنامج Openai Pioneers ، سيركز على إنشاء تقييمات لنماذج الذكاء الاصطناعى “ضبط الشريط لما يبدو عليه جيدًا” ، كما صاغها Openai في منشور مدونة.

“مع تسارع وتيرة اعتماد الذكاء الاصطناعي عبر الصناعات ، هناك حاجة إلى فهم وتحسين تأثيرها في العالم” ، واصلت الشركة في منشورها. “إن إنشاء EVALs الخاصة بالمجال هي إحدى الطرق لتعكس حالات الاستخدام الحقيقي بشكل أفضل ، مما يساعد الفرق على تقييم الأداء النموذجي في البيئات العملية ذات المخاطر العالية.”

كما يوضح الجدل الأخير مع القياس المعياري LM Arena ونموذج Meta’s Maverick ، ​​من الصعب أن نعرف ، في هذه الأيام ، بالضبط ما يميز نموذج واحد. يقيس العديد من معايير الذكاء الاصطناعى المستخدمة على نطاق واسع الأداء على المهام الباطنية ، مثل حل مشاكل الرياضيات على مستوى الدكتوراه. يمكن أن يسيطر البعض الآخر ، أو لا يتماشى بشكل جيد مع تفضيلات معظم الناس.

من خلال برنامج Pioneers ، يأمل Openai في إنشاء معايير لمجالات محددة مثل القانونية والتمويل والتأمين والرعاية الصحية والمحاسبة. يقول المختبر أنه في الأشهر المقبلة ، ستعمل مع “شركات متعددة” لتصميم معايير مصممة وتبادل هذه المعايير في النهاية علنًا ، إلى جانب التقييمات “الخاصة بالصناعة”.

وكتب Openai في منشور المدونة: “ستركز المجموعة الأولى على الشركات الناشئة التي ستساعد في وضع أسس برنامج Openai Pioneers”. “نحن نختار حفنة من الشركات الناشئة لهذه الفوج الأولي ، كل منها يعمل على حالات الاستخدام المطبق عالية القيمة حيث يمكن لـ AI أن تدفع تأثير العالم الحقيقي.”

ستحصل الشركات في البرنامج أيضًا على فرصة العمل مع فريق Openai لإنشاء تحسينات نموذجية من خلال ضبط Fine Tuning ، وهي تقنية تعمل على تحسين نماذج لمجموعة ضيقة من المهام ، كما يقول Openai.

والسؤال الكبير هو ما إذا كان مجتمع الذكاء الاصطناعي سيحتضن معايير تم تمويل إنشائها من قبل Openai. دعمت Openai جهود القياس المالي من قبل ، وصممت تقييماتها الخاصة. ولكن قد يُنظر إلى الشراكة مع العملاء لإصدار اختبارات الذكاء الاصطناعي على أنها جسر أخلاقي بعيدًا.