اختبار معيار SOOHAK يكشف عن عيوب نماذج الذكاء الاصطناعي: القدرة على التعرف على المشكلات الرياضية التي لا حل لها لم تتجاوز 50%

AIMPACT رسالة، في 17 مايو (بتوقيت UTC+8)، كشفت اختبار المعايير الرياضية الجديدة للذكاء الاصطناعي SOOHAK، الذي أنشأه اتحاد الرياضيين المكون من 64 عضوًا، عن عيوب رئيسية في نماذج الذكاء الاصطناعي. يتضمن الاختبار 439 مهمة يدوية، منها 99 مهمة مصممة عمدًا بدون حل. يتفوق Google Gemini 3 Pro في المسائل البحثية، محققًا دقة بنسبة 30%، لكن لا يوجد أي نموذج يتجاوز 50% في التعرف على المهام غير القابلة للحل. أظهرت الدراسات أن المزيد من الموارد الحسابية يمكن أن يعزز قدرة النماذج على حل المشكلات، لكنه لا يمكن أن يعزز قدرتها على الاعتراف بعدم وجود حل للمشكلة. يهدف SOOHAK إلى قياس الفجوة بين إنجازات الذكاء الاصطناعي المتميزة والمهارات البحثية الواسعة التي لا تزال غير متوفرة في الأنظمة.