اختبار مخصص لفئة React: GPT-5.6 في المركز الأول في Sol، لكن أفضل نتيجة لم تتجاوز 43.1%

robot
إنشاء الملخص قيد التقدم
أفادت منصة Beating Monitoring أن فريق Million، المتخصص في أدوات تطوير React، أطلق ReactBench v1 لاختبار ما إذا كان وكيل برمجة بالذكاء الاصطناعي قادرًا على إنجاز مهام تطوير React الحقيقية، مع تجنب إدخال مشكلات جديدة في الكود.

React هي مكتبة JavaScript رائجة تُستخدم لبناء واجهات مواقع الويب والتطبيقات. وقد سبق أن طوّر Million أدوات مفتوحة المصدر مثل React Scan وReact Doctor وMillion.js.

اختار ReactBench من المشاريع مفتوحة المصدر 51 مهمة حقيقية. بالإضافة إلى التحقق مما إذا كانت الوظائف يمكن تشغيلها، فإنه يستخدم أكثر من 400 قاعدة للكشف عن أخطاء البرامج والمشكلات المتعلقة بالأداء وقابلية الوصول وجودة الكود.

احتل GPT-5.6 Sol الصدارة بدرجة كلية بلغت 43.1%، بينما سجلت Fable 5 نسبة 41.2%. وتقول الجهة الرسمية إن الفارق بينهما صغير نسبيًا، ولا يمكن حاليًا تأكيد ما إذا كان Sol أقوى بشكل ملحوظ. وعند استخدام إعدادات XHigh نفسها، فإن تكلفة الاختبار الواحدة لـ Fable 5 تبلغ نحو 6.3 أضعاف تكلفة Sol.

حتى مع أعلى إعدادات من حيث النتائج، لا تتجاوز نسبة إكمال المهام بنجاح نصفها. وفي 4455 مرة لاختبار تطوير ميزات جديدة، أضافت النماذج مجتمعة 1194 مشكلة في React، منها 77.5% أخطاء برمجية أو مشكلات أمنية.
شاهد النسخة الأصلية
قد تحتوي هذه الصفحة على محتوى من جهات خارجية، يتم تقديمه لأغراض إعلامية فقط (وليس كإقرارات/ضمانات)، ولا ينبغي اعتباره موافقة على آرائه من قبل Gate، ولا بمثابة نصيحة مالية أو مهنية. انظر إلى إخلاء المسؤولية للحصول على التفاصيل.
  • أعجبني
  • تعليق
  • إعادة النشر
  • مشاركة
تعليق
إضافة تعليق
إضافة تعليق
لا توجد تعليقات
  • مُثبت