اختبار وكيل ترميز ذكي مع التوسّع: تحويل المسارات إلى ملخصات منظمة لإعادة استخدام الخبرات

robot
إنشاء الملخص قيد التقدم
AIMPACT، 26 أبريل (UTC+8). في الآونة الأخيرة، اقترحت دراسة جديدة إطار اختبار للتوسّع أثناء التنفيذ موجّهًا إلى وكلاء الترميز على مدى طويل. يحوّل هذا الإطار مسارات تشغيل الوكلاء إلى ملخصات مُهيكلة، مع الحفاظ على الافتراضات الرئيسية والتقدم وأنماط الفشل، مع التخلي عن تفاصيل منخفضة الإشارة. يدعم الإطار طريقتين للتوسّع: التوسّع المتوازي باستخدام التصويت التراجعي في المسابقات التكرارية (RTV) لتقليص مجموعة الملخصات المرشحة بشكل تراجعي؛ والتوسّع التسلسلي بتكييف نهج التوازي-التقطير-التنقية (PDR) مع سيناريو الوكلاء، عبر الاستفادة من الملخصات السابقة لتوجيه توليد مسارات جديدة. وعلى معيارَي SWE-Bench Verified وTerminal-Bench v2.0، عند استخدام نموذج Claude-4.5-Opus، رفع هذا الأسلوب أداء mini-SWE-agent من 70.9% إلى 77.6%، وأداء Terminus 1 من 46.9% إلى 59.1%. يرى المقال أن التوسّع أثناء الاختبار لوكلاء المدى الطويل هو في جوهره مسألة تتعلق بالتمثيل والاختيار وإعادة الاستخدام. (المصدر: InFoQ)
شاهد النسخة الأصلية
قد تحتوي هذه الصفحة على محتوى من جهات خارجية، يتم تقديمه لأغراض إعلامية فقط (وليس كإقرارات/ضمانات)، ولا ينبغي اعتباره موافقة على آرائه من قبل Gate، ولا بمثابة نصيحة مالية أو مهنية. انظر إلى إخلاء المسؤولية للحصول على التفاصيل.
  • أعجبني
  • تعليق
  • إعادة النشر
  • مشاركة
تعليق
إضافة تعليق
إضافة تعليق
لا توجد تعليقات
  • مُثبت