يستطيع أقوى وكيل بحث إنهاء بحث كامل عن كائن واحد فقط كل 7 كائنات.

robot
إنشاء الملخص قيد التقدم
أخبار شبكة تشفير، كشفت دراسة صادرة عن OneMillion_AI أن أقوى وكلاء البحث (Research Agent) عند التعامل مع المهام لا يستطيعون إكمال الاطلاع على كائن/عنصر واحد بالكامل من كل 7 كائنات/عناصر. تستند الدراسة إلى معيار wandr المنشور من perplexity، وهي مصممة لاختبار أداء وكلاء البحث في جمع معلومات على نطاق واسع. تشترط المهام أن يتم أولاً حصر كُل مجموعة من الكائنات/العناصر، ثم استكمال المعلومات المحددة لكل كائن/عنصر مع مصادر موثوقة. شملت 500 مهمة ما يزيد على 170 ألف سجل. ضمن 6 أنظمة شاركت في الاختبار، جاءت perplexity search as code في المرتبة الأولى، لكن 13.3% فقط من الكائنات/العناصر حققت في الوقت نفسه اكتمال المعلومات وتوفر الأدلة الكافية. وبتحويل النتائج، فإن نحو 1 من كل 7 كائنات/عناصر فقط يمكنه التسليم كاملاً. وتُظهر النتائج أن وكلاء البحث الحاليين يمكنهم بالفعل العثور على عدد كبير من الصفحات، لكن عند معالجة قوائم طويلة ومهام تتضمن حقولاً متعددة، لا يزالون عرضة لإغفال كائنات/عناصر، أو إغفال معلومات، أو افتقار الأدلة.
شاهد النسخة الأصلية
قد تحتوي هذه الصفحة على محتوى من جهات خارجية، يتم تقديمه لأغراض إعلامية فقط (وليس كإقرارات/ضمانات)، ولا ينبغي اعتباره موافقة على آرائه من قبل Gate، ولا بمثابة نصيحة مالية أو مهنية. انظر إلى إخلاء المسؤولية للحصول على التفاصيل.
  • أعجبني
  • 2
  • 2
  • مشاركة
تعليق
إضافة تعليق
إضافة تعليق
ChainHodler
· منذ 4 س
تجاهل الأهداف، انعدام الأدلة، ونقص المعلومات—هذه الثلاثية تكشف بالكامل أوجه القصور لدى الوكلاء الحاليين. في المهام واسعة النطاق، الاستقرار أهم من القدرة على تحقيق الذروة، وفي هذا الصدد ما زال على الجميع أن يتنافسوا أكثر.
شاهد النسخة الأصليةرد0
GasActuary
· منذ 4 س
تأتي Perplexity في المرتبة الأولى أيضاً بنسبة 13.3% فقط، وهذا الاختبار المعياري قاسٍ للغاية. أشعر بأن الوكلاء الآن أقرب إلى أدوات بحث فائقة، ولا يزالون يفتقدون شيئاً ما ليكونوا مساعداً بحثياً حقيقياً.
شاهد النسخة الأصليةرد0
  • مُثبت