Лаборатория искусственного интеллекта Стэнфорд опубликовала универсальную проверочную структуру LLM-as-a-Verifier, достигшую передовых результатов в двух бенчмарках.

robot
Генерация тезисов в процессе

МЕ Новости, 10 апреля (UTC+8), лаборатория искусственного интеллекта Стэнфордского университета (StanfordAILab) недавно выпустила универсальную систему проверки под названием “LLM-as-a-Verifier”. Эта система достигает точности 86,4% в тесте Terminal-Bench 2, используя расширенные методы оценки, повторную проверку и разложение стандартов, а также 77,8% в тесте SWE-Bench Verified, что соответствует текущему передовому уровню (SOTA). В статье приведены ссылки на соответствующий блог и код. (Источник: InFoQ)

Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
Нет комментариев
  • Закрепить