LangSmith ця хвиля оновлення оцінювачів, тепер для створення AI-агентів нарешті не потрібно повторно винаходити колесо

Переглянути оригінал
MeNews
LangSmith запустив понад 30 шаблонів оцінювання, перевірка якості AI-агентів більше не вимагає починати з нуля
LangSmith випустила бібліотеку шаблонів оцінювачів та багаторазові оцінювачі, що спрощують багаторівневу оцінку AI-агентів. Шаблони охоплюють п’ять основних категорій: безпека та захист, якість відповідей, траєкторія виконання, аналіз поведінки користувачів та мультимодальність, включаючи оптимізовані підказки для оцінки та правила оцінювачів, що підходять для онлайн-моніторингу та офлайн-експериментів. Багаторазові оцінювачі централізовано керуються на рівні організації, додано вкладку Evaluators, можливість однією кнопкою додати до нового проекту, оновлені підказки глобально застосовуються, відкритий код та випущені разом з openevals v0.2.0, додано підтримку мультимодальності.
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • Прокоментувати
  • Репост
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
Немає коментарів
  • Закріплено