Команда Берклі оголосила про прорив у 8 основних тестах для штучних агентів та відкрила інструменти для спільного використання

ME News Новини, 19 квітня (UTC+8), група досліджень штучного інтелекту Берклі (berkeley_ai) передала заяву Dawn Song, яка оголосила, що її команда успішно зламала 8 основних тестових критеріїв для агентів. Команда вирішила відкрити вихідний код інструменту, який був використаний для досягнення цього результату, і назвала його BenchJack. Цей інструмент описується як "проникливе тестування для оцінки", спрямоване на допомогу іншим розробникам активно тестувати та виявляти потенційні слабкі місця у своїх системах оцінки. (Джерело: InFoQ)
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • 9
  • 1
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
DrinkWaterBeforeTheMarket
· 15хв. тому
Інструменти з відкритим кодом + публічні методології — ось яким має бути академічне співтовариство
Переглянути оригіналвідповісти на0
ElevatorMeme
· 2год тому
Цікаво, як саме вони зламали це, чекатиму на статтю.
Переглянути оригіналвідповісти на0
FrontrunFail
· 3год тому
8 основних бенчмарків повністю зламано, у світі тестування почнуться землетруси
Переглянути оригіналвідповісти на0
AutumnSlopeCabin
· 3год тому
Щодо тестування проникнення для оцінки, ця концепція досить нова.
Переглянути оригіналвідповісти на0
OutsiderOfZhiyuandao
· 4год тому
Команда Dawn Song втрутилася, я ціную цінність цього.
Переглянути оригіналвідповісти на0
ChaintraceAuntie
· 4год тому
З’явився «дзеркало для демонізації», яке оцінює інтелектуальні агенти
Переглянути оригіналвідповісти на0
SnackFi
· 4год тому
Активне пошук слабких місць краще, ніж пасивне отримання ударів, підтримуйте цей дух відкритого коду
Переглянути оригіналвідповісти на0
ColdWalletFitnessCoach
· 4год тому
Згодом перед переглядом таблиці лідерів слід спитати: Чи захистили вися BenchJack?
Переглянути оригіналвідповісти на0
HedgeHedgeBaby
· 4год тому
BenchJack ця назва має щось у собі, benchmark + hijack, так?
Переглянути оригіналвідповісти на0
Дізнатися більше
  • Закріплено