GLM-5.2 очолює бенчмарк тонкого налаштування на тлі суперечок, автори уточнюють: без дистиляції Клода

robot
Генерація анотацій у процесі
За даними моніторингу Dongcha Beating, відкрита модель GLM-5.2 очолила бенчмарк самофайнтюнінгу PostTrainBench, але зазнала критики від конкурента scaling01 за відсутність практичної цінності. Він зазначив, що рейтинг моделі підскочив з 22-го на 1-ше місце всього за кілька місяців, що є дуже незвичним, і що тестування не має прихованого набору, що дозволяє агентам легко використовувати оптимізацію рейтингу, що призводить до моделей, які важко впровадити в реальному світі. Однак прихильники заперечили, що нереально очікувати від агентів завершення загального файнтюнінгу при обмеженні одного графічного процесора H100 протягом 10 годин, і що цілеспрямована оптимізація є нормою в машинному навчанні. Публічні журнали показують, що GLM-5.2 має чітку експериментальну логіку, може автоматично збирати дані з різних гіпотез вибірки, автономно планує повний ланцюжок для встановлення базових показників продуктивності, файнтюнінгу та фільтрації даних за допомогою відкидної вибірки, намагаючись уникнути перенавчання в ланцюжку міркувань. Більша цінність цієї суперечки полягає в тому, що загальнодоступна операційна траєкторія, спочатку призначена для оцінки можливостей файнтюнінгу, несподівано розвіяла чутки в індустрії про те, що великі моделі вітчизняного виробництва були сильно дистильовані з Claude. Автор бенчмарку Максим Андрющенко зазначив після перегляду журналів GLM-5.2, що модель має суттєві відмінності від Claude у зборі даних, комбінаціях стратегій та шляхах прийняття рішень, не виявляючи ознак імітації або дистиляції. Прозорість сторонніх бенчмарків натомість стала найпрямішим вікном для відкритих великих моделей, щоб продемонструвати свої оригінальні дослідницькі та розробницькі можливості.
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • Прокоментувати
  • Репост
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
Немає коментарів
  • Закріплено