AIMPACT пропонує системний підхід до перетворення моделей після тренування для логічного виведення у олімпійського рівня розв’язувачів задач, що складається з трьох кроків: використання курсу зворотної заплутаності для наглядового тонкого налаштування, щоб впровадити пошук доказів і самоперевірку; потім розширення за допомогою двох етапів підкріпленого навчання; і масштабування під час тестування для підвищення продуктивності. Застосовано до базової моделі 30B-A3B, з використанням приблизно 340 000 підтверджуючих 8K траєкторій для наглядового тонкого налаштування, після чого 200 кроків RL, отримано SU-01. Ця модель здатна стабільно логічно виводити складні задачі, з траєкторіями понад 100 000 токенів, досягаючи рівня золотої медалі на змаганнях IMO/USAMO/IPhO та демонструючи здатність до переносу наукового логічного мислення за межами математики та фізики.

MeNews

2026-05-26 18:44:37

Генерація анотацій у процесі

AIMPACT повідомлення, 16 травня (UTC+8), опубліковано нову статтю, яка пропонує системний підхід до перетворення моделей після тренування для логічних висновків у олімпійські рівні розв'язувачів задач, а також на основі цього методу тренує модель SU-01.
Цей метод складається з трьох кроків: спочатку використовується курс зворотної плутаності для керованого тонкого налаштування, щоб впровадити строгий пошук доказів та поведінку самоперевірки;
потім ці поведінки розширюються за допомогою двоетапного підкріпленого навчання (від підкріпленого навчання з підтверджувальними нагородами до підкріпленого навчання на рівні доказів);
наостанок під час тестування застосовується масштабування для підвищення продуктивності.
Команда дослідження застосувала цей метод до базової моделі 30B-A3B, використовуючи близько 340 000 траєкторій з підказками довжиною понад 8 тисяч токенів для керованого тонкого налаштування, а потім провела 200 кроків підкріпленого навчання, отримавши SU-01.
Ця модель здатна стабільно логічно розв'язувати складні задачі, з довжиною траєкторії понад 100 000 токенів, досягаючи рівня золотої медалі на змаганнях IMO 2025/USAMO 2026 та IPhO 2024/2025, а також демонструє здатність до генералізації у галузі наукового мислення поза межами математики та фізики.
(Джерело: InFoQ)

Переглянути оригінал

Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.

7 лайків

Нагородити
7
6
2
Поділіться

Прокоментувати

Додати коментар

NoSleepBridge

· 4год тому

Після тренування трансформуйте цю методологію, чи можуть інші сфери списати домашнє завдання?