AIMPACT повідомляє, що вчені Amazon запропонували автоматизовану рамку для інженерії підказок під назвою Promptimus, яка дозволяє покращувати високоякісні підказки LLM без людського втручання. За допомогою ітеративної оптимізаційної стратегії та допоміжної моделі оптимізатора, що аналізує взаємодію між підказками та виходами моделі, автоматично регулюється чіткість інструкцій, вибір прикладів та інші аспекти. Багато стандартних тестів показали середнє покращення на 5-15%, зокрема, математичне мислення GSM8K з 78% до 85%, охоплюючи задачі з загальними знаннями та генерацію коду. Рамка є універсальною, не залежить від конкретної архітектури або задачі LLM, у поєднанні з регуляризацією та крос-валідацією для запобігання перенавчанню, що забезпечує здатність до узагальнення.

MeNews

2026-05-21 00:45:37

Генерація анотацій у процесі

AIMPACT повідомлення, 15 травня (UTC+8), вчені Amazon запропонували автоматизовану рамку для створення підказок під назвою Promptimus, яка дозволяє покращувати вже високоякісні підказки для великих мовних моделей без людського втручання. Цей метод за допомогою ітеративної оптимізації використовує допоміжну модель "оптимізатора" для аналізу взаємодії між підказками та виходами моделі, автоматично визначаючи та коригуючи такі аспекти, як ясність інструкцій та вибір прикладів. У багатьох базових тестах, таких як математичне логічне мислення (точність GSM8K з 78% до 85%), відповіді на загальні питання та генерація коду, оптимізовані підказки показали середнє покращення продуктивності від 5% до 15%. Ця рамка не залежить від конкретної архітектури LLM або типу задачі, має універсальність і за допомогою регуляризаційних термінів та механізмів перехресної перевірки запобігає надмірній оптимізації, забезпечуючи здатність до узагальнення. (Джерело: InFoQ)

Переглянути оригінал

Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.

8 лайків

Нагородити
8
6
14
Поділіться

Прокоментувати

Додати коментар

GateUser-9190180e

· 1год тому

Не прив'язуючись до конкретної архітектури моделі, саме універсальність є справжнім плюсом