Ф'ючерси
Сотні безстрокових контрактів
CFD
Золото
Одна платформа для світових активів
Опціони
Hot
Торгівля ванільними опціонами європейського зразка
Єдиний рахунок
Максимізуйте ефективність вашого капіталу
Демо торгівля
Вступ до ф'ючерсної торгівлі
Підготуйтеся до ф’ючерсної торгівлі
Ф'ючерсні події
Заробляйте, беручи участь в подіях
Демо торгівля
Використовуйте віртуальні кошти для безризикової торгівлі
CFD
CFD-деривативи на акції США
Акції США
Отримайте доступ до реальних акцій США та ETF
Акції Гонконгу
Торгуйте якісними акціями з лістингом у Гонконгу
Корейські акції
SK Hynix
Торгуйте реальними корейськими акціями та інвестуйте в популярні активи
Ф'ючерси на акції
Високе кредитне плече, торгівля 24/7
Токенізовані акції
Забезпечено реальними фондовими активами
IPO Access
Отримайте повний доступ до глобальних IPO акцій
GUSD
Мінтіть GUSD для отримання дохідності від казначейських RWA
Активності з акціями
Торгуйте популярними акціями та відкривайте щедрі аірдропи
Запуск
CandyDrop
Збирайте цукерки, щоб заробити аірдропи
Launchpool
Швидкий стейкінг, заробляйте нові токени
HODLer Airdrop
Утримуйте GT і отримуйте масові аірдропи безкоштовно
IPO Access
Отримайте повний доступ до глобальних IPO акцій.
Alpha Поінти
Ончейн-торгівля та аірдропи
Ф'ючерсні бали
Заробляйте фʼючерсні бали та отримуйте аірдроп-винагороди
Інвестиції
Simple Earn
Заробляйте відсотки за допомогою неактивних токенів
Автоінвестування
Автоматичне інвестування на регулярній основі
Подвійні інвестиції
Прибуток від волатильності ринку
Soft Staking
Earn rewards with flexible staking
Криптопозика
0 Fees
Заставте одну криптовалюту, щоб позичити іншу
Центр кредитування
Єдиний центр кредитування
Центр багатства VIP
Преміальні плани зростання капіталу
Gate Wealth
візьміть під контроль своє фінансове майбутнє
Квантовий фонд
Квантові стратегії найвищого рівня
Стейкінг
Стейкайте криптовалюту, щоб заробляти на продуктах PoS
Розумне кредитне плече
Кредитне плече без ліквідації
USD1 8% річних
Без блоку, вивід у будь-який час.
Акції
Центр діяльності
Беріть учать та отримуйте винагороди
Реферал
20 USDT
Запрошуйте друзів та отримуйте бонуси
Партнерська програма
Ексклюзивні комісійні винагороди
Gate Booster
Зростайте та отримуйте аірдропи
Оголошення
Оновлення платформи в реальному часі
Блог Gate
Статті про криптоіндустрію
VIP послуги
Величезні знижки на комісії
Управління активами
Універсальне рішення для управління активами
Інституційний
Рішення цифрових активів для бізнесу
Розробники (API)
Підключається до екосистеми додатків Gate
Позабіржовий банківський переказ
Поповнюйте та виводьте фіат
Брокерська програма
Щедрі механізми знижок API
AI
Gate AI
Ваш універсальний AI-помічник для спілкування
Gate AI Bot
Використовуйте Gate AI безпосередньо у своєму соціальному додатку
GateClaw
Gate Блакитний Лобстер — готовий до використання
Gate for AI Agent
AI-інфраструктура, Gate MCP, Skills і CLI
Gate Skills Hub
Понад 10 000 навичок
Від офісу до трейдингу: універсальна база навичок для ефективнішої роботи з AI
Не тупи дурно обчислювальну потужність! Дослідження показують, що великі моделі з кожним навчанням стають все більш «жорсткими», і збільшення параметрів не допомагає.
Якщо не вдасться подолати втрату пластичності, великі моделі ніколи не зможуть безперервно навчатися з низькими витратами; при кожному оновленні знань доведеться об'єднувати всі історичні дані з новими даними та перетренуватися, що споживає величезні обчислювальні потужності.
Останнє дослідження AI-стартапу Zyphra вперше доводить, що збільшення моделі хоча й може відтермінувати деградацію, але гранична вигода зменшується, і лише накопичення параметрів не може вилікувати втрату пластичності.
Екстраполяція показує, що модель з 1B параметрів стає "дурнішою" після тренування на 1.8 трильйона токенів, а модель з 7B — після 9 трильйонів.
Ще більш революційним є те, що навіть без перемикання завдань, якщо просто дозволити моделі тренуватися на стабільному змішаному наборі даних, втрата пластичності все одно відбувається.
Дослідження вказує на три безпосередні причини, чому великі моделі "дурнішають": об'єм параметрів постійно зростає під час тренування, що перешкоджає передачі градієнтів через механізм LayerNorm; масова сплячка нейронів «страйк» у шарах MLP (у деяких моделях до 95% нейронів переходять у сплячий стан); параліч голов уваги (фіксація лише на окремих символах) або «ледарство» (рівномірне розмазування по всьому контексту).
Щодо цих патологічних особливостей, потенційні методи лікування включають обмеження зростання параметрів, періодичне проведення «нейронного скидання» для примусової активації страйкуючих нейронів, а також введення випадкового шуму в механізм уваги для примусової корекції.
(Джерело: BlockBeats)