Маск заявив, що Colossus 2 одночасно тренує 7 моделей, максимально до 100 трильйонів параметрів

AIMPACT повідомляє, 8 квітня (UTC+8), засновник SpaceX та xAI Ілон Маск опублікував у X, що суперкомп’ютерний кластер SpaceXAI Colossus 2 наразі одночасно тренує 7 моделей:

1. Imagine V2, наступне покоління моделей для генерації зображень та відео

2. 2 варіанти моделі з 1 трильйоном параметрів

3. 2 варіанти моделі з 1,5 трильйона параметрів

4. Модель з 6 трильйонами параметрів

5. Модель з 10 трильйонами параметрів

Він додав коментар: «Ще є куди наздоганяти» (Some catching up to do). Раніше кілька медіа повідомляли, що наступна флагманська модель xAI Grok 5 має приблизно 6 трильйонів параметрів, що відповідає 6T у списку. Раніше не було публічних повідомлень про модель з 10 трильйонами параметрів.

У повідомленні Маск використовує «SpaceXAI» для позначення об’єднаної компанії SpaceX та xAI. Об’єднання двох компаній відбулося у лютому цього року, оцінна вартість після злиття становить близько 1,25 трильйонів доларів. Colossus 2 запущено 17 січня і є першим у світі гігафавн-обчислювальним кластером для тренування ШІ, планується його оновлення до 1,5 ГВт цього місяця. (Джерело: платформа X)