Elon Musk afirma que Colossus 2 está a treinar sete modelos ao mesmo tempo, com um máximo de 100 mil bilhões de parâmetros

AIMPACT mensagem, 8 de abril (UTC+8), o fundador da SpaceX e xAI, Musk, postou no X que o supercomputador SpaceXAI Colossus 2 está atualmente treinando 7 modelos ao mesmo tempo:

1. Imagine V2, a próxima geração de modelos de geração de imagens e vídeos

2. 2 variantes de um modelo de 1 trilhão de parâmetros

3. 2 variantes de um modelo de 1,5 trilhão de parâmetros

4. Modelo de 6 trilhões de parâmetros

5. Modelo de 10 trilhões de parâmetros

Ele comentou: «Ainda há algo a alcançar» (Some catching up to do). Anteriormente, várias mídias relataram que o próximo modelo principal da xAI, Grok 5, teria cerca de 6 trilhões de parâmetros, o que corresponde ao valor de 6T na lista. O modelo de 10 trilhões de parâmetros ainda não foi divulgado publicamente.

Musk referiu-se à entidade resultante da fusão entre SpaceX e xAI como «SpaceXAI» na postagem. As duas empresas concluíram a fusão em fevereiro deste ano, com uma avaliação de aproximadamente 1,25 trilhão de dólares. Colossus 2 foi lançado em 17 de janeiro, sendo o primeiro cluster de treinamento de IA de nível gigavatio do mundo, com planos de ser atualizado para 1,5 GW neste mês. (Fonte: plataforma X)