Musk afirma que o Colossus 2 está a treinar 7 modelos em simultâneo, com um máximo de 10 triliões de parâmetros

De acordo com a monitorização do 1M AI News, Elon Musk, fundador da SpaceX e da xAI, publicou no X que o cluster de supercomputação da SpaceXAI, Colossus 2, está atualmente a treinar 7 modelos em simultâneo: 1. Imagine V2, os próximos modelos de geração de imagens e vídeo; 2. Duas variantes de um modelo com 1 trilião de parâmetros; 3. Duas variantes de um modelo com 1,5 trilião de parâmetros; 4. Um modelo com 6 triliões de parâmetros; 5. Um modelo com 10 triliões de parâmetros. Ele acrescentou: “Ainda há trabalho a fazer para alcançar.” Anteriormente, vários meios de comunicação relataram que o próximo modelo emblemático de geração da xAI, Grok, tem uma escala de parâmetros de cerca de 6 triliões, o que corresponde aos 6T listados. O modelo com 10 triliões de parâmetros não foi divulgado publicamente antes. Na sua publicação, Musk referiu-se à entidade fundida como “SpaceXAI.” As duas empresas concluíram a sua fusão em fevereiro deste ano, com uma valorização pós-fusão de aproximadamente 1,25 triliões de dólares. O Colossus 2 foi lançado a 17 de janeiro e é o primeiro cluster mundial de treino de IA ao nível de gigawatt, com planos para atualizar para 1,5GW este mês.