O ex-CTO da OpenAI abriu sua nova empresa com o primeiro modelo de código aberto, Inkling; a arquitetura foi inspirada no DeepSeek-V3

robot
Geração do resumo em andamento
De acordo com o monitoramento Beating, o Thinking Machines Lab, fundado pela ex-CTO da OpenAI, Mira Murati, lançou seu primeiro modelo de propósito geral, o Inkling. O modelo tem 97,5 bilhões de parâmetros, ativa 41 bilhões por consulta, suporta texto, imagens e áudio, e tem um contexto máximo de 1 milhão de tokens.

O Inkling foi treinado do zero, mas a arquitetura MoE se baseia principalmente no DeepSeek-V3. No início do pós-treinamento, ele também utilizou dados gerados por modelos abertos como o Kimi K2.5. Os pesos completos já foram disponibilizados no Hugging Face, sob a licença Apache 2.0.

A Thinking Machines admite de forma clara que o Inkling ainda não é o modelo mais forte. Ele é focado em personalização e eficiência. No Terminal Bench 2.1, ao obter o mesmo desempenho, o número de tokens usado é de cerca de um terço do da Nvidia Nemotron 3 Ultra.
NVDA0,33%
Ver original
Esta página pode conter conteúdo de terceiros, que é fornecido apenas para fins informativos (não para representações/garantias) e não deve ser considerada como um endosso de suas opiniões pela Gate nem como aconselhamento financeiro ou profissional. Consulte a Isenção de responsabilidade para obter detalhes.
  • Recompensa
  • Comentário
  • Repostar
  • Compartilhar
Comentário
Adicionar um comentário
Adicionar um comentário
Sem comentários
  • Fixado