Avaliação de terceiros: As tarefas do Kimi K3 Agent aproximam-se do Fable 5, mas há ainda mais alucinações

De acordo com a monitorização Beating do desempenho, a Artificial Analysis publicou uma avaliação independente do Kimi K3. Ele obteve 57 pontos no Intelligence Index v4.1. O nível geral é semelhante ao do Claude Opus 4.8 e do GPT-5.5, mas ainda inferior ao do Claude Fable 5 e ao do GPT-5.6 Sol. Este índice composto é composto por 9 testes, cobrindo trabalho real, chamadas a ferramentas, programação, raciocínio, conhecimento e contexto longo.

O desempenho do agente do Kimi K3 é ainda mais destacado. Nos testes de trabalho real GDPval-AA v2, obteve 1668 Elo, superando o Opus 4.8, o GPT-5.5 e o GLM-5.2. No teste de fluxos de trabalho automatizados de SaaS, a pontuação foi de 53%, ficando em primeiro lugar. O trabalho de conhecimento em processos longos ficou em segundo lugar, apenas atrás do Fable 5.

Nesta série de índices, o custo médio por tarefa do Kimi K3 é de 0.94 dólares. O GPT-5.6 Sol é de 1.04 dólares e o Opus 4.8 de 1.80 dólares. No entanto, a taxa de alucinações nos testes de fiabilidade do conhecimento subiu de 39% para 51%, enquanto a precisão subiu de 33% para 46%.
Ver original
Esta página pode conter conteúdos de terceiros, que são fornecidos apenas para fins informativos (sem representações/garantias) e não devem ser considerados como uma aprovação dos seus pontos de vista pela Gate, nem como aconselhamento financeiro ou profissional. Consulte a Declaração de exoneração de responsabilidade para obter mais informações.
  • Recompensa
  • Comentar
  • Republicar
  • Partilhar
Comentar
Adicionar um comentário
Adicionar um comentário
Nenhum comentário
  • Fixado