GLM-5.2 lidera benchmark de fine-tuning em meio a controvérsia, autores esclarecem: sem destilação do Claude

robot
Geração do resumo em andamento
De acordo com o monitoramento do Dongcha Beating, o modelo de código aberto GLM-5.2 ficou em primeiro lugar no benchmark de auto-ajuste PostTrainBench, mas enfrentou críticas do desafiante scaling01 por falta de valor prático. Ele apontou que a classificação do modelo saltou do 22º para o 1º em apenas alguns meses, o que é altamente incomum, e que o teste carece de um conjunto oculto, facilitando que agentes explorem a otimização de classificação, resultando em modelos difíceis de implementar no mundo real. No entanto, apoiadores rebateram que é irrealista esperar que agentes concluam ajustes finos gerais sob a restrição de uma única GPU H100 por 10 horas, e que a otimização direcionada é uma norma no aprendizado de máquina. Registros públicos mostram que o GLM-5.2 possui uma lógica experimental clara, pode coletar automaticamente dados de diferentes hipóteses de amostragem, planeja de forma autônoma uma cadeia completa para estabelecer linhas de base de desempenho, ajuste fino e filtragem de dados usando amostragem por rejeição, enquanto tenta evitar overfitting na cadeia de raciocínio. O maior valor dessa controvérsia está no fato de que a trajetória operacional disponível publicamente, originalmente destinada a avaliar capacidades de ajuste fino, inesperadamente desmascarou rumores da indústria sobre grandes modelos domésticos serem fortemente destilados do Claude. O autor do benchmark, Maksym Andriushchenko, observou após revisar os logs do GLM-5.2 que o modelo possui diferenças essenciais do Claude na coleta de dados, combinações de estratégias e caminhos de decisão, não mostrando sinais de imitação ou destilação. A transparência de benchmarks de terceiros se tornou, em vez disso, a janela mais direta para grandes modelos de código aberto demonstrarem suas capacidades originais de pesquisa e desenvolvimento.
Ver original
Esta página pode conter conteúdo de terceiros, que é fornecido apenas para fins informativos (não para representações/garantias) e não deve ser considerada como um endosso de suas opiniões pela Gate nem como aconselhamento financeiro ou profissional. Consulte a Isenção de responsabilidade para obter detalhes.
  • Recompensa
  • Comentário
  • Repostar
  • Compartilhar
Comentário
Adicionar um comentário
Adicionar um comentário
Sem comentários
  • Fixado