Notícias do site Coinjie, a Anthropic lançou o BioMysteryBench, um conjunto de avaliações de referência em bioinformática com 99 questões.


As questões foram elaboradas por especialistas do setor com base em conjuntos de dados reais (sequenciamento de DNA/RNA, proteômica, metabolômica, etc.),
e as respostas derivam de propriedades objetivas dos dados ou metadados validados por experimentos, sem depender do julgamento subjetivo dos pesquisadores.
Na avaliação, o Claude Mythos alcançou uma taxa de resolução de 30% em 23 questões difíceis relacionadas à humanidade.
O ambiente de avaliação forneceu ao Claude um contêiner, pré-instalado com ferramentas comuns de bioinformática, e acesso a bancos de dados públicos para download de genomas de referência.
Ver original
Esta página pode conter conteúdos de terceiros, que são fornecidos apenas para fins informativos (sem representações/garantias) e não devem ser considerados como uma aprovação dos seus pontos de vista pela Gate, nem como aconselhamento financeiro ou profissional. Consulte a Declaração de exoneração de responsabilidade para obter mais informações.
  • Recompensa
  • Comentar
  • Republicar
  • Partilhar
Comentar
Adicionar um comentário
Adicionar um comentário
Nenhum comentário
  • Fixar