Cientista de Stanford explora o potencial e as limitações da IA na pesquisa científica assistida e na revisão por pares

Notícias ME: Mensagem, 1 de abril (UTC+8). O cientista da computação da Universidade de Stanford, James Zou, explorou recentemente as aplicações de modelos de linguagem de grande dimensão na assistência aos pares na revisão científica e no acelerar do progresso da investigação. Ele participou num grande ensaio aleatório que envolveu cerca de 20k revisões, para avaliar o impacto da assistência por IA na qualidade da revisão. O estudo descobriu que a IA se destaca na identificação de erros ou inconsistências objectivas e verificáveis (como dados que não correspondem, erros em fórmulas), mas tem limitações na avaliação de juízos subjectivos como a novidade ou a importância de um estudo, e por vezes até apresenta uma tendência para agradar/elogiar. Zou enfatizou que a IA deve apoiar, e não substituir, a tomada de decisão humana; os cientistas precisam de ser os responsáveis finais pela investigação, e devem explicar de forma transparente o grau de participação da IA. O ensaio mostrou que o feedback da IA melhora a qualidade da revisão e o envolvimento dos revisores. No futuro, estão planeadas mais conferências para regulamentar a aplicação da IA na ciência. (Fonte: InFoQ)