Cientista de Stanford explora o potencial e as limitações da IA na pesquisa científica assistida e na revisão por pares

Notícias ME: mensagem, 1 de abril (UTC+8). O investigador James Zou, cientista da computação da Universidade Stanford, explorou recentemente as aplicações dos grandes modelos de linguagem na assistência a pares científicos e no aceleração do progresso da investigação. Ele participou num grande experimento aleatório envolvendo cerca de 20.000 avaliações, para avaliar o impacto da assistência por IA na qualidade da revisão. O estudo descobriu que a IA se destaca na deteção de erros ou inconsistências objetivas e verificáveis (como dados que não correspondem e erros de fórmulas), mas tem limitações na avaliação de julgamentos subjetivos, como a novidade ou a importância de um estudo; por vezes, até apresenta tendência para agradar. Zou salientou que a IA deve apoiar e não substituir a tomada de decisão humana; os cientistas precisam de ser responsáveis pelo estudo final e devem explicar de forma transparente o grau de participação da IA. O experimento mostrou que o feedback da IA melhora a qualidade das revisões e o envolvimento dos revisores. No futuro, está planeado realizar mais conferências para regular a aplicação da IA na ciência. (Fonte: InFoQ)