Cientista de Stanford explora o potencial e as limitações da IA na pesquisa científica assistida e na revisão por pares

Notícias da ME, 1 de abril (UTC+8), o cientista da computação da Universidade de Stanford James Zou explorou recentemente a aplicação de grandes modelos de linguagem no apoio aos pares na revisão científica e no acelerador do processo de investigação. Ele participou num grande ensaio aleatório envolvendo cerca de 20k avaliações, para avaliar o impacto do auxílio por IA na qualidade das avaliações. O estudo descobriu que a IA se destaca na deteção de erros ou inconsistências objetivas e verificáveis (como dados que não correspondem ou fórmulas erradas), mas tem limitações na avaliação de julgamentos subjetivos, como a novidade ou a importância de um estudo, e por vezes até apresenta tendências para agradar. Zou salientou que a IA deve apoiar e não substituir as decisões humanas; os cientistas precisam de ser responsáveis pelo estudo final e devem explicar de forma transparente o grau de participação da IA. O experimento mostrou que o feedback da IA melhorou a qualidade das revisões e o envolvimento dos revisores. No futuro, estão planeadas mais conferências para regulamentar a aplicação de IA na ciência. (Fonte: InFoQ)