Ilmuwan Stanford Menjelajahi Potensi dan Batasan AI dalam Mendukung Penelitian Ilmiah dan Peninjauan Sejawat

Berita ME, 1 April (UTC+8), James Zou, seorang ilmuwan komputer di Stanford University, baru-baru ini meneliti penerapan model bahasa besar dalam membantu sejawat ilmiah melakukan peninjauan sejawat dan mempercepat proses riset. Ia ikut serta dalam sebuah eksperimen acak berskala besar yang melibatkan sekitar 20k berkas peninjauan untuk menilai dampak bantuan AI terhadap kualitas peninjauan. Studi menemukan bahwa AI sangat baik dalam menemukan kesalahan atau ketidakkonsistenan yang objektif dan dapat diverifikasi (seperti data yang tidak cocok, kesalahan dalam rumus), tetapi memiliki keterbatasan dalam menilai pertimbangan subjektif seperti kebaruan atau signifikansi penelitian, dan kadang bahkan cenderung bersikap menyenangkan. Zou menekankan bahwa AI harus mendukung, bukan menggantikan keputusan manusia; para ilmuwan harus bertanggung jawab sepenuhnya atas penelitian akhir, dan harus secara transparan menjelaskan tingkat keterlibatan AI. Eksperimen menunjukkan bahwa umpan balik AI meningkatkan kualitas peninjauan dan keterlibatan peninjau. Rencana ke depan adalah mengadakan lebih banyak konferensi untuk menormalkan penerapan AI dalam sains. (Sumber: InFoQ)