Courtesy of NatureMagazine

AI Canggih Deteksi Kesalahan dalam Penelitian Ilmiah Sebelum Dipublikasikan

07 Mar 2025, 07.00 WIB

40 dibaca

Ikhtisar 15 Detik

Proyek Black Spatula dan YesNoError menggunakan AI untuk mendeteksi kesalahan dalam penelitian.
Tingkat positif palsu menjadi tantangan utama dalam penggunaan alat AI untuk verifikasi kesalahan.
Dukungan dari komunitas akademis penting untuk keberhasilan inisiatif ini dalam menjaga integritas penelitian.

Dua proyek baru menggunakan kecerdasan buatan (AI) untuk menemukan kesalahan dalam makalah penelitian, termasuk kesalahan dalam perhitungan, metodologi, dan referensi. Proyek pertama, Black Spatula Project, adalah alat AI sumber terbuka yang telah menganalisis sekitar 500 makalah dan berusaha menghubungi penulis yang terkena dampak secara langsung. Proyek kedua, YesNoError, terinspirasi oleh Black Spatula dan telah menganalisis lebih dari 37.000 makalah dalam waktu dua bulan. Kedua proyek ini bertujuan agar peneliti menggunakan alat mereka sebelum mengirimkan karya ke jurnal, serta agar jurnal memeriksa makalah sebelum diterbitkan.

Meskipun ada dukungan dari beberapa peneliti yang peduli dengan integritas penelitian, ada juga kekhawatiran tentang risiko yang mungkin muncul, seperti kesalahan dalam mengidentifikasi kesalahan yang dapat merusak reputasi penulis. Saat ini, tingkat kesalahan positif palsu, di mana AI mengklaim ada kesalahan padahal tidak ada, menjadi tantangan utama. Proyek Black Spatula memiliki tingkat kesalahan sekitar 10%, sementara YesNoError sedang dalam proses mengukur kesalahan positif palsu dari hasil awalnya. Meskipun ada tantangan, banyak yang percaya bahwa menggunakan AI untuk memeriksa makalah dapat membantu meningkatkan kualitas penelitian.

Referensi:
[1] https://nature.com/articles/d41586-025-00648-5

Analisis Kami

"Penggunaan AI sebagai alat pendeteksi kesalahan dalam penelitian adalah langkah revolusioner yang akan mengubah cara peer review dan publikasi ilmiah bekerja. Namun, berhati-hati dengan tingkat false positive sangat penting agar tidak menimbulkan kerusakan reputasi yang tidak perlu pada penulis dan mendukung verifikasi oleh ahli manusia tetap krusial."

Analisis Ahli

Michèle Nuijten

"Alat AI harus jelas dalam batasan deteksi kesalahan supaya tidak menimbulkan reputasi buruk pada peneliti bila ternyata klaim kesalahan salah."

James Heathers

"AI sangat berguna sebagai filter awal yang membantu fokus pada penelitian yang perlu ditelaah lebih lanjut, meski masih dalam tahap pengembangan."

Joaquin Gulloso

"Black Spatula Project sudah berhasil menemukan banyak kesalahan dan saat ini fokus pada proses verifikasi dengan para ahli di bidangnya."

Prediksi Kami

Di masa depan, penggunaan AI dalam memeriksa kesalahan dalam publikasi ilmiah akan menjadi standar di jurnal dan peneliti, mempercepat kualitas dan keandalan riset, dengan proses verifikasi manusia yang masih berjalan paralel untuk memastikan akurasi.