KREDIBILITAS

Di Balik Label “Peer-Reviewed”: Siapa yang Sebenarnya Menjaga Pintu?

Proses peer review sering dibayangkan sebagai ruang steril di mana para ilmuwan brilian memeriksa setiap klaim dengan teliti. Realitanya? Reviewer bekerja tanpa bayaran, sering dalam tekanan waktu, dan hampir selalu anonim.

Anonimitas itu punya dua wajah. Di satu sisi, melindungi reviewer dari tekanan sosial dan konflik kepentingan. Di sisi lain, membuka celah untuk bias yang tak pernah bisa dipertanggungjawabkan.

Yang lebih mengejutkan: mayoritas jurnal tidak mengharuskan reviewer mengungkapkan conflict of interest. Artinya, seorang peneliti bisa menolak makalah kompetitornya tanpa siapapun tahu.

Ini bukan kelemahan satu jurnal. Ini adalah arsitektur sistemik yang sudah berjalan puluhan tahun. Yang menarik: sistem ini bukan dirancang untuk gagal — tapi juga tidak pernah dirancang untuk benar-benar transparan.

Bagaimana Reproducibility Crisis Terjadi Tanpa Disadari

Reproducibility crisis bukan fenomena baru. Tapi cara ia tumbuh tanpa disadari — itulah yang perlu dipahami lebih dalam.

Bayangkan peneliti A mempublikasikan hasil positif. Editor senang, pembaca tertarik. Tapi peneliti B, C, dan D yang mencoba mereplikasi dan gagal? Mereka tidak pernah bisa mempublikasikan kegagalan itu. Jurnal tidak tertarik pada null results. Inilah yang disebut publication bias — dan ia bekerja senyap seperti filter yang tak terlihat.

Ditambah lagi dengan p-hacking: praktik mengolah data berulang kali hingga muncul nilai p < 0.05 yang “signifikan”. Ini bukan pemalsuan data secara kasar. Ini lebih halus — dan justru karena itu lebih berbahaya. Penelitinya sendiri kadang tidak menyadari sedang melakukannya.

Lalu ada HARKing — Hypothesizing After Results are Known. Hipotesis ditulis setelah melihat data, tapi disajikan seolah-olah dirumuskan sebelumnya. Secara teknis, tidak ada yang dipalsukan. Tapi secara epistemik, ini adalah kebohongan yang dibalut metodologi.

Mekanisme ini tidak beroperasi sendiri-sendiri. Mereka saling menopang, membentuk ekosistem di mana terlihat ilmiah jauh lebih mudah daripada benar-benar ilmiah.

Detail Kecil yang Menentukan Segalanya: Siapa yang Memiliki Data Mentah?

Ada satu pertanyaan yang jarang diajukan ketika membaca publikasi ilmiah: di mana data mentahnya?

Bukan angka di tabel. Bukan grafik yang sudah diolah. Tapi file CSV asli, log eksperimen, bahkan kode analisisnya.

Mayoritas jurnal — bahkan yang prestisius — tidak mewajibkan deposit data mentah. Penulis cukup menulis “data tersedia atas permintaan”. Dan dalam praktiknya, permintaan itu sering tidak dijawab. Sebuah studi menemukan bahwa lebih dari 50% penulis tidak merespons permintaan data mereka sendiri, bahkan dalam rentang waktu yang wajar.

Ini bukan sekadar masalah administrasi. Ini adalah masalah epistemic sovereignty — siapa yang punya hak dan kemampuan untuk memverifikasi sebuah klaim. Tanpa akses ke data mentah, pembaca tidak bisa memverifikasi. Mereka hanya bisa mempercayai.

Tapi kepercayaan bukan metode ilmiah.

Gerakan open science — dengan inisiatif seperti preregistration, open data, dan preprint servers seperti arXiv atau bioRxiv — mulai mengubah landscape ini. Bukan sebagai revolusi, tapi sebagai tekanan gradual yang perlahan menggeser norma.

Kepercayaan Sebagai Infrastruktur yang Diam-Diam Retak

Ilmu pengetahuan bekerja karena kita mempercayai prosesnya. Bukan karena setiap klaim sudah diverifikasi secara pribadi oleh setiap pembacanya.

Masalahnya: kepercayaan itu dibangun di atas sistem yang tidak dirancang untuk diaudit. Dan ketika sistem itu mulai retak — seperti yang terlihat dari gelombang retraction di jurnal-jurnal besar belakangan ini — yang runtuh bukan hanya satu paper. Yang runtuh adalah keyakinan bahwa proses itu sendiri bisa dipegang.

Jadi sebelum mengutip sebuah studi sebagai “bukti ilmiah”, ada satu pertanyaan yang lebih penting dari sekadar melihat nama jurnalnya: apakah datanya bisa diakses, direplikasi, dan diverifikasi?

Paradoksnya: ilmu pengetahuan adalah sistem yang paling jujur yang pernah manusia bangun. Dan justru karena itu, ketidakjujuran di dalamnya terasa jauh lebih mengkhianati dari kebohongan manapun.