Alat baru menangani uji coba penelitian yang tidak dapat diandalkan

Sekelompok peneliti internasional telah mengembangkan alat baru yang dapat membantu mengidentifikasi uji coba terkontrol acak (RCT) yang bermasalah, termasuk studi penipuan, di mana ada kekhawatiran serius tentang kepercayaan.
Versi terakhir dari alat ini, yang disebut Inspect-SR, sekarang diterbitkan di server pra-cetak MedRXIV.
Ini dikembangkan oleh kolaborasi di seluruh dunia dari lebih dari 150 ahli penelitian integritas dan kesehatan, yang dipimpin oleh Dr Jack Wilkinson dari University of Manchester
Didanai oleh National Institute for Health and Care Research (NIHR), ia dikembangkan bekerja sama dengan kampus Medical dan Cochrane University of Colorado Anschutz, sebuah organisasi nirlaba yang merupakan penerbit ulasan sistematis kesehatan terkemuka di dunia.
Beberapa studi mengalami kesalahan kritis tetapi jujur, tetapi banyak yang tampaknya curang.
Kekhawatiran tumbuh pada meningkatnya jumlah ringkasan tingkat tinggi yang bermasalah dari bukti penelitian dari uji coba terkontrol secara acak, yang dikenal sebagai tinjauan sistematis.
Pada tahun 2023 saja, lebih dari 10.000 makalah penelitian yang dikeluarkan secara global ditarik oleh jurnal sesuai dengan analisis pada dasarnya, banyak di antaranya menggunakan bukti dari RCT bermasalah.
Dr Wilkinson memperingatkan RCT yang bermasalah dapat mengakibatkan penelitian medis berpotensi dikompromikan, pengembangan obat menghambat dan menjanjikan penelitian akademik terancam.
Inspect-SR dirancang untuk membasmi RCT bermasalah yang menerbitkan data palsu atau dimanipulasi atau secara tidak sengaja membuat kesalahan kritis.
Beberapa, ditulis dengan biaya dengan pakaian yang dikenal sebagai “pabrik kertas”, sepenuhnya dibuat -buat.
Alat ini memandu pengguna melalui serangkaian 21 cek, dikelompokkan ke dalam 4 domain:
- Pemberitahuan pasca publikasi yang menyatakan keprihatinan dan pencabutan.
- perilaku, tata kelola, dan transparansi
- teks dan angka
- perbedaan data dan kesalahan statistik.
Salah satu contoh paling terkenal dari penelitian RCT bermasalah adalah di sekitar klaim obat ivermectin, dipuji sebagai obat ajaib yang akan menyelamatkan nyawa orang-orang dengan Covid-19 yang parah.
Namun, beberapa uji coba yang digunakan untuk membuat klaim ivermectin tampaknya telah dibuat, menurut otoritas kesehatan di AS, Inggris dan UE. Uji coba berkualitas tinggi berikutnya menyarankan sedikit atau tidak ada manfaat.
Dalam contoh lain, National Institute for Health and Care Excellence (NICE) membalikkan rekomendasi untuk perangkat yang disebut bantal janin, yang dikembangkan untuk membantu bagian operasi caesar, mengikuti pencabutan tiga studi klinis yang mendukungnya.
Menurut sebuah artikel di BJOG : Jurnal Internasional Obstetri & Ginekologipenilaian kepercayaan mungkin telah mencegah penggunaan bukti dalam pedoman NICE, karena berisi anomali statistik.
Dan kekhawatiran kepercayaan juga diidentifikasi dalam sekelompok percobaan di sekitar penggunaan CBT dan olahraga untuk memerangi nyeri tulang belakang. Percobaan memiliki dampak besar pada pedoman praktik klinis. Beberapa sekarang telah ditarik kembali.
Ketika tinjauan sistematis dilakukan, itu mencakup semua uji coba terkontrol secara acak pada topik yang diberikan. Tetapi secara historis, tidak ada cara untuk mengidentifikasi RCT penipuan atau bermasalah, yang berarti bahwa studi ini secara tidak sengaja dimasukkan dalam ulasan sistematis. Ini adalah masalah besar, karena ulasan sistematis sangat berpengaruh – mereka menginformasikan pedoman kesehatan misalnya
Dr Wilkinson mengatakan: “Ketika tinjauan sistematis dilakukan, itu mencakup semua uji coba terkontrol secara acak pada topik tertentu.
“Tetapi secara historis, tidak ada cara untuk mengidentifikasi RCT penipuan atau bermasalah, yang berarti bahwa studi ini secara tidak sengaja dimasukkan dalam ulasan sistematis.
“Ini adalah masalah besar, karena ulasan sistematis sangat berpengaruh – mereka menginformasikan pedoman kesehatan misalnya.
“Sebagian besar RCT penipuan diproduksi oleh peneliti individu daripada pabrik kertas komersial, tetapi dengan munculnya AI saya khawatir ini kemungkinan akan menjadi masalah di masa depan.”
Dia menambahkan: “Makalah akademis sering dinilai untuk kualitas sebelum diterbitkan. Tetapi pengulas tidak mengajukan pertanyaan yang lebih mendasar tentang apakah bukti yang mereka baca bahkan asli ..
“Tapi kami mengantisipasi bahwa Inspect-SR akan menjadi standar untuk menilai kepercayaan RCT, terutama karena telah dibuat dengan kokran untuk digunakan dalam ulasan sistematis intervensi kesehatan mereka.
“Namun, penting untuk menekankan bahwa alat kami bukan hanya tes untuk penipuan dan pelanggaran- meskipun jelas banyak studi bermasalah adalah contoh dari itu.
“Ini juga menguji kesalahan kritis itulah sebabnya prioritas kami adalah untuk menentukan apakah uji klinis harus digunakan untuk memandu keputusan perawatan kesehatan.
“Pekerjaan sedang berlangsung untuk mengembangkan lebih banyak sistem otomatis – mungkin menggunakan AI- untuk membantu proses ini. Di masa depan, kami berharap dapat memperluas pekerjaan kami untuk mendeteksi masalah dalam bentuk studi penelitian lain, bukan hanya uji klinis.”
Kertas Periksa-SR: Alat untuk menilai kepercayaan 1 uji coba terkontrol secara acak Tersedia di server cetak medrxiv https://doi.org/10.1101/2025.09.03.25334905