Jurnal akademik dan pers secara teratur menyajikan bantuan segar dari temuan penelitian psikologis yang menarik. Tetapi berapa banyak dari eksperimen itu yang akan menghasilkan hasil yang sama untuk kedua kalinya?
Konten terkait
- Studi Ilmu Biomedis Sangat Sulit Direproduksi
- Studi dengan Judul Lebih Pendek Dikutip Lebih Sering
- Mengapa Beberapa Ilmuwan Sedang Mempelajari Penyebab Kekerasan Senjata?
Menurut karya yang disajikan hari ini di Science, kurang dari setengah dari 100 studi yang diterbitkan pada 2008 di tiga jurnal psikologi top bisa ditiru dengan sukses. Upaya internasional termasuk 270 ilmuwan yang menjalankan kembali studi orang lain sebagai bagian dari The Reproducibility Project: Psychology, dipimpin oleh Brian Nosek dari University of Virginia.
Hasil yang membuka mata tidak selalu berarti bahwa temuan asli itu tidak benar atau bahwa proses ilmiahnya cacat. Ketika satu studi menemukan efek yang tidak dapat ditiru oleh studi kedua, ada beberapa alasan yang memungkinkan, kata rekan penulis Cody Christopherson dari Southern Oregon University. Hasil Studi A mungkin salah, atau hasil Studi B mungkin salah — atau mungkin ada beberapa perbedaan halus dalam cara kedua studi dilakukan yang berdampak pada hasil.
“Proyek ini bukan bukti bahwa ada yang rusak. Sebaliknya, ini adalah contoh sains yang melakukan apa yang sains lakukan, ”kata Christopherson. “Mustahil untuk salah dalam pengertian terakhir dalam sains. Anda harus sementara salah, mungkin beberapa kali, sebelum Anda benar. "
Di seluruh ilmu pengetahuan, penelitian dianggap dapat direproduksi ketika tim independen dapat melakukan percobaan yang dipublikasikan, mengikuti metode asli sedekat mungkin, dan mendapatkan hasil yang sama. Ini adalah salah satu bagian penting dari proses membangun bukti untuk mendukung teori. Bahkan hari ini, 100 tahun setelah Albert Einstein mempresentasikan teori relativitas umumnya, para ilmuwan secara teratur mengulangi tes prediksi dan mencari kasus-kasus di mana deskripsi gravitasi yang terkenal tidak berlaku.
"Bukti ilmiah tidak bergantung pada kepercayaan orang yang membuat penemuan itu, " kata anggota tim Angela Attwood, seorang profesor psikologi di Universitas Bristol, dalam sebuah pernyataan, "Sebaliknya, kredibilitas terakumulasi melalui replikasi independen dan penjabaran ide-ide. dan bukti. "
Proyek Reproducibilitas, upaya crowdsourcing berbasis komunitas, dimulai pada 2011 untuk menguji seberapa baik ukuran kredibilitas ini berlaku untuk penelitian terbaru dalam psikologi. Para ilmuwan, beberapa direkrut dan beberapa sukarelawan, meninjau kumpulan studi dan memilih satu untuk replikasi yang sesuai dengan minat dan keahlian mereka sendiri. Data dan hasil mereka dibagikan secara online dan ditinjau serta dianalisis oleh para ilmuwan yang berpartisipasi lainnya untuk dimasukkan dalam studi Sains besar.
Untuk membantu meningkatkan penelitian di masa depan, analisis proyek berusaha untuk menentukan jenis studi mana yang terbaik, dan mengapa. Mereka menemukan bahwa hasil yang mengejutkan adalah yang paling sulit untuk direproduksi, dan bahwa pengalaman atau keahlian para ilmuwan yang melakukan eksperimen asli tidak ada hubungannya dengan replikasi yang berhasil.
Temuan ini juga menawarkan beberapa dukungan untuk alat statistik yang sering dikritik yang dikenal sebagai Nilai P, yang mengukur apakah suatu hasil signifikan atau karena kebetulan. Nilai yang lebih tinggi berarti hasilnya kemungkinan besar adalah kebetulan, sedangkan nilai yang lebih rendah berarti hasilnya signifikan secara statistik.
Analisis proyek menunjukkan bahwa nilai P rendah cukup prediktif yang studi psikologi dapat direplikasi. Dua puluh dari 32 studi asli dengan nilai P kurang dari 0, 001 dapat direplikasi, misalnya, sementara hanya 2 dari 11 makalah dengan nilai lebih besar dari 0, 04 berhasil ditiru.
Tetapi Christopherson mencurigai bahwa sebagian besar rekan penulisnya tidak ingin penelitian tersebut dianggap sebagai dukungan kuat dari nilai-nilai P, karena mereka mengakui keterbatasan alat tersebut. Dan setidaknya satu masalah nilai P disorot dalam penelitian: Studi asli memiliki variabilitas nilai P yang relatif kecil, karena sebagian besar jurnal telah menetapkan batas 0, 05 untuk publikasi. Masalahnya adalah bahwa nilai dapat dicapai dengan menjadi selektif tentang set data, yang berarti para ilmuwan yang ingin mereplikasi hasil juga harus mempertimbangkan dengan cermat metode dan data yang digunakan dalam studi asli.
Masih belum jelas apakah psikologi mungkin menjadi bidang yang sangat sulit untuk direproduksi — studi serupa saat ini sedang dilakukan pada penelitian biologi kanker. Sementara itu, Christopherson berharap bahwa upaya besar-besaran ini akan memacu lebih banyak lagi pemeriksaan ulang dan penelitian ulang di masa lalu untuk membantu proses ilmiah.
“Melakukannya dengan benar berarti secara teratur meninjau kembali asumsi masa lalu dan hasil masa lalu dan menemukan cara baru untuk mengujinya. Satu-satunya cara sains berhasil dan kredibel adalah jika sains kritis, ”catatnya.
Sayangnya ada disinsentif untuk mengejar penelitian semacam ini, katanya: “Untuk dipekerjakan dan dipromosikan di dunia akademis, Anda harus menerbitkan penelitian asli, sehingga replikasi langsung lebih jarang. Saya berharap kedepannya bahwa universitas dan agen pendanaan yang bertanggung jawab untuk mendorong penelitian ini — dan outlet media yang meliput mereka — akan menyadari bahwa mereka telah menjadi bagian dari masalah, dan bahwa mendevaluasi replikasi dengan cara ini telah menciptakan literatur yang kurang stabil daripada kita. akan suka. "
