Bilimsel bir haberi okurken sorulacak beş soru

Her hafta bir yerlerde “bilim insanları şunu buldu” diye başlayan bir manşet çıkıyor. Bazıları sağlam çalışmalara dayanıyor, bazıları ise tek bir küçük deneyin fazla büyütülmüş hâli. Haberi paylaşmadan önce birkaç soru sormak, hem sizi hem çevrenizi yanlış bilgiden korur. Aşağıdaki beş soru uzmanlık gerektirmez; yalnızca biraz dikkat ister.

1. Çalışma kimlerle ya da neyle yapılmış?

Haberde “farelerde”, “hücre kültüründe” ya da “yirmi gönüllüyle” gibi ifadeler geçiyorsa bunu başlıktan daha önemli bir ayrıntı olarak düşünün. Bir bileşiğin laboratuvar ortamında hücreleri etkilemesi, insanda aynı sonucu vereceği anlamına gelmez. Örneklem küçükse sonuç kesin bir hüküm değil, ilk bir işarettir. Büyük ve çeşitli gruplarla yapılan çalışmalar genellikle daha sağlam bir zemin sunar; ama her zaman bu da yeterli değildir, çünkü yöntemin kalitesi en az büyüklük kadar önemlidir.

2. Karşılaştırma grubu var mı?

Bir uygulamadan sonra insanların iyileşmesi, uygulamanın işe yaradığını göstermez; birçok durum zaten zamanla düzelir. Güvenilir bir çalışma, aynı koşullarda ama uygulama görmeyen bir kontrol grubuyla kıyaslama yapar. Mümkünse katılımcıların hangi grupta olduğunu bilmediği (kör) bir tasarım kullanılır, böylece beklentinin sonuca etkisi azalır. Haberde kontrol grubundan hiç söz edilmiyorsa, orijinal makaleye bakmak ya da temkinli kalmak iyi bir fikirdir.

3. Sonuç ne kadar büyük, ne kadar kesin?

“Risk yüzde elli arttı” cümlesi, başlangıç riski çok düşükse çok küçük bir mutlak artışa karşılık gelebilir. Göreli ve mutlak farkı ayırmak için şunu sorun: Kaç kişiden kaçı etkileniyor? Ayrıca “istatistiksel olarak anlamlı” ifadesi, etkinin pratikte önemli olduğu anlamına gelmez; yalnızca sonucun tesadüfle açıklanmasının zor olduğunu söyler. Belirsizlik aralıkları ve makalenin “sınırlılıklar” bölümü, çalışmanın kendi dürüst notlarıdır; haber bunlardan hiç söz etmiyorsa eksik bir resim sunuyor olabilir.

4. Bu çalışma tek başına mı duruyor?

Bilim, tek bir makaleyle değil, birbirini destekleyen veya düzelten birçok çalışmayla ilerler. Haber “devrim” diyorsa şunu araştırın: Başka araştırma grupları aynı sonucu tekrarladı mı? Alanın diğer uzmanları ne diyor? Haberde bağımsız bir uzmandan görüş alınmışsa bu olumlu bir işarettir. Hiç yorum yoksa ve tek çalışma “her şeyi değiştirecek” diye sunuluyorsa temkinli olun.

5. Kaynak ve finansman neye işaret ediyor?

Çalışma hakemli bir dergide mi yayımlandı, yoksa yalnızca bir ön baskı (preprint) mı? Ön baskılar değerli bir hız sağlar ama henüz bağımsız hakem değerlendirmesinden geçmemiştir. Finansman ve çıkar çatışması bildirimleri de bakılması gereken bir ayrıntıdır; bir şirketin kendi ürünü hakkında yaptırdığı çalışma otomatik olarak yanlış değildir, ama ek bir dikkat gerektirir. Haberin orijinal çalışmaya bağlantı verip vermediğine de bakın; vermiyorsa kaynağı kendiniz aramak gerekir.

Hızlı kontrol listesi

• Başlık ile makalenin vardığı sonuç uyuşuyor mu?
• Çalışma insanlarla mı, hayvanlarla mı, hücre kültürüyle mi yapıldı?
• Kontrol grubu ve örneklem büyüklüğü belirtilmiş mi?
• Bağımsız bir uzmanın yorumu var mı?
• Orijinal çalışmaya bağlantı verilmiş mi?

Sık sorulan sorular

Ön baskı güvenilmez midir? Hayır; ama henüz hakem sürecinden geçmediği için daha temkinli okunmalıdır. Sonradan değiştirilebilir ya da geri çekilebilir.

Orijinal makaleyi okumak için uzman olmak gerekir mi? Tamamını anlamak gerekmez. Özet, yöntem ve sınırlılıklar bölümlerini okumak bile haberin ne kadar abartıldığını görmeye yetebilir.

Haber başlığı çarpıcıysa haber yanlış mıdır? Her zaman değil. Ama başlık çoğu zaman metnin en az özenle yazılan kısmıdır; asıl bilgi gövdede ve kaynağındadır.