Discussion Bölümü: 5 Temel Hata ve Düzeltme Yolları

Discussion çoğu zaman bir makalenin en son yazılan bölümüdür. Docherty ve Smith daha 1999'da, tartışmanın çoğu zaman makalenin en zayıf kısmı olduğunu ve dikkatli açıklamanın yerini polemiğe bıraktığını yazmışlardı. Yapılandırılmış bir tartışmanın bölümün uzunluğunu, gerekçesiz genellemeyi ve raporlama yanlılığını azaltabileceğini öne sürmüş, bu varsayımın kolayca sınanabileceğini de eklemişlerdi (Docherty ve Smith, 1999; doi:10.1136/bmj.318.7193.1224). Aradan çeyrek yüzyıl geçti, benzer tuzaklar hâlâ karşımıza çıkıyor.

Discussion, Results kadar nesnel değil, Introduction kadar keskin biçimde sınırlı değil; bu belirsizlik onu hakem eleştirisine açık bir bölüm yapıyor. Bulguların bilimsel bağlama oturması, sınırlarının çizilmesi ve klinik anlamının söylenmesi editörle hakemin burada aradığı şeyler. Aşağıdaki beş hata, bu beklentinin sık kaçırıldığı yerler.

Hata 1: Ölçülmeyen mekanizmayı yorumlamak

Diyelim ki bulgular A ve B grupları arasında fark gösterdi ve tartışmada "bu farkın muhtemelen C mekanizmasından kaynaklandığı düşünülmektedir" cümlesi yer aldı. Oysa çalışmada C mekanizmasını ölçen tek bir değişken yok; CRP de, IL-6 da, herhangi bir inflamasyon göstergesi de bakılmamış. Hakemin ilk sorusu haklı olarak "bu nereden çıktı?" oluyor.

Bulgunun arkasındaki biyolojik mekanizmayı ortaya koyma isteği anlaşılır, ama ölçülmemiş bir şeyi nedensel dille yorumlamak "speculative" etiketini getiriyor. Sınırı çizen ifade işe yarıyor: "Bu farkın C mekanizmasıyla ilişkili olabileceği önceki çalışmalarda bildirilmiştir; ancak mevcut çalışmada bu hipotez doğrudan test edilmemiştir." Bu cümle spekülasyon yapmıyor, literatüre yaslanıyor ve çalışmanın kapsamını dürüstçe belirtiyor.

Hata 2: Bulguyu literatürsüz bırakmak

İkinci tuzak, bir bulguyu literatürle konuşturmadan bırakmak; "lacks critical analysis" eleştirisinin sık kaynaklarından biri de budur. Örneğin mortalite oranının %12 çıktığını yazıp önceki çalışmaların bildirdiği aralığa hiç değinmemek, okuyucuyu ve hakemi boşlukta bırakıyor.

Somutlaştıralım. Diyelim ki bir kardiyoloji çalışmasında ejeksiyon fraksiyonu (EF) ile mortalite arasında orta düzeyde negatif bir korelasyon bulundu. Tartışmada yalnızca "EF düştükçe mortalite artar" cümlesi, hakemin gözünde bulguyu tekrarlamaktan öteye geçmiyor; "sonuçların salt yeniden ifadesi" eleştirisi de buradan doğuyor. Aynı bulguyu literatürle konuşturmak onu yoruma dönüştürüyor. Bunun için bulguyu benzer kohortların bildirdiği korelasyon aralığıyla karşılaştırmak ve çalışmanın kendi değerinin neden daha güçlü ya da zayıf olabileceğini örneklem özellikleriyle (örneğin ağır kalp yetmezliği olan hastaların oranıyla) açıklamak gerekiyor. Değer aynı kalıyor; ama artık bağlamı, karşılaştırması ve farkın olası nedeni var.

Her ana bulgu için iki üç benzer çalışmayla karşılaştırma yapmak, tartışmanın omurgasını oluşturuyor.

Hata 3: Limitasyonu geçiştirmek

Retrospektif bir çalışmada "bu çalışmanın retrospektif tasarımı bir limitasyondur" deyip geçmek, hakemi tatmin etmiyor; çünkü bu sınırın bulguyu nasıl etkilediği tartışılmamış oluyor. Limitasyon yazmak zayıflık itirafı değil, tersine çalışmanın sınırlarını bilen bir araştırmacı olduğunun göstergesi. Deneyimimiz, sınırları saklamaya çalışan makalelere hakemlerin daha sert davrandığı yönünde.

Fark, sınırı etkisiyle birlikte yazmakta. "Çalışmamız retrospektiftir" yerine: "Retrospektif tasarım nedeniyle hastalar randomize edilmemiş, tedavi seçiminde seçim yanlılığı riski bulunmaktadır; gözlenen etkinlik farkı, tedavinin kendisinden çok hasta seçiminden kaynaklanıyor olabilir." "Örneklem küçüktür" yerine: "100 hastalık örneklem, öngörülen etkiyi %80 güçle saptayacak büyüklüktedir; ancak alt grup analizleri yetersiz güçtedir ve dikkatle yorumlanmalıdır." Her limitasyon tek cümle değil, bir paragraf hak ediyor; bu paragrafların nasıl kurulduğunu limitasyonlar bölümü yazımı yazısında ele alıyoruz.

Hata 4: Results'ı yeniden sıralamak

Tartışmanın ilk paragrafları "Grup A'da ortalama 5,2, Grup B'de 3,8 bulunmuştur" gibi cümlelerle dolduğunda, hakemin tepkisi "bunu zaten Results'ta okudum, yorum nerede?" oluyor. Discussion, sayıları yeniden listelemek için değil, anlam çıkarmak için var. Rakamı bir kez anıp geçmek yeterli; asıl iş, o rakamın ne anlama geldiğini tartışmak.

Aradaki çizgi ince. Ana bulguları bir paragrafta özetlemek kabul edilebilir, hatta gerekli; ama hemen ardından yoruma ve karşılaştırmaya geçmek gerekiyor. "Grup A'daki yüksek değerler, çalışmanın hipotezini destekliyor ve önceki çalışmalarla uyumlu" bir yorumdur; "Grup A'da 5,2, Grup B'de 3,8 bulunmuştur" ise yalnızca bir tekrardır.

Hata 5: Klinik önemi atlamak

İstatistiksel anlamlılık, klinik anlamlılık demek değil. 100.000 kişilik bir çalışmada 0,3 mmHg'lik kan basıncı farkı istatistiksel olarak anlamlı çıkabilir ama klinikte hiçbir karşılığı olmayabilir. "İstatistiksel olarak anlamlı fark saptanmıştır" deyip geçmek, hakemin "peki bu klinisyene ne söylüyor?" sorusunu yanıtsız bırakıyor.

Etki büyüklüğünü yorumlamak tartışmanın görevlerinden biri. "Gözlenen 1,4 puanlık fark ve güven aralığının üst sınırı önceden tanımlanan klinik anlamlılık eşiğinin (MCID) altında olduğundan, bulgu pratikte anlamlı bir değişiklik gerektirmemektedir" dürüst bir yorum; güven aralığının alt sınırı da eşiğin üzerindeyse klinik önemi aynı açıklıkla söylemek de öyle. Aralık eşiği içeriyorsa sonuç, klinik önem açısından belirsizdir. Standartlaştırılmış etki büyüklüğünün "orta" ya da "büyük" olması tek başına klinik önem göstermez; klinik önem, önceden tanımlanan eşik ve klinik yargıyla belirlenir ve küçük bir etki de, örneğin mortalitede, önemli olabilir (Schober ve ark., 2018). Bu ayrımı istatistiksel ve klinik anlamlılık farkı yazısında ayrıntılandırıyoruz.

Sağlam bir discussion nasıl akar?

Tartışma, IMRAD kum saatinin alt hunisidir; ana bulgudan başlayıp genel çıkarıma doğru genişler. Aşağıdaki akış bir denetim çerçevesi olarak kullanılabilir; Docherty ve Smith'in önerisinde ise çalışmanın güçlü ve zayıf yönleri ana bulgunun hemen ardından gelir. Dergi kılavuzu bir sıra öngörüyorsa o izlenir.

Bu akışta sırasıyla ana bulguların bir paragraflık özeti, her bulgunun iki üç çalışmayla karşılaştırıldığı paragraflar, yalnızca ölçülen mekanizmaların tartışması, klinik önem, etkisiyle birlikte yazılan limitasyonlar ve "daha fazla çalışma gereklidir" yerine "prospektif randomize bir çalışmada X hipotezi en az 200 katılımcıyla test edilmelidir" türünden somut öneriler yer alır. Bu yapı katı bir kural değil, ama bir denetim ölçütü sunuyor. Tartışmayı okuyan ve bulguları hiç bilmeyen biri ana sonuçları ve önemini kavrayabiliyorsa bölüm kendi başına ayakta duruyor; yalnızca Results'ın kopyasıysa sorun var. Discussion'ın IMRAD içindeki yerini ve ters huni mantığını IMRAD yapısı yazısında ele alıyoruz.

Bu beş tuzaktan kaçınmak, tartışmanın hakem gözünde daha güçlü okunmasına yardım eder. Model İstatistik olarak makale editörlüğünde danışanlarla en çok bu bölüm üzerinde çalışıyoruz; metnin entelektüel mülkiyeti araştırmacıya aittir.

Not: Buradaki sayısal örnekler yalnızca yöntemi göstermek için kurgulanmıştır; gerçek bir tartışmada her karşılaştırma, ilgili çalışmaya atıfla verilir. Dergiye özgü tartışma beklentileri için o derginin yazım kılavuzu esas alınır.

Kullanılan kaynaklar

• Docherty M, Smith R. The case for structuring the discussion of scientific papers. BMJ. 1999;318(7193):1224-5. PMID 10231230 · DOI
• Schober P, Bossers SM, Schwarte LA. Statistical significance versus clinical importance of observed effect sizes: what do P values and confidence intervals really represent? Anesth Analg. 2018;126(3):1068-72. PMID 29337724
• ICMJE. Recommendations for the Conduct, Reporting, Editing, and Publication of Scholarly Work in Medical Journals. icmje.org