Limitations bölümü ilk bakışta bir paradoks gibi duruyor, çünkü yazar kendi çalışmasının zayıf yanlarını sıralıyor. Oysa bölümün işlevi metodolojik bilinci göstermektir. STROBE gibi raporlama kılavuzları çalışma sınırlarının açıkça tartışılmasını ayrı bir madde olarak istiyor; STROBE'un 22 maddelik kontrol listesinde 19. madde, olası yanlılığın yönünün ve büyüklüğünün de tartışılmasını bekliyor. Hiç limitation yazmayan ya da bölümü üç cümleyle geçiştiren makaleler ise hakemden başlıca sınırların yeterince tartışılmadığı yönünde eleştiri alabiliyor.
İşin özü, hakemin zihnindeki soruyu erkenden yanıtlamak: "Bu araştırmacı kendi çalışmasının sınırlarını görüyor mu, yoksa körlemesine mi ilerliyor?"
Limitations bölümü aslında ne gösterir?
Her çalışmanın bir sınırı var; bunu görmeyen araştırmacı yetersiz görülüyor. Ama aşırıya kaçıp çalışmayı yerle bir eden bir limitations bölümü de en az onun kadar zararlı. İki uç arasındaki denge noktası dürüst, savunmacı olmayan ama çalışmayı da küçümsemeyen bir yazımdır.
Zayıf ve güçlü limitations yazımı
Limitations bölümü karşılaştırması
Savunmasız itiraf
- ✗Çalışmamız retrospektiftir.
- ✗Örneklemimiz küçüktür.
- ✗Tek merkezli tasarımdır.
- ✗Bazı verilerde eksiklik vardı.
Bilinçli değerlendirme
- ✓Retrospektif tasarım nedeniyle nedensellik çıkarımı sınırlıdır; ancak gözlenen ilişkiler gelecekteki prospektif çalışmalara yön vermektedir.
- ✓Toplam 68 hastalık örneklem (34+34), orta düzey etki büyüklüğünü (d=0,50) yaklaşık %53 güçle saptayabilir; orta düzey bir etki bile yaklaşık iki durumdan birinde kaçırılabilir.
- ✓Tek merkez verisi dış geçerliği sınırlar; bununla birlikte katılımcı demografisi ulusal verilerle uyumludur.
- ✓Eksik veri oranı %8,3'tür; Little testi MCAR varsayımını reddetmedi (p=0,42), ama bu tek başına MCAR'ı kanıtlamaz. Duyarlılık analizi tutarlı sonuç verdi.
Soldaki yazımda okuyucu "bu çalışmaya neden güveneyim?" diye soruyor; sağdaki yazımda ise sınırlarını bilen, şeffaf bir araştırmacı görüyor.
Bir limitation cümlesi neden üç parçalı olmalı?
Salt itiraf zayıf kalıyor; güçlü bir limitation cümlesinde üç öğe bir arada bulunuyor.
Sınırın tanımı "ne eksik?" sorusunu, etki değerlendirmesi "bu sınır sonuçları nasıl etkiliyor?" sorusunu, hafifletici faktör ya da öneri ise "ne yapıldı, ne yapılabilir?" sorusunu yanıtlıyor. Örnek: "Çalışma kesitsel tasarımdadır (sınır), bu nedenle nedensellik çıkarımı yapılamaz (etki); bununla birlikte gözlenen ilişki güçlü ve doz-yanıt örüntüsü göstermektedir, kohort çalışmasıyla doğrulanması önerilir (öneri)." Bu üç parçalı yapı, salt "kesitseldir" demekten çok daha ikna edicidir.
Sık görülen limitation tipleri
Tasarım kısıtlamaları. "Çalışmamız retrospektiftir" yerine: "Retrospektif tasarım nedeniyle karıştırıcı (confounding) faktörler tam kontrol edilemeyebilir; ancak bilinen başlıca karıştırıcılar çok değişkenli analizde ayarlanmıştır. Bu bulguların doğrulanması için ileriye dönük randomize çalışma gereklidir." İkinci ifade hem sınırı kabul ediyor hem ne yapıldığını gösteriyor.
Örneklem büyüklüğü. "Örneklem küçüktür" yetersiz kalıyor. Bunun yerine: "Örneklem büyüklüğü (grup başına 52 hasta) nadir bir hastalık grubunda ulaşılabilen en yüksek sayıdır. Ön güç analizi orta düzey etki büyüklüğü (d=0,50; iki yönlü α=0,05) ve %80 güç için grup başına 64 hasta önermişti; mevcut örneklem bu etki için yaklaşık %71 güç sağlıyor. Gözlenen etki büyüklüğü (d=0,73) ise literatürle uyumlu." Sayılar ve güç analizi verildiğinde hakem sınırın büyüklüğünü kendisi değerlendirebiliyor.
Tek merkez ve dış geçerlik. "Tek merkezlidir, genellenemez" yerine: "Tek merkez verisi dış geçerliği (genellenebilirlik) sınırlar; ancak katılımcı demografisi (ortalama yaş 54±12, %48 kadın) ulusal kayıt verileriyle benzerdir; bu da bulguların benzer üçüncü basamak merkezlere de aktarılabileceğini düşündürür." Sınır kabul edilmiş, ama genellenebilirliğin sınırı da netleşmiş.
Eksik veri. "Bazı hastalarda veri eksikti" yerine: "Eksik veri oranı %12'dir (34/283). Little testi MCAR varsayımını reddetmedi (p=0,28); bu, eksikliğin gözlenen değişkenlerle ilişkili olduğuna dair kanıt bulunmadığını gösterir, ama MCAR'ı kanıtlamaz. Tam gözlem ve çoklu atama sonuçları tutarlıdır (duyarlılık analizi, Ek Tablo 3)."
Karıştırıcı ve yanlılık. "Karıştırıcı olabilir" yerine sınırı sayısallaştırmak daha güçlü: "Gözlemsel tasarım nedeniyle artık karıştırıcı (residual confounding) riski vardır; bilinen karıştırıcılar modelde kontrol edildi, ama ölçülmemiş faktörler yanlılık oluşturabilir. E-değeri analizi (E-değeri=2,8), gözlenen ilişkiyi tümüyle açıklamak için ölçülmemiş bir karıştırıcının, ölçülen değişkenler hesaba katıldıktan sonra hem tedaviyle hem sonlanımla risk oranı ölçeğinde en az 2,8 düzeyinde ilişkili olması gerektiğini gösteriyor (VanderWeele ve Ding, 2017; doi:10.7326/M16-2607)." VanderWeele ve Ding, güven aralığının etkisizliğe yakın sınırı için de E-değeri hesaplanmasını öneriyor. Karıştırıcıyı bir sayıya bağlamak hakemin değerlendirmesini kolaylaştırıyor.
İpucu
Limitations bölümünde "maalesef" ya da "ne yazık ki" gibi duygusal kelimeler yerine nötr bir dil daha etkili. Burada bilimsel bir değerlendirme yapılıyor; özür dilemeye gerek yok.
Nelerden kaçınmalı?
Aşırı özeleştiri çalışmayı çökertiyor. "Başlıca kısıtlamaları vardır, tasarım zayıftır, ölçüm araçları güvenilir değildir" gibi ifadeler hakemin işini kolaylaştırıyor. Bunun yerine "çalışma pilot niteliktedir ve bazı metodolojik sınırlar içerir; bununla birlikte bulgular literatürdeki bir boşluğu doldurmaktadır" daha dengeli. Önemsiz sınırları sıralamak da alan israfı: "Yalnızca Türk popülasyonunda yapıldı" (zaten başlıkta yazıyorsa) ya da "daha çok hastayla daha güçlü olurdu" (her çalışma için geçerli) türü ifadeler değer katmıyor. En tehlikelisi ise açık zayıflıkları gizlemektir; hakemin göreceği bir sınır yazılmadığında onu hakem yazıyor, üstelik eleştiri tonuyla.
Güçlü yönlerle denge nasıl kurulur?
Bazı dergiler "Strengths and Limitations" başlığını istiyor; bu durumda önce güçlü yönleri, ardından sınırları vermek etkili bir sunum sağlıyor: "Çalışmanın güçlü yönleri arasında prospektif tasarım, yüksek takip oranı (%94), doğrulanmış sonuç ölçümleri ve önceden kaydedilmiş analiz planı yer alır. Sınırlamalar ise tek merkez tasarımı ve 12 aylık takip süresidir." Bu denge okuyucuya "katkılar sınırlardan daha ağır basıyor" mesajını veriyor.
Uyarı
Limitations bölümü metodolojik sınırlar içindir, etik ya da bilimsel standart ihlalleri için değil. Örneğin etik kurul onayı alınmamışsa bunu bir limitation olarak yazmak sorunu çözmüyor.
Hakem revizyonunda ve gelecek çalışmalarda
Hakem "ek sınırlar tartışılmalı" dediğinde önce neyi kastettiğini belirlemek gerekiyor; çoğu zaman belirli bir nokta (örneğin karıştırıcı ya da seçim yanlılığı) ima ediliyor. Yanıt mektubunda eklenen limitation paragrafını alıntılamak ve makaledeki yerini belirtmek etkili bir strateji. Bu sürecin bütününü Discussion bölümünde 5 hata ve Methods bölümü yazımı yazılarıyla birlikte okumak, limitations'ın makale içindeki yerini netleştiriyor.
Bölümün sonu ise gelecekteki araştırmalara bir köprü. "Daha fazla çalışma gereklidir" yerine "daha büyük örneklemli (n>200), çok merkezli, ileriye dönük bir kohort çalışması önerilir; özellikle uzun dönem sonlanımları ve maliyet-etkililik analizini kapsaması beklenir" demek, araştırmacının bilimsel süreci planladığını gösteriyor.
Model İstatistik olarak makale editörlüğünde destek sunuyoruz; bu destek limitations bölümünün yapısal denetimini, güçlü yön ile sınırlılık dengesine ilişkin geri bildirimi ve hakem yanıtı için editoryal öneriyi kapsıyor. Metnin entelektüel mülkiyeti araştırmacıya aittir.
Not: Buradaki sayısal örnekler (n, güç, p, E-değeri) yalnızca yazım biçimini göstermek için kurgulanmıştır. Kullanılacak analizler ve eşikler çalışmanın tasarımına göre belirlenir; kesin gereksinimler için hedef derginin yazar kılavuzu esas alınır.
Kullanılan kaynaklar
- VanderWeele TJ, Ding P. Sensitivity Analysis in Observational Research: Introducing the E-Value. Ann Intern Med. 2017;167(4):268-274. PMID 28693043 · DOI
- von Elm E, Altman DG, Egger M, ve ark. The STROBE statement: guidelines for reporting observational studies. Lancet. 2007;370(9596):1453-7. PMID 18064739 · DOI
- EQUATOR Network. Reporting guidelines (STROBE, CONSORT, PRISMA). equator-network.org