Meta-analiz, seçilmiş birkaç makalenin ortalamasını almak değil. Sistematik bir derlemenin içindeki istatistiksel sentez adımı. Bu sıralama önemli: çalışma seçimi veya sonlanım tanımı hatalıysa, kullanılan model ne kadar gelişmiş olursa olsun sonuç güvenilir olmuyor.
Bu yüzden işe "hangi programı kullanalım?" sorusuyla değil, karar verilebilir bir araştırma sorusuyla başlamak gerekiyor. Sağlam derlemenin ayırt edici özelliği şu: makaleler bulunduktan sonra hangi sonuçların birleştirileceğine karar verilmiyor.
PICO bir arama cümlesi değil, karar çerçevesi
Müdahale sorularında PICO dört bileşeni açıklıyor: popülasyon ve klinik bağlam, müdahale veya maruziyet, karşılaştırıcı, sonlanımlar. Tanı doğruluğu, prognoz, prevalans veya nitel araştırma için farklı çerçeveler gerekebilir.
Önemli olan, sorunun uygunluk kararlarına, veri çıkarmaya ve sentez adımlarına çevrilebilmesi. "Diyabette tele-tıp etkili midir?" bu testi geçmiyor: yaş grubu, bakım ortamı, müdahalenin bileşenleri, karşılaştırıcı, izlem süresi ve ölçülecek sonuçlar netleşmeden çalışmaların aynı soruya cevap verip vermediği bilinemez. Araştırma sorusunu daraltma yöntemlerini PICO araştırma sorusu yazımızda ayrıntılandırdık.
Protokol hangi kararları önceden sabitler?
Asgari protokol içeriği
Soru ve uygunluk ölçütleri
Dahil etme ve dışlama kuralları, karar verilebilir biçimde yazılır.
Bilgi kaynakları ve arama
Veri tabanları, son arama tarihi ve her veri tabanı için taslak arama dizgisi.
Eleme süreci
Tekilleştirme, başlık/özet ve tam metin eleme, uyuşmazlık çözüm yöntemi.
Veri çıkarma
Veri maddeleri, sonlanım tanımları, yayın ailesi kuralı.
Yanlılık riski
Tasarıma uygun araç seçimi ve alan bazlı değerlendirme.
Sentez planı
Etki ölçüsü, model, heterojenlik, alt grup ve duyarlılık analizleri.
Raporlama ve kesinlik
Raporlama yanlılığı değerlendirmesi, kanıt kesinliği yaklaşımı, protokol değişiklik kaydı.
Protokol değiştirilemez bir belge değil. Yeni ve gerekçeli bir ihtiyaç doğabilir. Şart şu: değişiklik kayda geçsin ve hangi aşamada yapıldığı — arama bittikten sonra mı, ilk sonuçlar alındıktan sonra mı — açıkça yazılsın.
PROSPERO kaydı ne sağlar, ne sağlamaz?
PROSPERO, sağlık ve sosyal bakım alanındaki uygun sistematik derlemeler için uluslararası ileriye dönük kayıt sistemi. Kayıt ücretsiz ve devam eden derlemelerin görünürlüğünü artırmayı amaçlıyor. Mümkünse eleme ve veri çıkarma ilerlemeden önce yapılmalı.
PROSPERO kaydı
Sağladıkları
- ✓Benzer devam eden derlemeleri görme
- ✓Planlanan yöntemleri zaman damgasıyla belgeleme
- ✓Sonradan yapılan değişiklikleri izlenebilir kılma
- ✓Gereksiz tekrar riskini azaltma
Sağlamadıkları
- ✗Hakem değerlendirmesi
- ✗Yöntem kalitesi sertifikası
- ✗Hatalı protokolün düzeltilmesi
- ✗Yayın kabulü garantisi
Kayıt numarası, yöntem kalitesinin yerine geçmez. Hatalı kurgulanmış bir protokol, kayıtlı olduğu için doğru hâle gelmez.
Arama stratejisi tekrar edilebilir olmalı
Yalnız PubMed taramak çoğu klinik soru için yetersiz kalır. Veri tabanı seçimi konuya göre yapılmalı: MEDLINE, Embase, CENTRAL, Web of Science veya CINAHL gerekebilir. Klinik araştırma kayıtları, tezler ve düzenleyici kaynaklar yayımlanmamış sonuçlara ulaşmaya yardımcı olur.
İyi bir arama stratejisinde kontrollü konu başlıkları ile serbest metin terimleri birlikte kullanılır; eş anlamlılar, yazım varyantları ve kısaltmalar kapsanır; tarih ve dil filtreleri gerekçelendirilir; her veri tabanının söz dizimine uyarlama yapılır; tam dizgi, platform adı ve arama tarihi saklanır; yayına yakın bir tarihte güncelleme araması yapılır.
Tekrar edilemez arama
"İlgili anahtar kelimelerle tarandı" cümlesi bir arama stratejisi değildir. Başka bir ekip aynı aramayı çalıştırıp aynı sonuç kümesine ulaşamıyorsa, derlemenin en temel iddiası — kapsamlılık — doğrulanamaz. PRISMA-S, literatür aramasının ayrıntılı raporlanması için tamamlayıcı bir rehber sunar.
Eleme ve veri çıkarma neden çift yapılır?
Tek araştırmacının binlerce kaydı elemesi hem kaçırma hem öznel karar riskini artırır. Yaygın iyi uygulama, en az iki kişinin kayıtları bağımsız elemesi ve uyuşmazlıkları önceden belirlenmiş bir yöntemle çözmesi. Pilot eleme turu, ölçütlerin iki kişi tarafından aynı anlaşılıp anlaşılmadığını gösterir.
Tam metinde dışlanan çalışmaların gerekçeleri tutulmalı. "Uygun değil" yerine yanlış popülasyon, yanlış tasarım veya uygun sonlanım yok gibi tekrar edilebilir nedenler kullanılmalı.
Veri çıkarma formu da pilotlanmalı. Aynı çalışmanın birden fazla yayını varsa katılımcıların iki kez sayılmaması için yayın ailesi oluşturulmalı; grafiklerden okunan veya yazardan istenen veriler ayrıca işaretlenmeli.
Yanlılık riski ile raporlama kalitesi: iki ayrı ölçüm
Bir makalenin CONSORT maddelerini eksiksiz raporlaması, çalışmanın düşük yanlılık riskli olduğu anlamına gelmez. İyi raporlanmış bir çalışma kötü tasarlanmış olabilir; kötü raporlanmış bir çalışma iyi yürütülmüş olabilir.
Yanlılık riski, araştırma sorusuna ve tasarıma uygun araçla değerlendirilir: randomize çalışmalar için RoB 2, randomize olmayan müdahale çalışmaları için ROBINS-I gibi. Toplam bir "kalite puanı" üretip çalışmaları keyfî bir eşikle iyi/kötü diye ayırmak, alanlar arasındaki önemli farklılıkları gizler. Alan bazlı değerlendirme ve gerekçeler sunulmalı; sonuçlar duyarlılık analizine ve kanıt yorumuna bağlanmalı.
Etki ölçüsü klinik soruya göre seçilir
İkili sonuçlarda risk oranı, odds oranı ve risk farkı aynı şeyi anlatmıyor. Sürekli sonuçlarda aynı ölçek kullanılıyorsa ortalama fark; farklı ölçekler aynı yapıyı ölçüyorsa standardize ortalama fark düşünülebilir. Zaman-aşımı sonuçlarında hazard oranının varsayımları önem kazanıyor.
Etki yönünün her çalışmada aynı kodlandığı kontrol edilmeli. Ölçeklerden birinde yüksek puan iyilik, diğerinde kötülük anlamına geliyorsa tek bir işaret hatası birleştirilmiş sonucu ters çevirebilir.
Sabit ya da rastgele etkiler modeli yalnız I² değerine bakılarak seçilmemeli. Çalışmaların gerçek etkilerinin değişmesi klinik olarak bekleniyorsa rastgele etkiler modeli uygundur; ancak az sayıda çalışma varsa çalışmalar arası varyans tahmini ve güven aralığı belirsiz kalır. Model seçimi protokolde gerekçelendirilmeli.
I² kaç çıktı, neden çıktı?
I², gözlenen değişkenliğin ne kadarının örnekleme hatası dışındaki farklılıkla uyumlu olduğunu özetliyor; klinik heterojenliğin nedenini söylemiyor. İncelenecek kaynaklar önceden belirlenebilir: popülasyonun hastalık şiddeti ve bakım ortamı, müdahale dozu ve süresi, karşılaştırıcı türü, sonlanım tanımı ve ölçüm zamanı, tasarım ve yanlılık riski.
Meta-regresyon ve alt grup analizleri az sayıda çalışmayla güçsüz ve yanıltıcı olabiliyor. Burada da klasik hata geçerli: bir alt grupta anlamlı, diğerinde anlamsız sonuç bulunması alt grupların birbirinden farklı olduğunu kanıtlamıyor; fark doğrudan sınanmalı.
PRISMA 2020 neyi düzeltir, neyi düzeltmez?
PRISMA 2020; başlık, özet, gerekçe, yöntem, sonuçlar, tartışma ve diğer bilgiler için 27 maddelik bir raporlama rehberi. Akış diyagramı bulunan, dışlama nedenleri açıklanan ve tüm sentez kararları görünür olan bir rapor üretmeye yardımcı oluyor.
Ama PRISMA bir metodoloji kitabı değil; meta-analizin nasıl yapılacağını tek başına belirlemiyor. Kontrol listesini makale yazılırken ilk kez açmak da geç kalmak demek — maddelerin çoğu protokol, arama ve kayıt tutma aşamasında hazırlanıyor.
Geri çekilmiş çalışmaların sentezde nasıl ele alınacağı ayrı bir dikkat konusu; bunu retrakte çalışmalar ve meta-analiz yazımızda ele aldık.
Yayın öncesi kontrol listesi
- Soru ve uygunluk ölçütleri karar verilebilir mi?
- Benzer güncel derlemeler ve PROSPERO kayıtları tarandı mı?
- Protokol tarihli ve erişilebilir mi?
- Arama, veri tabanına özgü ve mümkünse uzman görüşüyle mi kuruldu?
- Tam arama dizgileri, platform ve tarihlerle saklandı mı?
- Eleme ve veri çıkarma bağımsız çift yapıldı mı?
- Aynı çalışmanın birden fazla yayını birleştirildi mi?
- Tasarıma uygun yanlılık riski aracı kullanıldı mı?
- Etki ölçüsü ve yönü tüm çalışmalarda kontrol edildi mi?
- Heterojenlik kaynakları ve çokluk planı önceden yazıldı mı?
- Protokolden sapmalar tarih ve gerekçeyle açıklandı mı?
- PRISMA 2020 akış şeması ve kontrol listesi tamamlandı mı?
Güvenilirlik orman grafiğinden önce belirlenir
Meta-analizin güvenilirliği son orman grafiğinden çok önce belirleniyor. Net bir soru, kayıtlı protokol, tekrar edilebilir arama, bağımsız seçim, doğru veri çıkarma ve tasarıma uygun sentez yoksa birleştirilmiş sayı yalnızca yanıltıcı bir kesinlik üretiyor.
Protokolü yazmadan önce sorunun kendisini netleştirmek çoğu zaman en çok zaman kazandıran adım. Sistematik derleme ve meta-analiz tarafında bu adımdan PRISMA raporlamasına kadar araştırmacıyla birlikte ilerliyoruz.
Kullanılan kaynaklar
- Page MJ, McKenzie JE, Bossuyt PM, ve ark. The PRISMA 2020 statement: an updated guideline for reporting systematic reviews. BMJ. 2021;372:n71. PMID 33782057 · DOI
- Rethlefsen ML, Kirtley S, Waffenschmidt S, ve ark. PRISMA-S: an extension to the PRISMA Statement for Reporting Literature Searches in Systematic Reviews. Syst Rev. 2021;10(1):39. PMID 33499930 · DOI
- PROSPERO. International prospective register of systematic reviews. Centre for Reviews and Dissemination, University of York.