Jüri "analizler yetersiz" dediğinde ne yapılır? Savunma sonrası istatistik revizyonu

Tez savunmasından "düzeltme" kararıyla çıkmak, özellikle eleştiri istatistik bölümüne yöneldiğinde moral bozar; ama bizim deneyimimizde bu düzeltmelerin büyük bölümü yöntem hatasından değil, raporlama eksiğinden ve yorum biçiminden kaynaklanır. Bu yazıda jürilerin istatistikle ilgili en sık dile getirdiği eleştirileri, her birine verilecek teknik karşılığı ve düzeltme sürecinin nasıl yönetileceğini anlatıyoruz.

İlk adım: tutanağı ayrıştırmak

Jüri tutanağındaki ifadeler çoğu zaman geneldir: "istatistiksel analizler yetersizdir", "bulgular derinleştirilmelidir", "yöntem gözden geçirilmelidir". Bu cümlelerle çalışılmaz; savunmada tutulan notlar, jüri üyelerinin tek tek söyledikleri ve varsa yazılı raporları bir araya getirilip her eleştiri tek satıra indirilir. Sonra her satır dört gruptan birine konur:

• Yöntem hatası: Yanlış test, ihlal edilmiş varsayım, hatalı model kurgusu. Yeniden analiz gerektirir.
• Eksik analiz: Hipotezin bir kısmı test edilmemiş, alt boyutlar atlanmış, kontrol değişkeni kullanılmamış. Ek analiz gerektirir.
• Raporlama sorunu: Tablolar eksik, etki büyüklüğü yok, test istatistikleri yazılmamış, varsayım kontrolleri gösterilmemiş. Metin ve tablo düzeltmesi gerektirir.
• Yorum sorunu: Anlamsız sonuç "fark yok" diye yorumlanmış, korelasyon nedensellik gibi yazılmış, bulgular hipotezlerle eşleştirilmemiş. Metin düzeltmesi gerektirir.

Bu sınıflama iş yükünü belirler. Yalnızca raporlama ve yorum sorunu olan bir tez birkaç günde toparlanır; yöntem hatası varsa veri baştan analiz edilir ve bulgular bölümü yeniden yazılır.

Jürinin en sık beş eleştirisi ve karşılıkları

1. "Neden parametrik test kullandınız, veri normal mi?" Karşılık: Normallik değerlendirmesi yöntem bölümüne eklenir; çarpıklık–basıklık katsayıları, histogram ve örneklem büyüklüğü birlikte sunulur. Veri gerçekten çarpıksa analizler parametrik olmayan karşılıklarıyla yinelenir ve sonuçların değişip değişmediği belirtilir. Çoğu zaman sonuç değişmez; bunu söylemek bile jüriyi rahatlatır.

2. "Sadece p değeri var, etkinin büyüklüğü nerede?" Karşılık: Her teste uygun etki büyüklüğü (Cohen d, eta kare, Cramer V, r) ve güven aralığı eklenir. Bu eleştiri son yıllarda en sık geleni; APA 7 de etki büyüklüğünü zorunlu tutuyor. Hesaplama ve yorum ölçütleri için etki büyüklüğü yazısına bakın.

3. "Alt problemlerin bazıları test edilmemiş." Karşılık: Araştırma soruları ile analizler bire bir eşleştirilen bir tablo yapılır; eşleşmeyen her soru için analiz eklenir. Bu tablo düzeltme raporuna da konur; jürinin aradığı şey tam olarak bu izlenebilirliktir.

4. "Demografik değişkenler kontrol edilmemiş." Karşılık: Araştırma tasarımı uygunsa kovaryans analizi (ANCOVA) ya da hiyerarşik regresyonla kontrol değişkenleri eklenir. Tasarım buna izin vermiyorsa (ör. gruplar baştan dengesizse) bu durum sınırlılık olarak yazılır ve neden kontrol edilemediği açıklanır. Jüri her zaman ek analiz beklemez; gerekçeli açıklama da kabul görür.

5. "Bulgular derinleştirilmeli." En belirsiz eleştiri budur ve genellikle üç şeyden birini ister: anlamlı ANOVA sonrası post hoc karşılaştırmaların gösterilmesi, etkileşim etkilerinin incelenmesi ya da bulguların literatürle karşılaştırılarak tartışılması. Savunma notlarına bakılarak hangisi kastedildiği belirlenir; emin olunamıyorsa danışman aracılığıyla jüri üyesine sorulur. Tahminle yapılan derinleştirme, ikinci savunmada yeni eleştiriye dönüşebilir.

Yeniden analiz gerekiyorsa nelere dikkat edilir?

Yeniden analizde en büyük risk, düzeltilmiş bulguların önceki metinle çelişmesidir. Tek bir testin değişmesi tartışma bölümündeki üç paragrafı, sonuç bölümündeki bir öneriyi ve özetteki bir cümleyi etkileyebilir. Bu yüzden değişen her sonuç için metnin neresinde atıf olduğu aranır ve tutarlılık baştan sona kontrol edilir. Biz bu işi "değişiklik haritası" ile yaparız: sol sütunda eski bulgu, sağda yeni bulgu, üçüncü sütunda etkilenen sayfalar.

İkinci risk, veri setinin savunmadaki hâliyle düzeltme sürecindeki hâlinin farklılaşmasıdır. Yeniden analizde veri temizliği kararları (uç değer, eksik veri) değiştirilecekse bu değişiklik yöntem bölümünde açıkça yazılmalıdır; aksi hâlde "sonuçlar neden değişti?" sorusuna cevap kalmaz. Eksik veri kararlarını eksik veri nasıl ele alınır? yazısında anlattık.

Düzeltme raporu nasıl yazılır?

Çoğu enstitü düzeltmelerin ayrı bir belgeyle sunulmasını ister; istemese bile hazırlamak jürinin işini kolaylaştırır. Biçim basit bir tablodur: eleştiri (jüri üyesinin ifadesiyle), yapılan değişiklik, tezdeki yeri (bölüm ve sayfa), gerekçe. Yapılmayan bir öneri varsa neden yapılmadığı teknik gerekçesiyle yazılır; "zaman yoktu" gerekçe değildir, "tasarım kesitsel olduğu için nedensel model kurulamaz" gerekçedir.

Raporun dili savunmacı olmamalıdır. "Jüri üyesinin görüşüne katılmamakla birlikte" yerine "Öneri doğrultusunda ... eklenmiştir; ... nedeniyle ... tercih edilmiştir" biçimi hem doğru hem güvenlidir.

Süre ve iş bölümü

Raporlama ve yorum düzeltmeleri 3–7 gün, eksik analizlerin eklenmesi 1–2 hafta, yeniden analiz ve bulguların baştan yazımı 2–3 hafta sürer. Enstitülerin düzeltme süresi genellikle 1–3 ay olduğundan zaman çoğu durumda yeterlidir; sorun, tutanağın anlaşılmasına ve danışmanla yazışmaya harcanan haftalardır. Düzeltme sürecine tutanağı ayrıştırarak başlamak bu kaybı önler.

Danışmanla iş bölümü de netleşmelidir: istatistik düzeltmeleri dışarıdan destek alınarak yapılacaksa, tezin yazarının analiz kararlarını anlaması ve ikinci savunmada açıklayabilmesi gerekir. Biz bu yüzden düzeltme teslimlerinde her değişikliğin gerekçesini yazarın anlayacağı dille ayrıca not ederiz; savunmada "bunu istatistikçi yaptı" cevabı kabul edilmez.

Kontrol listesi

İkinci savunmaya girmeden önce şu altı madde tamamlanmış olmalı: tutanaktaki her eleştiri tabloya işlendi; araştırma soruları ile analizler bire bir eşleşiyor; her testin varsayım kontrolü yöntem bölümünde; her sonuçta test istatistiği, p değeri, etki büyüklüğü ve güven aralığı var; değişen sonuçların tartışma, sonuç ve özetteki yansımaları güncellendi; düzeltme raporu hazır ve danışman onayı alındı.

Jüri düzeltmesi aldıysanız tutanağı ve mevcut bulgular bölümünü gönderin; eleştirileri sınıflandırıp hangisinin yeniden analiz, hangisinin metin düzeltmesi gerektirdiğini ve tahmini süreyi ilk görüşmede yazılı veririz.