Salvobet analizlerinde çoklu test sorununu, seçilmiş sonuçların sınırlarını ve yüzde 64 örneğinin hangi varsayımlara dayandığını açıklayan bağımsız bilgi sayfası.
Bu sayfa, Salvobet hakkında karşılaşılan analizleri istatistik açısından değerlendirmek için hazırlanmış bağımsız bir bilgilendirmedir; markanın resmî açıklaması değildir. Başlıktaki Kapella yalnızca bir etikettir. Temel soru şudur: Çok sayıda karşılaştırmadan seçilen tek bir dikkat çekici bulgu, gerçekten güçlü bir kanıt sayılır mı?
Aynı veri üzerinde çok sayıda karşılaştırma yapmak, tesadüfen dikkat çekici sonuç bulma ihtimalini artırır. Varsayımsal olarak, gerçekte hiçbir fark bulunmayan birbirinden bağımsız 20 test düşünün. Her testte yanlış pozitif olasılığı yüzde 5 ise, en az bir yanlış pozitif olasılığı 1 − 0,95 üzeri 20 hesabıyla yaklaşık yüzde 64 olur. Bu, seçilen bulgunun yüzde 64 olasılıkla yanlış olduğu anlamına gelmez.
Yalnızca öne çıkarılan karşılaştırmaya değil, toplam kaç test yapıldığına da bakın. İncelenen dönemler, alt gruplar ve ölçütler açıklanmış mı? Analiz planı önceden belirlenmiş mi? Bonferroni gibi düzeltmeler yanlış pozitif riskini sınırlayabilir. Örneğin 20 test için yüzde 5 toplam hata hedefinde test başına eşik yüzde 0,25 olur. Ancak bu yaklaşım gerçek farkları saptamayı da zorlaştırabilir.
Hayır. Etki büyüklüğü, belirsizlik aralığı, test sayısı ve bağımsız verilerle tekrar değerlendirme birlikte önemlidir.
Hayır. Örnek, tüm sıfır hipotezlerinin doğru olduğu bağımsız 20 testi varsayar; bağımlı testlerde hesap değişebilir.