İstatistiksel anlamlılık
Kavramı anlamak
Hipotezi, istatistiği, varsayımları, karar eşiğini ve belirsizlikli etki tahminini belirtin. Bilgi taşıyorsa daha çok gözlem hassasiyeti iyileştirebilir; ancak bağımlılık etkin bilgiyi azaltır. Küçük pozitif beklenen değer, daha büyük etkiden çok daha fazla kanıt gerektirebilir; sonuçlar makul işlem maliyetlerini içermelidir.
Örneklem büyüklüğü ve ekonomik üstünlük
50 bağımsız denemede otuz kazanç %60 kazanma oranı tahmin eder; binom modelde %95 Wilson aralığı yaklaşık 46.2–72.4%'tür. Seçim, bağımlı işlemler ve değişen rejimler basit modeli yetersiz yapabilir. Kazanma oranı tek başına beklenen değeri tanımlamaz: kazanç ve kayıp büyüklükleri ve maliyetler de önemlidir.
En iyi varyantı seçmeden önce ekonomik anlamlı etkiyi, örneklem dışı doğrulama planını ve çoklu test kontrolünü belirtin. Anlamlılık sağlamlık kontrollerinin ve risk kontrollerinin yerine geçmez.
Yaygın hata
p = 0.03'ü kârlı işlem yapmanın %97 olasılığı diye okumayın. Anlamlı geçmiş testi de tekrarlanan model seçimini, bilgi sızıntısını veya rejim değişimini aşmaz.
Daha fazla öğrenme
Kursta: 15.10 Strateji denetimi: sistemi ne zaman, kendinizi ne zaman düzeltmelisiniz?; 15.4 Geçmiş ve ileri test: yöntemler, kanıtlar ve tuzaklar. Kaynaklar: Amerikan İstatistik Derneği: p-değeri bildirisi.
Sık sorulan sorular
100 örneklem dışı işlem yeterli mi?
Anlamlı olmayan sonuç etki olmadığını kanıtlar mı?
Hayır. Sınırlı bilgi veya yüksek dağılım reddi engelleyebilir. Reddedememeyi sıfır etkinin kanıtı saymak yerine tahmini ve belirsizliği bildirin.