Significatività statistica
Comprendere il concetto
Dichiarare ipotesi, statistica, assunzioni, soglia decisionale e stima dell’effetto con incertezza. Più osservazioni possono migliorare la precisione se informative, ma la dipendenza riduce le informazioni effettive. Una piccola aspettativa positiva può richiedere molte più prove di un effetto maggiore e i risultati devono includere costi di trading plausibili.
Numerosità del campione e vantaggio economico
Trenta vincite su 50 prove indipendenti stimano una percentuale di successo del 60%; in un modello binomiale, l’intervallo Wilson al 95% è circa 46.2–72.4%. Selezione, operazioni dipendenti e regimi che cambiano possono rendere inadeguato quel modello semplice. La sola percentuale di successo non descrive l’aspettativa: contano anche entità di vincite e perdite e costi.
Specificare un effetto economicamente significativo, un piano di validazione fuori campione e il controllo dei test multipli prima di selezionare la variante migliore. La significatività non sostituisce verifiche di robustezza e controlli del rischio.
Errore comune
Non leggere p = 0.03 come probabilità del 97% di trading redditizio. Né un backtest significativo supera selezione ripetuta del modello, contaminazione informativa o un cambiamento di regime.
Approfondimenti
Nel corso: 15.10 Audit della strategia — quando correggere il sistema, quando correggere se stessi; 15.4 Backtesting e test forward — metodi, prove e insidie. Fonti: American Statistical Association: dichiarazione sul p-value.
Domande frequenti
Bastano 100 operazioni fuori campione?
Un risultato non significativo dimostra assenza di effetto?
No. Informazioni limitate o dispersione elevata possono impedire il rifiuto. Riportare stima e incertezza, senza trattare il mancato rifiuto come prova di effetto zero.