Punteggio di Brier
Gli esempi usano la notazione numerica inglese: la virgola separa le migliaia e il punto indica la parte decimale. 1,000 significa mille; 1.25, uno e un quarto.
Prima di ciascuna di quattro osservazioni, prevedi la probabilità che EUR/USD chiuda l’ora successiva sopra il Bid attuale. Le previsioni sono 0.8, 0.6, 0.3 e 0.1; le etichette degli eventi realizzati sono 1, 0, 1 e 0. Con la convenzione binaria 0–1, il punteggio di Brier è (0.04 + 0.36 + 0.49 + 0.01) / 4 = 0.225. Previsioni costanti di 0.5 sugli stessi eventi danno 0.25. È una dimostrazione aritmetica; quattro osservazioni non dimostrano la qualità previsionale futura.
Definisci prima evento e momento della previsione
L’etichetta 1 deve indicare la stessa condizione, lo stesso orizzonte e la stessa fonte di dati in ogni osservazione. Registra la previsione prima di conoscere l’esito. Non mescolare un rialzo orario con il raggiungimento di un target prima dello stop: sono eventi diversi. Specifica la gestione dei dati mancanti e dei pareggi. Orizzonti sovrapposti possono creare osservazioni dipendenti, quindi il numero di previsioni può non coincidere con quello delle informazioni indipendenti.
Usa un confronto appropriato
Un valore minore è migliore sullo stesso campione e con la stessa convenzione. Prevedere sempre 0.5 dà 0.25, ma per eventi rari una frequenza stimata da dati precedenti può essere un riferimento migliore. Non selezionarlo usando gli esiti del test. Registra anche la convenzione della libreria: la somma su tutte le classi o una formulazione multiclasse possono avere una scala diversa. Controlla l’etichetta della classe positiva invece di presumere che una colonna di probabilità indichi un rialzo.
Un buon punteggio non è una strategia redditizia
Il punteggio di Brier valuta previsioni probabilistiche, non risultati monetari di trading. Riflette più della sola calibrazione; esamina separatamente calibrazione e stabilità fuori campione. Anche una probabilità reale del 60% con risultati di +1R o −2R dà un valore atteso di 0.6 × 1R − 0.4 × 2R = −0.2R prima dei costi. Una decisione di trading richiede inoltre risultati possibili, esecuzione, dimensionamento e vincoli di rischio.
Approfondimenti e fonti
10.1 Trading nell’incertezza — come giudicare decisioni il cui esito non è conoscibile; 11.9 AI e LLM nel trading — applicazioni, limiti e rischi; 15.9 Diario di trading Forex — multipli di R, valore atteso, SQN e MAE/MFE.
Fonti primarie (verificate il 2026-10-11): scikit-learn — brier_score_loss; scikit-learn — valutazione delle previsioni probabilistiche.