Skor Brier
Contoh menggunakan penulisan angka bahasa Inggris: koma memisahkan ribuan dan titik menandai bagian desimal. 1,000 berarti seribu; 1.25 berarti satu seperempat.
Sebelum masing-masing dari empat observasi, prediksi probabilitas EUR/USD menutup jam berikutnya di atas Bid sekarang. Prediksi 0.8, 0.6, 0.3 dan 0.1; label peristiwa terealisasi 1, 0, 1 dan 0. Dalam konvensi biner 0–1, skor Brier adalah (0.04 + 0.36 + 0.49 + 0.01) / 4 = 0.225. Prediksi tetap 0.5 untuk peristiwa sama berskor 0.25. Ini menunjukkan aritmetika; empat observasi tidak membuktikan mutu ramalan mendatang.
Tetapkan peristiwa dan waktu ramalan dahulu
Label 1 harus berarti kondisi, horizon dan sumber data sama pada setiap observasi. Catat ramalan sebelum mengetahui hasil. Jangan campur kenaikan harga per jam dengan pencapaian target sebelum stop: keduanya peristiwa berbeda. Nyatakan penanganan data hilang dan hasil seri. Horizon bertumpang tindih dapat membuat observasi bergantung, sehingga jumlah ramalan belum tentu sama dengan jumlah informasi independen.
Gunakan pembanding yang sesuai
Lebih rendah lebih baik pada sampel sama dengan konvensi sama. Prediksi 0.5 selalu berskor 0.25, tetapi untuk peristiwa langka frekuensi dari data sebelumnya mungkin acuan lebih baik. Jangan pilih berdasarkan hasil uji. Catat pula konvensi pustaka: penjumlahan seluruh kelas atau formulasi multikelas dapat memiliki skala berbeda. Periksa label kelas positif, jangan anggap kolom probabilitas merujuk gerak naik.
Skor baik bukan strategi untung
Skor Brier mengevaluasi ramalan probabilitas, bukan hasil trading uang. Skor mencerminkan lebih dari kalibrasi; periksa kalibrasi dan stabilitas di luar sampel secara terpisah. Bahkan probabilitas nyata 60% dengan hasil +1R atau −2R memberi expectancy 0.6 × 1R − 0.4 × 2R = −0.2R sebelum biaya. Keputusan trading juga memerlukan hasil potensial, eksekusi, ukuran posisi dan batasan risiko.
Pelajaran lanjutan dan sumber
10.1 Trading dalam ketidakpastian – menilai keputusan yang hasilnya tidak dapat diketahui; 11.9 AI dan LLM dalam trading – penerapan, batas dan risiko; 15.9 Jurnal Transaksi Forex — R-Multiple, Expectancy, SQN, dan MAE/MFE.
Sumber primer (diperiksa 2026-10-11): scikit-learn — brier_score_loss; scikit-learn — evaluasi ramalan probabilitas.
