Analisis & metrik

Data snooping

Bias dari pencarian atau pemakaian ulang data sama untuk memilih aturan menarik. Model mungkin menyesuaikan ciri historis kebetulan, bukan mekanisme berulang. Termasuk modifikasi strategi berulang setelah melihat hasil pada set evaluasi yang dianggap independen. Berbeda dari bias look-ahead meski keduanya dapat bersamaan.
Contoh. Untuk 50 uji independen hipotesis nol benar pada α = 0.05, harapan jumlah penolakan palsu 2.5. Probabilitas setidaknya satu 1−0.95⁵⁰ ≈ 92.3%. Varian strategi nyata biasanya tidak independen.

Cara kerja

Catat seluruh keluarga percobaan: parameter, filter, instrumen dan versi ditolak. Pisahkan pengembangan dari evaluasi akhir. Pemeriksaan holdout berulang menjadikannya bagian seleksi model dan merusak peran awal pemeriksaan independen.

Kesalahan umum

Angka model 92.3% bukan probabilitas strategi pilihan tertentu salah. Koreksi pengujian berganda membantu, tetapi tidak menghapus kebocoran informasi atau model eksekusi tidak akurat.

Pelajaran lanjutan

Dalam kursus: 5.12 Otomasi dan penyaringan analisis teknikal — alat, alur dan jebakan; 15.4 Backtesting dan forward testing — metode, bukti dan jebakan. Sumber: ASA: pernyataan p-value.

Log keputusan riset

Catat filter, instrumen dan perubahan manual dibuang serta file disimpan. Jika syarat dipilih setelah memeriksa holdout, set itu masuk pengembangan. Uji akhir perlu data independen dari keputusan seleksi tersebut.

Sumber primer diperiksa 11 Oktober 2026: stat.ethz.ch.

Pertanyaan umum

Apakah satu hasil di luar sampel baik menghapus masalah?
Tidak otomatis. Prosedur seleksi, percobaan awal dan independensi data evaluasi dari keputusan desain semuanya penting.
Apakah menamai dataset OOS membuat independen?

Tidak. Pengaruh nyata pada pemilihan aturan penting, bukan label folder.

← Kembali ke glosarium lengkap

Jarosław Wasiński

Pemimpin redaksi, ForexMechanics.com • Analis makro dan FX

Analis independen dan profesional dengan lebih dari 20 tahun pengalaman di pasar keuangan. Aktif di Forex sejak 2004, berfokus pada analisis fundamental, struktur pasar OTC, dan manajemen risiko modal yang disiplin.

  • Pendiri dan pemimpin redaksi MyBank.pl, menyediakan edukasi keuangan tepercaya sejak 2004.
  • Penulis ratusan komentar pasar mendalam, analisis struktural, dan materi edukasi untuk trader dan investor.
  • Pendukung transparansi pasar, mempromosikan edukasi berbasis data konkret dan laporan institusional (BIS, ESMA, CFTC).

Seluruh konten bersifat edukasi dan informasi semata – bukan merupakan saran investasi atau rekomendasi apa pun. Ingat: trading dengan leverage (Forex/CFD) memiliki risiko tinggi kehilangan modal dengan cepat.