Örneklem dışı test

Örneklem seçimden ayrı olmalıdır

OOS, yalnızca farklı adlı dosya değil, değerlendirilen stratejiyi seçmekte kullanılmamış veri demektir. Testi gördükten sonra parametre, araç veya istisna seçmek de onun bilgisini kullanır. İleri araştırma döngüleri şeffaf yapılabilir; ancak geliştirme doğrulamasını nihai testten ayırın. Model geliştiricisinin gerçekte neyi görmediği açık olsun diye kararları ve sürümleri tutun.

Kronoloji ve veri sızıntısı

Piyasa zaman serilerini rastgele karıştırmak gelecek ve geçmiş bilgisini karıştırabilir. Ölçeklemeyi, özellik seçimini ve eşikleri yalnızca test öncesinde kullanılabilir verilerle uydurun. Gelecekteki aralığı kapsayan işlemler veya etiketler örneklem sınırlarını aşabilir; ufuklarına uygun dışlamaları tanımlayın. Takvim boşluğu tek başına her sızıntıyı ortadan kaldırmaz. Bkz. scikit-learn'ün veri sızıntısı belgeleri (örnekler için).

Daha zayıf sonuç ne anlama gelir?

Olası nedenler aşırı uyumu, değişen piyasa koşullarını, daha yüksek maliyetleri, uygulama hatasını veya küçük örneklem belirsizliğini içerir. Otomatik olarak aşırı uyum ilan etmek yerine olası teşhisleri araştırın. Tamamlanmış işlem sayısını, dağılımı ve bütün ücretleri bildirin. Kısa pozitif OOS dönemi de kârlılık sertifikası değildir; belirli model ve ölçüm penceresi altında tahmin olarak kalır.

Belgeler testi yeniden üretilebilir kılar

Kod sürümünü, kaynak verileri, yayım takvimini ve ürün özelliklerini koruyun. Örneklem sınırlarını aşan açık pozisyonların nasıl ele alındığını ve göstergelerin ısınma geçmişini nasıl aldığını tanımlayın. Gösterge hesabında kullanılan önceki gözlemler, parametre seçmekte kullanılan gelecek sonuçlardan farklıdır. Kayıt, sonraki dönem bilgisini önceki değerlendirmeye sessizce eklemeden tam test sürümünü yeniden üretmelidir.

Pratik protokol

Sonuçları okumadan önce örneklem sınırlarını, bilgi kullanılabilirliği zaman damgalarını, değerlendirme ölçütlerini ve eylem planını kaydedin. Tam maliyetleri ve karşılaştırılabilir büyüklük belirlemeyi koruyun. Test değişiklikleri yönlendirirse önceki gözlemlerin dokunulmamış kaldığını iddia etmek yerine sonraki verilerde yeni ve dürüst değerlendirme düzenleyin. Kursta: geçmiş ve ileri test. Kaynak 11 Ekim 2026'da kontrol edilmiştir.

Şema ve çözülmüş örnek