Out-of-Sample-Test
Zahlenbeispiele verwenden die englische Schreibweise: Das Komma trennt Tausendergruppen, der Punkt die Nachkommastellen. 1,000 bedeutet eintausend, 1.25 eins und ein Viertel.
Stichprobe getrennt von Auswahl
OOS bezeichnet Daten, die nicht zur Auswahl der gerade bewerteten Strategie verwendet wurden, nicht einfach eine anders benannte Datei. Parameter, Instrumente oder Ausnahmen erst nach Einsicht in den Test auszuwählen nutzt ebenfalls dessen Informationen. Weitere Forschungszyklen sind transparent möglich, doch Entwicklungsvalidierung und abschließender Test müssen getrennt bleiben. Bewahren Sie Entscheidungen und Versionen auf, damit klar ist, was der Modellentwickler tatsächlich noch nicht gesehen hatte.
Chronologie und Datenleck
Zufälliges Mischen von Marktzeitreihen kann künftige und vergangene Informationen vermengen. Passen Sie Skalierung, Merkmalsauswahl und Schwellen nur anhand von vor dem Test verfügbaren Daten an. Geschäfte oder Kennzeichnungen, die ein künftiges Intervall abdecken, können Stichprobengrenzen überschreiten; definieren Sie zu ihren Horizonten passende Ausschlüsse. Eine Kalenderlücke allein beseitigt nicht jedes Datenleck. Siehe scikit-learn-Dokumentation zu Datenlecks für Beispiele.
Was bedeutet schwächeres Ergebnis?
Mögliche Ursachen sind Überanpassung, veränderte Marktbedingungen, höhere Kosten, ein Implementierungsfehler oder Unsicherheit durch eine kleine Stichprobe. Untersuchen Sie die Ursachen, statt automatisch Überanpassung festzustellen. Berichten Sie Anzahl der abgeschlossenen Geschäfte, Streuung und sämtliche Gebühren. Auch eine kurze positive OOS-Periode ist kein Rentabilitätszertifikat; sie bleibt eine Schätzung unter einem bestimmten Modell und Messfenster.
Dokumentation macht den Test reproduzierbar
Bewahren Sie Codeversion, Quelldaten, Veröffentlichungskalender und Produktspezifikation auf. Legen Sie fest, wie offene Positionen über Stichprobengrenzen hinweg behandelt werden und wie Indikatoren ihre Anlaufhistorie erhalten. Frühere Beobachtungen zur Berechnung eines Indikators unterscheiden sich von zukünftigen Ergebnissen zur Parameterauswahl. Die Aufzeichnung sollte die genaue Testversion reproduzieren, ohne stillschweigend Wissen aus einer späteren Periode in die frühere Bewertung einzufügen.
Praktisches Protokoll
Erfassen Sie Stichprobengrenzen, Zeitstempel der Informationsverfügbarkeit, Bewertungskriterien und den Handlungsplan, bevor Sie die Ergebnisse lesen. Behalten Sie vollständige Kosten und vergleichbare Positionsgrößen bei. Wenn der Test Änderungen beeinflusst, organisieren Sie eine neue ehrliche Bewertung auf späteren Daten, statt zu behaupten, die früheren Beobachtungen blieben unangetastet. Im Kurs: Backtesting und Forward-Testing. Quelle geprüft am 11. Oktober 2026.
Diagramm und Rechenbeispiel
Grafik in voller Größe öffnen
