Подсматривание в данные
Как это работает
Записывайте всё семейство попыток: параметры, фильтры, инструменты и отвергнутые версии. Отделяйте разработку от окончательной оценки. Повторный просмотр отложенной выборки делает её частью отбора модели и нарушает исходную роль независимой проверки.
Типичная ошибка
Модельные 92.3% не означают такой вероятности ложности конкретной выбранной стратегии. Поправка на множественное тестирование может помочь, но не устраняет утечки информации или неточной модели исполнения.
Дальнейшее обучение
В курсе: 5.12 Автоматизация и скрининг в техническом анализе — инструменты, процесс и ловушки; 15.4 Историческое и форвард-тестирование — методы, свидетельства и ловушки. Источники: ASA: заявление о p-значениях.
Журнал исследовательских решений
Записывайте отброшенные фильтры, инструменты и ручные изменения наряду с сохранёнными файлами. Если условие выбрано после просмотра отложенной выборки, она присоединилась к разработке. Окончательному тесту нужны данные, независимые от этих решений отбора.
Первичный источник проверен 11 октября 2026 года: stat.ethz.ch.
Частые вопросы
Один хороший результат вне выборки устраняет проблему?
Название OOS делает базу независимой?
Нет. Важно её реальное влияние на отбор правил, а не ярлык папки.