Протокол тестирования стратегии — бэктест и форвард-тест

Укажите механизм, который должен создавать преимущество, и условия его ожидаемого исчезновения. Определите рынок, таймфрейм и сессию до просмотра результатов. Используйте один идентификатор исследования в плане, файлах данных и журнале.

Правила должны позволять воспроизвести каждое решение. Недостаточно «входить на пробой»: запишите источник цены, момент решения и способ исполнения. Сохраните правила или код до теста. Изменение после просмотра результата создаёт новую версию, а не улучшает историческую оценку прежней.

Запишите источник и охват данных и то, представляют ли они bid, ask или mid. Согласуйте детализацию с правилами исполнения. Будущее значение индикатора или поздний пересмотр публикации не является информацией, доступной в момент сигнала. Свеча, охватывающая SL и TP, требует явного правила выбора исхода или более подробных данных.

Отделите выборку разработки правил (in-sample, IS) от выборки их оценки (out-of-sample, OOS). Запишите даты и метод разделения. Повторный просмотр OOS с подстройкой правил разрушает её независимость. Проводите форвард-тест на данных, поступающих после фиксации правил, документируя все сигналы и пропуски; демо-среда не полностью воспроизводит исполнение реального счёта.

Задайте показатели и правило решения до просмотра результата. Ни единое число сделок, ни порог профит-фактора не подтверждают преимущество любой стратегии. На интерпретацию влияют длина выборки, зависимость наблюдений, редкие события и число проверенных вариантов. Отделяйте критерии оценки стратегии от проверок правильности самого теста. Заранее решите, как учитывать неопределённость и зависимость результатов и когда завершать исследование. Не останавливайте тест на первом удачном результате и не продлевайте до желаемого порога: для таких решений нужен запланированный метод последовательной оценки либо явное признание дальнейшего анализа поисковым.

Для согласованности с журналом F определите результат сделки в единицах R как чистый результат, делённый на положительную сумму риска, запланированную до входа. Сумма этих результатов при переменных суммах риска не равна результату в базовом R плана. Накопленная кривая R начинается с 0; просадка — снижение от прошлого пика, поэтому первый убыток −1 R даёт просадку 1 R. Для средств или баланса задайте начальный капитал, денежные потоки и учёт открытых позиций — не начинайте процентный расчёт с нулевого капитала. PF без убытков имеет нулевой знаменатель: отметьте его неопределённым, а не подтверждением преимущества. Учитывайте частичные выходы по единому документированному определению сделки.

Запишите результаты отдельно для IS, OOS и форвард-теста. Укажите число сигналов, сделок и исключений с причинами. Храните траекторию результатов, а не только итог. Чистый результат учитывает издержки ровно один раз: если спред и проскальзывание уже отражены в ценах исполнения, повторно их не вычитайте. Отсутствующие данные помечайте отсутствующими, а не нулевыми.

Отличайте исправление ошибки реализации от изменения идеи. В обоих случаях храните прежний результат и отмечайте уже виденные данные. При изменении правил не перезаписывайте старую версию протокола. Экспорт документирует состояние в конкретный момент; сам файл или локальное сохранение не является независимым доказательством даты фиксации.

Сравните результат с критериями раздела 5. Запишите и свидетельства в пользу гипотезы, и противоречащие ей факты. Вывод «нужно больше данных» требует конкретного плана. Документ упорядочивает исследование; он не разрешает реальную торговлю и не гарантирует будущих результатов.