19 Ноября 2026 · исследования

У вашего walk-forward-теста есть три способа исказить будущее

У вашего walk-forward-теста есть три способа исказить будущее

Walk-forward-тестирование должно отвечать на практический вопрос: как бы вела себя стратегия на следующем отрезке неизвестных данных, если бы вы снова и снова подбирали её, используя только прошлое? Метод кажется простым. Выберите обучающее окно, подберите стратегию, протестируйте её на следующем отрезке, затем сдвиньте окно и повторите.

Проблема в том, что последовательность окон может выглядеть дисциплинированной, но при этом информация всё равно просачивается через их границы. Я видел, как это приводило к подозрительно плавной доходности вне обучающей выборки, параметрам, которые казались неправдоподобно стабильными, и сделкам, засчитанным в тестовый период, хотя он начался до того, как эти сделки можно было совершить.

Ошибка 1: считать тестовое окно чистым листом

Тестовое окно начинается 1 июня. В сигнале используется 50-дневная скользящая средняя, поэтому для разогрева расчёта бэктест загружает цены за май. Это разумно: в реальной торговле стратегия тоже сохраняла бы состояние индикатора. Но если доходность тестового периода начинает учитываться с 1 мая, дни разогрева превращаются в результат.

Та же проблема на границе возникает с позициями. Допустим, стратегия открывает сделку 29 мая и закрывает её 3 июня. Следует ли учитывать прибыль как результат тестового периода? Только если в симуляции чётко задано, как обрабатываются позиции, открытые до границы. Иначе тест может унаследовать вход, выбранный на обучающих данных, а затем записать полученную прибыль в тест.

Элемент на границеКорректная обработкаТипичная ошибка
История индикатораЗагрузить предыдущие бары для сохранения состояния; начать оценку с начала тестаУчесть доходность за период разогрева как результат теста
Открытые позицииЗакрывать, переносить или исключать их по заранее заданному правилуЗачесть тесту вход, совершённый до его начала
Заявки и исполненияТребовать, чтобы решение и исполнение пришлись на тестовый периодИсполнить заявку, созданную до границы

Для чистого разделения нужно правило обработки состояния, а не просто дата. Сохраняйте историю индикатора так, как это происходило бы в реальной торговле, но оценивайте только тот период, который собираетесь проверить. Чётко определите правила для открытых позиций и заявок и применяйте их при каждом сдвиге окна.

Ошибка 2: позволять сделкам пересекать границу без эмбарго

Перекрывающиеся метки создают ещё одну утечку. Представьте, что модель обучается на сигналах, для которых результатом служит доходность за следующие пять торговых дней. Обучающий пример за последний день мая использует июньские цены, чтобы определить, верным ли было предсказание. Если тест начинается 1 июня, обучение уже захватило часть результата тестового периода.

Это легко упустить, потому что строка с признаками датирована 31 мая. Но метка заглядывает в будущее. Разделение по времени, основанное только на датах строк, не обнаружит такого пересечения.

Удалите обучающие примеры, чьи окна результата заходят в тестовый период. В зависимости от горизонта метки и способа построения признаков оставьте между обучением и тестированием временной зазор. Этот зазор, который часто называют эмбарго, должен соответствовать периоду перекрытия информации или результатов. Метка на пять дней не оправдывает зазор в один день только потому, что так график выглядит аккуратнее.

Запишите полный временной интервал, который использует каждый обучающий пример: ретроспективное окно признаков, момент принятия решения и окно результата. Разделяйте данные по этим интервалам, а не только по дате, указанной рядом с каждой строкой.

Ошибка 3: выбирать победителя, посмотрев на все фолды

Вот самый соблазнительный вариант ошибки. Вы запускаете walk-forward-тесты для 40 наборов параметров. Одно сочетание хорошо выглядит на нескольких фолдах, поэтому вы выбираете его и приводите эти же фолды как доказательство его способности обобщать результаты.

Каждый фолд мог оставаться неизвестным при обучении собственной модели. Но дизайн стратегии вы выбрали уже после того, как просмотрели все фолды. Теперь результаты тестирования повлияли на исследовательское решение и стали частью процесса обучения на уровне эксперимента.

Ведите датированный журнал решений, принятых до каждой оценки. Если вы используете результаты walk-forward-тестирования для выбора параметров, признаков, рынков или даже тестового окна, оставьте финальный нетронутый период для последней оценки. Откройте этот период один раз, после того как зафиксируете все решения. Если после просмотра результатов вы вернётесь к настройке, это уже не будет финальным тестом.

Есть и простой практический нюанс: сохраните журнал эксперимента до того, как появятся результаты. Таблица, отредактированная после удачного запуска, плохо отражает, что именно вы проверяли.

Что должен содержать убедительный отчёт о walk-forward-тестировании?

Указывайте настройки вместе с доходностью: даты обучения и тестирования, частоту сдвига окна, горизонт метки, обработку разогрева, правила для позиций на границах и число проверенных конфигураций. Покажите каждый фолд и общий результат. Высокий итог, полученный за счёт одного удачного окна, следует трактовать иначе, чем скромные результаты, повторяющиеся в разных условиях.

Walk-forward-тестирование помогает дисциплинировать исследование стратегий, но эта дисциплина зависит от правил на границах и учёта принятых решений. Если всё настроить правильно, тест покажет, как исследовательский процесс может вести себя со временем. Если пренебречь этими правилами, надпись walk-forward станет лишь украшением результата, который уже видел будущее.

walk-forward-тестированиепереобучениебэктестингисследование стратегий
ПоделитьсяXLinkedInFacebookRedditHacker NewsWhatsAppTelegramEmail
← Все статьи