2026년 11월 19일 · 리서치

워크포워드 테스트가 미래를 잘못 보여주는 세 가지 방식

워크포워드 테스트가 미래를 잘못 보여주는 세 가지 방식

워크포워드 테스트가 답하려는 질문은 실용적입니다. 과거 데이터만으로 전략을 반복해서 맞췄다면, 아직 보지 못한 다음 구간에서 전략은 어떻게 움직였을까요? 방법은 간단해 보입니다. 학습 윈도우를 정하고, 전략을 맞춘 뒤, 이후 구간에서 테스트하고, 윈도우를 옮겨 반복합니다.

문제는 윈도우를 순서대로 배치해도 경계 사이로 정보가 새어 들어갈 수 있다는 점입니다. 저는 그 피해가 유난히 매끄러운 OOS 수익률, 믿기 어려울 만큼 안정적으로 보이는 매개변수 설정, 그리고 테스트 기간이 시작되기도 전에 낼 수 없었던 주문으로 체결된 것으로 기록된 거래에서 드러나는 것을 봤습니다.

실수 1: 테스트 윈도우를 아무것도 없는 새 구간으로 취급하기

테스트 윈도우가 6월 1일에 시작합니다. 신호가 50일 이동평균을 사용하므로 백테스트는 계산을 준비하기 위해 5월 가격을 불러옵니다. 이는 합리적입니다. 실제 운용 전략도 지표 상태를 이어받기 때문입니다. 하지만 테스트 기간 수익을 5월 1일부터 누적한다면, 워밍업 날짜가 성과에 포함된 셈입니다.

포지션에서도 같은 경계 문제가 생깁니다. 전략이 5월 29일에 거래를 열고 6월 3일에 청산한다고 해 보겠습니다. 그 수익을 테스트 기간 성과로 계산해야 할까요? 시뮬레이션에서 경계 시점에 이미 열린 포지션을 어떻게 처리하는지 명확히 정한 경우에만 가능합니다. 그렇지 않으면 테스트가 학습 데이터로 선택된 진입을 이어받은 뒤, 그 결과로 난 수익을 테스트에 귀속할 수 있습니다.

경계 항목안전한 처리흔한 오류
지표 이력상태 계산에 이전 봉을 불러오고, 테스트 시작일부터 성과를 산정워밍업 수익을 테스트 성과로 계산
열린 포지션명시한 규칙에 따라 청산, 유지 또는 제외테스트 전 진입을 테스트 성과로 귀속
주문과 체결의사결정과 실행이 모두 테스트 기간에 이뤄지도록 제한경계 이전에 생성된 주문을 체결 처리

깔끔하게 분할하려면 날짜뿐 아니라 상태 처리 규칙도 필요합니다. 실제 운용 프로세스라면 이어받았을 지표 이력은 유지하되, 평가하려는 기간만 성과로 계산하세요. 열린 포지션과 주문을 어떻게 처리할지 명시하고, 매번 윈도우를 옮길 때 같은 규칙을 적용하세요.

실수 2: 임베고 없이 거래가 분할 경계를 넘나들게 두기

레이블이 겹치면 또 다른 정보 누수가 생깁니다. 다음 5거래일 수익률을 결과로 삼는 신호로 모델을 학습한다고 해 보겠습니다. 5월 마지막 날의 학습 샘플은 예측이 맞았는지 판단하기 위해 6월 가격을 사용합니다. 테스트가 6월 1일에 시작한다면 학습 과정에서 이미 테스트 결과의 일부를 소비한 셈입니다.

특징 행 자체의 날짜는 5월 31일이므로 이 문제를 놓치기 쉽습니다. 레이블은 미래까지 뻗어 있습니다. 행 날짜만 기준으로 시간 분할을 해서는 이러한 중첩을 알아챌 수 없습니다.

결과 구간이 테스트 기간까지 이어지는 학습 샘플은 제거하세요. 레이블 기간과 특징을 구성하는 방식에 따라 학습과 테스트 사이에 간격도 두세요. 흔히 임베고라고 부르는 이 간격은 정보나 결과가 겹치는 기간에 맞춰야 합니다. 차트가 더 깔끔해 보인다는 이유만으로 5일 레이블에 1일 간격을 적용하는 것은 타당하지 않습니다.

각 학습 샘플이 사용하는 전체 시간 범위를 기록하세요. 특징의 과거 참조 구간, 의사결정 시점, 결과 구간을 포함해야 합니다. 각 행에 표시된 날짜만이 아니라 이 시간 범위를 기준으로 분할하세요.

실수 3: 모든 폴드를 본 뒤 승자를 고르기

가장 빠지기 쉬운 오류가 있습니다. 매개변수 조합 40개를 워크포워드 테스트에 돌립니다. 그중 하나가 여러 폴드에서 좋아 보여 그 조합을 선택하고, 같은 폴드 결과를 일반화 성능의 증거로 보고합니다.

각 폴드 자체는 해당 모델을 맞출 때 보지 못한 데이터였을 수 있습니다. 하지만 모든 폴드를 살펴본 뒤 전략 설계를 선택했습니다. 테스트 결과가 이제 리서치 결정을 이끌었으므로, 실험 수준에서는 이미 학습 과정의 일부가 된 것입니다.

각 평가 전에 어떤 선택을 했는지 날짜와 함께 기록하세요. 워크포워드 결과를 바탕으로 매개변수, 특징, 시장 또는 테스트 윈도우까지 선택한다면, 마지막 평가를 위해 손대지 않은 최종 기간을 남겨 두세요. 선택을 확정한 뒤 그 기간을 한 번만 열어 봅니다. 결과를 본 다음 다시 조정한다면 더는 최종 테스트가 아닙니다.

여기에는 평범하지만 중요한 세부 사항이 있습니다. 결과가 나오기 전에 실험 기록을 저장하세요. 유망한 결과를 본 뒤 수정한 스프레드시트는 실제로 무엇을 시도했는지 보여주는 믿을 만한 기록이 아닙니다.

신뢰할 수 있는 워크포워드 보고서에는 무엇이 담겨야 할까요?

수익률과 함께 설정도 보고하세요. 학습 및 테스트 날짜, 롤링 빈도, 레이블 기간, 워밍업 처리, 경계에서의 포지션 규칙, 시도한 설정 수를 포함해야 합니다. 전체 결과뿐 아니라 각 폴드도 보여주세요. 운 좋게 하나의 구간에서 얻은 높은 총성과와 서로 다른 조건에서 반복된 완만한 성과는 다르게 해석해야 합니다.

워크포워드 테스트는 전략 리서치에 유용한 규율을 더할 수 있지만, 그 규율은 경계 규칙과 의사결정 기록에 달려 있습니다. 이를 제대로 갖추면 리서치 프로세스가 시간의 흐름 속에서 어떻게 작동할지 테스트로 알 수 있습니다. 이를 건너뛰면 워크포워드라는 이름은 이미 미래를 본 결과에 붙인 장식일 뿐입니다.

워크포워드 테스트과최적화백테스팅전략 리서치
← 전체 글