Walk-Forward 測試要回答一個實際問題:如果你反覆只用過去資料擬合策略,它在下一段未見資料上會如何表現?這個方法聽起來很簡單。選定訓練視窗、擬合策略、往前測試,再移動視窗並重複。
問題在於,一連串視窗看起來可能很有紀律,資訊卻仍會跨越界線外漏。我看過這類問題造成的影響:樣本外報酬平滑得可疑、參數設定穩定得出奇,還有被算進測試期間的交易,其實在測試開始前就已經進場。
錯誤 1:把測試視窗當成一張白紙
測試視窗從 6 月 1 日開始。訊號使用 50 天移動平均,因此回測載入 5 月的價格來暖機計算。這很合理:實際運行的策略也會延續指標狀態。但如果測試期間的報酬從 5 月 1 日就開始累計,這些暖機日就被算成績效了。
持倉也會遇到相同的界線問題。假設策略在 5 月 29 日開倉,並於 6 月 3 日平倉。這筆獲利該算進測試期間的績效嗎?只有在模擬明確定義如何處理界線時已開倉的部位,才算合理。否則,測試可能沿用一筆根據訓練資料選出的進場,再把後續獲利算到測試期間。
| 界線項目 | 安全處理方式 | 常見失誤 |
|---|---|---|
| 指標歷史資料 | 載入先前 K 棒以延續狀態;從測試起點開始計分 | 把暖機期間的報酬算成測試績效 |
| 未平倉部位 | 依明確規則平倉、延續持有或排除 | 把測試前的進場算到測試期間 |
| 委託與成交 | 要求決策與執行都發生在測試期間 | 成交在界線前產生的委託 |
乾淨的切分需要一套狀態處理規則,而不只是一個日期。保留實際運行流程會有的指標歷史資料,但只針對你要評估的期間計分。明確規定如何處理未平倉部位與委託,並在每次視窗移動時套用相同規則。
錯誤 2:讓交易跨越切分點,卻沒有設定禁入期
標籤重疊會造成另一種資訊外漏。想像一個模型是用訊號訓練,標籤代表接下來 5 個交易日的報酬。5 月最後一天的訓練樣本會用到 6 月價格,才能判定預測是否正確。如果測試從 6 月 1 日開始,訓練資料就已經用到了部分測試結果。
這很容易被忽略,因為特徵列本身的日期是 5 月 31 日。但標籤延伸到了未來。只按列日期切分的時間切分方式看不出這種重疊。
移除結果視窗延伸到測試期間的訓練樣本。視標籤涵蓋期間與特徵建構方式而定,也要在訓練與測試之間留出間隔。這段間隔通常稱為禁入期,應配合資訊或結果重疊的期間設定。標籤涵蓋 5 天,就不能只因為圖表看起來更乾淨而只留 1 天間隔。
記錄每個訓練樣本使用的完整時間範圍:特徵回溯期間、決策時間與結果視窗。依這些時間範圍切分,而不只是依每列旁邊標示的日期。
錯誤 3:看過所有折次後才挑出贏家
最容易讓人心動的失誤就在這裡。你用 40 組參數進行 Walk-Forward 測試。其中一組在好幾個折次中表現不錯,於是你選它,並把同一批折次當成它能泛化的證據。
每個折次在各自模型擬合時或許都尚未被看過。但你是在檢視所有折次後才選定策略設計。測試結果已經影響研究決策,因此在實驗層級上,它們已成為訓練流程的一部分。
按日期記錄每次評估前做了哪些選擇。如果你根據 Walk-Forward 結果挑選參數、特徵、市場,甚至測試視窗,就保留一段最後未觸碰的期間,做最後一次評估。等選擇都定案後,才開啟這段期間一次。如果看過結果後又回頭調整,它就不再是最後測試。
這裡還有個不起眼的細節:在結果出來前先儲存實驗紀錄。一次漂亮的測試結果出爐後才修改的試算表,無法如實記錄你實際做過哪些嘗試。
可信的 Walk-Forward 報告應該呈現什麼?
除了報酬,也要一併報告設定:訓練與測試日期、視窗移動頻率、標籤涵蓋期間、暖機處理方式、界線上的持倉規則,以及測試過多少種設定。逐一呈現每個折次和整體結果。若亮眼的總成績來自一個幸運視窗,解讀方式應該不同於在各種條件下反覆出現的溫和成果。
Walk-Forward 測試能為策略研究帶來有用的紀律,但關鍵在界線規則與決策紀錄。把這些做好,測試才能讓你了解研究流程可能如何隨時間推進。忽略這些細節,Walk-Forward 這個標籤就只是在已經看過未來的結果上裝飾一番。
← 所有文章


