Walk-forward testinin pratikte yanıtlaması gereken soru şudur: Bir stratejiyi tekrar tekrar yalnızca geçmiş verilerle uyarlayıp sonraki, görülmemiş veri aralığında test etseydiniz, nasıl performans gösterirdi? Yöntem basit görünür. Bir eğitim penceresi seçer, stratejiyi uyarlar, ileriye dönük test eder, ardından pencereyi kaydırıp işlemi tekrarlarsınız.
Sorun şu ki, pencereler dizisi disiplinli göründüğü hâlde sınırları aşan bilgi sızıntısı yaşanabilir. Bunun etkisini şüphe uyandıracak kadar düzgün OOS getirilerinde, tuhaf biçimde istikrarlı görünen parametre ayarlarında ve test dönemi başlamadan önce açılmış işlemlerin o döneme yazılmasında gördüm.
Hata 1: Test penceresini tertemiz bir başlangıç saymak
Test penceresi 1 Haziran'da başlıyor. Sinyal 50 günlük hareketli ortalama kullandığından, backtest hesaplamayı başlatmak için Mayıs fiyatlarını yüklüyor. Bu makul: canlı bir strateji de indikatör durumunu taşımaya devam ederdi. Ancak test dönemi getirisi 1 Mayıs'tan itibaren birikmeye başlıyorsa, ısınma günleri performansa dönüşmüş demektir.
Aynı sınır sorunu pozisyonlarda da görülür. Diyelim ki strateji 29 Mayıs'ta bir işlem açıp 3 Haziran'da kapatıyor. Kâr test dönemi performansına sayılmalı mı? Ancak simülasyon sınırda zaten açık olan pozisyonları nasıl ele aldığını açıkça tanımlıyorsa. Aksi durumda test, eğitim verileriyle seçilmiş bir girişi devralıp bundan doğan kazancı teste yazabilir.
| Sınır öğesi | Güvenli uygulama | Yaygın hata |
|---|---|---|
| İndikatör geçmişi | Durum için önceki barları yükleyin; puanlamayı test başlangıcında başlatın | Isınma getirilerini test performansına katmak |
| Açık pozisyonlar | Belirtilmiş bir kurala göre kapatın, taşımaya devam edin veya hariç tutun | Test öncesi bir girişi teste yazmak |
| Emirler ve gerçekleşmeler | Kararın ve gerçekleşmenin test dönemi içinde olmasını şart koşun | Sınırdan önce oluşturulmuş bir emri gerçekleştirmek |
Temiz bir ayrım için yalnızca tarih değil, durumla ilgili bir kural da gerekir. Canlı bir süreçte bulunacak indikatör geçmişini koruyun, ancak yalnızca değerlendirmek istediğiniz dönemi puanlayın. Açık pozisyon ve emirlerle ilgili kuralı açıkça belirleyin ve her kaydırmada aynı kuralı uygulayın.
Hata 2: İşlemlerin arada embargo olmadan ayrımı aşmasına izin vermek
Örtüşen etiketler başka bir sızıntı kaynağıdır. Sonucu sonraki beş işlem gününün getirisi olan sinyallerle eğitilmiş bir model düşünün. Mayısın son gününe ait bir eğitim örneği, tahmininin doğru olup olmadığını belirlemek için Haziran fiyatlarını kullanır. Test 1 Haziran'da başlıyorsa eğitim, test sonucunun bir kısmını çoktan kullanmış demektir.
Bunu gözden kaçırmak kolaydır, çünkü özellik satırının tarihi 31 Mayıs'tır. Etiket geleceğe uzanır. Yalnızca satır tarihlerine uygulanan zaman ayrımı bu örtüşmeyi yakalayamaz.
Sonuç pencereleri test dönemine uzanan eğitim örneklerini çıkarın. Etiket ufkuna ve özelliklerin nasıl oluşturulduğuna bağlı olarak eğitimle test arasına da boşluk koyun. Genellikle embargo adı verilen bu boşluk, bilgi veya sonuçların örtüştüğü süreye uygun olmalıdır. Beş günlük bir etiket, sırf grafiği daha temiz gösteriyor diye bir günlük boşluğu haklı çıkarmaz.
Her eğitim örneğinin kapsadığı tam zaman aralığını kaydedin: özelliklerin geriye dönük bakış süresi, karar zamanı ve sonuç penceresi. Yalnızca her satırın yanındaki tarihe göre değil, bu aralıklara göre ayırın.
Hata 3: Her fold'u gördükten sonra kazananı seçmek
İşte en cazip hata. 40 parametre kümesiyle walk-forward testleri yapıyorsunuz. Bir kombinasyon birkaç fold boyunca iyi görünüyor, siz de onu seçip aynı fold'ları genellenebilirliğe kanıt olarak sunuyorsunuz.
Her fold, kendi modeli uyarlandığında görülmemiş olabilir. Ancak strateji tasarımı, bütün fold'ları inceledikten sonra seçilmiştir. Test sonuçları artık bir araştırma kararına yön vermiştir; dolayısıyla deney düzeyinde eğitim sürecinin parçasıdır.
Her değerlendirmeden önce hangi seçimlerin yapıldığını tarihli bir kayıtla tutun. Parametreleri, özellikleri, piyasaları veya test penceresini seçmek için walk-forward sonuçlarını kullanıyorsanız, son bir değerlendirme için dokunulmamış bir dönemi ayırın. Bu dönem, seçimler sabitlendikten sonra yalnızca bir kez açılır. Gördükten sonra dönüp ayar yaparsanız artık nihai bir test değildir.
Burada sıradan ama önemli bir ayrıntı var: sonuçlar gelmeden önce deney günlüğünü kaydedin. Umut verici bir çalıştırmadan sonra düzenlenen bir elektronik tablo, gerçekte ne denediğinizin kötü bir kaydıdır.
Güvenilir bir walk-forward raporunda neler olmalı?
Getirilerin yanında kurulum ayrıntılarını da raporlayın: eğitim ve test tarihleri, kaydırma sıklığı, etiket ufku, ısınma uygulaması, sınırdaki pozisyon politikası ve denenen konfigürasyon sayısı. Her fold'u toplam sonuçla birlikte gösterin. Tek bir şanslı pencereden gelen güçlü toplam, farklı koşullarda tekrarlanan mütevazı sonuçlardan farklı yorumlanmalıdır.
Walk-forward testi, strateji araştırmasına yararlı bir disiplin kazandırabilir; ancak bu disiplin sınır kurallarında ve karar kayıtlarında yatar. Bunları doğru uyguladığınızda test, bir araştırma sürecinin zaman içinde nasıl ilerleyebileceği hakkında fikir verebilir. Bunları atlarsanız walk-forward etiketi, geleceği çoktan görmüş bir sonucun üzerindeki süsten ibaret kalır.
← Tüm yazılar


