ארבעה מספרים יכולים לספר סיפור לא נוח: Sharpe של 1.4 בבדיקת Walk-Forward, 312 עסקאות היסטוריות, 46 עסקאות במסחר מדומה ופער של 18 נקודות בסיס בין מחירי הביצוע במסחר המדומה ובבדיקה לאחור. ה-Sharpe זוכה לכותרת. ייתכן שדווקא 18 נקודות הבסיס מסבירות למה האסטרטגיה מרגישה אחרת, עוד לפני שהצטבר מספיק ניסיון במסחר מדומה כדי להעריך את הביצועים שלה.
בדיקת Walk-Forward שואלת אם תהליך מחקר היה יכול לבחור אסטרטגיה על סמך נתוני עבר, ואז להעריך אותה על נתונים מאוחרים יותר. מסחר מדומה בוחן אם מערכת פועלת, עם הנתונים, השעונים, הלוגיקה של הפקודות והביצועים הנוכחיים שלה, מתנהגת כמו התהליך שנבדק. אלו שאלות קשורות, אבל הראשונה לא מספקת אוטומטית תשובה לשנייה.
מה אימות Walk-Forward באמת מבסס?
נניח שמאמנים או בוחרים אסטרטגיה על נתונים של 6 חודשים, ואז מעריכים אותה על החודש הבא. מזיזים את החלון קדימה וחוזרים על התהליך. אם כל חודש בדיקה נשאר מחוץ לתהליך הבחירה המתאים לו, התרגיל מספק ראיות לגבי הביצועים בסדרה של תנאים היסטוריים.
הוא לא מבסס שמסחר מדומה ישחזר את אותן החלטות או את אותם ביצועים. הבדיקה ההיסטורית עשויה להשתמש בנרות שהושלמו, בלוח עמלות קבוע ובמודל מפושט של פקודות שוק. תהליך המסחר המדומה בזמן אמת קולט נתונים כשהם מגיעים ושולח פקודות מדומות במסלול אחר. אחד מהם יכול להיות תקין, ובכל זאת ייתכן חוסר התאמה ביניהם.
לכן העובדה שיש 46 עסקאות במסחר המדומה לעומת 312 במדגם ה-Walk-Forward אינה מספיקה, כשלעצמה, כדי לקבוע מסקנה. בדקו את חלון ההשוואה, את תדירות האותות, את הפוזיציות הפתוחות בנקודות הגבול, ואת השאלה אם שתי הספירות משתמשות באותה הגדרה של עסקה. הרצת מסחר מדומה של 6 שבועות לא יכולה להשתוות בספירת העסקאות לבדיקות מתגלגלות של שנה.
למה פער הביצוע חושף כל כך הרבה?
כדאי לפרק פער ממוצע של 18 נקודות בסיס לגורמים לפני שמפרשים את עקומת ההון במסחר המדומה. האם מודדים את ההפרש בין מחיר הביצוע שהבדיקה לאחור הניחה למחיר הביצוע של הסימולטור, או בין מחיר האמצע ברגע קבלת ההחלטה למחיר הביצוע במסחר המדומה? אלו מדידות שונות. תעדו בנפרד את מחיר ההחלטה, מחיר הגעת הפקודה, הביצוע המדומה, העמלות וכל תשלום מימון.
| ההבדל שנצפה | הבדיקה הראשונה | למה זה חשוב |
|---|---|---|
| פחות עסקאות במסחר המדומה | חותמות זמן של אותות וכללי זכאות | נתון חסר או מתעכב עלול למנוע קבלת החלטות |
| אותן עסקאות, ביצועים גרועים יותר | סוג הפקודה, המרווח, ההשפעה על השוק ומדרגת העמלות | ייתכן שהבדיקה לאחור מניחה מסלול ביצוע זול יותר |
| גדלי פוזיציה שונים | מזומן, מכפיל החוזה ועיגול | אי התאמות קטנות ביחידות מצטברות לאורך הפקודות |
| סטייה אחרי הפעלה מחדש | הפוזיציה והפקודות הממתינות לאחר שחזור | ייתכן שתהליך המסחר המדומה יתחדש ממצב שונה |
לדוגמה, בדיקה לאחור שקונה בפתיחה של הנר הבא עשויה להיות דומה לפקודת שוק במסחר מדומה, כשהמכשיר נזיל. אבל אם הפקודה במסחר המדומה מגיעה אחרי תנועה חדה, הפער כולל גם את התזמון ואת תנועת השוק, לצד עלות הביצוע. הכינוי „החלקה” לכל 18 נקודות הבסיס מסתיר את הסיבה.
איך משווים בין מסחר מדומה לבדיקת Walk-Forward?
התחילו בהחלטות, המשיכו לפקודות ואז לביצועים. עבור כל החלטה במסחר המדומה, הריצו מחדש את אותה גרסת אסטרטגיה על אותה היסטוריית קלט והשוו מה היא ידעה באותו רגע. רישום שימושי לבדיקת התאמה כולל:
- גרסת האסטרטגיה והפרמטרים, כולל חלון הבחירה שהפיק אותם.
- ערכי קלט, עם שעת האירוע וגם שעת הזמינות.
- אות, פוזיציית יעד, פוזיציה נוכחית והפקודה המוצעת.
- מגבלות פקודות, עמלות, מימון ופרטי הביצוע המדומה.
- מצב המזומן והפוזיציה לפני הביצוע ואחריו.
אם האותות שונים, בדקו את תזמון הנתונים ואת גרסאות הקוד. אם האותות תואמים אבל הפקודות שונות, בדקו את גודל הפוזיציה, את כללי הזירה ואת מצב התיק. אם הפקודות תואמות אבל הביצועים שונים, בדקו את הנחות הביצוע. הפרידו בין השכבות האלה; אחרת מספר ביצועים יחיד יוביל אתכם לחפש במקום הלא נכון.
מתי הסטייה מעידה שהאסטרטגיה נשברה?
אחרי שמוודאים שהתהליך תואם, השוו תוצאות לאורך תקופה משותפת משמעותית ובחנו את ההתנהגות שהאסטרטגיה אמורה להציג. קומץ עסקאות במסחר המדומה יכול לחשוף במהירות חותמת זמן שבורה או מסלול פקודות תקול. הוא לא יכול לומר לכם באופן אמין שהתשואה הממוצעת של אסטרטגיה השתנתה. לשם כך דרושות מספיק תצפיות, והמספר הנדרש תלוי במידת הרעש וההתקבצות של התשואות שלה.
גם תנאי השוק יכולים להשתנות. התרחבות של המרווח או מעבר מתמשך של המימון לתנאים שליליים עלולים לפגוע באסטרטגיה, גם אם כל החלטה תואמת. זהו שינוי אמיתי בתנאי המסחר, ולא באג באימות. תעדו את העלויות ואת החשיפות לצד התשואות, כדי שאפשר יהיה לראות את ההבדל.
אימות Walk-Forward מספק ראיות לגבי תהליך בחירה לאורך תקופות היסטוריות. מסחר מדומה מספק ראיות לגבי המערכת הפועלת בתנאים שנצפו. כשהתוצאות שלהם סוטות, מצאו קודם את הנקודה המוקדמת ביותר שבה הרשומות שלהם אינן תואמות. לא פעם, המספר המפתיע הוא לא ה-Sharpe. זהו ההבדל הקטן בביצוע או בנתונים שגורם לשני הניסויים לענות על שאלות שונות.
← כל הפוסטים
