Vier Zahlen erzählen eine unangenehme Geschichte: ein Walk-Forward-Sharpe von 1.4, 312 historische Trades, 46 Paper-Trades und eine Differenz zwischen den Ausführungspreisen im Paper-Trading und im Backtest von 18 Basispunkten. Der Sharpe sorgt für die Schlagzeile. Die 18 Basispunkte könnten erklären, warum sich die Strategie anders anfühlt, bevor genügend Paper-Trading-Daten vorliegen, um ihre Performance zu beurteilen.
Beim Walk-Forward-Test wird geprüft, ob ein Forschungsprozess anhand vergangener Daten eine Strategie hätte auswählen und anschließend mit späteren Daten bewerten können. Beim Paper-Trading geht es darum, ob sich ein laufendes System mit seinen aktuellen Daten, Zeitangaben, Orderregeln und Ausführungen so verhält wie dieser getestete Prozess. Das sind verwandte Fragen, aber die erste beantwortet die zweite nicht automatisch.
Was belegt die Walk-Forward-Validierung tatsächlich?
Angenommen, du trainierst oder wählst eine Strategie anhand von sechs Monaten Daten aus und bewertest sie dann im darauffolgenden Monat. Verschiebe dieses Zeitfenster weiter und wiederhole den Vorgang. Wenn jeder Testmonat von der jeweiligen Auswahl ausgeschlossen bleibt, liefert dir das Hinweise auf die Performance unter verschiedenen historischen Bedingungen.
Damit ist nicht belegt, dass das Paper-Trading dieselben Entscheidungen oder Ausführungen reproduziert. Der historische Test verwendet möglicherweise abgeschlossene Kerzen, einen festen Gebührenplan und ein vereinfachtes Marktordermodell. Im laufenden Paper-Trading verarbeitet das System eintreffende Daten und übermittelt simulierte Orders über einen anderen Ablauf. Der eine Prozess kann solide sein, während der andere eine Diskrepanz aufweist.
Deshalb sind 46 Paper-Trades gegenüber 312 Trades in der Walk-Forward-Stichprobe für sich genommen kein Urteil. Prüfe den Vergleichszeitraum, die Signalfrequenz, offene Positionen an den Grenzen und ob beide Zählungen dieselbe Definition eines Trades verwenden. Ein sechswöchiger Paper-Trading-Lauf kann bei der Trade-Anzahl nicht mit einem Jahr an rollierenden Tests mithalten.
Warum ist die Ausführungsdifferenz so aufschlussreich?
Eine durchschnittliche Differenz von 18 Basispunkten solltest du aufschlüsseln, bevor du eine Paper-Trading-Kapitalkurve interpretierst. Wird sie zwischen der im Backtest angenommenen Ausführung und der Ausführung im Paper-Simulator gemessen oder zwischen dem Mittelkurs zum Entscheidungszeitpunkt und der Paper-Ausführung? Das sind unterschiedliche Messgrößen. Erfasse den Entscheidungskurs, den Order-Eingangskurs, die simulierte Ausführung, Gebühren und etwaige Funding-Zahlungen jeweils separat.
| Beobachtete Abweichung | Erste Prüfung | Warum es wichtig ist |
|---|---|---|
| Weniger Paper-Trades | Zeitstempel der Signale und Zulässigkeitsregeln | Ein fehlender oder verspäteter Input kann Entscheidungen verhindern |
| Gleiche Trades, schlechtere Ausführungen | Ordertyp, Spread, Markteinfluss und Gebührenstufe | Der Backtest nimmt möglicherweise einen günstigeren Ausführungsweg an |
| Abweichende Positionsgrößen | Cash, Kontraktmultiplikator und Rundung | Kleine Abweichungen bei den Einheiten summieren sich über mehrere Orders |
| Abweichung nach einem Neustart | Wiederhergestellte Position und ausstehende Orders | Der Paper-Trading-Prozess setzt möglicherweise mit einem anderen Zustand fort |
Zum Beispiel kann ein Backtest, der zum Eröffnungskurs des nächsten Balkens kauft, einer Market-Order im Paper-Trading bei einem liquiden Instrument recht nahekommen. Trifft die Paper-Order jedoch nach einer starken Kursbewegung ein, umfasst die Differenz neben den Ausführungskosten auch den Einfluss von Zeitverzögerung und Marktbewegung. Wenn du alle 18 Basispunkte als „Slippage“ bezeichnest, bleibt die Ursache verborgen.
Wie vergleiche ich Paper-Trading mit einem Walk-Forward-Test?
Beginne mit den Entscheidungen, gehe dann zu den Orders und anschließend zu den Ausführungen über. Spiele für jede Paper-Trading-Entscheidung dieselbe Strategieversion mit demselben Eingabeverlauf erneut ab und vergleiche, über welche Informationen sie zu diesem Zeitpunkt verfügte. Ein nützlicher Paritätsdatensatz umfasst:
- Strategieversion und Parameter, einschließlich des Auswahlzeitraums, aus dem sie hervorgegangen sind.
- Eingabewerte mit Ereigniszeit und Verfügbarkeitszeit.
- Signal, Zielposition, aktuelle Position und vorgeschlagene Order.
- Orderbeschränkungen, Gebühren, Funding und Details zur simulierten Ausführung.
- Cash- und Positionsstand vor und nach der Ausführung.
Wenn die Signale abweichen, prüfe den Datenzeitpunkt und die Codeversionen. Stimmen die Signale überein, aber die Orders nicht, prüfe Positionsgrößen, Börsenregeln und den Portfoliostand. Stimmen die Orders überein, aber die Ausführungen nicht, prüfe die Ausführungsannahmen. Halte diese Ebenen getrennt, sonst lässt dich eine einzelne Performancezahl an der falschen Stelle suchen.
Wann deutet die Abweichung auf eine fehlerhafte Strategie hin?
Sobald die Prozesskette übereinstimmt, vergleiche die Ergebnisse über einen aussagekräftigen gemeinsamen Zeitraum und prüfe, ob sich die Strategie wie vorgesehen verhält. Einige wenige Paper-Trades können einen fehlerhaften Zeitstempel oder Orderablauf schnell aufdecken. Sie sagen dir jedoch nicht zuverlässig, ob sich die durchschnittliche Rendite einer Strategie verändert hat. Dafür brauchst du genügend Beobachtungen; die erforderliche Anzahl hängt davon ab, wie volatil und gebündelt ihre Renditen sind.
Auch die Marktbedingungen können sich ändern. Ein breiterer Spread oder dauerhaft ungünstiges Funding kann der Strategie schaden, selbst wenn jede Entscheidung übereinstimmt. Das ist eine tatsächliche Veränderung der Handelsbedingungen und kein Validierungsfehler. Erfasse Kosten und Risiken zusammen mit den Renditen, damit der Unterschied erkennbar bleibt.
Die Walk-Forward-Validierung liefert Hinweise darauf, wie ein Auswahlprozess in historischen Zeiträumen funktioniert. Paper-Trading liefert Hinweise darauf, wie sich das laufende System unter den beobachteten Bedingungen verhält. Wenn die Ergebnisse voneinander abweichen, suche zuerst nach dem frühesten Punkt, an dem ihre Aufzeichnungen auseinanderlaufen. Die überraschende Zahl ist oft nicht der Sharpe. Es ist die kleine Abweichung bei der Ausführung oder den Daten, durch die beide Experimente unterschiedliche Fragen beantworten.
← Alle Beiträge
