Ένα παγωμένο στιγμιότυπο δεδομένων αγοράς δεν αρκεί για να είναι αξιόπιστο ένα backtest. Μπορεί να αναπαράγει το ίδιο αποτέλεσμα, ενώ κρύβει ότι ο πάροχος άλλαξε τις εισόδους που το παρήγαγαν.
Κρατήστε το στιγμιότυπο. Έπειτα κρατήστε ένα αρχείο καταγραφής αλλαγών που να δείχνει τι μεταβλήθηκε, πότε μεταβλήθηκε και αν αυτό είχε σημασία για τη στρατηγική. Αυτό είναι ιδιαίτερα σημαντικό όταν η έρευνά σας χρησιμοποιεί διορθωμένες συναλλαγές, αναθεωρημένα θεμελιώδη στοιχεία, ανακατασκευασμένα δεδομένα χρηματοδότησης ή ιστορικό που ο πάροχος ανανεώνει αθόρυβα.
Πώς μπορεί ένα αναπαραγώγιμο backtest να σας παραπλανήσει;
Ας υποθέσουμε ότι κατεβάζετε πέντε χρόνια ωριαίων bars τη Δευτέρα και εκτελείτε μια στρατηγική. Την Παρασκευή, ο πάροχος έχει διορθώσει μια λανθασμένη συναλλαγή, έχει προσαρμόσει μια εταιρική πράξη ή έχει συμπληρώσει ένα κενό. Το αποθηκευμένο αρχείο εξακολουθεί να παράγει ακριβώς το αποτέλεσμα της Δευτέρας. Αυτό είναι αναπαραγωγιμότητα. Αν όμως εκτελέσετε ξανά τη στρατηγική χρησιμοποιώντας το τρέχον ιστορικό του παρόχου, μπορεί να πάρετε διαφορετικό αποτέλεσμα χωρίς να έχετε καταγράψει τον λόγο.
Το πρόβλημα δεν περιορίζεται σε θεαματικές διορθώσεις. Ένα μόνο τροποποιημένο υψηλό μπορεί να ενεργοποιήσει ένα stop· ένα αναθεωρημένο κλείσιμο μπορεί να περάσει έναν δείκτη πάνω από το όριό του. Σε ένα ευρύ σύμπαν, το ιστορικό ενός συμβόλου μπορεί να αλλάξει την κατάταξή του και να βγάλει ένα άλλο περιουσιακό στοιχείο από το χαρτοφυλάκιο. Το τελικό Sharpe μπορεί να μεταβληθεί ακόμη κι όταν ο κώδικας της στρατηγικής και οι ρυθμίσεις της είναι πανομοιότυπα.
Ένα hash αρχείου σάς λέει ότι δύο αρχεία διαφέρουν. Δεν σας λέει αν μια προσαρμογή λόγω split άλλαξε τιμές 40 ετών, αν ο πάροχος διόρθωσε τρεις συναλλαγές ή αν ένας parser μετέτρεψε ένα κενό πεδίο σε μηδέν.
Τι πρέπει να περιλαμβάνει ένα αρχείο καταγραφής αλλαγών δεδομένων αγοράς;
Καταγράψτε τις αλλαγές στη μικρότερη χρήσιμη μονάδα, μαζί με αρκετό πλαίσιο ώστε να μπορείτε να αναπαράγετε την επηρεασμένη έρευνα. Για μια ροή bars, αυτό συνήθως σημαίνει το χρηματοπιστωτικό μέσο, το χρονικό διάστημα, την ώρα του συμβάντος, τις προηγούμενες και τις νέες τιμές, την πηγή και την ώρα που παρατηρήσατε την ενημέρωση. Διατηρήστε το αρχικό payload όταν το παρέχει ο πάροχος.
| Καταγραφή | Γιατί να τη διατηρείτε | Παράδειγμα |
|---|---|---|
| Έκδοση πηγής ή ώρα ανάκτησης | Προσδιορίζει την κατάσταση του παρόχου που χρησιμοποιήθηκε | Στιγμιότυπο που ανακτήθηκε στις 2026-11-02 08:15 UTC |
| Πεδίο που άλλαξε και παλιές/νέες τιμές | Δείχνει τι μεταβλήθηκε πραγματικά | ETHUSDT 1h high: 3,412.10 → 3,418.60 |
| Κατηγοριοποίηση αλλαγής | Διαχωρίζει τις διορθώσεις από τους μετασχηματισμούς | Διόρθωση καθυστερημένης συναλλαγής, προσαρμογή λόγω split, συμπλήρωση ιστορικών δεδομένων |
| Έκδοση pipeline και σχήματος | Διακρίνει τις αλλαγές στην πηγή από τη δική σας επεξεργασία | Normalizer v7, σχήμα προσαρμοσμένων bars v3 |
Για μεγάλα σύνολα δεδομένων, αποθηκεύστε αμετάβλητα στιγμιότυπα και ένα συνοπτικό manifest με τα checksums τους, τις εκδόσεις των πηγών και τις ώρες ανάκτησης. Προσθέστε διαφορές σε επίπεδο γραμμής για τα διαμερίσματα που άλλαξαν. Έτσι έχετε μια πρακτική μέση λύση: η πλήρης αναπαραγωγή παραμένει δυνατή χωρίς να γράφετε κάθε αμετάβλητη γραμμή σε δεύτερο πίνακα ελέγχου.
Πώς μετρώ αν έχει σημασία μια διόρθωση;
Μην αρκεστείτε στο να μετρήσετε τις γραμμές που άλλαξαν. Εκτελέστε ξανά την επηρεασμένη στρατηγική με τα παλιά και τα νέα δεδομένα, χρησιμοποιώντας τον ίδιο κώδικα, τις ίδιες παραμέτρους, τις ίδιες χρεώσεις και τις ίδιες παραδοχές εκτέλεσης. Συγκρίνετε τις αποφάσεις και τη διαδρομή προς το αποτέλεσμα.
- Εντοπίστε τα επηρεασμένα χρηματοπιστωτικά μέσα και τις ώρες των συμβάντων από τη διαφορά.
- Βρείτε ποια χαρακτηριστικά, σήματα, εντολές ή βάρη χαρτοφυλακίου χρησιμοποιούν αυτές τις εγγραφές.
- Αναπαράγετε το μικρότερο έγκυρο χρονικό παράθυρο, συμπεριλαμβάνοντας το lookback και την κατάσταση των ανοιχτών θέσεων.
- Συγκρίνετε εντολές, εκτελέσεις, έκθεση, κύκλο εργασιών, drawdown και τελική απόδοση.
Για παράδειγμα, μια διόρθωση παρόχου που μεταβάλλει ένα υψηλό 1-minute κατά $0.02 μπορεί να αφορά ένα εκατομμύριο γραμμές και να μην επηρεάζει καθόλου μια στρατηγική ημερήσιας ορμής. Ένα διορθωμένο bar σε επίπεδο stop μπορεί να έχει μεγαλύτερη σημασία. Μετρήστε τον αντίκτυπο στις αποφάσεις· ο αριθμός των εγγραφών που άλλαξαν είναι κακός δείκτης.
Κρατήστε χωριστά δύο ερωτήματα: «Μπορώ να αναπαράγω το αποτέλεσμα από τα δεδομένα που αποθήκευσα;» και «Θα ήταν διαθέσιμη αυτή η έκδοση δεδομένων στη στρατηγική εκείνη τη στιγμή;» Ένα αρχείο καταγραφής αλλαγών βοηθά να απαντηθούν και τα δύο, αλλά το δεύτερο απαιτεί επίσης καταγραφές διαθεσιμότητας σε συγκεκριμένο χρονικό σημείο.
Πόσο κοστίζει αυτό και πότε αξίζει;
Η παρακολούθηση αλλαγών προσθέτει κόστος αποθήκευσης, εργασία κατά την εισαγωγή δεδομένων και λειτουργικές αποφάσεις. Οι πάροχοι μπορεί να μην εκθέτουν σταθερές εκδόσεις, ενώ ορισμένες ιστορικές ροές δεδομένων ανακατασκευάζονται περιοδικά χωρίς σαφή ειδοποίηση διόρθωσης. Δεν μπορείτε να καταγράψετε μια αλλαγή που δεν παρατηρείτε ποτέ.
Ξεκινήστε από τα σημεία όπου οι αναθεωρήσεις μπορούν να αλλάξουν τα ερευνητικά συμπεράσματα: bars που χρησιμοποιούνται στη λογική stop, μετοχές προσαρμοσμένες για εταιρικές πράξεις, θεμελιώδη δεδομένα συγκεκριμένου χρονικού σημείου και σειρές δεδομένων χρηματοδότησης ή ανοιχτού ενδιαφέροντος που ανακατασκευάζονται. Για ευρεία και σταθερά σύνολα δεδομένων, μπορεί να αρκεί ένα ημερήσιο manifest μαζί με checksums ανά διαμέρισμα. Προσθέστε διαφορές σε επίπεδο πεδίου όπου οι ενημερώσεις είναι συχνές ή οι αποφάσεις συναλλαγών επηρεάζονται από μεμονωμένες εγγραφές.
Οι επικριτές έχουν δίκιο ότι ένα πλήρες, διαρκές αρχείο κάθε απάντησης παρόχου μπορεί να γίνει ακριβό και να εξακολουθεί να μην αποτυπώνει τι γνώριζε η πηγή εκείνη τη στιγμή. Η λύση είναι να περιορίσετε τον έλεγχο στα δεδομένα και στις αποφάσεις που έχουν σημασία και να καταγράψετε τα κενά. Ένα στιγμιότυπο σάς επιτρέπει να επαναλάβετε ένα πείραμα. Ένα αρχείο καταγραφής αλλαγών σάς επιτρέπει να εξηγήσετε γιατί μεταβλήθηκε το αποτέλεσμά του.
← Όλα τα άρθρα
