يمكن لوكيل استراتيجية يعمل بالذكاء الاصطناعي أن ينتج اختبارًا تاريخيًا صالحًا، بينما يستخدم معلومات لم تكن متاحة وقت تنفيذ الصفقات المفترض. تعمل الشيفرة، ويبدو منحنى رأس المال معقولًا، وربما تكون الإشارة منطقية أيضًا. لكن طابعًا زمنيًا أو عملية ربط أو حقل بيانات مُعدّلًا قد يمنحه، من دون أن يلاحظ أحد، إجابة الغد.
الحل هو جعل وقت إتاحة البيانات جزءًا من قواعد البحث. ينبغي أن تكون لكل مُدخل إجابة واضحة عن سؤالين: إلى أي وقت تشير هذه القيمة، ومتى كان بإمكان الاستراتيجية أن تعرفها لأول مرة؟
كيف يظهر تحيز الاطلاع على المستقبل في استراتيجية ولّدها الذكاء الاصطناعي؟
أوضح الأمثلة إشارة محسوبة من سعر إغلاق الشمعة نفسها، يتبعها تنفيذ عند ذلك الإغلاق. إذا احتاجت الاستراتيجية إلى سعر الإغلاق لاتخاذ القرار، فلا يمكنها التداول أيضًا بهذا السعر. لكن الوكلاء كثيرًا ما ينشئون حالات أدق من ذلك عند ربط مصادر البيانات أو اختيار قيم افتراضية مريحة.
لنفترض أن نموذجًا يحسب متوسطًا متحركًا لـ 20 شمعة عند إغلاق كل دقيقة، ويفتح مركزًا عندما يتجاوز الإغلاق هذا المتوسط. إذا نفّذ الاختبار التاريخي الصفقة عند الإغلاق نفسه، فهذا يعني أنه استخدم آخر صفقة في الشمعة قبل أن تصبح متاحة للاستراتيجية. قد يكون تأخير الأمر إلى افتتاح الشمعة التالية تقريبًا معقولًا، لكن الأمر السوقي يظل بحاجة إلى احتساب الرسوم والأثر السعري.
والآن، لنجعل الميزة قيمة أساسية يومية لسهم أو لقطة من الفائدة المفتوحة في العملات المشفرة. قد يشير تاريخ الصف إلى يوم الاثنين، لكن ربما لم تُنشر القيمة إلا بعد إغلاق يوم الاثنين، أو جرى تصحيحها لاحقًا. التاريخ ليس طابعًا زمنيًا لتوافر المعلومة.
كيف ينبغي أن أحدد الطوابع الزمنية لمدخلات الاستراتيجية؟
احتفظ بثلاثة أوقات على الأقل متى أتاحها المصدر: الفترة التي تصفها القيمة، ووقت نشر الجهة لها، ووقت استلام نظامك لها. ولا يجوز أن تتضمن مجموعة المعلومات المتاحة للاستراتيجية عند اتخاذ القرار إلا القيم التي أصبحت متاحة بحلول ذلك الوقت.
| الحقل | ما الذي يوضحه؟ | المطب الشائع |
|---|---|---|
| وقت الحدث | متى وقع حدث السوق؟ | استخدام إغلاق الشمعة قبل اكتمالها |
| وقت النشر | متى نشر المصدر هذه القيمة؟ | اعتبار وسم نهاية اليوم وقتًا للنشر عند الافتتاح |
| وقت الإدخال | متى أمكن لنظام البحث استهلاك البيانات؟ | تجاهل التأخير لدى المورّد أو في خط معالجة البيانات |
| وقت المراجعة | متى سُجّلت هذه النسخة أو صُحّحت؟ | إدراج السجل التاريخي المعدّل كما لو كان هو الأصل |
في استراتيجية تعمل على إطار 1-minute، لا يكون التأخير البالغ ثانية واحدة غير مؤثر تلقائيًا. يتوقف أثره على توقيت اتخاذ القرار والبيانات التي تستخدمها الإشارة. إذا كان المُدخل إحصاءً مكتملًا بالساعة، فقد لا يكون له أثر يُذكر. أما إذا كان اختلال دفتر الأوامر الملتقط قرب إرسال الأمر، فقد يقلب الصفقة.
هل يمكن لمخزن بيانات آنيّ حسب وقتها منع تسرّب المعلومات؟
يساعد ذلك إذا كان معنى «آنيّ حسب وقتها» هو إمكان استرجاع القيمة التي كانت معروفة عند وقت قرار تاريخي، بما فيها النسخة التي كانت سارية حينها. أما الجدول الذي لا يحتوي سوى تواريخ تاريخية، فقد يظل يتضمن قيمًا مصححة اليوم لتلك التواريخ.
احتفظ لكل سجل بفترة سريانه والطابع الزمني لتوافره، وخزّن المراجعات بدلًا من الكتابة فوقها. ثم اجعل الاستعلامات التاريخية صريحة: أعد أحدث نسخة كانت متاحة حتى وقت القرار المُحاكى. وهذا مهم خصوصًا للبيانات الأساسية، ومكونات المؤشرات، والإصدارات الاقتصادية، ومجموعات البيانات التي ينظفها المورّدون.
وثمة تعقيد تشغيلي غير لافت: لا يفيدك طابع زمني مثالي للنشر إذا تأخرت مهمة إدخال البيانات عشرين دقيقة. إذا لم يسجل المخزن التاريخي وقت الإدخال، فاستخدم تأخيرًا متحفظًا وصرّح بذلك. فالدقة التي لم يسجلها المصدر ليست سوى زينة.
ما الفحوصات التي تكشف تحيز الاطلاع على المستقبل قبل التداول الورقي؟
اطلب من وكيل البحث إنشاء خط زمني للميزات والأوامر إلى جانب الاختبار التاريخي. سجّل لكل قرار أحدث وقت لتوافر المصدر لكل ميزة، ووقت القرار، ووقت الأمر، ووقت التنفيذ المُحاكى. وارفض أي صف وصلت فيه إحدى المدخلات بعد اتخاذ القرار.
- أزِح الإشارات شمعة واحدة إلى الأمام وقارن النتائج. قد يكشف الانهيار الكبير عن اعتماد على توقيت الإغلاق إلى الإغلاق، لكنه يظل أداة تشخيصية لا دليلًا قاطعًا على التسرّب.
- اقتطع كل مصدر عند حد زمني تاريخي، وأعِد تشغيل خط المعالجة، ثم قارن الميزات الناتجة بالميزات التاريخية المخزنة.
- استبدل ميزة يُشتبه بها بقيمة ثابتة. إذا ظل الأداء شبه مطابق، فتحقق مما إذا كانت الشيفرة قد استخدمت السلسلة المقصودة فعلًا.
- مرّر ميزة مستقبلية يستحيل معرفتها عمدًا عبر خط المعالجة. ينبغي أن يفشل التحقق بوضوح عندما يتجاوز وقت توافرها وقت القرار.
لا تصادق هذه الفحوصات على الاستراتيجية. لكنها تُظهر افتراضات التوقيت المحددة وتكشف الطرق الشائعة التي قد تُنتهك بها.
هل يثبت التداول الورقي خلو الاختبار التاريخي من التسرّب؟
لا. قد يكشف التداول الورقي أن مسار البيانات الحي متأخر أو ناقص أو مختلف في محاذاته عن المسار التاريخي. لكنه لا يثبت أن ميزات التدريب القديمة عكست ما كان معروفًا وقتها. وقد يتوقف النموذج أيضًا عن الاستفادة من التسرّب ببساطة لأن المستقبل الذي رآه بالخطأ أصبح حاضرًا الآن.
استخدم التداول الورقي للتحقق من التطابق: قارن قيم الميزات الحية، والطوابع الزمنية للقرارات، وإنشاء الأوامر، والتنفيذات المُحاكاة بتعريفاتها في الاختبار التاريخي. وعندما تختلف، تتبّع المُدخل والساعة بدقة. ينجز فريق الوكلاء بحثًا مفيدًا حين يستطيع شرح مجموعة المعلومات التي استند إليها كل قرار. أما الفريق الذي لا يستطيع إلا أن يعرض عليك منحنى سلسًا، فقد تجاوز أصعب جوانب التدقيق.
→ جميع المقالات
