Menambah lebih banyak pasaran dalam carian strategi boleh menjadikan backtest terbaik kelihatan lebih kukuh, sedangkan buktinya semakin lemah. Sharpe yang lebih tinggi selepas menambah simbol sering dianggap sebagai kepelbagaian; jika anda mencari pemenang dalam kalangan simbol itu, anda juga meningkatkan peluang untuk mendapat hasil yang bertuah.
Perbezaan itu penting sama ada ejen mencadangkan ratusan isyarat atau penyelidik menguji beberapa pilihan secara manual. Ruang carian merangkumi setiap gabungan pasaran, rangka masa, ciri dan parameter yang hasilnya mempengaruhi pilihan akhir. “Kami hanya melancarkan satu strategi” tidak memberitahu anda berapa banyak calon yang diuji.
Mengapa semesta pasaran yang lebih besar boleh menaikkan Sharpe terbaik?
Bayangkan menguji templat strategi yang sama pada 40 pasaran yang tidak berkaitan. Demi memudahkan contoh, anggap Sharpe sebenar setiap pasaran ialah sifar dan setiap anggaran Sharpe mempunyai ralat piawai 0.5. Anggaran itu berayun di sekitar sifar. Namun, pilih nilai tertinggi dan biasanya nilainya positif semata-mata kerana anda memilih nilai maksimum.
Dengan anggaran normal kasar, nilai tertinggi daripada 40 anggaran hingar bebas dijangka berada sekitar 1.3 ralat piawai di atas sifar: kira-kira Sharpe 0.65 dalam contoh ini. Nilai tepat bergantung pada kebergantungan, panjang sampel dan taburan pulangan. Intinya, pemilihan menimbulkan optimisme walaupun tiada strategi yang mempunyai kelebihan.
Simpan log carian. Catat setiap pasaran dan calon yang diperiksa, termasuk larian yang gagal dan varian yang ditinggalkan. Bilangan percubaan bagi strategi akhir bergantung pada perkara yang mempengaruhi pilihan, bukan jumlah fail yang masih ada selepas pembersihan.
Pasaran bukan lambungan syiling yang bebas. BTC dan ETH sering bergerak seiring; dua indeks ekuiti mungkin berkongsi sebahagian besar risikonya. Ini mengurangkan bilangan efektif percubaan bebas, tetapi tidak menghapuskan masalah tersebut. Pasaran yang berkorelasi juga masih boleh berbeza dari segi yuran, pendanaan, kecairan dan waktu isyarat berfungsi.
Adakah menguji lebih banyak pasaran dikira sebagai ujian berbilang?
Ya, apabila anda menggunakan hasilnya untuk menentukan perkara yang dikekalkan. Jika hipotesis asalnya ialah “peraturan ini menangkap kesan pendanaan merentas perpetual utama,” meneliti pelbagai pasaran ialah sebahagian daripada pengujian hipotesis itu. Jika anda menguji 50 pasaran, mencari yang terbaik, kemudian merangka hipotesis berdasarkan tingkah lakunya, pemilihan semesta telah menjadi sebahagian daripada pengoptimuman.
Ada perbezaan penting antara keluasan yang ditetapkan lebih awal dengan keluasan yang dipilih selepas melihat hasil. Bakul tetap boleh menunjukkan sama ada sesuatu idea teguh merentas domain yang dinyatakan. Bakul yang diperluas sehingga satu simbol menghasilkan lengkung ekuiti yang menonjol ialah prosedur carian. Kedua-duanya boleh menjadi penyelidikan yang sah, tetapi menjawab soalan yang berbeza.
| Pilihan penyelidikan | Perkara yang boleh disokong | Perkara yang tidak dapat dibuktikan dengan sendirinya |
|---|---|---|
| Bakul yang ditetapkan lebih awal, layanan sama rata | Sama ada peraturan itu berfungsi merentas pasaran yang dipilih | Bahawa bakul itu mewakili setiap pasaran yang boleh didagangkan |
| Pasaran berprestasi terbaik dipilih selepas ujian | Pasaran yang diuji dengan hasil sejarah paling kukuh | Bahawa Sharpe terpilih itu ialah anggaran tanpa bias |
| Pasaran yang diketepikan sebelum carian | Sama ada peraturan yang dibekukan boleh diguna pakai pada pasaran yang tidak disentuh | Bahawa keadaan masa depan akan sama dengan data pegangan luar sampel |
Bagaimanakah saya menguji sama ada kelebihan boleh diguna pakai pada pasaran baharu?
Bekukan pilihan penyelidikan sebelum membuka data pegangan luar sampel. Ini merangkumi takrif isyarat, parameter, peraturan semesta, jadual pengimbangan semula dan andaian pelaksanaan. Kemudian, nilai strategi yang tidak diubah pada pasaran yang tidak mempengaruhi pilihan tersebut.
Sebagai contoh, katakan peraturan momentum kripto dibangunkan menggunakan perpetual BTC dan ETH sehingga 2023. Anda boleh mengetepikan beberapa perpetual cair yang lain, dipilih berdasarkan peraturan yang hanya menggunakan maklumat tersedia sebelum tempoh ujian, dan tidak menggunakannya dalam sebarang penalaan. Gunakan peraturan yang dibekukan itu pada kontrak berkenaan pada 2024 dan 2025. Sertakan tahap yuran sebenar setiap venue, bayaran pendanaan, spesifikasi kontrak dan andaian impak yang munasabah; ujian pemindahan tanpa kos dagangan khusus pasaran boleh tersalah anggap perbezaan kos sebagai kegagalan isyarat—atau menyembunyikannya.
Laporkan taburan merentas pasaran pegangan luar sampel, bukan Sharpe terkumpul sahaja. Portfolio terkumpul boleh menyembunyikan hakikat bahawa hampir semua pulangan datang daripada satu pasaran. Tunjukkan hasil bersih, bilangan dagangan dan susut nilai setiap pasaran, serta bahagian jumlah P&L yang disumbangkan oleh pasaran terbesar. Jika peraturan itu hanya berfungsi pada satu kontrak, nyatakan hasil itu khusus kepada kontrak tersebut.
Pastikan pemisahan masa juga telus. Sesuatu pasaran mungkin tidak disentuh, tetapi tempoh datanya bertindih dengan rejim yang sama yang mendorong prestasi pembangunan. Pegangan luar sampel merentas pasaran menguji sama ada peraturan itu boleh diguna pakai merentas instrumen; pegangan luar sampel bagi tempoh yang lebih lewat menguji sama ada peraturan itu boleh diguna pakai merentas masa. Kedua-duanya ujian berasingan, dan hasil yang kukuh pada satu ujian tidak menggantikan yang satu lagi.
Bagaimana jika strategi itu memang patut menggunakan lebih banyak pasaran?
Masukkan pasaran tersebut, tetapi tetapkan caranya. Peraturan portfolio yang berdagang di setiap pasaran yang layak berdasarkan isyarat tetap berbeza daripada pertandingan yang memilih pasaran dengan prestasi sejarah terbaik. Kelayakan patut ditentukan tanpa melihat prestasi masa depan: contohnya, melalui ambang kecairan berdasarkan maklumat pada ketika itu dan syarat sejarah minimum. Perubahan keahlian juga memerlukan cap masa, atau senarai “pasaran cair” semasa boleh memasukkan pemenang hari ini ke dalam backtest lama.
Pengkritik betul bahawa semesta yang sempit boleh menghasilkan strategi rapuh dan ujian yang luas ialah semakan keteguhan yang bernilai. Jawapannya bukan mengelak daripada menguji pasaran. Sebaliknya, asingkan pasaran yang digunakan untuk menemui idea daripada pasaran yang digunakan untuk menguji idea yang telah dibekukan, dan kira kerja penemuan itu sebagai sebahagian daripada bukti.
Semesta yang lebih besar boleh membantu strategi bertahan di luar makmal. Semesta itu juga boleh membantu backtest bertuah memenangi pertandingan pemilihan makmal. Log carian dan pegangan luar sampel menunjukkan cerita mana yang disokong oleh Sharpe anda.
← Semua catatan
