Rohkemate turgude lisamine strateegiaotsingusse võib muuta parima taganttesti tulemuse tugevamaks, samal ajal kui tõendid selle kasuks muutuvad nõrgemaks. Pärast sümbolite lisamist tõusnud Sharpe’i näitajat peetakse sageli hajutamise märgiks; kui otsisid nende sümbolite seast parimat tulemust, suurendasid ka võimalusi õnne peale sattuda.
See eristus on oluline nii siis, kui agent pakub välja sadu signaale, kui ka siis, kui uurija katsetab käsitsi vaid mõnda. Otsinguruumi kuuluvad kõik turu, ajaraami, tunnuse ja parameetri kombinatsioonid, mille tulemused mõjutasid lõplikku valikut. „Rakendasime ainult ühe strateegia” ei ütle, mitu kandidaati valikus osales.
Miks võib suurem turgude universum parimat Sharpe’i näitajat paisutada?
Kujutle, et katsetad sama strateegiamalli 40 omavahel seostamata turul. Oletame lihtsustuseks, et iga turu tegelik Sharpe’i näitaja on null ja iga hinnangulise Sharpe’i standardviga on 0.5. Hinnangud kõiguvad nulli ümber. Vali aga neist suurim ning see on tavaliselt positiivne lihtsalt seetõttu, et valisid maksimumi.
Ligikaudse normaaljaotuse eelduse korral jääb 40 sõltumatu mürahinnangu suurim väärtus eeldatavasti nullist umbes 1.3 standardvea võrra kõrgemale: selles näites ligikaudu 0.65 Sharpe’i ühikut. Täpne arv sõltub sõltuvusest, valimi pikkusest ja tootluste jaotusest. Oluline on see, et valik tekitab liigset optimismi isegi siis, kui ühelgi strateegial eelist pole.
Pea otsingupäevikut. Pane kirja iga kontrollitud turg ja kandidaat, sealhulgas ebaõnnestunud käivitused ning kõrvale jäetud variandid. Lõpliku strateegia katsete arv sõltub sellest, mis valikut mõjutas, mitte sellest, mitu faili pärast koristamist alles jäi.
Turud pole sõltumatud mündivisked. BTC ja ETH liiguvad sageli koos; kahel aktsiaindeksil võib olla suurem osa riskist ühine. See vähendab sõltumatute katsete tegelikku arvu, kuid ei kaota probleemi. Pealegi võivad korreleerunud turud erineda tasude, rahastamise, likviidsuse ja signaali toimimise kellaaegade poolest.
Kas rohkemate turgude katsetamine läheb mitmikkontrolli alla?
Läheb, kui kasutad tulemusi selle otsustamiseks, mida alles jätta. Kui algne hüpotees oli „see reegel tabab rahastamise mõju peamistel tähtajatutel lepingutel”, on turgude võrdlemine osa selle hüpoteesi kontrollimisest. Kui katsetad 50 turgu, leiad parima ja sõnastad seejärel hüpoteesi selle käitumise põhjal, on universumi valikust saanud osa optimeerimisest.
Ette määratud ja tulemuste nägemise järel valitud laiuse vahel on oluline erinevus. Kindlaks määratud korv näitab, kas idee on valitud valdkonnas vastupidav. Korv, mida laiendatakse seni, kuni ühe sümboli omakapitalikõver silma paistab, on otsingumeetod. Mõlemad võivad olla põhjendatud uuringud, kuid vastavad eri küsimustele.
| Uuringu valik | Mida see saab näidata | Mida see üksi tõendada ei saa |
|---|---|---|
| Eelnevalt määratud korv, kõiki turge käsitletakse võrdselt | Kas reegel toimib valitud turgudel | Kas korv esindab kõiki kaubeldavaid turge |
| Pärast katseid valitud parima tootlusega turg | Milline katsetatud turg andis ajalooliselt tugevaima tulemuse | Et valitud Sharpe’i näitaja on kallutamata hinnang |
| Enne otsingut kõrvale jäetud turud | Kas fikseeritud reegel kandub üle puutumata turgudele | Et tulevikuolud vastavad kontrollvalimi tingimustele |
Kuidas kontrollida, kas eelis kandub üle uutele turgudele?
Külmuta uuringuvalikud enne kontrollvalimi avamist. See tähendab signaali määratlust, parameetreid, universumi reegleid, tasakaalustamise ajakava ja tehingute teostamise eeldusi. Seejärel hinda muutmata strateegiat turgudel, mis neid valikuid ei mõjutanud.
Oletame näiteks, et krüptoturgude momentum-reegel töötati välja BTC ja ETH tähtajatutel lepingutel kuni 2023. aastani. Võid jätta kõrvale hulga teisi likviidseid tähtajatuid lepinguid, valides need reegli alusel, mis kasutab ainult enne testiperioodi kättesaadavat teavet, ning jätta need kogu häälestamise ajaks kõrvale. Rakenda fikseeritud reeglit nende lepingutega 2024. ja 2025. aastal. Arvesta iga kauplemiskoha tegeliku tasutaseme, rahastamismaksete, lepingu tingimuste ja põhjendatud hinnamõju eeldusega; turuspetsiifilisi kauplemiskulusid eirav ülekandetest võib pidada kulude erinevust ekslikult signaali läbikukkumiseks või selle hoopis varjata.
Esita kontrollvalimisse kuuluvate turgude tulemuste jaotus, mitte ainult koondportfelli Sharpe’i näitaja. Koondportfell võib varjata asjaolu, et peaaegu kogu tootlus tuli ühelt turult. Näita iga turu netotulemust, tehingute arvu, langust ja suurima turu panust kogukasumisse või -kahjumisse (P&L). Kui reegel toimib ainult ühe lepinguga, nimeta tulemus lepinguspetsiifiliseks.
Hoia ausana ka ajapõhine jaotus. Turg võib olla puutumata, kuid selle andmeperiood võib kattuda sama tururežiimiga, mis andis arendusetapis hea tulemuse. Turgudeülene kontrollvalim küsib, kas reegel kandub üle instrumentide vahel; hilisema perioodi kontrollvalim küsib, kas see kandub üle ajas. Need on eri testid ning hea tulemus ühes ei asenda teist.
Mis siis, kui strateegia peakski kasutama rohkem turge?
Siis lisa need, aga määra, kuidas seda teha. Portfellireegel, mis kaupleb igal sobival turul kindla signaali alusel, erineb võistlusest, kus võidab ajalooliselt parima tulemusega turg. Sobivus tuleb määrata tulevast tootlust vaatamata: näiteks kindlal ajahetkel kehtinud likviidsuslävendi ja minimaalse ajaloonõude põhjal. Ka liikmelisuse muutustel peavad olema ajatemplid, muidu võib praegune „likviidsete turgude” nimekiri tuua vanasse taganttesti tänased ellujääjad.
Kriitikutel on õigus, et kitsas universum võib anda hapra strateegia ning laiaulatuslik katsetamine on väärtuslik vastupidavuse kontroll. Lahendus pole turgude katsetamise vältimine. Erista idee avastamiseks kasutatud turud turgudest, mida kasutatakse fikseeritud idee proovilepanekuks, ning arvesta avastustöö tõendite hulka.
Suurem universum võib aidata strateegial laborist väljaspool vastu pidada. Samuti võib see aidata õnnelikul taganttestil labori valikuvõistluse võita. Otsingupäevik ja kontrollvalim aitavad mõista, kumba lugu sinu Sharpe’i näitaja toetab.
← Kõik postitused


