Pievienojot stratēģijas meklēšanai vairāk tirgu, labākais atpakaļtests var izskatīties spēcīgāks, bet pierādījumi kļūt vājāki. Augstāku Sharpe pēc simbolu pievienošanas bieži uzskata par diversifikāciju; ja meklējāt uzvarētāju šajos simbolos, jūs arī palielinājāt iespēju skaitu, ka veiksies.
Šī atšķirība ir svarīga gan tad, ja aģents piedāvā simtiem signālu, gan tad, ja pētnieks ar rokām pārbauda dažus. Meklēšanas telpā ietilpst katra tirgus, laika perioda, pazīmes un parametru kombinācija, kuras rezultāts ietekmēja galīgo izvēli. “Mēs palaidām tikai vienu stratēģiju” neatklāj, cik kandidātu piedalījās atlasē.
Kāpēc plašāka tirgu kopa var mākslīgi palielināt labāko Sharpe?
Iedomāsimies, ka vienu un to pašu stratēģijas veidni pārbaudām 40 nesaistītos tirgos. Vienkāršības labad pieņemsim, ka katra tirgus patiesais Sharpe ir nulle un katra novērtētā Sharpe standartkļūda ir 0.5. Novērtējumi svārstās ap nulli. Taču, izvēloties augstāko, tas parasti būs pozitīvs tikai tāpēc, ka izvēlējāties maksimumu.
Pēc aptuvena normālā sadalījuma pieņēmuma lielākais no 40 neatkarīgiem trokšņa novērtējumiem gaidāms aptuveni 1.3 standartkļūdu virs nulles: šajā piemērā tas ir apmēram 0.65 Sharpe. Precīzais skaitlis ir atkarīgs no savstarpējās atkarības, izlases ilguma un ienesīguma sadalījuma. Galvenais ir tas, ka atlase rada pārlieku optimistisku novērtējumu pat tad, ja nevienai stratēģijai nav priekšrocības.
Saglabājiet meklēšanas žurnālu. Reģistrējiet katru pārbaudīto tirgu un kandidātu, tostarp neveiksmīgos mēģinājumus un variantus, no kuriem atteicāties. Galīgās stratēģijas izmēģinājumu skaits ir atkarīgs no tā, kas ietekmēja izvēli, nevis no tā, cik failu palika pēc tīrīšanas.
Tirgi nav neatkarīgi monētas metieni. BTC un ETH bieži kustas kopā; diviem akciju indeksiem var būt kopīga lielākā daļa riska. Tas samazina faktisko neatkarīgo izmēģinājumu skaitu, taču problēma nepazūd. Turklāt savstarpēji korelēti tirgi joprojām var atšķirties pēc komisijām, finansējuma maksājumiem, likviditātes un stundām, kurās signāls darbojas.
Vai vairāk tirgu pārbaude ir vairākkārtēja testēšana?
Jā, ja izmantojat rezultātus, lai izlemtu, ko paturēt. Ja sākotnējā hipotēze bija “šis noteikums uztver finansējuma efektu lielākajos perpetual tirgos”, tirgu pārbaude ir daļa no šīs hipotēzes testēšanas. Ja pārbaudāt 50 tirgus, atrodat labāko un pēc tam formulējat hipotēzi, balstoties uz tā uzvedību, tirgu kopas atlase ir kļuvusi par optimizācijas daļu.
Ir būtiska atšķirība starp iepriekš noteiktu un pēc rezultātu apskates izvēlētu plašumu. Fiksēts grozs var parādīt, vai ideja ir noturīga noteiktā jomā. Grozs, ko paplašina, līdz viens simbols uzrāda iespaidīgu kapitāla līkni, ir meklēšanas procedūra. Abas pieejas var būt derīga izpēte, taču tās atbild uz dažādiem jautājumiem.
| Pētniecības izvēle | Ko tā var pamatot | Ko tā viena pati nevar pierādīt |
|---|---|---|
| Iepriekš noteikts grozs, vienāda pieeja | Vai noteikums darbojas izvēlētajos tirgos | Ka grozs pārstāv visus tirgojamos tirgus |
| Pēc pārbaudēm izvēlēts tirgus ar labāko sniegumu | Kuram no pārbaudītajiem tirgiem bija spēcīgākais vēsturiskais rezultāts | Ka atlasītais Sharpe ir neobjektīvs novērtējums |
| Pirms meklēšanas nodalīti tirgi | Vai fiksēts noteikums pārnesas uz nepārbaudītiem tirgiem | Ka nākotnes apstākļi atbildīs nodalītā perioda apstākļiem |
Kā pārbaudīt, vai priekšrocība pārnesas uz jauniem tirgiem?
Pirms atverat nodalīto izlasi, fiksējiet pētniecības izvēles. Tas nozīmē signāla definīciju, parametrus, tirgu kopas noteikumus, pārbalansēšanas grafiku un izpildes pieņēmumus. Pēc tam novērtējiet nemainītu stratēģiju tirgos, kas šīs izvēles neietekmēja.
Piemēram, pieņemsim, ka kriptovalūtu momentum noteikums izstrādāts, izmantojot BTC un ETH perpetual līgumus līdz 2023. gadam. Jūs varētu rezervēt citus likvīdus perpetual līgumus, izvēloties tos pēc noteikuma, kas izmanto tikai informāciju, kura bija pieejama pirms testa perioda, un neiekļaujot tos nekādā pielāgošanā. Pielietojiet fiksēto noteikumu šiem līgumiem 2024. un 2025. gadā. Iekļaujiet katras biržas faktisko komisiju līmeni, finansējuma maksājumus, līgumu specifikācijas un pamatotu tirgus ietekmes pieņēmumu; pārneses tests bez konkrētajam tirgum atbilstošām tirdzniecības izmaksām var kļūdaini uzskatīt izmaksu atšķirību par signāla neveiksmi vai arī to noslēpt.
Ziņojiet par rezultātu sadalījumu nodalītajos tirgos, nevis tikai par apvienotā portfeļa Sharpe. Apvienots portfelis var slēpt to, ka gandrīz visu ienesīgumu nodrošināja viens tirgus. Parādiet katra tirgus neto rezultātu, darījumu skaitu, maksimālo kritumu un lielākā tirgus ieguldījuma daļu kopējā P&L. Ja noteikums darbojas tikai vienā līgumā, sauciet to par konkrētam līgumam specifisku rezultātu.
Pārliecinieties arī, ka laika sadalījums ir godīgs. Tirgus var būt nepārbaudīts, bet tā datu periods var pārklāties ar to pašu režīmu, kas noteica izstrādes rezultātus. Pārbaude ar citos tirgos nodalītiem datiem jautā, vai noteikums pārnesas starp instrumentiem; vēlākā perioda pārbaude jautā, vai tas pārnesas laikā. Tie ir atsevišķi testi, un spēcīgs rezultāts vienā neaizstāj otru.
Ko darīt, ja stratēģijai tiešām jāizmanto vairāk tirgu?
Tad iekļaujiet tos, bet iepriekš nosakiet, kā. Portfeļa noteikums, kas tirgo katru atbilstošo tirgu pēc fiksēta signāla, atšķiras no sacensības, kurā uzvar tirgus ar labāko vēsturisko sniegumu. Atbilstība jānosaka, neapskatot nākotnes sniegumu, piemēram, izmantojot konkrētajā brīdī pieejamu likviditātes slieksni un minimālās vēstures prasību. Arī dalības izmaiņām vajadzīgas laika atzīmes, citādi pašreizējais “likvīdo tirgu” saraksts var ievilkt pagātnes atpakaļtestā tos, kas izdzīvojuši līdz šodienai.
Kritiķiem ir taisnība, ka šaura tirgu kopa var radīt trauslu stratēģiju un ka plaša testēšana ir vērtīga noturības pārbaude. Atbilde nav izvairīties no tirgu pārbaudes. Ir jānodala tirgi, ko izmanto idejas atklāšanai, no tirgiem, ko izmanto fiksētās idejas pārbaudīšanai, un atklāšanas darbs jāieskaita pierādījumos.
Plašāka tirgu kopa var palīdzēt stratēģijai izdzīvot ārpus laboratorijas. Tā var arī palīdzēt laimīgam atpakaļtestam uzvarēt laboratorijas atlases sacensībā. Meklēšanas žurnāls un nodalītā izlase parāda, kuru no šiem stāstiem pamato jūsu Sharpe.
← Visi raksti
