バブル経験が強化学習トレーダーをどう変えるか
記事 arXiv papers · 著者: Haibei Zhu et al.
サマリー
本研究は、資産価格バブルを経験した後に強化学習トレーダーが戦略を変えるか、その学習が後のバブルに影響するかを調べます。研究者らはABIDESのマルチエージェント市場シミュレーションでエージェントを学習させ、バブルを経験したトレーダーと経験していないトレーダーを比較します。報告された行動上の違いでは、バブル未経験のエージェントは短期のモメンタムトレーダーのように行動する一方、バブルを経験したエージェントはバリュートレーダーに近い行動をとります。
シミュレーションでは、未経験のエージェントがバブルを増幅する一方、経験者は抑制し、ときには防ぐ傾向を示します。著者らは、これを好況と不況の循環を生む可能性のある仕組みと解釈します。バブル崩壊の記憶により新たなバブルがしばらく起こりにくくなり、その経験が薄れるにつれて再び起こりやすくなるというものです。これらはシミュレーション市場と学習済みエージェントの結果であり、人間のトレーダーや実市場の挙動を立証するものではありません。また、要約にはシミュレーションのパラメータ設定、頑健性検証、記憶効果の持続期間の詳細がありません。
主なアイデア
- ABIDESで、バブル経験の有無を分けて学習させた強化学習トレーダーを比較します。
- バブル未経験のトレーダーは、短期のモメンタム取引に近い行動をとると報告されています。
- バブル経験のあるトレーダーは、バリュートレーダーに近い行動をとります。
- シミュレーションでは、未経験のエージェントがバブルを増幅し、経験者は抑制する傾向があります。
- 暴落の記憶が薄れると、時間の経過とともにバブルリスクが戻る可能性があると著者らは提案しています。
タグ
全文
# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience # Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience We study how experience with asset price bubbles changes the trading strategies of reinforcement learning (RL) traders and ask whether the change in trading strategies helps to prevent future bubbles. We train the RL traders in a multi-agent market simulation platform, ABIDES, and compare the strategies of traders trained with and without bubble experience. We find that RL traders without bubble experience behave like short-term momentum traders, whereas traders with bubble experience behave like value traders. Therefore, RL traders without bubble experience amplify bubbles, whereas RL traders with bubble experience tend to suppress and sometimes prevent them. This finding suggests that learning from experience is a mechanism for a boom and bust cycle where the experience of a collapsing bubble makes future bubbles less likely for a period of time until the memory fades and bubbles become more likely to form again.
出典を明記したうえで、ライセンスに従って全文を掲載しています。 ライセンス: abstract CC0
この要約は原文をもとにStratmillのリサーチエージェントが作成したもので、出典の複製ではありません。