본문으로 건너뛰기
라이브러리 문서 전체

버블 경험은 강화학습 트레이더를 어떻게 바꿀까

기사 arXiv papers · 저자: Haibei Zhu et al.
원문 읽기

요약

이 연구는 강화학습 트레이더가 자산 가격 버블을 경험한 뒤 전략을 바꾸는지, 그 학습이 이후 버블에 영향을 주는지 살펴봅니다. 연구진은 ABIDES 다중 에이전트 시장 시뮬레이션에서 에이전트를 훈련하고, 버블 경험이 있는 트레이더와 없는 트레이더를 비교합니다. 보고된 행동 차이는 버블을 경험하지 않은 에이전트가 단기 모멘텀 트레이더처럼 행동하는 반면, 버블을 겪은 에이전트는 가치 투자자에 더 가까운 행동을 보인다는 점입니다.

시뮬레이션에서 경험이 없는 에이전트는 버블을 키우지만, 경험이 있는 에이전트는 버블을 억제하고 때로는 막는 경향이 있습니다. 저자들은 이를 가능한 호황과 불황의 순환 메커니즘으로 해석합니다. 버블 붕괴의 기억은 한동안 새 버블이 생길 가능성을 낮추고, 그 경험이 희미해지면서 가능성이 다시 커질 수 있다는 것입니다. 이 결과는 시뮬레이션 시장과 훈련된 에이전트에서 나온 것으로, 인간 트레이더나 실거래 시장의 행동을 입증하지는 않습니다. 요약에는 시뮬레이션 매개변수 설정, 강건성 점검, 기억 효과의 지속 기간도 제시되지 않습니다.

핵심 아이디어

  • 이 연구는 ABIDES에서 버블 경험이 있는 강화학습 트레이더와 없는 트레이더를 비교합니다.
  • 보고에 따르면 버블 경험이 없는 트레이더는 단기 모멘텀 행동을 보입니다.
  • 버블 경험이 있는 트레이더는 가치 투자자에 가까운 행동을 보입니다.
  • 시뮬레이션에서 경험이 없는 에이전트는 버블을 키우고, 경험이 있는 에이전트는 억제하는 경향이 있습니다.
  • 저자들은 붕괴에 대한 기억이 희미해지면서 버블 위험이 시간이 지나 다시 커질 수 있다고 제안합니다.

태그

머신러닝주식모멘텀리스크 관리백테스트
전문
# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience


# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience









We study how experience with asset price bubbles changes the trading strategies of reinforcement learning (RL) traders and ask whether the change in trading strategies helps to prevent future bubbles. We train the RL traders in a multi-agent market simulation platform, ABIDES, and compare the strategies of traders trained with and without bubble experience. We find that RL traders without bubble experience behave like short-term momentum traders, whereas traders with bubble experience behave like value traders. Therefore, RL traders without bubble experience amplify bubbles, whereas RL traders with bubble experience tend to suppress and sometimes prevent them. This finding suggests that learning from experience is a mechanism for a boom and bust cycle where the experience of a collapsing bubble makes future bubbles less likely for a period of time until the memory fades and bubbles become more likely to form again.

출처의 라이선스에 따라 출처를 표시하고 전문을 공개합니다. 라이선스: abstract CC0

이 요약은 원문을 바탕으로 Stratmill의 리서치 에이전트가 작성했으며, 원문을 복사한 것이 아닙니다.