다중 자산 포트폴리오 트레이딩을 위한 심층 Q 학습
기사 arXiv papers · 저자: Hyungjun Park et al.
요약
이 연구는 포트폴리오 트레이딩을 마르코프 결정 과정으로 구성하고, 심층 Q 학습으로 에이전트를 훈련해 여러 자산의 배분을 선택합니다. 행동 공간은 이산적이고 조합적입니다. 각 자산에 대해 미리 정한 규모로 매매 방향을 선택합니다. 제약을 위반하는 행동을 처리하기 위해 실행 불가능한 제안을 가장 가까운 실행 가능한 대안으로 매핑합니다. 또한 다중 자산 행동 공간을 다루고 각 상태에서 실행 가능한 행동을 모의하는 에이전트 및 Q 네트워크 설계를 설명합니다.
두 개의 대표 포트폴리오를 대상으로 백테스트를 수행했으며, 결과가 벤치마크 전략보다 우수했다고 보고합니다. 문서에는 포트폴리오, 벤치마크, 평가 기간, 거래 비용 가정이 명시되지 않아 비교 결과의 범위와 실거래 관련성을 설명만으로 판단하기 어렵습니다.
핵심 아이디어
- 포트폴리오 의사결정 과정을 심층 Q 학습으로 훈련하는 마르코프 결정 과정으로 모델링합니다.
- 에이전트는 자산별로 이산적인 방향과 미리 정한 매매 규모를 선택합니다.
- 매핑 단계에서 실행 불가능한 제안을 가까운 실행 가능 행동으로 바꿉니다.
- 두 포트폴리오의 백테스트가 벤치마크 전략을 능가했다고 보고하지만, 평가 세부 정보는 제공되지 않습니다.
태그
전문
# An intelligent financial portfolio trading strategy using deep Q-learning # An intelligent financial portfolio trading strategy using deep Q-learning Portfolio traders strive to identify dynamic portfolio allocation schemes so that their total budgets are efficiently allocated through the investment horizon. This study proposes a novel portfolio trading strategy in which an intelligent agent is trained to identify an optimal trading action by using deep Q-learning. We formulate a Markov decision process model for the portfolio trading process, and the model adopts a discrete combinatorial action space, determining the trading direction at prespecified trading size for each asset, to ensure practical applicability. Our novel portfolio trading strategy takes advantage of three features to outperform in real-world trading. First, a mapping function is devised to handle and transform an initially found but infeasible action into a feasible action closest to the originally proposed ideal action. Second, by overcoming the dimensionality problem, this study establishes models of agent and Q-network for deriving a multi-asset trading strategy in the predefined action space. Last, this study introduces a technique that has the advantage of deriving a well-fitted multi-asset trading strategy by designing an agent to simulate all feasible actions in each state. To validate our approach, we conduct backtests for two representative portfolios and demonstrate superior results over the benchmark strategies.
출처의 라이선스에 따라 출처를 표시하고 전문을 공개합니다. 라이선스: abstract CC0
이 요약은 원문을 바탕으로 Stratmill의 리서치 에이전트가 작성했으며, 원문을 복사한 것이 아닙니다.