למידת חיזוק עמוקה לניהול תיק קריפטו מודע לסיכון
סיכום
המאמר מציג סוכן למידת חיזוק עמוקה לניהול תיק, המאזן בין חתירה לתשואה לריסון סיכונים. מדיניות היעד שלו מתאימה את מידת ההעדפה של הסוכן לפעולה האופטימלית, תוך שימוש בפרמטר חמדנות שניתן לכוונון כדי לעודד בחירות בסיכון נמוך יותר. המחברים מעריכים את הגישה על נתוני שוק של מטבעות קריפטוגרפיים, שנבחרו בשל שפע התצפיות ברמת הדקה והתנודתיות הגבוהה.
בתקופת הבדיקה המדווחת, הסוכן השיג תשואה של 1800% והציג את הסיכון הנמוך ביותר מבין השיטות שהושוו. ניסויים נוספים מצביעים על ביצועים יציבים בתנודתיות שוק גבוהה ובתקופות אימון קצרות. הקטע אינו מפרט את מדד הסיכון, שיטות ההשוואה, הנכסים, עלויות העסקה או תכנון ההערכה, ולכן אי אפשר להעריך את טענות הביצועים לעומק או להניח שהן ניתנות להכללה מעבר לניסויים המתוארים.
רעיונות מרכזיים
- הסוכן המוצע מבצע אופטימיזציה של ניהול תיק תוך התחשבות ברווח ובריסון סיכונים.
- מדיניות יעד הניתנת לכוונון שולטת בהעדפה לפעולה האופטימלית ונועדה להעדיף פעולות בסיכון נמוך יותר.
- הגישה מוערכת באמצעות נתוני שוק של מטבעות קריפטוגרפיים עם תצפיות ברמת הדקה.
- המחברים מדווחים על תשואה של 1800% בתקופת הבדיקה ועל הסיכון הנמוך ביותר מבין השיטות שהושוו.
- ניסויים נוספים מצביעים על עמידות לתנודתיות גבוהה ולתקופות אימון קצרות, אך הקטע משמיט פרטי הערכה.
תגיות
הטקסט המלא
# Automatic Financial Trading Agent for Low-risk Portfolio Management using Deep Reinforcement Learning # Automatic Financial Trading Agent for Low-risk Portfolio Management using Deep Reinforcement Learning The autonomous trading agent is one of the most actively studied areas of artificial intelligence to solve the capital market portfolio management problem. The two primary goals of the portfolio management problem are maximizing profit and restrainting risk. However, most approaches to this problem solely take account of maximizing returns. Therefore, this paper proposes a deep reinforcement learning based trading agent that can manage the portfolio considering not only profit maximization but also risk restraint. We also propose a new target policy to allow the trading agent to learn to prefer low-risk actions. The new target policy can be reflected in the update by adjusting the greediness for the optimal action through the hyper parameter. The proposed trading agent verifies the performance through the data of the cryptocurrency market. The Cryptocurrency market is the best test-ground for testing our trading agents because of the huge amount of data accumulated every minute and the market volatility is extremely large. As a experimental result, during the test period, our agents achieved a return of 1800% and provided the least risky investment strategy among the existing methods. And, another experiment shows that the agent can maintain robust generalized performance even if market volatility is large or training period is short.
מוצג במלואו בציון המקור ובהתאם לרישיון שלו. רישיון: abstract CC0
הסיכום נכתב בידי סוכן המחקר של Stratmill על סמך המקור; הוא אינו העתק של המקור.