עבור לתוכן
כל מסמכי הספרייה

יישום למידת חיזוק עמוקה במסחר בחזרה לממוצע

מאמר arXiv papers · מחבר: Sophia Gu

סיכום

המסמך מתאר יישום של למידת חיזוק עמוקה לבעיית מסחר של חזרה לממוצע. מטרתו להנגיש שיטות עדכניות של למידת חיזוק למתרגלים, שאחרת אולי יצטרכו לבחור בין גישות רבות או לבנות סוכנים מיסודות קלאסיים. ההדגמה המוצעת משתמשת בספריית למידת חיזוק שפותחה במקור למשחקים אסטרטגיים ומיישמת אותה לקבלת החלטות פיננסיות.

המסגרת משלבת גם תכונות של פונקציות המונעות משיקולים כלכליים, במטרה המוצהרת ליצור פתרון מתכנס ובעל ביצועים גבוהים. עם זאת, המסמך אינו מציג ארכיטקטורת מודל מסוימת, תכנון תגמול, כללי מסחר, נתונים, אמת מידה להשוואה או תוצאות מספריות. לכן הוא מתווה גישה ואת המוטיבציה לה, אך אינו מספק ראיות מספיקות להערכת רווחיות, חוסן או ביצועים מול שיטות אחרות. הטענות על התכנסות וביצועים מוצגות בקטע ללא פרטים ניסויים תומכים.

רעיונות מרכזיים

  • העבודה מיישמת למידת חיזוק עמוקה במסחר המבוסס על חזרה לממוצע.
  • היא מדגימה שימוש בספרייה שפותחה תחילה למשחקים אסטרטגיים עבור בעיית מסחר.
  • המסגרת משלבת בשיטת הלמידה תכונות פונקציה המונעות משיקולים כלכליים.
  • המסמך טוען לפתרון מתכנס ובעל ביצועים גבוהים, אך אינו מספק כאן פרטים ניסויים או תוצאות.
  • אי אפשר להעריך רווחיות וחוסן על סמך המידע שסופק.

תגיות

הטקסט המלא
# Deep Reinforcement Learning with Function Properties in Mean Reversion Strategies


# Deep Reinforcement Learning with Function Properties in Mean Reversion Strategies









Over the past decades, researchers have been pushing the limits of Deep Reinforcement Learning (DRL). Although DRL has attracted substantial interest from practitioners, many are blocked by having to search through a plethora of available methodologies that are seemingly alike, while others are still building RL agents from scratch based on classical theories. To address the aforementioned gaps in adopting the latest DRL methods, I am particularly interested in testing out if any of the recent technology developed by the leads in the field can be readily applied to a class of optimal trading problems. Unsurprisingly, many prominent breakthroughs in DRL are investigated and tested on strategic games: from AlphaGo to AlphaStar and at about the same time, OpenAI Five. Thus, in this writing, I want to show precisely how to use a DRL library that is initially built for games in a fundamental trading problem; mean reversion. And by introducing a framework that incorporates economically-motivated function properties, I also demonstrate, through the library, a highly-performant and convergent DRL solution to decision-making financial problems in general.

מוצג במלואו בציון המקור ובהתאם לרישיון שלו. רישיון: abstract CC0

הסיכום נכתב בידי סוכן המחקר של Stratmill על סמך המקור; הוא אינו העתק של המקור.