עבור לתוכן
כל מסמכי הספרייה

השוואת ביצועי סוכני מסחר של LLM בשוקי קריפטו ומניות חיים

מאמר arXiv papers · מחבר: Lingfei Qian et al.

סיכום

המאמר מציג את Agent Market Arena, מדד השוואה רציף בזמן אמת להערכת סוכני מסחר המבוססים על מודלי שפה גדולים בשוקי מטבעות קריפטו ומניות. המסגרת משלבת נתוני מסחר מאומתים עם חדשות שנבדקו בידי מומחים ומגוון תכנוני סוכנים, במטרה להשוות מערכות בתנאים חיים. הרקע לכך הוא שהערכות קודמות השתמשו לעיתים בנכסים או בתקופות מוגבלים, בדקו מודלים ולא סוכנים שלמים, או הסתמכו על נתונים שלא אומתו באופן עצמאי.

מדד ההשוואה כולל סוכנים בעלי סגנונות סיכון שונים, ובהם אחד המשתמש בהסקה המבוססת על זיכרון, ומעריך אותם באמצעות כמה מודלי שפה בסיסיים. בניסויים החיים המדווחים נמצאה שונות גדולה יותר בהתנהגות בין מסגרות הסוכנים, מהחלטות אגרסיביות ועד שמרניות, מאשר בין מודלי השפה הבסיסיים. התקציר מציג את AMA כתשתית להערכה מתמשכת וניתנת לשחזור; הוא אינו מציין נתוני ביצועים, משך מדד ההשוואה או בקרות מפורטות להשוואת אסטרטגיות. מסקנותיו עוסקות בהבדלים התנהגותיים שנצפו ואינן מוכיחות שאחד הסוכנים רווחי באופן עקבי.

רעיונות מרכזיים

  • Agent Market Arena הוא מדד השוואה בזמן אמת לסוכני מסחר של LLM בשוקי קריפטו ומניות.
  • המסגרת משלבת נתוני מסחר מאומתים, חדשות שנבדקו ומבני סוכנים מגוונים.
  • ההערכה כוללת סוכנים בעלי סגנונות סיכון שונים והסקה המבוססת על זיכרון.
  • בניסויים החיים דווח על הבדלים התנהגותיים גדולים יותר בין מסגרות סוכנים מאשר בין מודלי הבסיס.
  • התקציר מתאר תרומה של מדד השוואה, אך אינו מספק נתוני רווחיות או בקרות הערכה מפורטות.

תגיות

הטקסט המלא
# When Agents Trade: Live Multi-Market Trading Benchmark for LLM Agents


# When Agents Trade: Live Multi-Market Trading Benchmark for LLM Agents









Although Large Language Model (LLM)-based agents are increasingly used in financial trading, it remains unclear whether they can reason and adapt in live markets, as most studies test models instead of agents, cover limited periods and assets, and rely on unverified data. To address these gaps, we introduce Agent Market Arena (AMA), the first lifelong, real-time benchmark for evaluating LLM-based trading agents across multiple markets. AMA integrates verified trading data, expert-checked news, and diverse agent architectures within a unified trading framework, enabling fair and continuous comparison under real conditions. It implements four agents, including InvestorAgent as a single-agent baseline, TradeAgent and HedgeFundAgent with different risk styles, and DeepFundAgent with memory-based reasoning, and evaluates them across GPT-4o, GPT-4.1, Claude-3.5-haiku, Claude-sonnet-4, and Gemini-2.0-flash. Live experiments on both cryptocurrency and stock markets demonstrate that agent frameworks display markedly distinct behavioral patterns, spanning from aggressive risk-taking to conservative decision-making, whereas model backbones contribute less to outcome variation. AMA thus establishes a foundation for rigorous, reproducible, and continuously evolving evaluation of financial reasoning and trading intelligence in LLM-based agents.

מוצג במלואו בציון המקור ובהתאם לרישיון שלו. רישיון: abstract CC0

הסיכום נכתב בידי סוכן המחקר של Stratmill על סמך המקור; הוא אינו העתק של המקור.