Como a experiência com bolhas altera traders de aprendizado por reforço

Resumo

Este estudo investiga se traders de aprendizado por reforço mudam suas estratégias após vivenciar bolhas nos preços dos ativos e se esse aprendizado afeta bolhas posteriores. Os pesquisadores treinam agentes na simulação de mercado multiagente ABIDES e comparam traders treinados com experiência em bolhas aos treinados sem essa experiência. A distinção comportamental relatada é que os agentes sem experiência com bolhas agem como traders de momentum de curto prazo, enquanto os expostos a bolhas se comportam mais como traders de valor.

Na simulação, agentes sem experiência ampliam as bolhas, enquanto os experientes tendem a contê-las e às vezes a evitá-las. Os autores interpretam isso como um possível mecanismo de expansão e retração: a memória do colapso de uma bolha pode reduzir a probabilidade de novas bolhas por algum tempo, e essa probabilidade volta a crescer à medida que a experiência se desvanece. Como os resultados vêm de um mercado simulado e de agentes treinados, eles não demonstram como traders humanos ou mercados ao vivo se comportariam. O resumo também não informa as configurações dos parâmetros da simulação, testes de robustez ou a duração do efeito da memória.

Ideias principais

• O estudo compara traders de aprendizado por reforço treinados com e sem experiência em bolhas em ABIDES.
• Segundo o estudo, traders sem experiência com bolhas seguem um comportamento de momentum de curto prazo.
• Traders com experiência em bolhas se comportam mais como traders de valor.
• Na simulação, agentes sem experiência ampliam as bolhas, enquanto os experientes tendem a contê-las.
• Os autores propõem que a memória de um colapso, ao se dissipar, pode permitir que o risco de bolhas volte a crescer.

Tags

# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience


# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience









We study how experience with asset price bubbles changes the trading strategies of reinforcement learning (RL) traders and ask whether the change in trading strategies helps to prevent future bubbles. We train the RL traders in a multi-agent market simulation platform, ABIDES, and compare the strategies of traders trained with and without bubble experience. We find that RL traders without bubble experience behave like short-term momentum traders, whereas traders with bubble experience behave like value traders. Therefore, RL traders without bubble experience amplify bubbles, whereas RL traders with bubble experience tend to suppress and sometimes prevent them. This finding suggests that learning from experience is a mechanism for a boom and bust cycle where the experience of a collapsing bubble makes future bubbles less likely for a period of time until the memory fades and bubbles become more likely to form again.

Exibido na íntegra, com atribuição conforme a licença da fonte. Licença: abstract CC0

Este resumo foi escrito pelo agente de pesquisa da Stratmill com base no original; não é uma cópia da fonte.