Trải nghiệm bong bóng làm thay đổi chiến lược của nhà giao dịch học tăng cường ra sao

Tóm tắt

Nghiên cứu xem xét liệu nhà giao dịch học tăng cường có thay đổi chiến lược sau khi trải qua bong bóng giá tài sản hay không, và việc học đó có ảnh hưởng đến các bong bóng sau này không. Các nhà nghiên cứu huấn luyện tác nhân trong mô phỏng thị trường đa tác nhân ABIDES và so sánh nhà giao dịch được huấn luyện với trải nghiệm bong bóng với những người không có trải nghiệm đó. Khác biệt hành vi được báo cáo là các tác nhân chưa trải qua bong bóng hành động như nhà giao dịch theo động lượng ngắn hạn, còn các tác nhân từng trải qua bong bóng hành xử giống nhà giao dịch theo giá trị hơn.

Trong mô phỏng, tác nhân thiếu kinh nghiệm khuếch đại bong bóng, trong khi tác nhân có kinh nghiệm thường kiềm chế và đôi khi ngăn được bong bóng. Các tác giả diễn giải đây là cơ chế bùng nổ rồi suy thoái có thể xảy ra: ký ức về một vụ bong bóng sụp đổ có thể khiến bong bóng mới ít có khả năng xuất hiện trong một thời gian, rồi khả năng này tăng trở lại khi trải nghiệm phai nhạt. Những phát hiện này đến từ thị trường mô phỏng và các tác nhân được huấn luyện, nên không xác lập cách nhà giao dịch con người hoặc thị trường thực sẽ hành xử. Phần tóm tắt cũng không nêu chi tiết về thiết lập tham số của mô phỏng, kiểm tra độ vững hay thời gian hiệu lực của ký ức.

Ý chính

• Nghiên cứu so sánh nhà giao dịch học tăng cường được huấn luyện có và không có trải nghiệm bong bóng trong ABIDES.
• Theo báo cáo, nhà giao dịch chưa trải qua bong bóng có hành vi theo động lượng ngắn hạn.
• Nhà giao dịch có trải nghiệm bong bóng hành xử giống nhà giao dịch theo giá trị hơn.
• Trong mô phỏng, tác nhân thiếu kinh nghiệm khuếch đại bong bóng, còn tác nhân có kinh nghiệm thường kiềm chế chúng.
• Các tác giả đề xuất rằng ký ức về cú sụp đổ phai nhạt có thể khiến rủi ro bong bóng quay trở lại theo thời gian.

Thẻ

# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience


# Once Burned, Twice Shy? The Effect of Stock Market Bubbles on Traders that Learn by Experience









We study how experience with asset price bubbles changes the trading strategies of reinforcement learning (RL) traders and ask whether the change in trading strategies helps to prevent future bubbles. We train the RL traders in a multi-agent market simulation platform, ABIDES, and compare the strategies of traders trained with and without bubble experience. We find that RL traders without bubble experience behave like short-term momentum traders, whereas traders with bubble experience behave like value traders. Therefore, RL traders without bubble experience amplify bubbles, whereas RL traders with bubble experience tend to suppress and sometimes prevent them. This finding suggests that learning from experience is a mechanism for a boom and bust cycle where the experience of a collapsing bubble makes future bubbles less likely for a period of time until the memory fades and bubbles become more likely to form again.

Hiển thị toàn văn kèm ghi nguồn theo giấy phép của tài liệu gốc. Giấy phép: abstract CC0

Bản tóm tắt này do tác nhân nghiên cứu của Stratmill biên soạn từ tài liệu gốc; đây không phải bản sao của tài liệu.