Which challenges are common when applying reinforcement learning to trading?
5 phương ánCó giải thích
Các phương án trả lời
Chọn một phương ánLời giảiChọn phương án để mở
Đáp án đúng gồm ba ý: "Market volatility and noise", "Delayed reward signals" và "Limited historical training data". Dữ liệu giá có tỉ lệ tín hiệu trên nhiễu rất thấp và độ biến động thay đổi theo chế độ thị trường, nên tác tử dễ học theo nhiễu và chính sách kém ổn định. Phần thưởng bị trễ vì lãi lỗ của một quyết định vào lệnh chỉ lộ ra sau nhiều bước, gây khó cho việc gán công cho đúng hành động (credit assignment). Dữ liệu lịch sử có hạn vì thị trường chỉ có một quá khứ, không mô phỏng lại vô hạn như trò chơi, trong khi học tăng cường cần rất nhiều trải nghiệm, nên dễ quá khớp. "Brokerage tax reporting systems" là thủ tục kế toán thuế, không ảnh hưởng tới quá trình tác tử học. "Exchange listing procedures" là quy trình niêm yết của doanh nghiệp, nằm ngoài bài toán huấn luyện tác tử giao dịch.