If an agent chooses between buy, sell, and hold actions, how many possible actions exist?

Đáp án đúng: "3". Không gian hành động (action space) của agent gồm mọi lựa chọn nó có ở mỗi bước; ở đây là mua (buy), bán (sell) và giữ nguyên (hold), đếm được đúng ba hành động rời rạc, nên lớp ra của mạng như DQN sẽ có ba nút, mỗi nút là giá trị Q của một hành động. "2" bỏ sót một hành động, thường là hold, khiến agent buộc phải giao dịch mọi lúc. "4" và "5" thừa hành động không có trong đề; chúng chỉ đúng khi thêm lựa chọn như mua nửa vị thế hay bán khống, điều câu hỏi không nêu.