Which of the following was not discussed as a tunable parameter of a neural network?

Đáp án đúng: "Hardware availability". Tham số điều chỉnh được (tunable parameter, hay siêu tham số) của mạng nơ-ron là những lựa chọn thiết kế và huấn luyện mà người làm mô hình thay đổi để tìm cấu hình tốt nhất. Phần cứng sẵn có ảnh hưởng tới tốc độ và giới hạn kích thước mô hình, nhưng nó là ràng buộc của môi trường chứ không phải tham số của bản thân mạng, nên đây là đáp án của câu hỏi phủ định. Các nhóm còn lại đều là siêu tham số thật nên không được chọn: "Activation functions: sigmoid, tanh, softmax, ReLU, leaky ReLU" là lựa chọn hàm kích hoạt quyết định tính phi tuyến của từng lớp; "Regularization techniques: weight decay, early stopping, dropout" là các cách chống quá khớp có thể bật tắt và chỉnh cường độ; "Training method: Loss function, learning rate, batch size, number of epochs" quyết định mô hình được tối ưu ra sao; "Structure: the number of hidden layers, the number of nodes in each layer" quyết định độ sâu và độ rộng, tức sức chứa của mạng.