馬可夫決策過程
動作空間(action space)
動作空間是智能體可選動作的菜單。對棋類遊戲而言,它是合法走法的集合;對機械手臂而言,它是你能施加在每個關節上的力矩;對推薦系統而言,它是你接下來可能展示的項目。每一步智能體從這份菜單挑一項,而這個選擇是它對世界唯一的操縱桿。
動作空間主要有兩種風味。離散空間提供一份有限清單,例如上、下、左、右,讓你能直接比較每個選項的價值。連續空間提供一段實數範圍,例如轉向角度,你無法逐一列舉,必須改學一個會輸出它們的函數。有些問題是結構化或組合式的,而縮小或塑形動作空間,是讓學習變得可行的常見手法。
又称
另见