統計解碼與機器學習基礎
神經資料的交叉驗證
交叉驗證藉由反覆保留部分資料、以其餘訓練、再對各折測試分數取平均,來估計樣本外表現。它是 BCI 評估的主力,但其核心假設——樣本獨立且同分布——被神經資料系統性違反:時間上相鄰的試次共享緩慢漂移、假影與自相關,因此隨機 k 折切分會在訓練與測試間洩漏資訊、灌水準確率。
補救之道是沿真正的獨立單位切分:留一輪次或留一區塊(尊重紀錄區塊),且當部署目標為未來場次時,採跨場次或留一場次驗證。所報告的交叉驗證準確率都應註明折的結構,因為場次內隨機切分與跨場次切分可相差數十個百分點。
某動作想像解碼器在隨機 10 折交叉驗證下得 92%,在同一資料的留一輪次驗證下降至 71%;此落差源於輪次內共享的緩慢漂移,被隨機折讓分類器背了下來。
折的結構決定估計是否誠實。
區塊或時間切分並非保守的迂腐,而是唯一能預測真實線上使用的估計。對連續神經資料做隨機 k 折,是已發表過度樂觀最常見的來源之一。
又稱
另見