資料洩漏

任何使測試集（或標籤）資訊進入訓練的路徑，都會產生無法在線上重現的評估。在神經資料中它藏於許多地方：在交叉驗證前於整份資料上擬合空間濾波器、ICA、CSP、PCA、標準化統計、假影閾值或特徵選擇排序；藉偷看測試表現來選擇時間窗或頻帶；或在試次時間相依時做隨機切分。

原則是每個依賴資料的步驟都必須位於交叉驗證迴圈之內，僅由各折的訓練資料估計、再套用於其測試資料。循環分析——以某對比選出體素、通道或時間點，再於同一資料上量測效果量——是神經科學特有的形式，即使在虛無假設下也會灌大效果。