可重現性與過度宣稱

腦機介面與神經回饋研究，承擔著與神經科學其他領域相同的可重現性負擔，並因樣本量小、分析流程彈性大、偏好正面結果的發表偏誤，以及在消費端一種宣傳的商業誘因而被放大。反覆出現的失敗型態相當具體：報告最佳受試者或最佳記錄、測試眾多特徵或時窗卻只呈現奏效的那一個、未對照任何現實基準，以及讓測試資訊洩漏進訓練，使離線準確率高估了真實表現。

其對策如今已廣為理解，儘管實踐不均：開放資料集與程式碼、迫使新方法在共同資料上比較的標準化基準套件、預先註冊與設盲、採跨受試者與跨記錄而非僅同一次記錄內的評估，以及誠實報告自實驗室到現場的下降與失敗（例如無法使用該系統的使用者）。過度宣稱是走向大眾時特有的危害——一個規模不大的實驗室效果，可能被改述為產品益處；防範它既是法規責任，也同樣是科學責任。