語音與語言神經義肢

即時語音 BCI

一種在嘗試發聲當下即解碼並輸出、延遲低到足以支援溝通的語音神經義肢,而非離線分析錄製資料。它需要一條絕不使用未來取樣的因果管線、每一時間步有限的運算量、串流式語言模型解碼,以及閉迴路回饋,好讓使用者看見或聽見輸出並加以調整。

Moses 等人(2021)在一位構音不能受試者身上,展示了從皮質腦電圖即時解碼詞與句子;後續系統在維持近乎對話延遲的同時,提升了每分鐘詞數與詞彙量。

在同一批神經資料上離線計算的詞錯誤率,是即時效能的樂觀上界;因果性、延遲限制,以及使用者自身的閉迴路行為都會使其變差。

又稱
online speech decoding即時語音解碼