非侵入式腦轉文字解碼
無需手術植入,即可從即時 magnetoencephalography 記錄中解碼自然句子。
Brain2Qwerty v2 是 Meta 的 AI 研究系統,可從非侵入式腦部記錄中解碼語言。已發表的工作聚焦於 magnetoencephalography(MEG),並展示如何在不進行手術的情況下,從神經訊號中還原句子層級的文字。
此專案被視為朝向溝通協助的一個研究步驟,目標對象是因腦部損傷而失去說話或移動能力的人。它同時也是一個神經科學工具,用於研究大腦如何將想法轉化為文字,並且附帶程式碼與支援性研究材料釋出給更廣泛的科學社群。
無需手術植入,即可從即時 magnetoencephalography 記錄中解碼自然句子。
採用端到端深度學習流程,直接處理原始腦部訊號,而非手工設計的事件偵測堆疊。
在神經資料上微調大型語言模型,讓解碼器能利用句子上下文,以更連貫地重建文字。
以約 22,000 句輸入文字句子進行訓練,來自 9 名志願者,每人記錄 10 小時,使模型擁有此任務相對大型的非侵入式資料集。
釋出 Brain2Qwerty v1 與 v2 的完整訓練程式碼,其中 v1 資料集由 BCBL 釋出,以支援可重現性與後續研究。
報告整體詞彙準確率為 61%,最佳受試者為 78%;對該受試者而言,超過一半的句子只差一個詞或更少的錯誤。
研究人員可使用釋出的程式碼與論文來重現解碼流程、比較方法,並將模型延伸到新的資料集。
研究腦機介面的團隊可評估非侵入式解碼是否能縮小與植入式方法之間的差距。
神經科學團隊可使用此模型的句子解碼工作流程,分析語言如何從想法展開成單字、音節與字母。
建立未來溝通輔助工具的組織可研究非侵入式文字重建對於受腦傷影響者的可行性。
處理神經訊號的資料科學家可將此專案作為端到端建模、大型語言模型微調與流程最佳化的參考。
Brain2Qwerty v2 是一個研究流程,可從非侵入式 magnetoencephalography(MEG)記錄中解碼自然句子。Brain2Qwerty v1 與 v2 的訓練程式碼已釋出,而 v1 資料集正由 BCBL 釋出。
這些研究是以健康志願者為對象,讓他們在配戴 MEG 或 EEG 設備時打字造句。這項研究的目標是協助因腦部損傷而失去說話或移動能力的人恢復溝通,但已發表的工作本身使用的是志願者資料。
來源頁面沒有描述商業產品或定價模式。它們指向的是研究論文與可下載的程式碼/資料,而不是付費軟體產品。
部落格連結到了論文、程式碼與資料。研究頁面也將此模型概述為即時 MEG 句子解碼器,但沒有描述封裝式應用程式、SDK 或代管 API。
這項工作是非侵入式的,但仍有實際限制。部落格指出,MEG 目前需要磁屏蔽室,而且解碼準確率相較於手術式方法仍不夠完善。
Hype 是一款可依分類、時間範圍與評分模式搜尋 YouTube 熱門趨勢的網頁工具,幫助創作者掌握新興題材、查看來源影片,判斷下一步該做什麼內容。
MIRA vision 以合成資料驅動 AI 進行病理影像分析,適用於醫療診斷。支援隱私合規訓練資料、自動標註與可控資料生成。
Paperpal 是一款學術寫作 AI 工具,提供文獻閱讀、語言潤飾、引用、查重、AI 偵測與投稿前檢查,適合英文論文與學術材料寫作、修改及自我檢核。
Sanota 是一款將口述回憶、反思與訪談轉成清楚文字故事的 App,支援個人敘事、家族歷史與共享記憶,並提供引導提示與訂閱方案。
VForms 可直接在 YouTube 影片中嵌入問卷,讓觀眾在觀看情境下作答,不必切換到其他表單。適合以時間戳與可嵌入影片表單蒐集回饋與洞察。
Carbon Voice 是專為團隊與個人打造的非同步語音訊息 app,提供逐字稿、AI 快速跟進與跨裝置存取,讓你不用即時通話也能順暢溝通。