腦機(jī)接口的定義
腦機(jī)接口是神經(jīng)科學(xué)、電子信息、人工智能、醫(yī)學(xué)、材料等多個(gè)學(xué)科交叉的新興前沿研究領(lǐng)域?;魻栫辏╓olpaw)等人在其著作《腦機(jī)接□:原理與實(shí)踐》(Brain-computerinterfaces:principlesandpractice)中定義腦機(jī)接口(BCI)是一個(gè)通過(guò)檢測(cè)中樞神經(jīng)系統(tǒng)活動(dòng)并將其轉(zhuǎn)化為人工輸出來(lái)替代、修復(fù)、增強(qiáng)、補(bǔ)充或改善中樞神經(jīng)系統(tǒng)正常輸出的,由此改變中樞神經(jīng)系統(tǒng)與內(nèi)外環(huán)境之間持續(xù)交互作用的系統(tǒng)。
人類與環(huán)境交互是一個(gè)閉環(huán)雙向的過(guò)程,這一過(guò)程的核心是人腦處理感知、控制和運(yùn)動(dòng)輸出等多種功能(圖1)。首先,感知功能是指大腦如何接收和解讀來(lái)自我們五官感覺(jué)(視覺(jué)、聽(tīng)覺(jué)、觸覺(jué)、味覺(jué)和嗅覺(jué))的信息。這些信息通過(guò)相應(yīng)的感受器官收集后,轉(zhuǎn)換為神經(jīng)信號(hào),通過(guò)神經(jīng)元傳遞到大腦的不同區(qū)域進(jìn)行處理和解讀。其次,控制功能涉及大腦如何基于接收到的信息和已有的記憶或知識(shí),做出決策并指揮身體作出反應(yīng)。這包括日常的自主活動(dòng),如呼吸和心跳,以及更為復(fù)雜的情感表達(dá)和思考過(guò)程。大腦的前額葉尤其在這方面起著核心的調(diào)控作用,負(fù)責(zé)高級(jí)認(rèn)知功能如解決問(wèn)題、規(guī)劃和執(zhí)行決策等。最后,運(yùn)動(dòng)輸出功能是大腦如何指揮身體的運(yùn)動(dòng)。這主要由大腦的運(yùn)動(dòng)皮層控制,該區(qū)域生成關(guān)于身體運(yùn)動(dòng)的指令,通過(guò)神經(jīng)系統(tǒng)傳遞到肌肉,引起相應(yīng)的動(dòng)作,其中不同軀體位置的運(yùn)動(dòng)控制對(duì)應(yīng)不同的皮層區(qū)域。這三個(gè)功能一感知、控制和運(yùn)動(dòng)輸出一共同使得大腦能夠有效地與外界環(huán)境交互,支持我們的日?;顒?dòng)和復(fù)雜的行為表現(xiàn)。
由于腦疾病和外傷,人們可能會(huì)遇到各種神經(jīng)功能障礙,其中包括運(yùn)動(dòng)功能障礙和失語(yǔ)癥等。這些疾病對(duì)患者的日常生活和溝通能力造成重大影響。而在很多情況下,這些患者的大腦中,負(fù)責(zé)控制和產(chǎn)生運(yùn)動(dòng)輸出的部分依然完整,只是下行通路受到了阻斷。腦機(jī)接口技術(shù)提供了一種革命性的方法,用于幫助因腦疾病和外傷而遭受運(yùn)動(dòng)功能障礙和失語(yǔ)癥的患者恢復(fù)功能。這項(xiàng)技術(shù)通過(guò)直接解讀大腦的神經(jīng)活動(dòng),使患者能夠控制外部設(shè)備或計(jì)算機(jī)系統(tǒng),從而繞過(guò)傳統(tǒng)的神經(jīng)肌肉通路(圖2)。
腦機(jī)接口系統(tǒng)根據(jù)信號(hào)采集方式的不同,主要可以分為非侵入式和侵入式兩種類型,各自具有獨(dú)特的特點(diǎn)和應(yīng)用場(chǎng)景。其中侵入式BCI系統(tǒng)通過(guò)手術(shù)將電極直接植入大腦,從而獲得更加精確和高質(zhì)量的神經(jīng)信號(hào)。這種方法包括皮層下植入和皮層表面植入兩種形式。侵入式BCI能夠直接捕獲大腦皮層的電活動(dòng),提供更高的信號(hào)分辨率,使得控制的精度和反應(yīng)速度大為提升。因此,侵入式BCI特別適用于那些對(duì)控制精度要求極高的應(yīng)用,如精細(xì)的機(jī)械臂控制或復(fù)雜的通信系統(tǒng)。
在人類的運(yùn)動(dòng)輸出中,手和口的動(dòng)作尤其重要且常見(jiàn)。手部運(yùn)動(dòng)覆蓋了從精細(xì)的小肌肉控制(如寫字、繪畫、打字)到力量和協(xié)調(diào)性要求較高的動(dòng)作(如舉重、推拉物體)。這些動(dòng)作由大腦的運(yùn)動(dòng)皮層精密控制,特別是與手部運(yùn)動(dòng)相關(guān)的區(qū)域,它們生成詳細(xì)的神經(jīng)命令,這些命令通過(guò)神經(jīng)系統(tǒng)傳遞到手部的各個(gè)肌肉??诓窟\(yùn)動(dòng)則主要涉及說(shuō)話等功能,這些都是社交和生存的基本需求。說(shuō)話不僅需要聲帶的運(yùn)動(dòng),還涉及唇部、舌頭和顎部的協(xié)調(diào)運(yùn)動(dòng),這些都由大腦特定區(qū)域如語(yǔ)言中樞控制。在圖1所示的“皮質(zhì)小人”圖中,不同器官的相對(duì)尺寸大小對(duì)應(yīng)了相應(yīng)的控制器官運(yùn)動(dòng)的皮質(zhì)區(qū)域面積,可見(jiàn)手部和口部是最大的兩個(gè)運(yùn)動(dòng)控制區(qū)域。手和口的這些運(yùn)動(dòng)輸出功能顯示了大腦在日常生活中的核心作用,無(wú)論是在基本的生理需求還是在復(fù)雜的人際交往中,手和口的活動(dòng)都是人類互動(dòng)和表達(dá)自身的主要方式。而與之相對(duì)應(yīng)的,解碼精細(xì)運(yùn)動(dòng)和語(yǔ)言,往往需要侵入式記錄技術(shù)。
侵入式運(yùn)動(dòng)腦機(jī)接口
侵入式運(yùn)動(dòng)腦機(jī)接口系統(tǒng)利用植入大腦運(yùn)動(dòng)皮層的電極來(lái)直接記錄與肢體運(yùn)動(dòng)相關(guān)的神經(jīng)活動(dòng)。這一系統(tǒng)的核心在于解析和利用大腦內(nèi)部運(yùn)動(dòng)控制的神經(jīng)機(jī)制,特別是運(yùn)動(dòng)皮層中的神經(jīng)編碼過(guò)程。運(yùn)動(dòng)皮層位于大腦的額葉,是負(fù)責(zé)規(guī)劃、控制和執(zhí)行自愿肢體運(yùn)動(dòng)的關(guān)鍵區(qū)域。在這一區(qū)域中,不同的神經(jīng)元群組被激活以響應(yīng)不同類型的軀體肌肉運(yùn)動(dòng)。例如,某些神經(jīng)元在計(jì)劃或執(zhí)行手部動(dòng)作時(shí)活躍,而其他神經(jīng)元?jiǎng)t在腿部動(dòng)作時(shí)活躍。這些神經(jīng)元通過(guò)發(fā)放電信號(hào)(動(dòng)作電位)來(lái)編碼特定的運(yùn)動(dòng)指令,例如手臂的上下左右不同方向的運(yùn)動(dòng)。喬治奧普洛斯(Georgopoulos)等人在1980年代的一系列里程碑式的工作,揭示了靈長(zhǎng)類動(dòng)物的運(yùn)動(dòng)皮層內(nèi)神經(jīng)元活動(dòng)編碼表達(dá)和控制手臂運(yùn)動(dòng)的基本原理,為侵入式運(yùn)動(dòng)腦機(jī)接口的發(fā)展奠定了理論根基。
侵入式BCI系統(tǒng)通過(guò)精確放置的微電極陣列捕獲這些電信號(hào)。這些微電極能夠檢測(cè)到單個(gè)或少數(shù)幾個(gè)神經(jīng)元的活動(dòng),從而獲取關(guān)于預(yù)期運(yùn)動(dòng)的高分辨率和高精度的數(shù)據(jù)。這些數(shù)據(jù)隨后被傳輸?shù)酵獠刻幚砥?,其中特定的解碼算法被用來(lái)解釋這些電信號(hào)。解碼算法根據(jù)神經(jīng)信號(hào)的模式,確定用戶的運(yùn)動(dòng)意圖,如移動(dòng)手臂或握拳。一旦確定了意圖,這些信號(hào)就會(huì)被轉(zhuǎn)化為具體的命令,用以控制外部設(shè)備,如計(jì)算機(jī)光標(biāo)、假肢或機(jī)械臂。這種直接從大腦到設(shè)備的信息傳輸,使得侵入式BCI能夠提供快速和精確的控制,為重度運(yùn)動(dòng)障礙患者提供了行動(dòng)自由和提高生活質(zhì)量的可能。
基于這樣的原理,在過(guò)去近20年間,侵入式運(yùn)動(dòng)腦機(jī)接口領(lǐng)域經(jīng)歷了多項(xiàng)重大突破,這些進(jìn)展極大地推動(dòng)了技術(shù)的發(fā)展和臨床應(yīng)用。2000年代早期,科學(xué)家開(kāi)始將侵入式BCI系統(tǒng)用于人類臨床試驗(yàn)。例如,基于猶他電極(Utaharray)的侵入式BCI系統(tǒng)臨床試驗(yàn)顯示,慢性截癱和四肢癱瘓患者能夠利用他們的大腦活動(dòng)來(lái)控制外部設(shè)備,如電腦光標(biāo)和機(jī)械臂,實(shí)現(xiàn)多自由度的精確運(yùn)動(dòng)控制。近年來(lái),一些研究開(kāi)始集成觸覺(jué)反饋到侵入式BCI系統(tǒng)中,通過(guò)模擬自然的觸覺(jué)感受,使用戶能夠在使用BCI控制的假肢時(shí)獲得關(guān)于力度和位置的直接反饋,這增加了系統(tǒng)的自然性和使用者的適應(yīng)性。為了提高患者的生活質(zhì)量和系統(tǒng)的便攜性,科學(xué)家努力開(kāi)發(fā)小型化和無(wú)線化的腦植入設(shè)備。這些設(shè)備減少了感染風(fēng)險(xiǎn),提高了患者的舒適度,并擴(kuò)展了BCI的日常應(yīng)用范圍。
基于這類精細(xì)運(yùn)動(dòng)控制系統(tǒng),癱瘓病人能夠?qū)崿F(xiàn)較為高效且精準(zhǔn)的光標(biāo)控制,從而實(shí)現(xiàn)與電腦的交互,以及通過(guò)打字實(shí)現(xiàn)每分鐘10個(gè)英文單詞左右速度的語(yǔ)言輸出。2021年,斯坦福大學(xué)的研究團(tuán)隊(duì)基于2個(gè)植入在手部運(yùn)動(dòng)區(qū)的猶他電極解碼想象手寫字母的精細(xì)運(yùn)動(dòng)軌跡,從而實(shí)現(xiàn)了每分鐘90個(gè)字符(約15個(gè)單詞)輸出速度的意念想象運(yùn)動(dòng)腦機(jī)接口。
基于猶他電極的侵入式BCI系統(tǒng)臨床試驗(yàn)顯示,慢性截癱和四肢癱瘓患者能夠利用他們的大腦活動(dòng)來(lái)控制外部設(shè)備,如電腦光標(biāo)和機(jī)械臂,實(shí)現(xiàn)多自由度的精確運(yùn)動(dòng)控制。
語(yǔ)言腦機(jī)接口和語(yǔ)言假體
雖然基于運(yùn)動(dòng)腦機(jī)接口可以實(shí)現(xiàn)鍵盤輸入從而實(shí)現(xiàn)語(yǔ)言交流,但這種方式仍依賴間接的交流手段,其信息傳遞速率極為受限,僅為每分鐘10個(gè)單詞左右,而人類日常的自然語(yǔ)言交流速度大約為每分鐘150個(gè)單詞。因此如何構(gòu)建腦機(jī)接口系統(tǒng)實(shí)現(xiàn)更為自然高效的信息傳輸成為重要的研究方向。語(yǔ)言表達(dá)可以被視為一種精細(xì)且復(fù)雜的運(yùn)動(dòng)控制過(guò)程,涉及大腦、聲帶、口腔以及面部肌肉的協(xié)調(diào)工作。這些運(yùn)動(dòng)由大腦的特定區(qū)域,如布洛卡區(qū)、口唇運(yùn)動(dòng)區(qū)、咽喉聲帶運(yùn)動(dòng)區(qū)等,負(fù)責(zé)協(xié)調(diào)和控制。因此,跳過(guò)鍵盤光標(biāo)等間接的通信設(shè)備,利用基于運(yùn)動(dòng)控制的腦機(jī)接口技術(shù)構(gòu)建語(yǔ)言假體實(shí)現(xiàn)直接的語(yǔ)言交流,尤其對(duì)于那些因疾病或傷害而失去傳統(tǒng)語(yǔ)言能力的人來(lái)說(shuō),是一種具有潛力的解決方案。
運(yùn)動(dòng)控制BCI系統(tǒng)通常依賴大腦運(yùn)動(dòng)皮層的信號(hào)。對(duì)于語(yǔ)言表達(dá),這意味著可以通過(guò)監(jiān)測(cè)與語(yǔ)言產(chǎn)生相關(guān)的大腦區(qū)域的活動(dòng)來(lái)實(shí)施。這些區(qū)域在準(zhǔn)備和執(zhí)行語(yǔ)言表達(dá)時(shí)活躍,例如在形成要說(shuō)的單詞和句子時(shí)。近年來(lái),隨著侵入式顱內(nèi)腦電和電生理技術(shù)的發(fā)展,一系列的研究深入揭示了這些與語(yǔ)言產(chǎn)生相關(guān)的大腦區(qū)域的神經(jīng)編碼控制原理。2013年加州大學(xué)舊金山分校的研究者在《自然》(Nature)上發(fā)表研究,通過(guò)高密度顱內(nèi)腦電揭示了額葉腹側(cè)感知運(yùn)動(dòng)皮層在自然語(yǔ)言表達(dá)生產(chǎn)過(guò)程中存在與口、唇、舌、咽等構(gòu)音器官相對(duì)應(yīng)的空間功能結(jié)構(gòu)分布。2018年,該團(tuán)隊(duì)運(yùn)用高密度顱內(nèi)腦電進(jìn)一步揭示了腹側(cè)感知運(yùn)動(dòng)皮層編碼表達(dá)了與不同語(yǔ)音元素相對(duì)應(yīng)的多構(gòu)音器官協(xié)作的構(gòu)音運(yùn)動(dòng)軌跡。理論上,通過(guò)侵入式或非侵入式電極捕捉這些神經(jīng)活動(dòng),BCI系統(tǒng)可以解碼意圖并轉(zhuǎn)換為電子語(yǔ)音輸出?;谶@樣的理論框架,2019年,該團(tuán)隊(duì)在喉部關(guān)節(jié)運(yùn)動(dòng)監(jiān)測(cè)輔助下,基于高密度皮層腦電進(jìn)行腦電到構(gòu)音器官運(yùn)動(dòng)再到聲音頻譜的英語(yǔ)短句語(yǔ)音兩步合成,在癲癇患者上高清晰度地合成了“ The proof you are seeking is not available inbooks”(你所尋找的證據(jù)在書中是找不到的)等句子?;谶@些發(fā)現(xiàn),2021年,同一團(tuán)隊(duì)在一名志愿者的腦中植入了電極,首次實(shí)現(xiàn)了非手術(shù)狀態(tài)下的實(shí)時(shí)高密度皮層腦電-英語(yǔ)短句語(yǔ)音合成和語(yǔ)音互動(dòng)。2023年,該團(tuán)隊(duì)在《自然》上報(bào)道了基于高密度皮層電極的腦電到英文語(yǔ)音/文字/面部口唇運(yùn)動(dòng)的復(fù)合多模態(tài)合成,并實(shí)現(xiàn)了平均每分鐘78個(gè)單詞的解碼合成速度。斯坦福大學(xué)團(tuán)隊(duì)在《自然》上同期報(bào)道了基于猶他電極的腦電到英文語(yǔ)音合成,實(shí)現(xiàn)平均每分鐘62個(gè)單詞的解碼合成速度。2024年,加州大學(xué)戴維斯分校的團(tuán)隊(duì)報(bào)道了一例植入4個(gè)猶他電極的癱瘓失語(yǔ)患者,通過(guò)語(yǔ)言腦機(jī)接口實(shí)現(xiàn)了在125000個(gè)單詞的英文詞匯庫(kù)上以每分鐘32個(gè)單詞的速度達(dá)到超過(guò) 97% 的解碼準(zhǔn)確率。此外,2023年,復(fù)旦大學(xué)和上海科技大學(xué)的研究者運(yùn)用術(shù)中高密度皮層腦電監(jiān)測(cè)膠質(zhì)瘤患者腦運(yùn)動(dòng)感知皮層在朗讀漢語(yǔ)時(shí)產(chǎn)生的電活動(dòng),基于漢語(yǔ)特殊的聲調(diào)編碼控制特性,實(shí)現(xiàn)高密度皮層腦電到帶聲調(diào)漢字語(yǔ)音和連續(xù)語(yǔ)句的直接合成,將語(yǔ)言腦機(jī)接口的應(yīng)用拓展到了覆蓋全球超過(guò)一半人口的聲調(diào)語(yǔ)言上。
語(yǔ)言腦機(jī)接口的應(yīng)用為受語(yǔ)言障礙影響的人群打開(kāi)了一扇大門,尤其是那些患有失語(yǔ)癥、肌萎縮側(cè)索硬化癥(ALS)或其他因素導(dǎo)致語(yǔ)言功能喪失的患者。通過(guò)將他們的神經(jīng)活動(dòng)直接轉(zhuǎn)化為語(yǔ)言,BCI可以繞過(guò)肌肉控制的聲道,使患者能夠再次與外界有效溝通。
盡管這一方法具有巨大的潛力,但在實(shí)際應(yīng)用中仍面臨一系列挑戰(zhàn)。首先,語(yǔ)言表達(dá)的大腦過(guò)程非常復(fù)雜,涉及多個(gè)大腦區(qū)域的細(xì)微協(xié)調(diào)。目前的研究主要聚焦在控制口唇運(yùn)動(dòng)的感知運(yùn)動(dòng)皮層,但語(yǔ)言交流包含更高維度的語(yǔ)義、句法、語(yǔ)用等層次。高層語(yǔ)言結(jié)構(gòu)并非局限于局部皮層活動(dòng),而是依賴廣泛的跨區(qū)域協(xié)同,如額葉-顳葉網(wǎng)絡(luò)。這一層次的神經(jīng)表征尚不完全清晰,因此,準(zhǔn)確地捕捉和解碼這些復(fù)雜的神經(jīng)模式是一大挑戰(zhàn)。此外,當(dāng)前的BCI系統(tǒng)通常需要用戶接受長(zhǎng)時(shí)間的訓(xùn)練,學(xué)習(xí)如何控制其大腦活動(dòng)以生成可識(shí)別的命令,BCI系統(tǒng)在實(shí)際應(yīng)用中面臨電極漂移、信號(hào)退化、皮層反應(yīng)變化等問(wèn)題,導(dǎo)致解碼準(zhǔn)確率隨時(shí)間波動(dòng)。最后,BCI系統(tǒng)的數(shù)據(jù)保護(hù)、授權(quán)機(jī)制、用戶控制權(quán)需法律與倫理雙重約束,目前仍是空白。
展望未來(lái)
侵入式BCI技術(shù)是一種革命性的科技,它將大腦的神經(jīng)活動(dòng)與外部設(shè)備直接連接,從而提供了恢復(fù)和增強(qiáng)人類功能的潛在可能。未來(lái)的發(fā)展將在多個(gè)關(guān)鍵領(lǐng)域取得進(jìn)展,包括硬件設(shè)備、神經(jīng)科學(xué)理解、應(yīng)用場(chǎng)景、解碼算法和腦機(jī)融合技術(shù)等。
未來(lái)的侵入式BCI系統(tǒng)將朝著更小、更智能、更安全的方向發(fā)展。微型化和無(wú)線化的電極將減少對(duì)用戶身體的侵入和損傷,同時(shí)提高植入物的舒適度和耐用性。此外,新材料的開(kāi)發(fā)可能會(huì)提高電極與神經(jīng)組織的接口性能,減少炎癥反應(yīng),延長(zhǎng)設(shè)備的使用壽命。柔性的高密度電極陣列也將提高信號(hào)采集的精度和分辨率。
未來(lái)對(duì)大腦如何編碼和處理信息的理解將不斷深入,特別是對(duì)例如記憶和意識(shí)等復(fù)雜認(rèn)知功能的神經(jīng)機(jī)制的洞察。這將幫助科學(xué)家設(shè)計(jì)更加精準(zhǔn)的BCI系統(tǒng),能夠更有效地捕捉和解釋大腦的信號(hào)。
侵入式BCI技術(shù)是一種革命性的科技,它將大腦的神經(jīng)活動(dòng)與外部設(shè)備直接連接,從而提供了恢復(fù)和增強(qiáng)人類功能的潛在可能。
此外,對(duì)大腦可塑性的更好理解將促進(jìn)BCI訓(xùn)練的效率,幫助用戶更快地適應(yīng)系統(tǒng)。
解碼算法的發(fā)展將側(cè)重于提高速度、準(zhǔn)確性和適應(yīng)性。利用深度學(xué)習(xí)和其他先進(jìn)的機(jī)器學(xué)習(xí)技術(shù),算法將更好地從復(fù)雜的神經(jīng)數(shù)據(jù)中學(xué)習(xí)和預(yù)測(cè)用戶意圖。自適應(yīng)算法將能夠?qū)崟r(shí)調(diào)整,以應(yīng)對(duì)大腦活動(dòng)隨時(shí)間的自然變化,提高BCI系統(tǒng)的長(zhǎng)期穩(wěn)定性和可靠性。
腦機(jī)融合技術(shù)將進(jìn)一步發(fā)展,以提高人類與機(jī)器接口的整合度。這包括改善用戶的感覺(jué)反饋,讓BCI設(shè)備的操作更加直觀和自然。例如,為假肢或外骨骼提供觸覺(jué)反饋,可以顯著提升用戶的操作精度和舒適度。此外,實(shí)時(shí)的反饋機(jī)制將幫助系統(tǒng)更快地調(diào)整和優(yōu)化,使得BCI設(shè)備更加智能、響應(yīng)更快。
總之,侵入式腦機(jī)接口的未來(lái)發(fā)展前景廣闊,不僅將極大地改善神經(jīng)障礙患者的生活質(zhì)量,還可能開(kāi)辟人類認(rèn)知和機(jī)器互動(dòng)的新方式。隨著科技的進(jìn)步和對(duì)大腦復(fù)雜性的進(jìn)一步理解,我們可以期待一個(gè)更加互聯(lián)的未來(lái),人腦與機(jī)器的界限將日益模糊。