堯俊瑜,鄔長(zhǎng)杰
(1.西華大學(xué)計(jì)算機(jī)與軟件工程學(xué)院,成都610039;2.電子科技大學(xué)生命科學(xué)與技術(shù)學(xué)院,成都610054 3.西華大學(xué)計(jì)算機(jī)與軟件工程學(xué)院,成都610039)
腦機(jī)接口技術(shù)研究綜述
堯俊瑜1,2,鄔長(zhǎng)杰3
(1.西華大學(xué)計(jì)算機(jī)與軟件工程學(xué)院,成都610039;2.電子科技大學(xué)生命科學(xué)與技術(shù)學(xué)院,成都610054 3.西華大學(xué)計(jì)算機(jī)與軟件工程學(xué)院,成都610039)
腦機(jī)接口技術(shù)(BCI)是多學(xué)科融合的新型人機(jī)結(jié)合技術(shù),在生活、醫(yī)療和娛樂(lè)方面都有極大的前景。簡(jiǎn)要介紹現(xiàn)有腦機(jī)接口技術(shù)的類型,并對(duì)國(guó)內(nèi)外研究現(xiàn)狀和發(fā)展前景做闡述。
1875年,英國(guó)物理學(xué)家Richard Caton首次發(fā)現(xiàn)大腦上的電流信號(hào),其后各國(guó)科學(xué)家紛紛對(duì)其展開了研究。隨著研究的不斷深入,出現(xiàn)了一個(gè)各學(xué)科融合的研究領(lǐng)域——腦機(jī)接口。所謂的腦機(jī)接口即不依賴身體的神經(jīng)通路和肌肉的一種通信系統(tǒng)[1]。腦機(jī)接口技術(shù)在生活、醫(yī)療、和軍事上都有重要的應(yīng)用前景,隨著BCI研究的不斷進(jìn)步,必將在各個(gè)領(lǐng)域綻放異彩。
腦機(jī)接口按電極所處的位置來(lái)劃分,可以分為植入型腦機(jī)接口和非植入型腦機(jī)接口。
其中植入式BCI需要通過(guò)手術(shù)將信號(hào)采集探針?lè)湃腼B內(nèi),從而采集腦電信號(hào)。長(zhǎng)期放置探針具有很高的風(fēng)險(xiǎn),一般主要用于癲癇患者和動(dòng)物被試。植入型腦機(jī)接口采集的是皮層腦電,主要有兩種采集方式,一個(gè)是采集峰電位,另一個(gè)是局部場(chǎng)電位。
(1)鋒電位
鋒電位會(huì)在受到刺激后600ms內(nèi)出現(xiàn),在鋒電位出現(xiàn)的時(shí)候,該神經(jīng)纖維處于絕對(duì)不應(yīng)期。這一特性保證了一個(gè)信息的獨(dú)立性,從而適合在腦機(jī)接口中應(yīng)用。
Schwartz[1]團(tuán)隊(duì)實(shí)現(xiàn)猴子利用鋒電位控制三維空間內(nèi)的機(jī)械手臂抓取食物。試驗(yàn)中如圖1將猴子固定住,并將機(jī)械手臂放置在猴子肩部附近,猴子利用鋒電位信息控制機(jī)械手臂抓取隨機(jī)放置的食物。
圖1 猴子利用鋒電位抓取三維空間中的食物
(2)局部場(chǎng)電位
局部場(chǎng)電位信號(hào)是局部神經(jīng)元突觸活動(dòng)電信號(hào)的綜合反映,它不單是簡(jiǎn)單信號(hào)的疊加,同時(shí)攜帶了神經(jīng)元信號(hào)傳遞過(guò)程中的時(shí)間及空間信息[3],所以與鋒電位相比較而言更能反映大腦局部區(qū)域信息輸入以及處理的過(guò)程。而且,局部場(chǎng)電位受電極植入時(shí)間的影響比鋒電位更小,所以局部場(chǎng)電位將來(lái)更有可能應(yīng)用于腦-機(jī)接口。另外,與腦-機(jī)接口技術(shù)中常用到的另一種腦電信號(hào)——頭皮腦電信號(hào)信號(hào)相比,局部場(chǎng)電位由于是由微電極陣列采集到的皮層內(nèi)腦電信號(hào),是更直接地反映大腦中電位變化的信號(hào),所以表現(xiàn)出更好的特異性。所以說(shuō),局部場(chǎng)電位信號(hào)是介于鋒電位信號(hào)與皮層腦電信號(hào)之間的一種信號(hào),具有解碼的長(zhǎng)期性以及特異性等優(yōu)點(diǎn),在將來(lái)應(yīng)用于臨床研究中具有很大的潛力。
O.Donchin[2]等對(duì)猴子進(jìn)行了局部場(chǎng)電位實(shí)驗(yàn),他們將電極植入其初級(jí)運(yùn)動(dòng)皮層,然后讓猴子分別用左右手轉(zhuǎn)動(dòng)轉(zhuǎn)盤,同時(shí)記錄猴子運(yùn)動(dòng)區(qū)的腦電信息,發(fā)現(xiàn)記錄到的場(chǎng)電位的信號(hào)和猴子轉(zhuǎn)動(dòng)轉(zhuǎn)盤的方向有一定的相關(guān)性,會(huì)隨著轉(zhuǎn)動(dòng)方向的變化而變化。Hansjorg[3]等對(duì)大鼠采集后頂葉皮層的腦電信號(hào),分析大鼠在抓取和掃視模式下的LFP的時(shí)域和頻域特征后,成功對(duì)這兩種行為進(jìn)行了預(yù)測(cè)。
非植入式BCI是直接采集頭皮腦電,其所帶的信息比植入式所采集到的腦電信號(hào)所帶的信息量要少,分辨率也更低。但是因?yàn)槠涫菬o(wú)創(chuàng)性的,所以便捷性和安全性更高。
(1)腦磁圖
腦磁圖(Magnetoenephalography,MEG)是記錄的是大腦內(nèi)部微弱電流所產(chǎn)生的磁場(chǎng)信號(hào)[4]。通過(guò)磁共振儀器把這些磁場(chǎng)信號(hào)采集下來(lái),形成一個(gè)立體的磁場(chǎng)分布圖,就是腦磁圖。它可以反映腦的磁場(chǎng)變化,當(dāng)大腦活動(dòng)或某一區(qū)域病變時(shí),腦磁圖會(huì)有明顯的變化,從而在醫(yī)療診斷上有極高的應(yīng)用。紅外腦功能光學(xué)成像(fNIRS)和功能磁共振成像(fMRI)等已經(jīng)用于腦機(jī)接口。圖賓根大學(xué)已經(jīng)提出了基于fMRI的腦機(jī)接口的明確架構(gòu),并實(shí)現(xiàn)了實(shí)時(shí)系統(tǒng),且將其應(yīng)用于了神經(jīng)康復(fù)及虛擬環(huán)境交互等方面[5]。
(2)頭皮腦電
①P300事件相關(guān)電位
P300是通過(guò)一些突發(fā)性的刺激誘發(fā)出來(lái)的腦電,在受到這種小概率事件的刺激后,會(huì)在300ms左右出現(xiàn)一個(gè)正電位?;赑300的腦機(jī)接口可直接進(jìn)行使用,不需要進(jìn)行訓(xùn)練。但是隨著對(duì)刺激的熟悉程度加深,所刺激出來(lái)的P300波的質(zhì)量會(huì)有所下降。
Sutton在進(jìn)行oddball實(shí)驗(yàn)時(shí)最早發(fā)現(xiàn)了P300。后來(lái)Farwell等人設(shè)計(jì)了基于P300的虛擬打字機(jī)[6]。Rebsamen等設(shè)計(jì)了基于P300電位的智能輪椅[7]。華南理工大學(xué)龍錦益等利用運(yùn)動(dòng)想象和P300電位的搭建的輪椅控制BCI[8]。
②運(yùn)動(dòng)起始視覺(jué)誘發(fā)電位
運(yùn)動(dòng)起始視覺(jué)誘發(fā)電位(motion-onset Visual Evoked Potential,mVEP)由快速運(yùn)動(dòng)的視覺(jué)刺激誘發(fā)產(chǎn)生,在所有與運(yùn)動(dòng)相關(guān)的視覺(jué)誘發(fā)電位中,運(yùn)動(dòng)起始視覺(jué)誘發(fā)電位擁有最小的被試間差異和被試內(nèi)差異以及最大的幅度[9]。由于mVEP采用運(yùn)動(dòng)屬性作為刺激模式,因此刺激器不需要高亮度和高對(duì)比度,基于mVEP的BCI因?yàn)楸苊饬碎W爍刺激,從而可以減輕被試的視覺(jué)疲勞,更加具有實(shí)用性。
清華大學(xué)劉濤等使用運(yùn)動(dòng)起始視覺(jué)誘發(fā)電位搭建的網(wǎng)頁(yè)搜索和瀏覽BCI[10]。電子科技大學(xué)腦機(jī)接口團(tuán)隊(duì)使用運(yùn)動(dòng)起始視覺(jué)誘發(fā)電位開發(fā)出一套BCI系統(tǒng),可以實(shí)現(xiàn)跑酷游戲的操作。
(3)穩(wěn)態(tài)視覺(jué)誘發(fā)電位(SSVEP)
穩(wěn)態(tài)視覺(jué)誘發(fā)電位的腦機(jī)接口是經(jīng)過(guò)不同頻率閃爍刺激產(chǎn)生的。研究表明,當(dāng)人眼注視到頻率大于4Hz的周期性視覺(jué)閃爍刺激時(shí),會(huì)在大腦中產(chǎn)生一種周期性響應(yīng)的SSVEP。從記錄到的頭表EEG信號(hào)中,可以觀測(cè)到和閃爍頻率相關(guān)的基波及其諧波[11]。因此,只需要分析采集到的腦電,就可以識(shí)別出被試所注視的虛擬按鍵,從而實(shí)現(xiàn)腦機(jī)交互。SSVEP的頻譜穩(wěn)定而且信噪比高,但是,長(zhǎng)時(shí)間的閃爍刺激很容易讓被試產(chǎn)生視覺(jué)疲勞,嚴(yán)重時(shí)甚至?xí)T發(fā)癲癇[12]。
Jacques Vidal等人設(shè)計(jì)了一套視覺(jué)誘發(fā)電位的系統(tǒng),實(shí)現(xiàn)了對(duì)光標(biāo)移動(dòng)的控制,并首次使用“腦機(jī)接口(Brain-Computer Interface)”這一詞來(lái)描述基于計(jì)算機(jī)的能獲取大腦功能信息的系統(tǒng),這便是腦機(jī)接口技術(shù)研究的雛形[13]。
Mc Millan和Calhoun對(duì)穩(wěn)態(tài)視覺(jué)電位進(jìn)行了研究,基于SSVEP設(shè)計(jì)了一套系統(tǒng),該系統(tǒng)可以對(duì)其空軍基地的飛行模擬器進(jìn)行操控。國(guó)內(nèi)也有研究團(tuán)隊(duì)對(duì)SS?VEP進(jìn)行了深入研究,清華大學(xué)開發(fā)了一套能夠撥打語(yǔ)音電話,能夠?qū)照{(diào)電視進(jìn)行操作的系統(tǒng)。
(4)皮層慢電位
皮層慢電位是從頭皮記錄的EEG中最慢的頻率成分。持續(xù)時(shí)間可達(dá)幾秒,是自發(fā)腦電的一種,能反映大腦皮層的興奮狀態(tài)。SCP會(huì)根據(jù)大腦的興奮程度不同而呈現(xiàn)出不同的電位情況。研究表明SCP是可控的,在經(jīng)過(guò)一定時(shí)間的訓(xùn)練之后,被試能夠控制SCP的變化,進(jìn)而可以用來(lái)作為BCI的控制信號(hào)。
Birbaumer[14]等基于EEG的慢皮層電位設(shè)計(jì)了字母輸出BCI,Wadworth中心的wolpaw等基于EEG的mu節(jié)律和beta節(jié)律成份所構(gòu)建的二維甚至三維光標(biāo)控制BCI,其準(zhǔn)確率達(dá)75%。
(5)α節(jié)律
研究表明:在閉眼狀態(tài)下采集到的α波明顯比睜眼狀態(tài)下采集到的α波幅值要高。經(jīng)過(guò)一定的訓(xùn)練后,被試就能控制α波幅值的大小。將其用作腦機(jī)接口的控制信號(hào)也有良好的實(shí)驗(yàn)效果。Dewan利用α波在閉眼時(shí)幅值增大以及睜眼時(shí)阻斷的現(xiàn)象,來(lái)自主控制發(fā)送Morse電報(bào)碼[15]。
(6)基于運(yùn)動(dòng)想象的μ節(jié)律和β波
研究證實(shí),運(yùn)動(dòng)想象能夠?qū)\(yùn)動(dòng)殘疾的康復(fù)很有作用。Linden[16]等人報(bào)道,老年婦女能夠采用運(yùn)動(dòng)想象和物理治療來(lái)達(dá)到更好的平衡特性,這種平衡性以步行平衡和足部安置措施作為衡量標(biāo)準(zhǔn)。
Fairweather and Sideway[16]發(fā)現(xiàn)運(yùn)動(dòng)想象能夠減少慢性背痛病人的疼痛,并且能改善脊柱畸形病人的姿勢(shì)。浙江大學(xué)的黃麗鵬在參加挑戰(zhàn)不可能時(shí),用運(yùn)動(dòng)想象結(jié)合肌電成功控制大鼠穿過(guò)迷宮。
目前腦機(jī)接口正在高速發(fā)展時(shí)期,還有很長(zhǎng)的路要走。腦機(jī)接口最大的優(yōu)勢(shì)就是建立了一條直接用計(jì)算機(jī)和大腦進(jìn)行通信的通路。但是這個(gè)特性給腦機(jī)接口帶來(lái)優(yōu)勢(shì)的同時(shí)卻也帶來(lái)了挑戰(zhàn)。
(1)通信速度慢。BCI系統(tǒng)采集到腦電信后需要對(duì)其進(jìn)行處理,然后才能轉(zhuǎn)換成機(jī)器語(yǔ)言而被電腦所接受,在BCI使用過(guò)程中時(shí)常需要多次刺激和反饋。受到種種原因的限制,腦機(jī)接口的通信速度還比較低。目前,基于P300的BCI最大信息轉(zhuǎn)換速度為20-25bit/min,基于視覺(jué)誘發(fā)的BCI稍高,其通信速率也只有60-100bit/min。這樣的信息轉(zhuǎn)換效率還達(dá)不到正常交流的水平[17]。
(2)精度低。目前的BCI系統(tǒng)(包括自發(fā)腦電和誘發(fā)腦電)精度都還比較低,基于自發(fā)腦電的任務(wù)識(shí)別率平均只有80%[18],而基于誘發(fā)腦電的控制準(zhǔn)確率比自發(fā)腦電稍高,但是對(duì)于一套控制系統(tǒng)來(lái)說(shuō),這樣的精度還達(dá)不到使用要求。越復(fù)雜的腦機(jī)接口系統(tǒng),控制指令就越多,相應(yīng)的準(zhǔn)確度就更低,這給BCI的實(shí)際應(yīng)用帶來(lái)了不小的挑戰(zhàn)。
(3)適應(yīng)性差。腦電信號(hào)的幅值非常小,并且并不平穩(wěn),在腦電信號(hào)的采集過(guò)程中,不可避免的會(huì)受到其他信號(hào)干擾。在腦電采集的時(shí)候?qū)Νh(huán)境的要求比較高,當(dāng)環(huán)境中的噪聲比較高的時(shí)候,會(huì)降低BCI系統(tǒng)的精度。
(4)便攜性差。目前BCI大多是基于PC平臺(tái)的,便攜性差。而基于前入式的BCI由于處理器處理速度較慢,所以信息傳輸率也更低。
腦機(jī)接口技術(shù)是在近年來(lái)才快速發(fā)展的一門新興學(xué)科,必然會(huì)存在很多的問(wèn)題。但隨著BCI研究的不斷深入,逐漸體現(xiàn)出巨大的應(yīng)用前景。
醫(yī)學(xué)上,腦機(jī)接口能夠幫助醫(yī)生進(jìn)行診斷,可以通過(guò)腦機(jī)接口系統(tǒng)實(shí)時(shí)監(jiān)測(cè)病人狀態(tài),還可以幫助喪失行動(dòng)能力的人進(jìn)行正常的生活。
軍事領(lǐng)域中,近年來(lái)美軍陸續(xù)提出“感知操控”“代理戰(zhàn)士”等概念[19-20],認(rèn)知領(lǐng)域必然是未來(lái)軍事發(fā)展的重要關(guān)注點(diǎn),而人機(jī)結(jié)合的武器無(wú)疑是重點(diǎn)研究方向。
娛樂(lè)中,腦控游戲?qū)?huì)是游戲界的下一次革命。
BCI技術(shù)的研究會(huì)有助于我們一點(diǎn)一點(diǎn)剖開神秘的大腦,提高我們對(duì)生命科學(xué)的認(rèn)識(shí)。
本文介紹了腦機(jī)接口的基本情況和未來(lái)發(fā)展的挑戰(zhàn)和展望。目前的腦機(jī)接口系統(tǒng)距離廣泛的使用還有很長(zhǎng)的一段路要走。但是隨著技術(shù)的不斷嫻熟,相信腦機(jī)接口一定會(huì)應(yīng)用于現(xiàn)實(shí)生活中各個(gè)領(lǐng)域,造福人類。
[1]周鵬.基于運(yùn)動(dòng)想象的腦機(jī)接口的研究[D].天津:天津大學(xué),2007:1-15.
[2]Theresa M.Vaughan,Jonathan R.Wolpaw,Emanuel Donchin,EEG-based Communication:Prospects and Problems.IEEE Transactions on Rehabilitation Engineering,1996,4(4):425-430.
[3]urtscheller G,BrunnerC,Leeb R,et a1.TheGrazBrain—Computerinterface[J].BrainCompInterfaces,2010:79.76. DOI:10.1007/978-3-642-02091~-5.
[4]Vaughan,et al.Brain-Computer Interface Technology:A Review of the Second International Meeting,IEEE Transactions On Neural Systems Rehabilitation Engineering,2003,11(2):94-109.
[5]Lima MAA,Coury DV,Cerqueira AS,et a1.A Method Based Onindependent Component Analysisforadaptive Decompositionofmuhiple Power Quality Disturbances[J].Int J Control Autom ElectrSyst,2014,25(1):80-92.DOh 10.10071s40313-013-0088.0.
[6]Jiang J,Zhou Z,Yin E,et a1.Hybrid brain-Computer Interface(BCI)Based on the EEG and EOG Signals[J].Biomed MaterEng,2014,24(6):2919-2925.DOh 10.3233/BME.141111.
[7]Hansjorg Scherberger,Murray R.javis,and Richard A.Andersen.Cortical Local Field Potential Encodes Movement Intentions in the Posterior Parietal Cortex[J].Neuron.April 2013,46:347-354.
[8]Sebastien Roux,William A.Mackay,Alexa Riechle.The Pre-Movement Component of Motor Cortical Local Field Potentials Reflects the Level of Expectancy[J].Behavioural Brain Research,2006,2(169):335-351.
[9]Vidal JJ.Real-Time Detection of Brain Events in EEG,Proceedings of IEEE,1977,65(5):633-664.
[10]Lotze M,Cohen LG,2006.Volition and Imagery in Neurorehabilitation.Cogn Behav Neurol1 9:135-140.
[11]J.R.Wolpaw,D.J.Mc Farland,T.M.Vaughan,and G.Schalk.The Wadsworth Center Brain-Computer Interface(bci)Research and Development Program.IEEE Transactions on Neural Systems and Rehabilitation Engineering,vol.11,pp.204-207,2003.
[12]史麗娟,許劉,楊何.基于α波控制的新型異步腦機(jī)接口技術(shù)研究進(jìn)展.國(guó)際生物醫(yī)學(xué)工程雜志,2017,240(1).
[13]FARWELL L A,DONCHIN E.Talking Off the Top of Your Head:Toward a Mental Prothesis Utilizing Event-Related Brain Potentials[J].Electroenceph Clin Neurophysiol,1988,70(6):510-523.
[14]REBSAMEN B,GUAN G T,ZHANG H H,et al.A Brain Controlled Wheelchair to Navigate in Familiar Environments[J].IEEE Transactions on Neural System and Rehabili-tation Engineering,2010,18(6):590-598.
[15]D.J.Mc Farland,W.A.Sarnacki,and J.R.Wolpaw.Electroencephalographic(eeg)Control of Three-Dimensional Movement.J.Neural Eng.,vol.7,p.036007,2010
[16]S.Coyle,T.Ward,C.Markham,and G.Mc Darby.On the Suitability of Near-Infrared(nir)Sysems for Next-Generation Brain-Computer Interfaces.Physiology Measurement,vol.25,no.4,pp.815–822,2004.
[17]N.Weiskopf,K.Mathiak,S.W.Bock,F.Scharnowski,R.Weith,W.Grodd,R.Goebel,and N.Birbaumer.Principles of a Brain-Computer Interface(bci)Based on Real-Time Functional Magnetic Resonance Imaging(fmri).IEEE Transactions on Biomedical Engineering,vol.51,no.6,pp.966-970,2004.
[18]雷旭,堯德中.同步腦電-功能磁共振(EEG-fMRI)原理與技術(shù)[M].科學(xué)出版社,2014,16-26.
[19]B.Allison,T.Luth,Valbuena D,et al.BCI Demographics:How Many(and What Kinds of)People Can Use an SSVEP BCI?[J].Neural Systems and Rehabilitation Engineering,IEEE Transactions on,2010,18(2):107-116.
[20]Wang Y,Doleschel S,Wunderlinch R,et al.Evaluation of Digital Compressed Sensing for Real-Time Wireless ECG System with Bluetooth Low Energy[J].J Med Syst,2016,40(7):170.
Review of Brain-Computer Interface Technology Research
YAO Jun-yu1,2,WU Chang-jie3
(1.School of Computer and Software Engineering,Xihua University,Chengdu 610039;
2.School of Science and Technology,University of Electronic Science and Technology of China,Chengdu 610054;3.School of Computer and Software Engineering,Xihua University,Chengdu 610039)
Brain computer interface(BCI)technology is a multi-disciplinary integration of new man-machine technology,in life,health and entertain?ment have great prospects.Briefly introduces the types of existing brain-computer interface technology,and expounds the current research situation and development prospect at home and abroad.
1007-1423(2017)27-0080-05
10.3969/j.issn.1007-1423.2017.27.018
腦機(jī)接口;腦電信號(hào);電位
堯俊瑜(1993-),男,重慶人,碩士研究生,研究方向?yàn)橛?jì)算機(jī)科學(xué)與技術(shù)
鄔長(zhǎng)杰(1992-),男,四川內(nèi)江人,碩士研究生,研究方向?yàn)橛?jì)算機(jī)科學(xué)與技術(shù)
2017-06-06
2017-08-25
Brain Computer Interface;EEG;Electric Potential