基于多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實及增強現(xiàn)實技術在神經(jīng)外科教學中的應用

李文濤+++貢桑明久++任春瑩+魏艷+孟喜君

[摘要] 神經(jīng)解剖比較復雜，不容易掌握。手術操作的難度較大，對微創(chuàng)和精細程度具有較高的要求，除此之外，神經(jīng)外科手術的教學培訓和解剖手段比較有限?，F(xiàn)階段有關虛擬現(xiàn)實技術在神經(jīng)外科教學和臨床中的應用已有報道，但是有關增強現(xiàn)實技術在神經(jīng)外科教學中的應用卻少有報道。本文對基于多模態(tài)功能神經(jīng)導航計劃平臺進行了介紹，實現(xiàn)增強現(xiàn)實和虛擬現(xiàn)實，并對虛擬現(xiàn)實及增強現(xiàn)實技術在神經(jīng)外科教學中的應用進行了分析和探討。

[關鍵詞] 多模態(tài)功能神經(jīng)導航；虛擬現(xiàn)實；增強現(xiàn)實；神經(jīng)外科教學

[中圖分類號] R651 [文獻標識碼] A [文章編號] 1673-7210（2017）11（c）-0187-03

Application of virtual reality and augmented reality technology based on multimodal functional navigation in neurosurgical teaching

LI Wentao1 GONGSANG Mingjiu2 REN Chunying1 WEI Yan1 MENG Xijun1

1.Department of Neurosurgery， the First Affiliated Hospital of Xi'an Jiaotong University， Shaanxi Province， Xi'an 710061， China； 2.Department of Cerebral Surgery， Tibet People's Hospital of Ali Area， Tibet Autonomous Region， Ali 859000， China

[Abstract] Neuroanatomy is complicated and difficult to master. The operation is difficult and it has higher requirements for minimally invasive and meticulous level. In addition， the teaching， training and dissection methods of department of neurosurgery operation are limited. At present， the application of virtual reality technology in department of neurosurgery teaching and clinical practice has been reported， but there are few reports about the application of augmented reality technology in neurosurgical teaching. This paper introduces the multimodal neuronavigation planning platform， virtual reality and augmented reality technology in neurosurgical teaching are analyzed and discussed.

[Key words] Multimodal functional navigation； Virtual reality； Augmented reality； Neurosurgical teaching

在神經(jīng)外科解剖教學中，傳統(tǒng)教學主要依靠尸體、教學模型、解剖圖譜以及文字等，術前手術計劃以及模擬手術過程等臨床教學則主要依靠高年資醫(yī)師帶教、現(xiàn)場觀摩以及二維圖片等，而對于神經(jīng)功能的可塑化教學等內(nèi)容，則是憑空想象[1]。傳統(tǒng)教學模式的效率不高，而且枯燥乏味，無法標準化、規(guī)范化實施，進而對神經(jīng)外科的教學發(fā)展造成了嚴重影響，制約了青年神經(jīng)外科醫(yī)師的培養(yǎng)。在現(xiàn)代醫(yī)學技術快速發(fā)展和進步的過程中，虛擬現(xiàn)實和增強現(xiàn)實技術也得到了快速完善和更新，并在一定程度上為神經(jīng)外科教學帶來了技術變革。

1 虛擬現(xiàn)實和增強現(xiàn)實技術的分析

虛擬現(xiàn)實技術是指通過電腦模型形成模擬世界，讓使用者通過三維空間獲得感官方面的模擬，使其身臨其境，不受限制地對三維空間內(nèi)的事物進行及時觀察[2]。虛擬現(xiàn)實技術重視沉浸感，讓使用者在實際使用過程中不能有效區(qū)分真實和虛擬環(huán)境。增強現(xiàn)實技術不但能構建虛擬世界，更加重視融合真實世界和虛擬世界，在同一空間中實時疊加真實物體和虛擬世界?，F(xiàn)階段在航空模擬領域以及軍事模擬領域中，虛擬現(xiàn)實和增強現(xiàn)實技術的應用非常廣泛，并開始廣泛應用于醫(yī)學領域。

在醫(yī)學領域中應用虛擬現(xiàn)實和增強現(xiàn)實技術，應實現(xiàn)以下步驟：①采集處理數(shù)據(jù)和構建3D模型。采用DICOM格式存儲血管造影、MRI以及CT等影像學檢查技術所獲得的結果，并可在大部分現(xiàn)有技術平臺中應用。選擇面繪制或者體繪制方法來進行3D模擬重建。②顯示3D模擬?，F(xiàn)階段的3D顯示方法主要包括投射式顯示、穿透式顯示、視頻式顯示。為了讓圖像疊加的準確性顯著提高，每一種顯示方法都需要跟蹤定位術者眼位或者頭部、顯示屏以及攝像頭，讓3D圖像的顯影準確性能顯著提高。現(xiàn)階段常用的跟蹤定位方法主要為電磁跟蹤和紅外光學跟蹤。③注冊圖像。在圖像中準確疊加附加信息時，注冊過程是最后一步，同時也是最困難的一步?，F(xiàn)階段常用的方法為交互式注冊方法，也就是在患者身上和3D模型上定位能辯別的標志物，通過對這些標志物進行重疊計算，來正確重疊全部圖像。然而對于實施注冊的問題，現(xiàn)階段的注冊方法無法有效解決。術中腦脊液釋放、重力作用、組織塌陷等均會引起注冊偏差。endprint

2 基于多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實及增強現(xiàn)實技術在神經(jīng)外科教學中的應用

2.1 教學模擬

在神經(jīng)外科的教學活動中，常用方法包括高年資帶教、現(xiàn)場觀摩、尸體、動物、模型以及圖譜等，但是這些教學方式都有一定的不足之處。模型不具備真實性，圖譜則不具備立體感，動物解剖結構則存在一定程度的變異，尸體不具備可重復性，而且價格比較貴。高年資帶教、手術現(xiàn)場觀摩的缺點則主要為缺乏實際操作經(jīng)驗、感染發(fā)生率高、不能重復等。應用虛擬現(xiàn)實技術能對特定患者或者正常人的3D顱腦模型進行模擬重建，讓低年資醫(yī)生和醫(yī)學生能對特定區(qū)域進行反復、隨時解剖，而且能從不同角度進行觀察，也不會讓患者的風險和費用增加?，F(xiàn)階段在神經(jīng)外科教學中，應用虛擬現(xiàn)實技術主要是識別特定解剖結構等常規(guī)教學，另外也可以用來學習新技術或特定的復雜病例。臨床研究發(fā)現(xiàn)，采用基于immersive touch平臺的腦室穿刺模擬，能讓臨床醫(yī)師更好地了解和掌握腦室造瘺技術[3]。有學者通過virtual temporal bone系統(tǒng)成功再現(xiàn)巖骨的神經(jīng)和血管走行、內(nèi)耳結構[4]，利用該系統(tǒng)能讓使用者有效模擬巖骨磨除過程和巖骨不同手術入路。通過跟蹤調(diào)查使用者發(fā)現(xiàn)，應用虛擬現(xiàn)實技術能讓學習者更好地了解和認識手術操作和相關解剖知識。

2.2 術前計劃

在采用手術方式治療深部病變和復雜顱底病變時，手術計劃是否詳細，會對手術風險以及手術并發(fā)癥的發(fā)生造成直接影響。應用虛擬現(xiàn)實技術，能讓病變充分暴露在3D層面，讓術者能充分了解病變和周邊重要結構的關系，而且能從不同入路讓病變充分暴露，進而讓手術方式的安全性顯著提高。有臨床研究報道顯示[5]，采用dextroscope系統(tǒng)能對手術入路進行確定，并選擇合理的動脈瘤夾。結合臨床具體情況，術前應對手術患者進行常規(guī)輔助檢查，如PET、MRA、MRV、MRA、MRI以及CT等，同時給予fMRI和DTI檢查，分別進行功能區(qū)皮層的定位和傳導束的重建。利用導航軟件平臺，能有效實現(xiàn)功能皮層、傳導束以及病變等結構的三維可視化。教師和學生能對病變和重要功能結構、解剖結構的三維關系進行各種角度的觀察，進而為手術入路的制訂提供科學依據(jù)，讓手術計劃更加合理。

2.3 模擬手術過程

手術麻醉后，協(xié)助患者選擇合理的體位，選擇頭架對患者頭部進行固定。將導航參考架安裝好，注冊導航，并對精確程度進行驗證。疊加并配準術前采集的相關解剖數(shù)據(jù)信息、重建的功能結構、病變結構和患者的真實顱腦，利用顯微鏡下功能神經(jīng)導航系統(tǒng)和顯微鏡目鏡能透過術區(qū)或頭皮直接觀看功能結構和病變結構，能對功能結構和病變結構的體表投影進行程序化勾畫，進而為設計合理的皮層和骨瓣造瘺口、頭皮切口的位置提供科學依據(jù)。術中通過顯微鏡功能神經(jīng)導航下的功能結構和病變結構的可視化能讓手術變得有理有據(jù)，更加直觀和簡單。能對腫瘤邊界、手術操作位置及其與功能結構的關系進行直觀和實時判斷，進而讓手術安全性顯著提高[6]。譬如，對1例右側顳葉深部膠質瘤患者進行手術時，按照準備流程將影像資料、解剖數(shù)據(jù)及體表定位等準備工作完善后即可注冊建立對應的神經(jīng)功能導航，并三維重建出腫瘤形狀、腫瘤周圍重要神經(jīng)傳導束，并顯示出腫瘤周圍重要功能皮層區(qū)域且可以予以標注區(qū)分。根據(jù)神經(jīng)導航結果及三維重建的腫瘤與周圍重要結構關系選擇最適宜的手術切口，適度調(diào)整皮層入路，盡量減少對重要傳導束、動靜脈血管的損傷，以實現(xiàn)盡量保存對應軀體功能的目的。且在這一過程中，觀摩人員均可在儀器的顯示設備上清楚地看到重建的腫瘤、神經(jīng)傳導束、重要動靜脈血管及皮層功能區(qū)等，提問、學習和交流即時進行。虛擬現(xiàn)實和增強現(xiàn)實技術的實現(xiàn)過程不但是教學過程，同時也是醫(yī)療過程，能讓醫(yī)療過程和教學過程融為一體，讓臨床資源得以高效和充分地利用。神經(jīng)功能評估和術后影像復查，也充分驗證了虛擬現(xiàn)實和增強顯示技術的可靠性和穩(wěn)定性，能讓神經(jīng)外科教學更加直觀和生動。

2.4 功能神經(jīng)結構解剖教學

因病變存在高級功能區(qū)的重塑，而且高級功能的結構存在個體化差異，所以無法有效判斷病理狀態(tài)下功能皮層的位置以及皮層下白質纖維束的走行。通過虛擬技能能對不同情況下皮層功能結構的位置進行充分了解和準確判斷，進而更好地理解功能的可塑性。深部白質缺乏有效的參考標志，利用虛擬技術則能對病變情況進行明確，同時還能對占位效應條件病變和白質纖維束的三維位置關系進行明確，能對重要傳導束白質內(nèi)的形態(tài)和走行進行全程觀看。

3 討論

在神經(jīng)外科教學中，以往主要是利用板書、口頭傳達、人體、標本以及掛圖等輔助教學工具來開展教學互動。在社會科學技術快速發(fā)展和進步的今天，多媒體教學開始成為了現(xiàn)階段的主要教學模式，多媒體教學集合了動畫、視頻、文字以及圖像等信息。虛擬現(xiàn)實和增強現(xiàn)實技術的應用徹底改變了以往教師的主導地位，能讓學習者的積極性和主動性得以充分發(fā)揮，讓教學活動更加積極、活潑和生動[7]。傳統(tǒng)教學模式下，學生所獲得的知識主要為間接知識，采用虛擬現(xiàn)實和增強現(xiàn)實技術能為學習者構建一般人不能接觸到的環(huán)境，或者不存在的世界，或者是無法在真實世界中看到的信息，讓學習者的學習和觀察更加形象、直觀，能徹底改變傳統(tǒng)教學模式在空間和時間方面的限制[8]。如果能將基于多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術與互聯(lián)網(wǎng)平臺的數(shù)據(jù)傳輸、存儲和處理相結合，則能在全國范圍內(nèi)進行規(guī)范化和標準化的神經(jīng)外科教學活動，徹底改變神經(jīng)外科的教學模式。

術前二維信息是傳統(tǒng)手術計劃教學的主要依據(jù)，如磁共振影像、CT檢查等。神經(jīng)外科教師利用顱骨、頭皮的標記，采用尺子測量換算來進行定位。淺部病變能粗略定位，占位效應顯著的病變和深部病變則不能有效定位。術前計劃教學缺乏依據(jù)和標準，進而對教學效果造成影響?；诙嗄B(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術，則能讓病變定位問題得以有效解決[9]。基于多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術能對病變進行準確定位，但無法為定位功能結構提供有效幫助。利用基因多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術的術前計劃系統(tǒng)，能整合二維影像，形成立體、直觀的三維影像，對重要功能結構進行清晰顯示，而且還能形成虛擬的手術環(huán)境，制訂科學合理的術前計劃。利用三維可視化可以對病變及其周邊重要功能結構的關系進行全方位和多角度展示，最終讓手術計劃達到最優(yōu)[10]。endprint

總之，傳統(tǒng)神經(jīng)外科教學模式的效率較低，無法標準化和規(guī)范化開展，進而對神經(jīng)外科教學的發(fā)展、培養(yǎng)青年神經(jīng)外科醫(yī)師都造成了嚴重的影響。應用基于多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術，能從根本上改變神經(jīng)外科的教學模式。在神經(jīng)外科教學中應用基因多模態(tài)功能神經(jīng)導航的虛擬現(xiàn)實和增強現(xiàn)實技術，能讓神經(jīng)功能結構和解剖結構實現(xiàn)三維可視化，進而顯著提高教學質量，而且還能使教學更加標準化與規(guī)范化，在對青年神經(jīng)外科醫(yī)師進行培養(yǎng)時，有效縮短時間，具有推廣價值。

[參考文獻]

[1] 王東梅，楊繼梅.標識在神經(jīng)外科手術顯微器械管理中的應用[J].中國實用神經(jīng)疾病雜志，2017，20（4）：137-138，139.

[2] 由娜.利用PDCA循環(huán)法對神經(jīng)外科植入器械管理的研究[J].中國實用神經(jīng)疾病雜志，2017，20（1）：125-127.

[3] 劉鳳，白俊超.神經(jīng)外科手術室貴重精密器械設備的安全管理與使用[J].中國實用神經(jīng)疾病雜志，2013，16（21）：68-69.

[4] 葉建蘭，笪虎.銳利器械保護套在神經(jīng)外科精細器械處置中的應用[J].國際護理學雜志，2016，35（8）：1146-1147.

[5] DeRibaupierre S，Wilson TD. Construction of a 3-D anatomical model for teaching temporal lobectomy [J]. Comput Biol Med，2012，42（6）：692-696.

[6] 趙杰.神經(jīng)外科手術器械儀器管理[J].醫(yī)藥前沿，2014，6（21）：375.

[7] 王海云，王國林.神經(jīng)外科麻醉?？漆t(yī)師培養(yǎng)體系的建立與實施[J].臨床麻醉學雜志，2017，33（5）：421-424.

[8] 徐宇倫，王磊，楊辰龍，等.顯微神經(jīng)外科手術設備器械培訓教學的探索與實踐[J].中國醫(yī)學裝備，2016，13（6）：125-126，127.

[9] 寸恩浩，楊軍，陳素華，等.Destroscope虛擬現(xiàn)實系統(tǒng)在顯微神經(jīng)外科教學中的應用[J].繼續(xù)醫(yī)學教育，2015，29（6）：14-15.

[10] 陳兆哲，虞露立，吳遠水，等.研究豬腦灌注模型在顯微神經(jīng)外科培訓中的使用[J].江西醫(yī)藥，2017，52（8）：757-759.

（收稿日期：2017-07-23 本文編輯：王 娟）endprint