徐佳薇 武 杰 雷 宇
腦血管病發(fā)病率高,是我國所面臨的一項重大衛(wèi)生健康問題[1],一旦發(fā)生腦血管意外,則有較高的風(fēng)險會導(dǎo)致殘疾,甚至死亡。在發(fā)病早期及時發(fā)現(xiàn)腦血管病影像中的異常,可以有效降低腦血管意外的發(fā)生。在傳統(tǒng)的腦血管病診斷流程中,主要依靠醫(yī)學(xué)影像設(shè)備成像,由臨床醫(yī)生閱片,并根據(jù)經(jīng)驗獨立作出診斷,但是培養(yǎng)一名成熟的臨床醫(yī)生需要大量的時間成本,無法匹配日益增長的診斷需求。信息化的醫(yī)學(xué)診療模式促使傳統(tǒng)的診斷手段發(fā)生轉(zhuǎn)變,如何最大程度地利用獲取到的腦血管病影像信息,從而更好地對腦血管病進行診斷和病情評估有著非常重要的意義。隨著深度學(xué)習(xí)技術(shù)的不斷革新,提取肉眼無法捕獲的微小特征信息并進行分析和處理成為可能,大大提高了信息的利用率,最終實現(xiàn)腦血管病精準(zhǔn)診斷、評估和預(yù)后,為確定患者的后續(xù)治療方案提供可靠的依據(jù)。本文闡述了深度學(xué)習(xí)在腦血管結(jié)構(gòu)和病灶分割、腦血管病診斷和預(yù)后中的應(yīng)用進展,指出了深度學(xué)習(xí)在腦血管病診療中存在的問題,并對未來的發(fā)展前景進行了展望。
得益于生物醫(yī)學(xué)技術(shù)不斷發(fā)展,我們可以通過現(xiàn)代設(shè)備輕松獲得大量的生物和生理數(shù)據(jù),這些數(shù)據(jù)幫助我們理解和識別人類健康與疾病?;谏疃葘W(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)算法在指導(dǎo)、增強和提取復(fù)雜數(shù)據(jù)的特征和學(xué)習(xí)模式方面表現(xiàn)出了獨特的優(yōu)勢。通過建立深度學(xué)習(xí)模型來對數(shù)據(jù)樣本的內(nèi)在規(guī)律進行學(xué)習(xí),得到數(shù)據(jù)的分布式特征表示,在圖像處理領(lǐng)域具有突出的技術(shù)優(yōu)勢。近些年來,深度學(xué)習(xí)技術(shù)在醫(yī)學(xué)圖像處理方面的精度與速度都大有提升,極大地緩解了臨床醫(yī)生的壓力,將其應(yīng)用于腦血管病影像的處理有望為腦血管病診療帶來全新的變革。
在深度學(xué)習(xí)技術(shù)發(fā)展初期,主要是對模型框架的深度、寬度等方面進行優(yōu)化,可以提高模型的抽象能力,使提取到的特征信息更為豐富,但是增加模型的寬度和深度也存在著上限,深層模型會出現(xiàn)梯度消失和梯度爆炸問題,且模型寬度過大會導(dǎo)致參數(shù)過多,增大了出現(xiàn)過擬合的可能性,使模型優(yōu)化困難。為此,需要進一步研究提升特征信息利用率的優(yōu)化方法,使用擴大感受野、權(quán)值共享、融合淺層和深層特征等方法進行改進。表1 匯總了部分性能優(yōu)秀的深度學(xué)習(xí)模型。
表1 深度學(xué)習(xí)模型框架
圖像分類在各類深度學(xué)習(xí)任務(wù)中是最基礎(chǔ)的,其評價指標(biāo)主要有精確率(precision)、 召回率(recall)、F1-Score、混 淆 矩 陣、ROC (receiver operating characteristic) 曲 線 和AUC (area under curve)等。精確率定義為識別正確的物體數(shù)占總識別數(shù)量的比例,召回率定義為識別正確的物體數(shù)占樣本總體數(shù)量的比例。只有當(dāng)精確率和召回率同時達到較高的水平時,它們的調(diào)和平均數(shù)F1-Score 才會很高?;煜仃嚹軌蚍从吵鲱悇e間的誤分情況,可以用于了解類別間的錯分概率。ROC 曲線即受試者工作特征曲線,描述了一個模型在不同閾值下的性能,AUC 為ROC 曲線下面積,AUC 的值越接近1,證明分類效果越好。
除了在分類任務(wù)中的評價指標(biāo)外,在檢測任務(wù)中還包括了平均精度AP(average precision)和平均精度均值mAP(mean average precision)等評價指標(biāo)。AP 由P-R(precision-recall)曲線下面積求得,描述了模型對單個類別的識別性能,mAP 則是作為模型的整體性能評價指標(biāo)。
對于分割任務(wù),通常采用Dice 系數(shù)作為評價指標(biāo)。它可以計算兩個集合的相似度,Dice系數(shù)越接近1,模型的分割性能越好。針對各自深度學(xué)習(xí)任務(wù)選擇合適的評價指標(biāo)有助于評估模型性能,并作出優(yōu)化和改善。
腦血管病通常表現(xiàn)為血管的形態(tài)特征出現(xiàn)異常,包括血管的狹窄、閉塞,分叉增多等等。通過分割腦血管結(jié)構(gòu),可以提取感興趣區(qū)域,忽略其他區(qū)域帶來的干擾,清晰地觀察腦血管的結(jié)構(gòu)異常,可以幫助醫(yī)生正確判斷腦血管病變的程度,更準(zhǔn)確、有效地判斷病情,避免誤診。顱內(nèi)血管分割在腦血管病的診斷和手術(shù)計劃中起著至關(guān)重要的作用。但由于腦血管圖像存在血管特征小、血管重疊、顏色對比不明顯等特點,腦血管的分割一直是研究的重點和難點。秦志光等[2]將經(jīng)過高斯和拉普拉斯處理后的腦部CT 血管造影圖像(CTA)和原始圖像構(gòu)成的多模態(tài)圖像輸入卷積神經(jīng)網(wǎng)絡(luò)(convolution neural network,CNN)中進行并行分割,最后利用線性回歸對多個分割結(jié)果進行處理提取出腦血管,平均Dice 系數(shù)為0.705 5。但是該方法將圖像劃分為多個圖像小塊(patch),丟失了各部分之間的空間聯(lián)系,使分割的結(jié)果還包括了部分顱外血管。Ni 等[3]提出了全局通道注意網(wǎng)絡(luò)(GCA-Net),引入通道注意機制融合高級特征和淺層特征,建立一個上采樣模塊(USM),從而更好地學(xué)習(xí)全局特征信息。還引入了空間金字塔池化(ASPP)來獲取不同分辨率的特征圖中的更多細節(jié)。實驗結(jié)果表明,該方法可以分割出腦血管結(jié)構(gòu)。但該方法提取單一特征作為分割特征,不利于信息密集的血管分割任務(wù)。
腦缺血是因為腦血管發(fā)生了阻塞,使大腦缺氧,造成不可逆轉(zhuǎn)的損傷。所以,在臨床上非常重視對其的治療,患者需要進行及時有效的治療,把損傷的程度控制在一定的范圍內(nèi)。Naofumi等[4]使用深度殘差神經(jīng)網(wǎng)絡(luò)在慢性缺血性腦卒中患者的核磁共振(MRI)T1 加權(quán)像上對腦組織病變進行體積分割。但是該方法僅將栓塞性卒中圖像數(shù)據(jù)納入訓(xùn)練,魯棒性較差,且對小病灶的分割效果并不理想。Karthik等[5]提出了一種深監(jiān)督全卷積網(wǎng)絡(luò)(FCN)來分割缺血性病變。在網(wǎng)絡(luò)的最后兩層中應(yīng)用滲漏整流單元(LReLU)激活,精確重建缺血性病變,使網(wǎng)絡(luò)能夠?qū)W習(xí)多種特征。實驗證明該方法的平均Dice 系數(shù)為0.70,分割效果好。
腦出血(ICH)的致殘率和死亡率都很高,臨床實際工作中,血腫形態(tài)往往不規(guī)則[6]。因此,準(zhǔn)確、快速地分割腦出血區(qū)域?qū)δX出血的臨床診斷和治療具有重要意義。張?zhí)祺璧龋?]將U-Net 模型與輪廓識別方法相結(jié)合,使用閾值分割法得到血塊的圖像紋理特征,并定位顱內(nèi)出血點,再對出血區(qū)域進行插值,評估血塊的三維形態(tài),實現(xiàn)針對顱腦CT 影像中腦出血的分析和識別,算法達到97.4%的目標(biāo)識別準(zhǔn)確率。但是其他病灶如鈣化灶等識別效果較差,且三維建模插值算法存在一定不足,無法準(zhǔn)確補全斷層信息。Yao 等[8]提出了一種基于擴展卷積的多視點CNN 結(jié)構(gòu),對不同尺度的特征進行提取和融合,以提高分割性能。并且使用了一種新的混合損失函數(shù),利用不同窗口中心和寬度調(diào)整對比度的CT 掃描結(jié)果,提高了網(wǎng)絡(luò)的泛化能力,平均Dice 系數(shù)為0.697,AUC 為0.853。但是該方法只是分割了整體的急性出血區(qū)域,而無法區(qū)分不同的血腫類型,如腦實質(zhì)內(nèi)血腫、腦室內(nèi)血腫和蛛網(wǎng)膜下腔出血,因此無法判斷腦出血所造成的后果。
腦微出血(CMBs)是小型的慢性腦出血,已被視為各種腦血管疾病(包括中風(fēng),功能障礙,癡呆和認(rèn)知障礙)的診斷指標(biāo)。Liu 等[9]提出了一個兩階段的CMBs檢測框架,其中包含一個基于磁敏感加權(quán)成像(SWI)合成圖像的三維快速徑向?qū)ΨQ變換的候選檢測階段,以及基于深度殘差神經(jīng)網(wǎng)絡(luò)的假陽性抑制階段,檢測準(zhǔn)確率達到95.8%,有較好的檢測效果。但是該方法可能多個連接的CMBs 可能被算作一個CMBs,小病灶可能被漏檢。由于常用的深度學(xué)習(xí)模型都是基于二維圖像開發(fā)的,但是針對醫(yī)學(xué)圖像中的三維圖像可以采用三維卷積對其進行處理,相較于二維卷積,三維卷積在卷積核上增加了表示深度的維度。Dou 等[10]提出了一種基于三維卷積神經(jīng)網(wǎng)絡(luò)(3D CNN)的CMB 檢測級聯(lián)框架。利用三維FCN 的策略來檢索具有高概率的候選CMBs,然后應(yīng)用訓(xùn)練良好的3D CNN 判別模型來診斷CMBs。消除了大量的冗余計算,大大加快了檢測速度,準(zhǔn)確率高達93.16%。但該方法沒有納入SWI 濾波的相位圖像,不易區(qū)分CMBs和鈣化點,且可能錯誤地檢測到一些尺寸不規(guī)則的CMBs。Mohammed 等[11]使用基于區(qū)域的YOLO 網(wǎng)絡(luò)對潛在的CMBs 候選檢測,并使用3D CNN 減少誤檢。將SWI 相位圖像作為網(wǎng)絡(luò)的雙通道輸入,使得YOLO能夠?qū)W習(xí)更可靠和更具代表性的層次結(jié)構(gòu)特征,從而獲得更好的檢測性能。但是該方法的臨床實際應(yīng)用還需要進一步探討。
血管源性腔隙與中風(fēng)、步態(tài)障礙和癡呆的風(fēng)險增加相關(guān),是小血管疾病的主要影像學(xué)特征。腔隙的量化對于闡明神經(jīng)退行性疾病背后的機制可能非常重要,且是小血管疾病研究標(biāo)準(zhǔn)的一部分。Mohsen等[12]設(shè)計了一個兩階段的深度學(xué)習(xí)模型檢測卒中患者MR圖像中的血管源性腔隙。首先使用一個FCN網(wǎng)絡(luò)來進行初步檢測,其次使用3D CNN 減少假陽性,通過多尺度分析和位置特征的整合,為網(wǎng)絡(luò)提供上下文信息,實驗結(jié)果表明該方法檢測效果良好。
腦卒中是全球最主要的死亡原因之一,及時地發(fā)現(xiàn)腦卒中的發(fā)病,并在腦卒中早期啟動治療程序可以大大提高患者的生存概率,因此自動化的腦卒中診斷是十分必要的。Anjali 等[13]采用多聚焦圖像融合的方法對腦CT 掃描圖像進行預(yù)處理,把預(yù)處理后的圖像輸入到13 層CNN 結(jié)構(gòu)中進行分類,將圖像分為出血性腦卒中、缺血性腦卒中和正常腦卒中。通過對兩個不同的數(shù)據(jù)集進行兩個實驗,準(zhǔn)確率分別為92.22%和93.33%,驗證了該方法的泛化能力與魯棒性。Nishio 等[14]開發(fā)和評估了一個包含兩階段深度學(xué)習(xí)模式的自動急性缺血性卒中檢測系統(tǒng)。利用YOLO V3模型和VGG 16分類模型,提高了放射科醫(yī)生對診斷急性缺血性卒中的敏感性。但是該研究主要集中在急性缺血性卒中檢測系統(tǒng)的開發(fā)上,因此該系統(tǒng)的臨床應(yīng)用價值有限。
大腦疾病可能會導(dǎo)致一些關(guān)鍵功能的喪失,如思維、言語和運動。因此,早期發(fā)現(xiàn)腦疾病有助于及時得到最佳治療。Yukinori 等[15]采用VGG 16 神經(jīng)網(wǎng)絡(luò),對煙霧病、動脈粥樣硬化患者和正常人進行分類,最終的準(zhǔn)確率分別為92.8%、84.8%和87.8%。Midas 等[16]采用CNN 在4D-CTA 圖像中檢測顱內(nèi)前循環(huán)動脈閉塞,準(zhǔn)確率達到92%。但是該研究沒有分類或定位不同類型的閉塞,且數(shù)據(jù)集中沒有納入雙側(cè)血管閉塞的患者,具有一定的局限性。
腦血管病需要盡早預(yù)防、盡早治療,尤其是腦卒中,其發(fā)病迅速,后果嚴(yán)重。Liu等[17]使用混合機器學(xué)習(xí)方法來預(yù)測腦卒中的發(fā)生。在分類前采用隨機森林回歸對缺失值進行插補,再將基于深度神經(jīng)網(wǎng)絡(luò)(DNN)的自動超參數(shù)優(yōu)化(AutoHPO)應(yīng)用于非平衡數(shù)據(jù)集上來作卒中預(yù)測。該預(yù)測方法的準(zhǔn)確率為71.6%。姜亮等[18]利用InceptionV3 模型構(gòu)建基于擴散加權(quán)成像(DWI) 和液體衰減反轉(zhuǎn)恢復(fù)序列(FLAIR)的深度學(xué)習(xí)模型預(yù)測急性腦卒中的發(fā)病時間,AUC達到0.852,預(yù)測效果好。
灌注圖像反映了局部組織血流灌注量的改變,可以提高腦梗死診斷的靈敏度[19],對明確病灶的血流供應(yīng)具有重要意義。Vargas 等[20]采用一個卷積神經(jīng)網(wǎng)絡(luò)疊加在長短時記憶層上來預(yù)測急性缺血性中風(fēng)患者灌注是否存在不足和偏側(cè),預(yù)測準(zhǔn)確率為85.8%。Noelie 等[21]將磁共振灌注圖像輸入到卷積神經(jīng)網(wǎng)絡(luò),成功預(yù)測了急性腦卒中最終梗死體積。上述實驗結(jié)果表明使用深度學(xué)習(xí)技術(shù)預(yù)測腦卒中的發(fā)病可能和灌注情況是可行且有效的,可能為患者存活帶來新的希望。
預(yù)后可分為自然預(yù)后和干預(yù)預(yù)后,在患者經(jīng)過治療之后,評估治療的結(jié)果也是非常重要的,對于下一步的治療方法有著參考性的作用。Hilbert 等[22]將ResNet 與結(jié)構(gòu)化接收場(RFNN) 和自動編碼器(AE)相結(jié)合,用于網(wǎng)絡(luò)權(quán)值初始化。利用CT 血管造影圖像建立模型,實現(xiàn)了血管內(nèi)治療后的再灌注和功能結(jié)果的預(yù)后。
深度學(xué)習(xí)方法在其他腦血管疾病的預(yù)測研究中也取得了進展。Martins等[23]開發(fā)了3種ANN 模型,根據(jù)臨床數(shù)據(jù)預(yù)測患者出現(xiàn)復(fù)發(fā)性靜脈血栓栓塞癥(RVTE)的概率。實驗證明模型的準(zhǔn)確率最高可以達到92.8%,AUC 為0.977,可幫助臨床醫(yī)生確定靜脈血栓栓塞的治療方案。此外,用于預(yù)測癥狀性腦血管痙攣(SCV)和早期神經(jīng)系統(tǒng)退化的網(wǎng)絡(luò)模型也已被開發(fā)。這些研究結(jié)果顯示深度學(xué)習(xí)方法在疾病預(yù)測和預(yù)后方面有很高的應(yīng)用價值,未來還需要進一步提升深度學(xué)習(xí)技術(shù)的效能。
本文主要針對深度學(xué)習(xí)在腦血管病診療中的應(yīng)用進行闡述,包括病變分割、疾病識別和預(yù)測方面。深度學(xué)習(xí)作為目前正流行的研究方向,與醫(yī)療領(lǐng)域相結(jié)合更是當(dāng)下的研究熱點。但是深度學(xué)習(xí)在醫(yī)療領(lǐng)域的應(yīng)用還面對著一些問題:①模型的魯棒性和泛化能力較差,實驗數(shù)據(jù)規(guī)模較小,且只能針對某一種特定的任務(wù)取得較好的準(zhǔn)確率,難以在實驗數(shù)據(jù)以外的通用任務(wù)中得到驗證與推廣;②各醫(yī)院醫(yī)療設(shè)備質(zhì)量參差不齊,不可避免地存在不同程度的噪聲影響,數(shù)據(jù)間差異化較大,無法獲得統(tǒng)一的、高質(zhì)量的數(shù)據(jù);③模型缺乏可解釋性,由于其“端到端”的運行特性,無法明確其運行機制,使臨床醫(yī)生在實際應(yīng)用中出現(xiàn)理解和使用上的困難,因此亟待開發(fā)適用于臨床的決策工具。
目前醫(yī)學(xué)成像應(yīng)用中可用的樣本量相對較小。這主要是由于醫(yī)學(xué)數(shù)據(jù)采集和標(biāo)注成本較高造成的。樣本量小可能導(dǎo)致過度擬合和泛化能力差??梢允褂眠w移學(xué)習(xí),在源域中借助已有的數(shù)據(jù)集進行訓(xùn)練,固定模型淺層的訓(xùn)練參數(shù),并對模型的深層參數(shù)進行微調(diào),遷移到目標(biāo)域中,可以有效解決腦血管病數(shù)據(jù)集規(guī)模較小,難以訓(xùn)練的問題。此外,還可以使用數(shù)據(jù)增強來擴增圖像數(shù)據(jù)集,例如幾何變換和顏色變換,或者使用生成式對抗網(wǎng)絡(luò)(GAN),基于無監(jiān)督的學(xué)習(xí)方式完成數(shù)據(jù)增強。另外,還可以考慮將深度學(xué)習(xí)應(yīng)用到動態(tài)醫(yī)學(xué)影像中,考慮圖像的時間特征,使腦血管病診斷更加多維。同時,我們需要加快建設(shè)信息共享平臺,對醫(yī)療數(shù)據(jù)進行統(tǒng)一管理,制定統(tǒng)一的數(shù)據(jù)集制作標(biāo)準(zhǔn),以期實現(xiàn)對醫(yī)療數(shù)據(jù)的高度整合。未來深度學(xué)習(xí)將與醫(yī)療領(lǐng)域更進一步融合,智慧醫(yī)療將離我們越來越近。