多模態(tài)隱喻的前沿理論研究：問題與展望

（浙江工商大學(xué) 外國語學(xué)院，浙江 杭州 310018）

引言

Lakoff和Johnson在《我們賴以生存的隱喻》一書中提出了概念隱喻理論（Conceptual Metaphor Theory），引發(fā)了隱喻的認(rèn)知革命，人們對隱喻的研究開始從語言層面轉(zhuǎn)向認(rèn)知層面，掀起了隱喻研究的一場認(rèn)知熱潮。隱喻普遍存在于我們的話語、思維和行為之中，隱喻的實(shí)質(zhì)是以一種事物來理解另外一種事物[1]。隱喻認(rèn)知不僅體現(xiàn)在語言模態(tài)，同時(shí)也是圖像、手勢、聲音等其他交際媒介背后的認(rèn)知機(jī)制[2]。換言之，隱喻成為寓于視覺、聽覺、文字、圖片及其他媒介實(shí)現(xiàn)意義的傳達(dá)手段，多模態(tài)隱喻研究應(yīng)運(yùn)而生。Forceville&Urios-Aparisi[3]出版的專著《多模態(tài)隱喻》詳細(xì)地呈現(xiàn)了多模態(tài)隱喻領(lǐng)域的最新研究成果，昭示著多模態(tài)隱喻理論逐步走向成熟。

國內(nèi)也有學(xué)者對多模態(tài)隱喻研究的概況進(jìn)行了一定的梳理，如陳彥瑞[4]曾對多模態(tài)隱喻的發(fā)展做了總結(jié)，指出了多模態(tài)隱喻研究的某些不足。馮德正和張德祿[5]對近20年來多模態(tài)語篇的研究視角、方法與內(nèi)容展開評述，指出多模態(tài)研究從語言學(xué)理論到多模態(tài)表意資源的跨學(xué)科系統(tǒng)闡釋與實(shí)證研究轉(zhuǎn)向。陳風(fēng)華和胡冬梅[6]采用信息計(jì)量學(xué)CiteSpace可視化技術(shù)，分析了1998-2017年20年間國內(nèi)和國際期刊多模態(tài)隱喻文獻(xiàn)數(shù)據(jù)，系統(tǒng)考察了多模態(tài)隱喻研究的現(xiàn)狀與發(fā)展趨勢。研究表明，當(dāng)前豐富多樣的多模態(tài)語篇研究融合各學(xué)科理論，結(jié)合數(shù)字技術(shù)等新型研究工具和方法，逐漸被應(yīng)用于課堂教學(xué)、廣告?zhèn)髅?、法庭辯論等各種社會行為和語篇的研究[5]。但上述研究都是有關(guān)多模態(tài)隱喻多個(gè)方面的宏觀梳理，針對多模態(tài)隱喻的理論問題和前景進(jìn)行專門論述的文獻(xiàn)尚不多見。實(shí)際上，雖然多模態(tài)隱喻理論已經(jīng)提出多年，但至今，尚未形成完善的多模態(tài)隱喻理論框架[7]。

鑒于此，本文對多模態(tài)隱喻前沿理論進(jìn)行梳理和述評，著重聚焦概念隱喻、視覺語法、關(guān)聯(lián)理論和概念整合四大前沿理論，對它們的優(yōu)勢與局限進(jìn)行論證，并對多模態(tài)隱喻理論將來的發(fā)展趨勢作出理論預(yù)測，旨在為多模態(tài)隱喻理論研究提供參考。

一、多模態(tài)與多模態(tài)隱喻的界定及研究綜觀

模態(tài)是“由特定的感知過程所闡釋的符號系統(tǒng)”[8]22-23，多模態(tài)交際指的是“交流和表達(dá)總是依靠包括語言在內(nèi)的多種符號模態(tài)實(shí)現(xiàn)”[9]。隨著多模態(tài)研究的深入發(fā)展，其理論與應(yīng)用研究日益呈現(xiàn)多學(xué)科、多領(lǐng)域相結(jié)合的發(fā)展態(tài)勢，產(chǎn)生了豐富的研究成果。如Jewitt[10]從視覺研究、人類學(xué)與社會語言學(xué)的多模態(tài)要素互動出發(fā)，對各領(lǐng)域的多模態(tài)理論和應(yīng)用研究進(jìn)行了總結(jié)。Ventola和 Moya結(jié)合了視覺和“媒體導(dǎo)向的世界”[11]1文本，來處理多模態(tài)文字圖像中系統(tǒng)和結(jié)構(gòu)的關(guān)系。文學(xué)文本中各多模態(tài)要素的角色和其產(chǎn)生的認(rèn)知影響也受到了重視[12]，為文學(xué)文本的排版和插圖提供了更好的闡釋。近年來，社會符號學(xué)、認(rèn)知詩學(xué)、心理語言學(xué)和神經(jīng)語言學(xué)等多個(gè)學(xué)科開始互相結(jié)合，都試圖把多模態(tài)研究置于更宏觀的視域下，從更廣泛的視角進(jìn)行多模態(tài)意義構(gòu)建，為多模態(tài)跨學(xué)科研究提供新的分析框架與理論視野。在語言學(xué)的研究范式下，多模態(tài)隱喻的理論和應(yīng)用層面研究都呈現(xiàn)出多元化的發(fā)展態(tài)勢。例如，Kress&Leeuwen[13]以韓禮德（Halliday）的系統(tǒng)功能語言學(xué)為基礎(chǔ)，建構(gòu)了一個(gè)較為系統(tǒng)的視覺圖像語法分析框架，為多模態(tài)話語分析提供了新的思路。

隱喻的多模態(tài)研究始于Charles Forcevill，他將概念隱喻理論延伸至非語言模態(tài)，提出了“多模態(tài)隱喻”，指出語言只是眾多交際符號中的一種，包括聲音、手勢、線條、音樂、圖像、顏色、文字視覺聯(lián)系、空間布局等在內(nèi)的其他的交際媒介或手段也可以用來構(gòu)建和表達(dá)概念[3]。之后，多模態(tài)隱喻研究日益專門化，涌現(xiàn)出一大批結(jié)合各種語類的多模態(tài)隱喻案例研究，包括廣告、漫畫、音樂、手勢語和電影等。縱觀文獻(xiàn)發(fā)現(xiàn)，這些研究運(yùn)用的主要理論模型是概念隱喻理論、視覺語法理論、關(guān)聯(lián)理論以及概念整合理論。總之，與一般的多模態(tài)研究的發(fā)展趨勢一致，多模態(tài)隱喻的研究日益成為一個(gè)多學(xué)科關(guān)注的熱點(diǎn)課題，逐步超越了單純的現(xiàn)象描寫階段，逐步走向深入解釋層面，理論建構(gòu)的重要性日益凸顯[14]。下文詳析多模態(tài)隱喻四大理論研究及各自存在的問題。

二、多模態(tài)隱喻的主流理論模型及問題

多模態(tài)隱喻的主要前沿理論有概念隱喻、視覺語法、關(guān)聯(lián)理論以及概念整合四大理論模型[15]。

（一）概念隱喻理論框架下的多模態(tài)隱喻解釋思路及存在的問題

1.概念隱喻理論與多模態(tài)隱喻

認(rèn)知語言學(xué)的概念隱喻理論開啟了一個(gè)全新的隱喻研究視角。隱喻被分為語言隱喻和概念隱喻。語言隱喻是人們頭腦中概念的隱喻性組織方式（即概念隱喻）的反映。概念隱喻是一種思維、經(jīng)驗(yàn)和行為方式，普遍存在于人類的思想和行動中[1]3。概念隱喻主要包括源域和目標(biāo)域，其中，目標(biāo)域較為抽象，源域是人們比較熟悉的事物，隱喻認(rèn)知過程就是從源域到目標(biāo)域的系統(tǒng)映射過程[16]。Forceville[2]109-145基于平面廣告提出，圖像隱喻也是一種概念層面的隱喻，圖像隱喻分為源域替代目標(biāo)域、源域和目標(biāo)域融為一體以及源域與目標(biāo)域并置（圖像明喻）三種類型，可以結(jié)合互動理論對圖像隱喻的構(gòu)成和分類進(jìn)行闡釋。既然視覺隱喻可以以視覺圖像為實(shí)現(xiàn)形式，那么其它交際媒介如圖像、線條、顏色、手勢、聲音等都可以成為概念隱喻的傳達(dá)，隱喻研究逐漸走向多模態(tài)便成為必然。多模態(tài)隱喻理論將概念隱喻理論應(yīng)用于闡釋視覺圖像中的隱喻現(xiàn)象并描述多模態(tài)語篇中出現(xiàn)的隱喻類型[17]，通過區(qū)分語言隱喻與多模態(tài)隱喻，使純語言學(xué)領(lǐng)域的概念隱喻研究拓展到跨學(xué)科的多模態(tài)研究平臺，彌補(bǔ)了認(rèn)知語言學(xué)界單純依賴語言符號構(gòu)建概念隱喻理論的缺陷[14]，極大地拓寬了隱喻研究的范圍。

2.存在的問題

概念隱喻是多模態(tài)隱喻研究的前提，多模態(tài)隱喻的動態(tài)性和敘事性為多模態(tài)隱喻的系統(tǒng)研究奠定了基礎(chǔ)[14]，但完全依靠概念隱喻對多模態(tài)隱喻的闡釋是遠(yuǎn)遠(yuǎn)不夠的。

首先，在Forceville[2]148-161所論述的圖文隱喻中，他只是指出此類隱喻的存在并用三個(gè)例子說明源域、目標(biāo)域與映射項(xiàng)，但個(gè)例分析并不能從抽象層面說明圖文多模態(tài)隱喻的工作機(jī)制，也未能概括圖文隱喻的類型[17]。其次，概念隱喻的映射具有單向性的特點(diǎn)，即從可及性較強(qiáng)的概念域向可及性較弱的概念域映射更為自然，認(rèn)知主體通常是用更為熟悉的、更具體的概念去理解相對陌生的、較抽象的概念[18]，比如TIME IS MONEY，ANGER IS FIRE，LOVE IS A JOURNEY等概念隱喻都是通過具體的概念來解釋抽象的概念。另外，概念隱喻理論對心智的體驗(yàn)性和認(rèn)知的無意識性研究也表明，認(rèn)知主體通過感覺運(yùn)動系統(tǒng)對客觀世界直接體驗(yàn)，進(jìn)而建立字面（和模態(tài)）意義與隱喻意義之間的聯(lián)系，形成“具體到抽象”的概念映射。概念隱喻理論的這一解釋思路直接忽視了“具體到具體”類型的多模態(tài)隱喻映射。再次，概念隱喻理論將概念隱喻分為本體隱喻、結(jié)構(gòu)性隱喻和方位隱喻[1]。這種三分法簡潔易懂，但由于缺少統(tǒng)一的分類標(biāo)準(zhǔn)，以至于三類之間存在著重疊和交叉，隱喻的抽象程度也并不相同[19]。這種隱喻分類方法能否窮盡式地囊括多模態(tài)隱喻，還是一個(gè)懸而未決的問題。最后，概念隱喻理論本身也存在一些問題，如隱喻映射的單向性、持續(xù)的深層映射、隱喻到底是基于相似性還是具身經(jīng)驗(yàn)、隱喻的唯一性、喻體的直接體驗(yàn)性、經(jīng)驗(yàn)和概念之間體驗(yàn)性的證據(jù)等[20]，也對概念隱喻理論的多模態(tài)解釋力提出了質(zhì)疑。因此，概念隱喻視域下的多模態(tài)隱喻亟需結(jié)合更多理論模型，構(gòu)建出一個(gè)動態(tài)的、具有高度可操作性的多模態(tài)隱喻認(rèn)知運(yùn)作模式。

（二）視覺語法理論框架下的多模態(tài)隱喻研究及存在的問題

1.視覺語法與多模態(tài)隱喻

多模態(tài)話語是“一種融合文字、聲音、圖像、動畫等多種交流模態(tài)來傳遞信息的語篇”[21]。在真實(shí)的交際中，話語的一個(gè)重要特征是其多模態(tài)呈現(xiàn)[21]2，因此，話語分析不再局限于傳統(tǒng)語言學(xué)的分析方法。話語從本質(zhì)上說是多模態(tài)，而非單模態(tài)，因?yàn)樵捳Z意義構(gòu)建與傳遞是可通過多渠道和模態(tài)來交換信息和處理各種關(guān)系[22]4-8，而圖像作為一種社會符號，是非語言模態(tài)交換信息和處理關(guān)系常用的渠道之一。功能語言學(xué)中的系統(tǒng)功能思想可以延伸到視覺圖像模式，即圖像的視覺語法（The Visual-semiotic Model），包括再現(xiàn)意義、互動意義和構(gòu)圖意義，分別對應(yīng)功能語言學(xué)中三大語言元功能——概念意義、人際意義和語篇意義[21]。視覺語法側(cè)重視覺話語中空間關(guān)系的解釋，而對背后的深層認(rèn)知理據(jù)重視不足，這種僅在系統(tǒng)功能符號學(xué)框架內(nèi)的研究范式很難回答“空間關(guān)系如何構(gòu)建意義”這個(gè)問題[23]。與此同時(shí)，隱喻作為人類認(rèn)知外部世界的有力認(rèn)知工具，在人類的思維推理過程中發(fā)揮著重要作用[24]。因此，認(rèn)知隱喻和視覺語法在多模態(tài)意義構(gòu)建上的理論整合就變得順理成章，也逐步成為國內(nèi)外視覺語法的研究熱點(diǎn)。

2.存在的問題

視覺語法理論為綜合、系統(tǒng)地闡釋多模態(tài)話語中的意義建構(gòu)與表意方式提供了有力的理論基礎(chǔ)和分析工具[25]，但同時(shí)也存在問題。首先，就圖像分類而言，Kress&van Leeuwen將圖像分為兩類：“索取”圖像和“提供”圖像。前者指圖像中描繪的人物通過眼神接觸或姿勢向讀者索取信息或服務(wù)；后者指圖像資源（面部表情和身體站位等）為讀者提供信息或服務(wù)[25]。但這兩類圖像對圖像與讀者之間關(guān)系復(fù)雜性的解釋過于簡單[26]，不能建構(gòu)明確的索取和提供關(guān)系，有眼神接觸的圖像與小句中的疑問語氣或祈使語氣也不是等同關(guān)系[27]9。其次，視覺語法本身也存在四大不足[28]：“敘述再現(xiàn)”的分類不具有互補(bǔ)性；“接觸”的結(jié)構(gòu)生搬硬套，實(shí)際應(yīng)用性不強(qiáng)；“情態(tài)”的設(shè)計(jì)不具有系統(tǒng)性；判斷圖像元素重要性時(shí)忽略了元素本身的社會屬性。最后，除了依靠顯著性和信息值，視覺語法理論模型下的多模態(tài)隱喻話語分析尚需結(jié)合圖像的社會屬性與自身屬性，關(guān)注并探討敘述再現(xiàn)的動作、思維和言語過程。

（三）關(guān)聯(lián)理論框架下的多模態(tài)隱喻研究及存在的問題

1.關(guān)聯(lián)理論與多模態(tài)隱喻

關(guān)聯(lián)理論認(rèn)為隱喻的理解是一種明示推理過程，隱喻義是一種弱隱義[29]。無論是運(yùn)用語言符號還是其它非語言符號進(jìn)行交際，人類交際的實(shí)質(zhì)是推理交際，即，發(fā)話方呈現(xiàn)其交際意圖的語言或非語言符號，受話方則依據(jù)這些符號并結(jié)合語境推導(dǎo)出發(fā)話方的交際意圖[30]，因此，隱喻交際和其他語言交際方式一樣，都受關(guān)聯(lián)原則指引[31]。在實(shí)際生活中,人們總是采用各種非語言模態(tài)來補(bǔ)充語言模態(tài)以更加準(zhǔn)確和高效地傳遞交際意圖，所以將解釋人類交際的關(guān)聯(lián)理論應(yīng)用到多模態(tài)分析,不僅會檢驗(yàn)和拓展關(guān)聯(lián)理論的解釋力,同時(shí)可以充實(shí)現(xiàn)有理論,彌補(bǔ)現(xiàn)有理論的不足[32]。因此，國際上出現(xiàn)了大量用關(guān)聯(lián)理論來分析隱喻的研究文獻(xiàn)。國內(nèi)學(xué)者在這方面也逐漸與國際同步，例如孫小倩[33]論證了關(guān)聯(lián)理論對廣告中多模態(tài)隱喻的解釋力。廣告通過圖像、文字以多模態(tài)隱喻的形式呈現(xiàn)，尋求廣告信息和讀者認(rèn)知的最佳關(guān)聯(lián)，促使讀者自發(fā)尋求多模態(tài)隱喻的最佳解釋，從而理解廣告意圖。再比如，孫煥橋[34]基于關(guān)聯(lián)理論構(gòu)筑了一個(gè)電影隱含多模態(tài)分析框架，并運(yùn)用該框架對電影中的兩個(gè)隱含情節(jié)進(jìn)行研究，指出兩個(gè)情節(jié)的懸念與喜劇敘事效果。

2.存在的問題

通過最佳關(guān)聯(lián)和明示推理模式，關(guān)聯(lián)理論在多模態(tài)隱喻的解讀過程中發(fā)揮了重要作用。但是，關(guān)聯(lián)理論過于籠統(tǒng),在實(shí)際運(yùn)用中無法具體操作[35]。關(guān)聯(lián)理論只根據(jù)語境效果和認(rèn)知投入來衡量多模態(tài)隱喻的關(guān)聯(lián)性,但沒有給出一個(gè)具體化的、容易操作或計(jì)算的標(biāo)準(zhǔn)[36]35。此外，在用關(guān)聯(lián)理論分析多模態(tài)隱喻時(shí)如何量化？受眾在理解多模態(tài)隱喻時(shí)的認(rèn)知投入與語境效果之間如何取得平衡？標(biāo)準(zhǔn)是什么？如何斷定？這些都是關(guān)聯(lián)理論視域下多模態(tài)隱喻研究面臨的具體問題，也是未來需要攻克的難點(diǎn)課題。

（四）概念整合理論框架下的多模態(tài)隱喻研究及存在的問題

1.概念整合理論與多模態(tài)隱喻

Fauconnier[37]將隱喻機(jī)制與其他語言現(xiàn)象和認(rèn)知現(xiàn)象打通，將概念隱喻提出的雙域映射模式升級為四空間模式，提出了概念整合理論，該理論已初步成為話語理解和話語管理的一個(gè)綜合性認(rèn)知理論。它認(rèn)為在話語理解過程中，大腦會激活關(guān)于人、事物和事件的各種語言和非語言的知識框架，并存儲在工作記憶中[38]。這些儲存在思維中臨時(shí)的、在線的話語信息的集合被稱為心理空間，是概念整合理論的基石。概念整合理論就是在探究話語展開過程中各種心理空間的構(gòu)建和它們之間的連接關(guān)系[39]。在模態(tài)符號的整合過程中，非語言符號的非線性特征使多模態(tài)符號在空間上向多維、多方向擴(kuò)展[40]，在多模態(tài)隱喻中，由形狀、線條、構(gòu)圖、顏色、動作行為、角度等模態(tài)呈現(xiàn)出的始源域與目標(biāo)域之間的映射路徑也需要運(yùn)用概念整合運(yùn)作機(jī)制。趙秀鳳[14]分析了Forceville關(guān)于模態(tài)分類、多模態(tài)隱喻界定及雙域映射模型的不足，在重新界定與分類的基礎(chǔ)上提出了多模態(tài)隱喻構(gòu)建的概念整合模型。她以一篇政治漫畫語篇為例，把符號表征空間、語用關(guān)聯(lián)空間、輸入空間內(nèi)部與跨空間之間的多層空間映射和互動整合納入到一個(gè)綜合體系，指出了多模態(tài)隱喻的概念意義、情感效果、審美或評價(jià)效果的動態(tài)生成過程。朱嫣然和鄭燕[41]在概念整合理論的框架內(nèi)，以政治漫畫為語料，探析了多模態(tài)隱喻在整合網(wǎng)絡(luò)中的意義構(gòu)建。他們指出，多模態(tài)隱喻意義的構(gòu)建并不是從源域到目標(biāo)域的單向操作，而是具有多向性的動態(tài)建構(gòu)過程。孫毅和周婧[42]在多模態(tài)隱喻理論基礎(chǔ)上，將概念隱喻理論和概念整合理論相結(jié)合，選取了典型的國旗隱喻個(gè)案加以闡析，詮釋了多模態(tài)隱喻整體意義的構(gòu)建過程。

2.存在的問題

盡管概念整合理論能對多模態(tài)隱喻意義構(gòu)建過程中的認(rèn)知機(jī)制進(jìn)行相對細(xì)致的解釋，它也存在一定的問題。孟霞指出：“整合空間概念適用于整個(gè)語言意義的建構(gòu)而不僅僅是在具體的篇章之中，導(dǎo)致了該理論在很大程度上喪失了自己的獨(dú)創(chuàng)性和新意?！盵43]6另外，隨著研究不斷深入，概念整合理論應(yīng)用研究的范圍可以更廣，研究方法可以更為系統(tǒng)，操作過程可以更加細(xì)化[44]。如，在多模態(tài)隱喻分析中，相關(guān)隱喻信息首先進(jìn)入輸入空間，那么哪些隱喻信息會進(jìn)入輸入空間？哪些隱喻信息不會進(jìn)入輸入空間？隱喻信息篩選的標(biāo)準(zhǔn)是什么？進(jìn)入輸入空間的隱喻信息成分又是如何相互映射、協(xié)調(diào)運(yùn)作的？同樣，層創(chuàng)結(jié)構(gòu)（Emergent Structure）產(chǎn)生的合成空間也面臨著相似的問題。面對此類不可回避的問題，概念整合理論視域下的多模態(tài)隱喻研究尚需細(xì)化。

三、多模態(tài)隱喻的理論研究趨勢與展望

多模態(tài)隱喻的四大主流理論都既有各自的優(yōu)勢，又存在問題。綜合國內(nèi)多模態(tài)隱喻理論和應(yīng)用研究現(xiàn)狀，未來的多模態(tài)隱喻理論研究可以考慮從下面幾個(gè)方面進(jìn)行拓展和深化。

（一）理論框架的深入和完善趨勢

首先，多模態(tài)隱喻研究急需形成一套完整、系統(tǒng)的理論體系[4]。已有的相關(guān)研究大多是沿用概念隱喻理論、視覺語法理論、關(guān)聯(lián)理論、概念整合等理論范式，也有少數(shù)學(xué)者把轉(zhuǎn)喻和轉(zhuǎn)喻理論加以整合。如黃彬瑤[45]采用認(rèn)知語言學(xué)的研究范式，以中國中央電視臺制作的公益廣告為例，分析廣告中所包含的多模態(tài)隱、轉(zhuǎn)喻，著重考察了隱、轉(zhuǎn)喻是如何通過圖像、聲音以及話語等多種方式動態(tài)呈現(xiàn)的。隨著研究的深入，傳統(tǒng)多模態(tài)隱喻理論研究將需要得到進(jìn)一步強(qiáng)化。如概念隱喻理論在深化對多模態(tài)隱喻深層映射闡釋與動態(tài)認(rèn)知運(yùn)作模式的同時(shí)，需要闡釋如何通過結(jié)合圖像的社會屬性與自身屬性來闡釋圖像與讀者的關(guān)系、建構(gòu)明確的索取和提供關(guān)系；關(guān)聯(lián)理論中的關(guān)聯(lián)原則具體量化、采取何種操作標(biāo)準(zhǔn)；以及整合空間概念操作過程的細(xì)化等，這些都是目前多模態(tài)隱喻現(xiàn)有理論完善亟需解決的問題。其次，無論是傳統(tǒng)的還是新構(gòu)建的多模態(tài)隱喻模型，其理論應(yīng)用范圍將需要拓展。語類多樣化是當(dāng)今多媒體時(shí)代的必然趨勢，理論應(yīng)用必將從傳統(tǒng)的廣告、漫畫、海報(bào)等語言-聽覺-視覺隱喻性表達(dá)到動畫、樂譜、繪本、電影、戲劇、雕塑，甚至有關(guān)味道、接觸等復(fù)雜模態(tài)語類中的隱喻研究。如陳嫻[46]從圖像、顏色、聲音和文字符號四種模態(tài)入手，透過臺州海洋民俗文化中的多模態(tài)隱喻現(xiàn)象，挖掘臺州人頑強(qiáng)拼搏的海洋精神及期盼海上作業(yè)風(fēng)順興旺的海洋信念，闡釋了多模態(tài)隱喻呈現(xiàn)出的模態(tài)相輔、意義決定和信息傳遞三大特征，這是將多模態(tài)隱喻理論深化到民俗文化闡釋應(yīng)用的典型案例。

（二）理論視角的開放性和多樣化趨勢

隨著多模態(tài)隱喻研究的不斷深入，多模態(tài)隱喻理論也將從追隨或沿用傳統(tǒng)模式轉(zhuǎn)變?yōu)楦矣谫|(zhì)疑和理論創(chuàng)新，打破原有的框架束縛與學(xué)科局限，從更開放、多元的視角進(jìn)行理論構(gòu)建與細(xì)化，開啟新的研究范式。如體驗(yàn)哲學(xué)、認(rèn)知詩學(xué)、傳播學(xué)、心理學(xué)、信息科學(xué)、交互社會學(xué)等跨學(xué)科跨領(lǐng)域的多模態(tài)隱喻模型將不斷融合。如陳松云和楊勁松[47]從意義建構(gòu)的認(rèn)知理據(jù)出發(fā)，指出多模態(tài)隱喻是身體、感知、體驗(yàn)、大腦和心智的共同產(chǎn)物,是以體驗(yàn)哲學(xué)為基礎(chǔ)研究人類心智和認(rèn)知的哲學(xué)方法，意義、表達(dá)與結(jié)構(gòu)的三維統(tǒng)一，形成哲學(xué)的重要思辨，而多模態(tài)隱喻意義的建構(gòu)也在這個(gè)統(tǒng)一過程中完成。這是體驗(yàn)哲學(xué)與多模態(tài)隱喻理論相結(jié)合的典范。但是在兩者的結(jié)合中，多模態(tài)隱喻與體驗(yàn)、心智的具體關(guān)系、多模態(tài)語篇的轉(zhuǎn)、隱喻配置與哲學(xué)理論的配置、多模態(tài)隱喻體驗(yàn)性表征形式與內(nèi)容等都是未來研究需要解決的問題。此外，未來多模態(tài)隱喻的跨學(xué)科理論范式中還面臨一些具體的課題，如，詩學(xué)象似性的多模態(tài)表征創(chuàng)造出何種閱讀和審美體驗(yàn)?zāi)Ｊ?？如何闡釋動態(tài)語篇等更復(fù)雜的符號與行為體系？多模態(tài)隱喻的媒介特性及其所肩負(fù)的輿論傳導(dǎo)功能如何實(shí)現(xiàn)？這些課題都是多模態(tài)隱喻理論創(chuàng)新和體系完善所要努力的方向。

（三）理論檢驗(yàn)的科學(xué)性和多元化趨勢

近年來，在多媒體與信息科學(xué)技術(shù)的不斷發(fā)展下，認(rèn)知語言學(xué)界從早期的內(nèi)省和思辨逐漸轉(zhuǎn)向?qū)嶒?yàn)和統(tǒng)計(jì)實(shí)證研究，開始采用實(shí)證法、類比法、比較分析法等對各語篇中的多模態(tài)隱喻類型及表現(xiàn)方式進(jìn)行分析，涌現(xiàn)出大量實(shí)證研究成果。2003年，國際認(rèn)知語言學(xué)會成立了認(rèn)知語言學(xué)實(shí)證方法工作坊（EmpiricalMethodsinCognitive Linguistics，簡稱 EMCL），更是反映出實(shí)證研究在認(rèn)知語言學(xué)界越來越重要的地位，推動了大量實(shí)證研究成果的誕生[4]。多模態(tài)隱喻研究可以借助事件相關(guān)電位（ERP）、功能性磁共振成像（fMRI）、多模態(tài)語料庫檢索等多樣化科技手段，使研究成果更具說服力。Baldry&Thibault（2008）建立了基于XML的在線多模態(tài)檢索器（Multimodal Corpus Authoring，簡稱MCA），實(shí)現(xiàn)了對多模態(tài)數(shù)據(jù)的搜索、注釋與定量分析。對有關(guān)多模態(tài)隱喻理解的理論模型進(jìn)行實(shí)證檢驗(yàn)也開始受到重視，如Ma,QG等人[48]探討了ERP與時(shí)頻成分（Time-Frequency Components）和多模態(tài)隱喻理解過程的相關(guān)性，實(shí)驗(yàn)選用動物詞表示圖片中的車輛隱喻，根據(jù)腦電圖振幅數(shù)據(jù)判定隱喻使用是否恰當(dāng)，揭示了多模態(tài)隱喻理解過程中delta和θ的功能作用及其對ERP成分的獨(dú)特貢獻(xiàn)。該研究指出，多模態(tài)隱喻理解的具體認(rèn)知機(jī)制與言語隱喻的認(rèn)知加工不同，它反映在多模態(tài)隱喻理解中，由ERP成分和時(shí)頻成分所標(biāo)示的多個(gè)可分離過程所反映出來，大大豐富了多模態(tài)隱喻實(shí)證研究。

“多模態(tài)隱喻語篇分析是一個(gè)開放的、具有天然跨學(xué)科性質(zhì)的研究領(lǐng)域，允許從不同的層面與角度進(jìn)行研究”[17]96。雖然當(dāng)前多模態(tài)隱喻理論研究存在一定的問題，但其理論框架會不斷趨于深入和完善，理論視角也會更加開放和多樣，理論檢驗(yàn)的科學(xué)和多元必然是未來的研究趨勢。總而言之，隨著各學(xué)科研究視角的融合以及實(shí)證研究的不斷深入，未來多模態(tài)隱喻跨學(xué)科理論體系會進(jìn)一步完善，并結(jié)合實(shí)際各領(lǐng)域得到切實(shí)的運(yùn)用。