鄒俊飛
(衡陽師范學(xué)院 外國語學(xué)院,湖南 衡陽 421002)
隨著數(shù)字技術(shù)的發(fā)展和不同媒介的運(yùn)用,現(xiàn)代廣告的內(nèi)容和形式越來越豐富。廣告由僅包含單一的語言模態(tài)逐漸向包含語言、圖像、聲音等多模態(tài)轉(zhuǎn)向。而近年來,廣告的多模態(tài)研究逐漸獲得研究者越來越多的關(guān)注,研究者開始從將語言學(xué)理論簡單應(yīng)用于圖像、手勢等非語言符號的分析,轉(zhuǎn)向?qū)Χ嗄B(tài)表意資源的跨學(xué)科系統(tǒng)闡釋與實(shí)證研究。因此,構(gòu)建具有獨(dú)特理論體系和分析方法的多模態(tài)研究正成為一個新興的人文學(xué)科[1]。
目前語言學(xué)家進(jìn)行多模態(tài)語篇分析時,主要基于兩個視角,即社會符號學(xué)視角和概念隱喻視角。兩種視角基于不同的理論基礎(chǔ),其中社會符號學(xué)起源于系統(tǒng)功能語言學(xué),而概念隱喻視角源自認(rèn)知語言學(xué)。20世紀(jì)90年代以來,以Kress、Leeuwen[2]為代表的社會符號學(xué)者基于韓禮德的系統(tǒng)功能語法,為描述圖像、音樂等非語言符號建立了視覺圖像語法。他們把基于語言符號發(fā)展起來的元功能理論拓展到其他符號資源,研究在一定語境下建構(gòu)意義的符號資源,探討其他非語言符號的語篇語義系統(tǒng)。但是符號學(xué)只能對語言和非語言模態(tài)的表意系統(tǒng)進(jìn)行抽象地描述,而不能充分闡釋多模態(tài)語篇中動態(tài)的認(rèn)知表意機(jī)制。另一方面,自20世紀(jì)70年代起,廣告中的視覺(圖像)隱喻作為單模態(tài)修辭方式引起學(xué)者們的關(guān)注。之后,由于認(rèn)知隱喻理論的不斷發(fā)展,隱喻是一種思維和行為方式的觀點(diǎn)已被研究者普遍認(rèn)同。自20世紀(jì)90年代起,以Forceville[3-4]為代表的學(xué)者開始關(guān)注廣告中的圖像隱喻。他們以概念隱喻理論為基礎(chǔ),提出隱喻既可以用語言模態(tài),也可以用其他模態(tài),如圖像、手勢、聲音、構(gòu)圖等來表征意義。他們常常借助概念隱喻的相關(guān)理論,從認(rèn)知角度探討在不同語類中不同模態(tài)對隱喻識別和意義解讀的作用。其中,作為多模態(tài)隱喻研究關(guān)注最早的語類,廣告多模態(tài)隱喻研究已從平面圖文廣告逐漸拓展到動態(tài)的電視、新媒體廣告等。
近10多年來,在“多模態(tài)”轉(zhuǎn)向的語境下,廣告多模態(tài)研究已成為國內(nèi)研究者關(guān)注的熱點(diǎn)。他們嘗試在不同學(xué)科領(lǐng)域如符號學(xué)、語言學(xué)、傳播學(xué)、心理學(xué),運(yùn)用不同理論對廣告語篇中的語言和非語言各種模態(tài)進(jìn)行探討。隨著廣告多模態(tài)語篇研究的增多,研究中也存在一些問題。如部分研究或是對模態(tài)的理解存在一些誤區(qū),或是模糊了多模態(tài)隱喻的不同定義和分類,或是對各種研究路徑及方法區(qū)分不清。因此,從雙重視角下厘清國內(nèi)廣告多模態(tài)語篇研究的基本概念、研究路徑、研究方法等,幫助研究者更好地了解廣告多模態(tài)語篇的研究熱點(diǎn)和發(fā)展趨勢,對多模態(tài)研究的發(fā)展很有助益。
韓禮德[5]創(chuàng)建了系統(tǒng)功能語言學(xué),提出語言是一種社會符號,具有一種意義資源(即意義潛勢)。語篇是人們根據(jù)語境從意義潛勢中選擇的結(jié)果。以Kress、Leeuwen[2]為代表的社會符號學(xué)家在此基礎(chǔ)上,提出符號資源可以由社會中各種有意義的活動構(gòu)成,各種符號(語言、圖像、聲音等)也都是一種意義資源。因此,根據(jù)社會符號學(xué),在社會文化中形成的可以創(chuàng)造意義的符號資源就是模態(tài),也就是說,模態(tài)是用來傳遞信息的不同形式或渠道,如聲音、圖像、色彩、文字、構(gòu)圖、造型等。這種意義的多種呈現(xiàn)方式被稱為多模態(tài)。符號學(xué)家認(rèn)為任何模態(tài)(如圖像、文字、音樂等)都可以構(gòu)建完整的表意系統(tǒng)。雖然圖像、聲音、手勢等非語言模態(tài)與文字模態(tài)不同,但它們具有同樣的語篇語義系統(tǒng)。因此,社會符號學(xué)家基于系統(tǒng)功能語言學(xué)框架,嘗試將語言學(xué)理論拓展至其他模態(tài)中,包括其分析范疇和方法。他們認(rèn)為語言的元功能、層次、連貫、態(tài)度等理論,都可以運(yùn)用到多模態(tài)語篇分析中。
在廣告多模態(tài)話語研究中,研究者探討廣告中擁有意義潛勢的各種符號如文字、圖像、聲音等如何通過組合、布局以及變化來協(xié)同構(gòu)建并傳遞其特定意義。Kress、Leeuwen[2]將系統(tǒng)功能語言學(xué)的元功能理論擴(kuò)展到視覺圖像上,建立了視覺圖像語法。與語言的三大元功能(概念功能、人際功能、謀篇功能)相對應(yīng),他們構(gòu)建了視覺圖像的三大元意義,分別是再現(xiàn)意義、互動意義和構(gòu)圖意義。同時,在對廣告多模態(tài)話語的解讀中,研究者還注重語境因素對意義構(gòu)建的影響。
Lakoff、Johnson提出的概念隱喻理論已經(jīng)證實(shí)“隱喻是一種思維和行為方式,語言只是概念隱喻的一種外在表現(xiàn)形式”[6]?;诖耍訤orceville[4]19為代表的學(xué)者提出,除了語言,其他模態(tài)如聲音、色彩、構(gòu)圖等也能構(gòu)建和表達(dá)概念,反映出其背后的認(rèn)知心理機(jī)制。他們致力于將語言學(xué)領(lǐng)域的概念隱喻研究拓展為跨學(xué)科的多模態(tài)隱喻研究。
在其專著《廣告中的圖畫隱喻》里,F(xiàn)orceville[3]首次在認(rèn)知語言學(xué)理論框架內(nèi)對廣告圖像隱喻進(jìn)行系統(tǒng)論述。之后,F(xiàn)orceville繼續(xù)發(fā)展和完善圖像隱喻理論,提出“多模態(tài)隱喻”的概念,將其由平面廣告拓展到漫畫、電視廣告及電影等語類。多模態(tài)隱喻研究相關(guān)的最新成果被收錄在論文集《多模態(tài)隱喻》中,并在多模態(tài)研究領(lǐng)域引起較大反響。
Forceville把模態(tài)與人的感官相連,定義為“利用具體的感知過程可闡釋的符號系統(tǒng)”[4]19。因此,根據(jù)五種感官模態(tài)被分為視覺模態(tài)、聽覺模態(tài)、味覺模態(tài)、嗅覺模態(tài)和觸覺模態(tài)。但這種分類比較寬泛,F(xiàn)orceville[4]22又將模態(tài)細(xì)分為圖像、書面語言、口頭語言、聲音、手勢、音樂、味道、氣味等。而多模態(tài)隱喻的定義也有廣義和狹義之分,從狹義上來看,多模態(tài)隱喻是指隱喻的源域和目標(biāo)域分別用不同的模態(tài)來表征。而從廣義上來講,隱喻的源域和目標(biāo)域由兩種以上模態(tài)共同參與表征即可界定為多模態(tài)隱喻。多模態(tài)隱喻研究主要從認(rèn)知體驗的角度,探討多模態(tài)隱喻的各模態(tài)如何協(xié)同實(shí)現(xiàn)意義構(gòu)建過程及影響意義解讀的因素等。總而言之,多模態(tài)隱喻研究經(jīng)歷了從圖像修辭到圖像隱喻再到概念隱喻多模態(tài)表征的飛躍。
國外社會符號學(xué)視角下的多模態(tài)話語研究與概念隱喻視角下的多模態(tài)隱喻研究均起始于20世紀(jì)90年代,它們基于不同的理論框架,屬于在多模態(tài)轉(zhuǎn)向語境下的語篇研究的新范式。此后隨著國外多模態(tài)研究相關(guān)成果的引進(jìn)和推介,近十多年來多模態(tài)研究也逐漸引起
國內(nèi)研究者的關(guān)注,而廣告的多模態(tài)研究更成為研究者關(guān)注的熱點(diǎn)。
筆者以“多模態(tài)語篇”“廣告”為主題詞在中國知網(wǎng)檢索,對相關(guān)的文獻(xiàn)進(jìn)行篩選后共獲取157篇文獻(xiàn)。從文獻(xiàn)中可以看出,國內(nèi)廣告多模態(tài)研究起始于2007年,除了少數(shù)幾篇文獻(xiàn)探討多模態(tài)廣告語篇翻譯或?qū)Χ嗄B(tài)廣告語篇進(jìn)行批評性話語分析外,其余的文獻(xiàn)大多數(shù)都基于社會符號觀和多模態(tài)隱喻來研究,另外還有少數(shù)學(xué)者試圖將兩種視角融合進(jìn)行研究。下文研究者基于研究視角的不同對這些文獻(xiàn)進(jìn)行分析和梳理,總結(jié)十多年來雙重視角下國內(nèi)廣告多模態(tài)語篇研究的路徑和熱點(diǎn),歸納研究發(fā)展的趨勢及存在的不足,以期對未來的廣告多模態(tài)研究有所助益。
在國內(nèi),對多模態(tài)語篇研究的理論探討始于李戰(zhàn)子[7],她推介了Kress、Leeuwen從社會符號學(xué)視角探討多模態(tài)語篇的視覺語法,提出這種分析方法對于加深認(rèn)識語言的社會符號特點(diǎn)具有重要意義。系統(tǒng)功能語言學(xué)家朱永生、張德祿先后探索如何基于系統(tǒng)功能語言學(xué)建立多模態(tài)話語分析理論框架。朱永生[8]分析了多模態(tài)話語的產(chǎn)生和定義,探討多模態(tài)話語分析的理論基礎(chǔ)、研究內(nèi)容和方法。張德祿[9]提出可以從文化、語境、意義、形式及媒體五個層面研究多模態(tài)語篇,同時還探討了各個模態(tài)之間的關(guān)系以及非語言模態(tài)是如何體現(xiàn)概念意義、人際意義和謀篇意義的。這些研究為不同語類的多模態(tài)語篇研究提供了理論基礎(chǔ)和研究方向。
國內(nèi)基于系統(tǒng)功能語言學(xué)的廣告多模態(tài)語篇研究起始于2007年[10],從2009年起不斷增長。由于社會符號學(xué)理論起源于系統(tǒng)功能語言學(xué),所以國內(nèi)研究者對于社會符號學(xué)理論和功能語言學(xué)理論未加嚴(yán)格區(qū)分,有些概念混用。從現(xiàn)有文獻(xiàn)來看,國內(nèi)多數(shù)研究都結(jié)合案例分析來探討、驗證多模態(tài)話語分析理論框架。具體來說,研究者通常以社會符號學(xué)中的視覺語法為基礎(chǔ),結(jié)合不同主題內(nèi)容的平面或動態(tài)廣告語料,提出適用于廣告的多模態(tài)分析模式,并試圖揭示不同模態(tài),尤其是文字和圖像這兩種符號系統(tǒng)對構(gòu)建廣告語篇意義、發(fā)揮廣告功能的影響。(1)有些研究側(cè)重探討廣告多模態(tài)語篇的整體意義構(gòu)建,如彭漪、楊海燕[11]1以一則多模態(tài)平面商業(yè)廣告為例,探討多模態(tài)廣告語篇的整體意義構(gòu)建,驗證了多模態(tài)語篇中各種符號資源之間的互動和互補(bǔ)關(guān)系。張蔚[12]以“探索頻道”廣告為例證,展示語言、圖像等兩種符號所具有的表意性功能,證實(shí)了圖像符號在商標(biāo)形象意義構(gòu)建中的優(yōu)越性。李德志[13]解讀了旅游形象廣告超文本的多模態(tài)化,探討了廣告的意義解讀、視覺語篇的空間劃分以及讀者與圖像之間的社會關(guān)系。周怡[14]探討了央視公益廣告“Family”中各模態(tài)間如何共同協(xié)作進(jìn)行意義表達(dá)。(2)有些研究則側(cè)重廣告多模態(tài)語篇在某一個特定方面的意義表達(dá)。如侯建波[15]分析了國內(nèi)48個房地產(chǎn)多模態(tài)平面廣告,探討了房地產(chǎn)廣告人際意義系統(tǒng)、項目的選擇特征及其背后的原因。楊增成[16]在研究中提出廣告可以通過選擇恰當(dāng)?shù)哪B(tài)來構(gòu)建概念意義,使其能有效傳遞相關(guān)產(chǎn)品的特性,實(shí)現(xiàn)其促銷的目的。于雷雷、徐朝暉[17]收集了中英交通安全公益廣告各60例,通過對比分析找出中英廣告中多模態(tài)互動意義的異同點(diǎn)及其理據(jù)。
由于多模態(tài)話語本身的復(fù)雜性,有些研究將社會符號學(xué)理論與功能語言學(xué)的其他關(guān)聯(lián)理論結(jié)合來研究廣告多模態(tài)語篇。(1)和評價理論結(jié)合來探討廣告多模態(tài)語篇的態(tài)度意義,如毛現(xiàn)樁[18]以春晚公益廣告動態(tài)語篇為語料進(jìn)行例證分析,考察其建構(gòu)態(tài)度意義的多種資源,分析態(tài)度意義的誘發(fā)條件和表達(dá)方式。在此基礎(chǔ)上,毛現(xiàn)樁[19]2018年又借助多模態(tài)視頻語篇分析軟件(MMAV),基于自建的英國交通安全類電視公益廣告的小型語料庫,總結(jié)出其語篇發(fā)展模式和多模態(tài)態(tài)度資源的調(diào)配特征。(2)與情景語境理論結(jié)合。如王霞、孫陽[20]以動態(tài)廣告《老唱片》為例,從語篇外部環(huán)境入手,分析了情景語境的三個變量:語場、語旨、語式對多模態(tài)語篇意義生成和理解的制約作用。
相對于社會符號學(xué)視角的多模態(tài)話語分析,基于概念隱喻的多模態(tài)隱喻分析起步稍晚,主要成果也可以分為理論評介和具體案例分析兩方面。在理論評介方面,趙秀鳳[21]詳細(xì)介紹多模態(tài)隱喻研究的緣起、發(fā)展,提及在多模態(tài)隱喻研究中廣告是受關(guān)注最早,最多的語類,并預(yù)測了其發(fā)展前景,認(rèn)為多模態(tài)隱喻研究有助于推動概念隱喻理論體系的發(fā)展和完善。謝競賢[22]探討多模態(tài)隱喻的特點(diǎn),并通過一個廣告圖片實(shí)驗探討文字與非文字文本的關(guān)系。
在廣告多模態(tài)隱喻研究中,大多數(shù)研究都結(jié)合具體的廣告實(shí)例,運(yùn)用概念隱喻的雙域映射,概念整合等理論,從認(rèn)知角度探討多模態(tài)隱轉(zhuǎn)喻的本質(zhì),運(yùn)作機(jī)制等。研究熱點(diǎn)包含以下方面:(1)廣告多模態(tài)隱喻的分類及區(qū)別性特征;如宋麗麗[23]對平面廣告中的多模態(tài)隱喻類型及其表現(xiàn)方式進(jìn)行分析。她將平面廣告中的多模態(tài)隱喻分為單域圖像呈現(xiàn)式,雙域圖像呈現(xiàn)式及文字-圖像互補(bǔ)式。程瑾濤[24]利用概念整合理論,結(jié)合具體實(shí)例,探討平面廣告創(chuàng)作中三種類型的多模態(tài)隱喻:源域替換目標(biāo)域,源域與目標(biāo)域融合,源域與目標(biāo)域并置。(2)廣告多模態(tài)隱喻中涉及的概念隱喻,各模態(tài)的配置及作用;官科[25]以“中國夢”系列公益廣告為語料,發(fā)現(xiàn)其隱喻主題主要是旅行隱喻、動/植物隱喻、棋局隱喻和戲曲隱喻,在其模態(tài)配置中,源域一般包含畫面和文字兩種模態(tài),目標(biāo)域由文字單一模態(tài)呈現(xiàn)。王揚(yáng)、向恩白[26]基于自建的國內(nèi)外汽車平面廣告語料庫,總結(jié)出汽車廣告的七種多模態(tài)隱喻表征類型,并探討中英汽車廣告中多模態(tài)隱喻的主要表征方式的差異及原因。黃潔、何芬[27]探討了在益達(dá)口香糖系列微電影廣告中的多模態(tài)隱喻,研究發(fā)現(xiàn)其涉及三種概念隱喻:味覺隱喻、事件隱喻和實(shí)體隱喻。(3)影響廣告多模態(tài)隱喻意義構(gòu)建的因素。如才亞楠[28]探討了概念隱喻與文化認(rèn)知模式之間的相互作用和互動機(jī)制。鄒俊飛[29]以58幅“中國夢”系列公益廣告為語料,關(guān)注了在其多模態(tài)隱喻意義解讀中的文化突顯性。(4)多模態(tài)隱喻和轉(zhuǎn)喻的關(guān)系。張輝、展偉偉[30]以三個平面廣告為例討論了多模態(tài)隱喻和轉(zhuǎn)喻的本質(zhì)和認(rèn)知運(yùn)作。鐘書能、李丹婷[31]對一網(wǎng)絡(luò)視頻廣告進(jìn)行多模態(tài)隱喻和轉(zhuǎn)喻的識別和具體解讀,提出多模態(tài)隱喻很大程度上是通過轉(zhuǎn)喻實(shí)現(xiàn)的。黃潔、何芬[27]探討了益達(dá)微電影廣告中隱喻和轉(zhuǎn)喻的多種互動模式,如多模態(tài)隱喻的建構(gòu)既涉及隱喻和轉(zhuǎn)喻的互動、隱喻的平行式互動和上下式互動等。
在多模態(tài)話語分析中,基于系統(tǒng)功能語言學(xué)的社會符號觀和基于概念隱喻的多模態(tài)隱喻都擁有各自獨(dú)立的理論框架,但多模態(tài)話語研究作為一個新的研究領(lǐng)域,仍處于探索階段。因此,研究者將兩種視角融合來進(jìn)行研究,不斷在理論上和語料分析中進(jìn)行嘗試。馮德正[32]嘗試用系統(tǒng)功能理論來闡釋圖像隱喻的意義構(gòu)建,并對多模態(tài)隱喻的構(gòu)建與分類提出自己的觀點(diǎn)。 他認(rèn)為可將視覺圖像的元功能資源看作隱喻潛勢,而且可以通過映射方式與文字-圖像關(guān)系對多模態(tài)隱喻分類,這兩種理論視角可相互補(bǔ)充。張德祿、郭恩華[33]也通過理論探討提出兩個研究視角既在理論范式上相互連接,又在話語分析實(shí)踐中相互補(bǔ)充。
除了理論探索,研究者也通過實(shí)例來進(jìn)行分析。如馮德正、邢春燕[34]以汽車平面廣告為語料,提出在多模態(tài)視覺語篇中,通過方位關(guān)系,空間隱喻也可以構(gòu)建社會現(xiàn)實(shí)與人際關(guān)系,將語言、圖像等各種意義載體組合并建構(gòu)為連貫的整體,達(dá)到廣告語篇特有的促銷目的。崔鑒[35]以FAMILY公益廣告為例,在后現(xiàn)代哲學(xué)框架中,將功能語言學(xué)和多模態(tài)隱喻結(jié)合來全面展示多模態(tài)語篇意義。余憶萍、李勇忠[36]以兩則可樂廣告為例,將視覺語法與多模態(tài)隱喻相結(jié)合來具體解讀多模態(tài)廣告的再現(xiàn)意義、互動意義與構(gòu)圖意義的動態(tài)構(gòu)建。
經(jīng)過最近10多年的發(fā)展,雙重視角下的國內(nèi)廣告多模態(tài)研究已經(jīng)逐漸成熟,在各自的理論框架內(nèi)形成獨(dú)立的研究路徑和方法,在研究中越來越注重跨視角和跨學(xué)科的融合,研究方法也不斷創(chuàng)新,呈現(xiàn)出以下發(fā)展特點(diǎn)和趨勢。
在多模態(tài)轉(zhuǎn)向的語境中,除語言文字外,圖像、聲音等其他模態(tài)都能用來構(gòu)建語篇意義。因此,研究者嘗試把語言的相關(guān)理論拓展到其他模態(tài)中。廣告是多模態(tài)研究最受關(guān)注的語類,其中不同符號系統(tǒng)之間的動態(tài)協(xié)作隨處可見,加大了對其意義的識解難度。社會符號學(xué)家提出的視覺語法能整合語言符號與圖像符號,闡釋多模態(tài)語篇意義的構(gòu)建,為多模態(tài)隱喻提供分析基礎(chǔ)。同時,多模態(tài)隱喻能彌補(bǔ)視覺語法在認(rèn)知層面的不足,反映其意義建構(gòu)的動態(tài)過程。另外,也有研究者[37]將批評話語分析理論,文本分析的互文理論[38-39]、修辭結(jié)構(gòu)理論[40]應(yīng)用到廣告多模態(tài)語篇中,提供了新的研究思路。
廣告多模態(tài)研究多采用定性方法,選取一個或幾個實(shí)例進(jìn)行解讀。但是定性研究往往有主觀偏頗之嫌,因此,研究者開始自建小型語料庫,將定性和定量研究相結(jié)合,如王揚(yáng)、向恩白[26]以國內(nèi)外汽車平面廣告為語料構(gòu)建一個語料庫(含250則廣告),歸納出汽車廣告中存在的七種隱喻表征類型及中英廣告中的差異。王小平、王軍[41]收集了30則電視公益廣告,研究發(fā)現(xiàn)了動態(tài)廣告話語中多模態(tài)隱喻在模態(tài)調(diào)用層面存在一定的規(guī)律性。毛現(xiàn)樁[19]也自建了英國交通安全類電視公益廣告的小型語料庫來進(jìn)行研究。
廣告多模態(tài)研究仍處于不斷探索中,研究里也存在以下不足:
(1)不同視角下的多模態(tài)語篇研究術(shù)語不夠規(guī)范統(tǒng)一,譬如功能語言學(xué)提出三大元功能為概念功能、人際功能和組篇功能。視覺語法提出與之對應(yīng)的三大意義,即再現(xiàn)意義、互動意義、構(gòu)圖意義,但在文獻(xiàn)中卻有研究者用到“概念意義”“人際意義”等術(shù)語,將之混合使用,容易導(dǎo)致困惑。
(2)雖然研究開始采用定量研究,但數(shù)量不多,且在語料庫的構(gòu)建中,對于多模態(tài)隱喻的識別程序不能形成統(tǒng)一規(guī)范、簡單可行的標(biāo)準(zhǔn),這樣也就無法解決語料的標(biāo)注和自動識別的問題,因此無法建立大型語料庫供廣大研究者共同使用。
(3)多模態(tài)研究理論未形成統(tǒng)一的體系。雖然研究者基于系統(tǒng)功能語言學(xué)和認(rèn)知概念隱喻等理論對多模態(tài)語篇進(jìn)行研究,但更多的是對原來語言理論的一種拓展延伸,并未真正建立起一套權(quán)威的、統(tǒng)一的多模態(tài)研究理論體系。
(4)對某一媒介文化單一角度的研究,往往可以納入到多模態(tài)研究的視域下。如江保鋒、聞婧[42]研究了民間藝術(shù)視覺圖式語境與電視公益廣告相結(jié)合,以其文化共鳴、審美共鳴和情感共鳴,將具有具象寓意、情景喻意和語義敘述的圖像語境構(gòu)建融入傳播語境的構(gòu)建之中,可以創(chuàng)作出符合時代需求的傳播語境。
在當(dāng)今社會,多媒介普遍存在,不容忽視,而多模態(tài)研究作為一門新興的學(xué)科,正處于探索發(fā)展階段,多模態(tài)研究的理論發(fā)展對于拓展人類語言及意義的研究具有十分重要的意義。