多模態(tài)語(yǔ)篇在大學(xué)英語(yǔ)教學(xué)課堂中的應(yīng)用

金政紅

(蘇州科技學(xué)院外國(guó)語(yǔ)學(xué)院，江蘇蘇州 215009)

1.多模態(tài)語(yǔ)篇產(chǎn)生的社會(huì)文化背景及多元識(shí)讀能力的提出

多模態(tài)話語(yǔ)是指運(yùn)用聽(tīng)覺(jué)、視覺(jué)、觸覺(jué)等多種感覺(jué),通過(guò)語(yǔ)言、圖像、聲音、動(dòng)作等多種手段和符號(hào)資源進(jìn)行交際的現(xiàn)象。多模態(tài)性(Multimodality)是現(xiàn)代社會(huì)各式各樣語(yǔ)篇的一大特色,在數(shù)字化時(shí)代,這些不同的模態(tài)在意義再現(xiàn)層面上在起著同樣的作用(Kress&Van Leeuwen 2006)。

多模態(tài)語(yǔ)篇分析方法興起于20世紀(jì)90年代,以克瑞斯和凡利文(Kress&Van Leeuwen 2006)為代表。在全球化的過(guò)程中，一方面，新的交際形式出現(xiàn)，另一方面，新的價(jià)值被賦予一些舊符號(hào)形式。因此，符號(hào)資源，如布局，色彩和動(dòng)人的視覺(jué)圖像，聲音，動(dòng)作，甚至排版都具有著進(jìn)行視覺(jué)交流的意義。因此，意義是通過(guò)不同的符號(hào)學(xué)模式的組合，從而促進(jìn)了多模態(tài)的形成（韋琴紅2009）。

與此同時(shí)，隨著信息技術(shù)的發(fā)展，如：Word，PowerPoint，flash，HTML等電子軟件和電子設(shè)備已經(jīng)成為重要的且有影響深遠(yuǎn)的符號(hào)工具。以文字處理器和計(jì)算機(jī)為基礎(chǔ)的文本為話語(yǔ)產(chǎn)生及交流帶來(lái)很多新的可能性。在一定程度上使包括圖片和圖形的的語(yǔ)言交際更容易，不管是一個(gè)出版社還是一個(gè)人在家里工作。盡管如此，卻很少有人注意這些非語(yǔ)言的資源，因此，多模態(tài)理論在這樣的背景下為學(xué)者所注意并因此得以發(fā)展。

在多模態(tài)語(yǔ)篇產(chǎn)生的基礎(chǔ)上，“新倫敦小組”提出的“多元識(shí)讀”能力令學(xué)術(shù)界不可忽視，對(duì)于多模態(tài)語(yǔ)篇與語(yǔ)言教學(xué)產(chǎn)生深遠(yuǎn)影響。所謂“多元識(shí)讀”(Multiliteracy)是指具有閱讀所能接觸到的各種媒體和模態(tài)的信息,并能循此產(chǎn)生相應(yīng)的材料,如閱讀互聯(lián)網(wǎng)或互動(dòng)的多媒體。傳統(tǒng)的以讀寫為主的識(shí)讀能力在多媒體時(shí)代已不夠用，不足以應(yīng)付時(shí)代需求。其次,教育中的多模態(tài)化來(lái)自于教室中不斷增加使用的多種媒體,如圖像操作軟件、電子音樂(lè)、科學(xué)模擬、存在于計(jì)算機(jī)上的虛擬劇場(chǎng)等。多模態(tài)化和多元符號(hào)學(xué)試圖給這些信遞形式理論化,鑒別各種圖像、詞語(yǔ)和動(dòng)作的模態(tài)如何互相倚賴,以產(chǎn)生整體意義(胡壯麟2007)。重要的是有時(shí)一種模態(tài)需要倚賴其他模態(tài)來(lái)完成信遞行為,如沒(méi)有口述的詞語(yǔ)說(shuō)明,圖表會(huì)一無(wú)意義;沒(méi)有模型課件,教師用手做的節(jié)奏性動(dòng)作也就沒(méi)有意義,因而每一種模態(tài),作為符號(hào)資源,對(duì)所做的表達(dá)都有貢獻(xiàn)。學(xué)生的任務(wù)是將教師的各模式和符號(hào)資源轉(zhuǎn)變?yōu)槔斫猓ê鷫痒?007）。

2.多模態(tài)語(yǔ)篇的理論框架

多模態(tài)話語(yǔ)分析的理論基礎(chǔ)是Halliday的系統(tǒng)功能語(yǔ)言學(xué)理論,根據(jù)Halliday(2000),語(yǔ)言系統(tǒng)中有三個(gè)用來(lái)表示功能意義的純理功能,分別為概念功能,人際功能和語(yǔ)篇功能。而Halliday也曾指出,他建構(gòu)功能語(yǔ)法的目的是為語(yǔ)篇分析提供一個(gè)理論框架,這個(gè)框架可以用來(lái)分析英語(yǔ)中任何口頭的或書(shū)面的語(yǔ)篇。功能語(yǔ)法的主要出發(fā)點(diǎn)是把語(yǔ)法看成是制造意義的資源,語(yǔ)言為我們對(duì)社會(huì)行動(dòng)的經(jīng)驗(yàn)和形成闡釋編碼。因此語(yǔ)法不再是決定對(duì)錯(cuò)的一套形式上的規(guī)則,而是寬泛地指一種特定模式中元素間的關(guān)系的結(jié)構(gòu)或模式之間的關(guān)系結(jié)構(gòu)。張德祿也指出,系統(tǒng)功能語(yǔ)言學(xué)是最適合用于研究多模態(tài)話語(yǔ)的理論模式,其主要原因有以下三個(gè)方面:(1)系統(tǒng)功能語(yǔ)言學(xué)不僅關(guān)心語(yǔ)言內(nèi)部的運(yùn)作機(jī)制,同時(shí)還研究語(yǔ)言外的環(huán)境和動(dòng)因;(2)系統(tǒng)功能語(yǔ)言學(xué)把話語(yǔ)的意義和功能放在首要位置上;(3)意義的實(shí)現(xiàn)是以多模態(tài)形式進(jìn)行的,語(yǔ)言只是這些形式中最有效的一種（劉曉琳 2009）。

多模態(tài)語(yǔ)篇分析方法以系統(tǒng)功能語(yǔ)言學(xué)理論為基礎(chǔ),嘗試把系統(tǒng)功能語(yǔ)言學(xué)對(duì)于語(yǔ)言研究的方法應(yīng)用到其他的一些符號(hào)資源(如面部表情、手勢(shì)、圖像、音樂(lè)等)研究上。多模態(tài)語(yǔ)篇分析研究者認(rèn)為,其他的一些符號(hào)資源同樣具有語(yǔ)言的系統(tǒng)性和功能性,它們與語(yǔ)言一樣同屬于社會(huì)符號(hào)資源。語(yǔ)篇的多模態(tài)性對(duì)人們從新的視角更好地理解語(yǔ)言起著非常重要的作用(Kress&Van Leeuwen 2006)。

3.多模態(tài)語(yǔ)篇在大學(xué)英語(yǔ)課堂教學(xué)中的應(yīng)用

如上所述，多模態(tài)識(shí)讀能力強(qiáng)調(diào)多元形式的讀寫能力、信息交流和多媒體技術(shù)等因素的相關(guān)性，同時(shí)強(qiáng)調(diào)多元化社會(huì)中各種文化識(shí)別能力的多樣化;黃創(chuàng)（2009）在《基于多模態(tài)教學(xué)的商務(wù)英語(yǔ)綜合實(shí)訓(xùn)》中提到，培養(yǎng)跨文化交際能力是英語(yǔ)專業(yè)實(shí)訓(xùn)的首要目標(biāo)，因?yàn)閷W(xué)生要了解外國(guó)人感知世界的方式，同時(shí)建立恰當(dāng)?shù)纳虡I(yè)文化圖式才能進(jìn)行有效的國(guó)際交流。因此我們可以認(rèn)為，在大學(xué)英語(yǔ)的課堂綜合實(shí)訓(xùn)中，教師可利用多媒體工具外加多模態(tài)教學(xué)模式，創(chuàng)設(shè)校內(nèi)虛擬交際場(chǎng)景，給予學(xué)生多種模態(tài)的認(rèn)知刺激，從而大大提高語(yǔ)言教學(xué)的效率，從而彌補(bǔ)校外實(shí)訓(xùn)的缺憾。

“多模態(tài)教學(xué)”概念產(chǎn)生于現(xiàn)代信息技術(shù)高度發(fā)達(dá)的國(guó)際化背景。人類已從口述和讀寫時(shí)代進(jìn)入到超文本時(shí)代，可以通過(guò)互聯(lián)網(wǎng)進(jìn)行廣泛的信息互動(dòng)活動(dòng)，例如，電子郵件、MSN、BBS、QQ聊天、視頻交流、角色扮演游戲等各種媒介，均產(chǎn)生了各具特色的意義建構(gòu)的語(yǔ)域。近年來(lái)，校園網(wǎng)已基本覆蓋我國(guó)高等院校，多媒體進(jìn)入了實(shí)訓(xùn)室和大學(xué)英語(yǔ)教學(xué)課堂，多模態(tài)教材（或軟件）的開(kāi)發(fā)和使用開(kāi)始普及。借助這些資源，語(yǔ)言教師可以選擇有聲有色的語(yǔ)篇材料，并進(jìn)行編輯處理，以多模態(tài)的方式向?qū)W生呈現(xiàn)教師的教學(xué)意圖。

此外，教室中的黑板、計(jì)算機(jī)、擴(kuò)音器、錄音機(jī)、電視機(jī)、錄像機(jī)、投影儀都是媒體，而粉筆板書(shū)、收發(fā)電子郵件、聽(tīng)歌、看錄像等都是采用符號(hào)構(gòu)建意義的模態(tài)形式。可見(jiàn)，媒體是表達(dá)信息的物理工具，而模態(tài)是用某種媒體表達(dá)信息的特殊方式，通過(guò)觸覺(jué)、聽(tīng)覺(jué)、視覺(jué)等感官跟外部環(huán)境進(jìn)行互動(dòng)，用其中三個(gè)或以上感官進(jìn)行的互動(dòng)叫多模態(tài)，正常人之間的互動(dòng)交際都是多模態(tài)的。所以，語(yǔ)言教學(xué)可以借助多模態(tài)，諸如聽(tīng)覺(jué)的、視覺(jué)的、觸覺(jué)的多種體驗(yàn)和多感官刺激，為學(xué)生提供聲、像、圖、文環(huán)繞的交互式訓(xùn)練語(yǔ)境，使學(xué)生獲得交際意識(shí)和語(yǔ)用能力。

此外，隨著多媒體教學(xué)技術(shù)的迅速發(fā)展，現(xiàn)代語(yǔ)言教學(xué)課堂中，越來(lái)越多的教師選擇使用PPT語(yǔ)篇。作為一種新的語(yǔ)類，PPT工具是我們用于制作幻燈片的PowerPoint軟件，也就是說(shuō)，要制作幻燈片的演示者需要借助于微軟公司設(shè)計(jì)的PowerPoint軟件。它是微軟Office系列軟件的一個(gè)組成部分，幫用戶傳遞信息，其本身不能表達(dá)意義。但是我們課堂中用到的PPT語(yǔ)篇，則借助PPT工具創(chuàng)建的多種模態(tài)，包括圖像、圖表、音頻、視頻等。也就是我們說(shuō)的多模態(tài)語(yǔ)篇（胡壯麟，董佳2006）。

將多模態(tài)語(yǔ)篇運(yùn)用于外語(yǔ)教學(xué)還有著多模態(tài)自身的優(yōu)勢(shì)。多模態(tài)運(yùn)用就是通過(guò)語(yǔ)言、圖像、聲音、動(dòng)作等多種手段和符號(hào)資源進(jìn)行交際的現(xiàn)象。即在學(xué)習(xí)過(guò)程中將眼、耳、手、舌、鼻都調(diào)動(dòng)起來(lái),使抽象的、枯燥的學(xué)習(xí)內(nèi)容轉(zhuǎn)化成形象的、有趣的、可視的、可聽(tīng)的動(dòng)感內(nèi)容。如果在教授生詞、短語(yǔ)及習(xí)語(yǔ)時(shí)配上形象的圖片或者聲音,記憶的速度會(huì)更快,印象更深刻。因?yàn)樵谀撤N程度上,聲色刺激遠(yuǎn)比文字刺激強(qiáng)烈。朱慧玲（2010）在《多模態(tài)語(yǔ)境下英語(yǔ)教學(xué)的思考》中曾指出：“多模態(tài)運(yùn)用于英語(yǔ)教學(xué)中可使學(xué)生在英語(yǔ)的學(xué)習(xí)過(guò)程中以多種感覺(jué)器官參與學(xué)習(xí)。多種媒體信息刺激學(xué)生的大腦皮層相應(yīng)機(jī)能區(qū),比單一媒體信息刺激所引起的反應(yīng)要強(qiáng)得多,更有利于知識(shí)的理解和記憶,產(chǎn)生更好的學(xué)習(xí)效果?！睆膱D文結(jié)合的彩頁(yè)教材,到幻燈片、投影儀的出現(xiàn),再到多媒體的使用,逐步運(yùn)用多種模態(tài)優(yōu)化英語(yǔ)教學(xué)。在大學(xué)英語(yǔ)教學(xué)中運(yùn)用多媒體,可創(chuàng)設(shè)聲、光、色、圖俱佳的交互式學(xué)習(xí)環(huán)境,使學(xué)生們感到新鮮,產(chǎn)生興趣和求知欲望。寬松、自主的學(xué)習(xí)氛圍,可促進(jìn)學(xué)習(xí)主觀能動(dòng)性的發(fā)揮和個(gè)性的發(fā)展。同時(shí)多媒體使用也可增加課堂語(yǔ)言信息量,提高語(yǔ)言教學(xué)效率。

比如在學(xué)習(xí)英美文學(xué)時(shí),由于語(yǔ)言文化差異及文字單一、枯燥,讀者很難集中精力將整篇小說(shuō)或著作讀完。而根據(jù)著作改編的電影,具有集文本字幕、語(yǔ)音、圖像等多種信息傳播介質(zhì)于一體的特性,或以優(yōu)美迷人的畫面,或以至純至深的情感,或以演員高超的演藝給觀眾留下深刻的印象,這樣可以促使學(xué)生在感受情節(jié)的同時(shí),自然、輕松地“讀”懂了小說(shuō),并且在觀看電影時(shí)不知不覺(jué)、自然地習(xí)得純正的語(yǔ)音、語(yǔ)調(diào)和豐富地道的語(yǔ)言,輕松提高英語(yǔ)口語(yǔ)交際能力,達(dá)到大學(xué)英語(yǔ)教學(xué)的最終目標(biāo)。

4.結(jié)束語(yǔ)

綜上所述，在大學(xué)英語(yǔ)課堂中應(yīng)用多模態(tài)語(yǔ)篇,教育信息化程度會(huì)越來(lái)越高。這就促使大學(xué)英語(yǔ)教師思考在社會(huì)文化呈現(xiàn)多元化和技術(shù)化的現(xiàn)在和未來(lái)，教什么和怎樣教的問(wèn)題,也就是思考現(xiàn)在和將來(lái)的多元識(shí)讀教學(xué)問(wèn)題。而對(duì)此，大學(xué)英語(yǔ)教師要在教學(xué)實(shí)踐中積累經(jīng)驗(yàn),優(yōu)化多模態(tài)語(yǔ)篇在不同語(yǔ)境下的運(yùn)用。

Halliday,M.A.K.(2000).An Introduction to Functional Grammar[M].Beijing:Foreign Language Teaching and Research Press.

Kress,G.&Van Leeuwen,T.(2006).Reading Images:The Grammar of Visual Design[M].London:Routledge.

黃創(chuàng)(2009).基于多模態(tài)教學(xué)的商務(wù)英語(yǔ)綜合實(shí)訓(xùn).[J].商場(chǎng)現(xiàn)代化(5):247－249。

胡壯麟，董佳(2006).意義的多模態(tài)構(gòu)建[J].外語(yǔ)電化教學(xué)(6)。

胡壯麟(2007).社會(huì)符號(hào)學(xué)研究中的多模態(tài)化[J].語(yǔ)言教學(xué)與研究(1)。

劉曉琳(2009).從多模態(tài)話語(yǔ)分析解讀英語(yǔ)詩(shī)歌[J].齊齊哈爾大學(xué)學(xué)報(bào)(7)。

韋琴紅(2009).視覺(jué)環(huán)境下的多模態(tài)化與多模態(tài)話語(yǔ)研究[M].北京:科學(xué)出版社。

朱慧玲(2010).多模態(tài)語(yǔ)境下英語(yǔ)教學(xué)的思考[J].長(zhǎng)江工程職業(yè)技術(shù)學(xué)院學(xué)報(bào)(3)。