多模態(tài)視角下的EFLT元語言研究

★ 燕 莉 岳好平

引言

話語分析歷來以文本為基礎的語言符號分析為主，多對語言的結(jié)構和功能進行研究。但是，隨著現(xiàn)代話語分析研究的發(fā)展，學者們逐漸意識到，真正具有實際意義的話語應該是自然狀態(tài)下的話語。因為人們總是通過各種符號的運用而完成意義的建構［1］。研究各種符號雖有其復雜性，但近年來學術界已經(jīng)開始關注包括語言符號甚至非語言符號在內(nèi)的多模態(tài)話語，并涉及其在外語教學領域中的形式表現(xiàn)及意義表達(如張德祿［2］［3］、朱永生［4］等)。本文關注區(qū)別于對象語言、居于語言第二層次的元語言，并著力考察在EFLT(英語為外語的教學)語域中的元語言的多模態(tài)特征。

一、多模態(tài)話語理論

生命科學研究指出人有聽覺、視覺、觸覺、嗅覺等多種感知渠道，這多種感知渠道分別導致相應的交際模態(tài)(modality)。在實際的自然語言中，除了單一模態(tài)運作外，多種模態(tài)經(jīng)常相互作用，通過語言及非語言手段(如圖像、聲音、動作等)和多種符號資源進行交際，這種現(xiàn)象即是多模態(tài)話語分析所關注的要點。

多模態(tài)話語的主要理論基礎是系統(tǒng)功能語言學的社會符號學理論。Halliday認為語言是社會符號(social semiotic)，具有意義潛勢(meaning potential)，認為語言與語言外的其他表義系統(tǒng)如圖畫、雕刻、音樂等共同實現(xiàn)社會意義［5］。這一觀點表明，在語言學中，單一重視語言符號的意義傳達是不全面的。語言學要更多的關注自然話語的多模態(tài)性，關注語言及非語言因素共同表達意義，因此，研究實現(xiàn)意義傳達的多模態(tài)具有學術價值。

近年來，多位學者(O’Toole［8］，Kress［1］， O ’Halloran［7］，Royce Bowcher［9］，張德祿［2］［3］等)在多模態(tài)話語理論方面取得了較突出的成果。一般認為語言學研究中的實現(xiàn)意義傳播的模態(tài)形式主要有兩種，一種是聽覺模態(tài)，另一種是視覺模態(tài)。其中，Kress在探討教學中的多模態(tài)交際時分析了信息傳遞的理論基礎，指出作為口語的語言模態(tài)和作為書面語的語言模態(tài)以及其他模態(tài)相互融合交織，在信息傳遞語境中同時運作，依靠互動而產(chǎn)生意義［1］。張德祿指出外語教學中各模態(tài)之間遵循一定的原則產(chǎn)生“協(xié)同”作用［3］。本文在這種認識的基礎上，結(jié)合EFLT 元語言研究［10］，認為 EFLT(英語為外語的教學)元語言具有多模態(tài)特征，在這一特殊領域內(nèi)發(fā)揮重要作用，在外語教學這一動態(tài)過程中不僅具有特殊的表現(xiàn)形式，也具有特定的實現(xiàn)路徑。

二、元語言與多模態(tài)

研究EFLT元語言的多模態(tài)特征，首先有必要從元語言概念、EFLT元語言的界定及其多模態(tài)特征出發(fā)進行探討。

(一)元語言與EFLT元語言

Alfred Tarski早在1933年就將語言分為“第一層次的用來談論周圍世界的語言”(即“對象語言”object language)和“第二層次的用來談論語言本身的語言(即“元語言”metalanguage)兩層［11］。狹義上的“元語言”局限于人工語言范疇，不是日常生活中的語言，而是更高層次的語言;而廣義的元語言指的是關于語言的語言，因為“元語言的使用情況證明它是我們語言活動的一部分”［12］。因此，作為人類語言的“普遍”特征的元語言應受到重視。

在這種廣義認識下，詞典編撰中的一系列特殊的或抽象的語言符號是元語言，文藝評論相對于文學作品也是一種元語言，而語言教師(包含學生的參與)用來描寫、解釋教學內(nèi)容——目的語的語言也是一種具有獨特形式和內(nèi)容的元語言。EFLT元語言即指英語為外語的教學中基于教學對象語言——英語的語言［10］。這種具有元語言性質(zhì)的用來描寫和解釋目的語的語言在外語教學中普遍存在。因為以英語為外語的教學的特殊性質(zhì)，這種貫穿于整個外語課堂的元語言有特殊的表現(xiàn)形式，其多模態(tài)特征和實現(xiàn)途徑也具有特殊性。

(二)OL與ML多模態(tài)特征表達式

語言課堂的語言可以區(qū)分為基于教學行為的語言與基于教學內(nèi)容的語言兩部分。前者包括對教學主體行為的問候、反饋、評價等，后者包括對于目的語的語音、語法、詞匯等的提及、描寫和解釋。后者即是我們所講的元語言(本文中用 metalanguage/ML來表示)，其中提及的“目的語”即是“對象語言”(在本文中，因為與元語言相對，用 object language/OL來表示)。

以英語為外語的教學(EFLT)與以英語為母語(English as First Language)、英語為二語(English as Second Language)的教學相區(qū)分。EFLT表明英語教學中母語環(huán)境的缺失，而我國絕大多數(shù)英語教學屬于這種典型的外語教學。

在EFLT環(huán)境中，OL與 ML都具有多模態(tài)的特性，但多模態(tài)的OL具有相對客觀、相對固定的特點。早期的EFLT中，OL多以客觀的文本為主，以文本為基礎進行教學，OL也就以視覺模態(tài)為主要特征。教學目標單一，學生學的都是“啞巴”英語，也是由于只重視“視覺模態(tài)”導致的。但隨著教學改革的推進，教學目標在聽、說、讀、寫等各個方面要求的提升，OL多借助視覺模態(tài)和聽覺模態(tài)來表現(xiàn)。

從ML方面來看，因為其元語言闡釋功能，多模態(tài)ML具有相對主觀、不固定、多樣化、交互性等特點。作為基于教學內(nèi)容的語言，是教師為主導根據(jù)學生的水平進行創(chuàng)設的，從這個意義上講，具有相對主觀、不固定的特點。多樣化和交互性則體現(xiàn)在教學發(fā)展過程中。ML在早期英語教育中不存在聽覺模態(tài)的缺失(如教學中的元語言闡釋的方式至少具有文字闡釋、語音闡釋兩種方式)，具有視覺模態(tài)和聽覺模態(tài)兩種主要模態(tài)，并伴隨有姿勢、空間等一系列其他模式和手段。更重要的是，英語教學改革的發(fā)展和現(xiàn)代化技術的介入使交際媒介更加多樣化(如多媒體技術就使教學模態(tài)更加豐富)，從而使ML不僅完成對課本、文本的描寫和闡釋，而且能將交際實況復制，實現(xiàn)對真實語言環(huán)境的創(chuàng)設，進而達到用“立體化”［13］手段來實現(xiàn)目標。這種多模態(tài)系統(tǒng)中的ML更具有操作的靈活性和復雜性。

因此，用特征公式進行描述，可以將EFLT中OL與ML的多模態(tài)特征總結(jié)如下:

OL:［+多模態(tài)］［+固定］［+客觀］［－選擇］

ML:［+多模態(tài)］［－固定］［－客觀］［+選擇］

三、多模態(tài)的EFLT元語言

語域的特殊性決定了EFLT元語言的多模態(tài)特性。其多模態(tài)既是EFLT元語言的屬性，既十分重要，又非常必要，也是EFLT元語言的優(yōu)化目標。

(一)必要性與重要性

課堂教學伴隨著的多種模態(tài)包括有:空間(space)、姿態(tài)(gestures)、動 作 (motion)、聲 音(sound)、音調(diào)(tone of voice)、立體媒介(three－dimension objects)、口頭語(oral)、書面語(written)、形象 (image)、圖片 (picture)等。［14］這些模態(tài)在語言課堂里相互作用、不可缺少。

以英語為外語的課堂中，學習者總體水平是無法達到在不進行元語言闡釋的情況下完全理解自然環(huán)境下的話語交際的，因此，多模態(tài)的元語言闡釋不僅是必要的，而且是重要的。只有通過交際及其他非實際交際需要的課堂行為(如:板書、PPT、視頻輔助、更為夸張的肢體語言)才能實現(xiàn)描寫或者闡釋作用，從而達到教學目的。另外，從系統(tǒng)功能語言學的角度來看，外語教學元語言通過人際功能、實現(xiàn)其概念功能的過程中，各種模態(tài)發(fā)揮著不可或缺的作用。否則，僅僅語言交流是無法完成EFLT語域下的功能實現(xiàn)和意義傳遞的目標的。

(二)語符與非語符表現(xiàn)形式

在EFLT中，ML的表現(xiàn)形式可以分為語符形式和其他非語符形式兩個范疇。語符形式相對來說較單一，一般為英語語符，少數(shù)為漢語語符，因為是語言，所以涉及語音、詞匯、語法、語篇等具體單位。所涉及的模態(tài)一般包括視覺模態(tài)和聽覺模態(tài)兩個類別，或單獨呈現(xiàn)，或同時呈現(xiàn)，或互為補充。如在課堂中，教師口頭解釋詞語的意思而沒有其他文字提示，或僅要學生看語言性的說明材料時，主要使用單一模態(tài)(聽覺模態(tài) /視覺模態(tài))實現(xiàn)對語言意義的傳達;如果口頭表達加書面文字說明，表示聽覺和視覺模態(tài)同時作用;先看文字，不理解的情況下再進行口頭解釋，則是屬于先發(fā)揮視覺模態(tài)的語言意義傳遞作用，再用聽覺模態(tài)進行意義傳送，屬于兩種模態(tài)的相互補充。在這種語符元語言中，使用語言對語言進行闡釋，是ML的非自然狀態(tài)。

自然狀態(tài)的ML必須結(jié)合語符與非語符形式。非語符形式較為復雜，涉及除語言外的其他模態(tài)，除了視覺、聽覺模態(tài)外，還涉及到嗅覺、觸覺、感覺及姿勢、空間、語調(diào)、畫面、立體視頻等模態(tài)。實踐證明，非語符形式的元語言更加能提高學生的記憶能效和增加學習興趣。語言能力水平越低的外語學習者對于圖畫、姿勢、視頻、音樂等非語符形式的ML模態(tài)的作用越為熱衷和認可(如:筆者對于8歲學生英語學習的個案研究表明，最感興趣和不易遺忘的內(nèi)容是關于用姿勢、音樂、圖片等非語言形式或敘事性元語言如故事等闡釋的內(nèi)容)。

需要注意的是，ML與OL類別或表現(xiàn)形式的差異能提高識記效果及加強理解能力。如:筆者以調(diào)查問卷的形式調(diào)查了省內(nèi)外10所高校120名外語教師關于ML的使用情況，在用來解釋實詞的語符形式的ML中，超過80%的教師多選用與OL的類別或形式有一定差異的情境設置、舉例等闡釋教學內(nèi)容［15］。這表明，教師也肯定具有心理空間潛能、形成情境推理的有差異的ML更具有認知優(yōu)勢。而實現(xiàn)這種ML無疑要突出非語符形式的元語言模態(tài)的重要作用。

(三)多模態(tài)的實現(xiàn)路徑

EFLT中自然母語環(huán)境的缺失要求教師創(chuàng)設類似于真實狀況的語言環(huán)境，在這一過程中，由ML實現(xiàn)對英語這一OL的情景組合和意義構建。OL的情景本身是多模態(tài)的，需要有多模態(tài)的載體—即ML來完成其再現(xiàn)和轉(zhuǎn)換。

多模態(tài)ML的實現(xiàn)途徑分為兩個部分:第一個部分是對OL多模態(tài)的復制，指基本等同于自然會話的、對OL會話模態(tài)的模仿行為，這里稱為“體驗性多模態(tài)元語言”。這種ML是將OL會話原型完全照搬到教學中，單一使用的幾率很小。EFLT中最為典型的例子就是教師讓學生仿照真實語境進行對話表演或者角色扮演，表演中讓學生動用視覺、聽覺、感覺、姿勢、語氣、空間等多模態(tài)組合互動，進行對OL的情景體驗認知。但是值得注意的是，一般情況下，在復制會話之前或之后，教師應該會有描寫或解釋性的ML對該情景進行說明，以便學生的體驗認知能夠朝著實現(xiàn)教學目標的走向順利進行。

第二個部分是對OL多模態(tài)的拓展。這是EFLT中使用最為普遍的途徑。從元語言角度來看，可分為描寫性的多模態(tài)ML、闡釋性的多模態(tài)ML、描寫與闡釋結(jié)合的多模態(tài)ML三種。其實現(xiàn)路徑如下:

①描寫性多模態(tài)ML=會話+描寫(描寫會話形式及語言規(guī)則)

②闡釋性多模態(tài)ML=會話+解釋(深層解釋形式、規(guī)則產(chǎn)生的原因及文化、社會因素等)

③描寫與闡釋結(jié)合的多模態(tài)ML=會話+描寫+解釋(結(jié)合1、2)

這三種ML實現(xiàn)路徑需滿足的條件是:實現(xiàn)元語言功能時，須通過多種模態(tài)進行強調(diào)才能完成闡釋的充分性。其中，第三種是在OL不太熟悉的情況下完整、充分的元語言闡釋途徑。如在筆者的課堂實錄中有這樣一個例子。教學目標:教師要講述英語第一人稱與第三人稱的區(qū)別，強調(diào)課文中所使用的第一人稱有拉近心理距離的作用。多模態(tài)ML作用發(fā)揮過程:首先教師選用第一人稱的一段話，讓學生看的同時讀出聲來，讓視覺模態(tài)與聽覺模態(tài)同時發(fā)揮作用;再讓學生讀第二遍，但要求將段落中的第一人稱轉(zhuǎn)換成第三人稱誦讀，教師帶讀的同時通過夸張的姿勢、語調(diào)強化學生對不同人稱所表現(xiàn)的心理距離及情感傳遞能力的體驗，對于不同的語言符號，讓視覺模態(tài)、聽覺模態(tài)和感覺模態(tài)、姿勢、語調(diào)等同時發(fā)揮作用并進行前后對比，體會出第一人稱與第三人稱的區(qū)別;然后，教師以討論、交際的方式讓學生說出對一、三人稱的體會;最后，教師進行總結(jié)，對英文一、三人稱的使用規(guī)則進行描寫，并對英語人稱選擇的文化深層原因進行解釋。這一ML反映了按照一定路徑，將會話、描寫與闡釋結(jié)合，各模態(tài)共同作用，就可以通過人際功能完全實現(xiàn)概念功能，充分體現(xiàn)教學目標，完成意義的轉(zhuǎn)換和傳遞。

四、建議與設想

在當今的語言學領域，話語的多模態(tài)探討無疑為語言學研究開辟了一方新的天地。創(chuàng)新成果層出不窮的同時，國內(nèi)外不少學者已經(jīng)將課堂語言作為多模態(tài)分析的典型范例。在這一聚焦點內(nèi)，結(jié)合語言的層次進行基于對象語言的元語言的多模態(tài)分析更有意義，因為在教學倍受關注的我國外語學界，EFLT的有效性主要在于多模態(tài)的課堂元語言的規(guī)范和質(zhì)量的提升。

筆者認為，多模態(tài)的EFLT元語言除了描寫和解釋對象語言這一特點以外，應該還具有機器元語言的功能和作用——即具有一定的優(yōu)化的模式和途徑，可供操作者(教師)根據(jù)所設置的條件(學生的水平和教學多模態(tài)條件等主客觀因素)、所設置的目標(教學目的)進行操作運行或直接進行程序性的選擇。在EFLT教學中，多模態(tài)的對象語言相當于一個多模態(tài)的數(shù)據(jù)存儲庫，而多模態(tài)的元語言則是根據(jù)一定的原則，將存儲庫的數(shù)據(jù)提取出來，對多種模態(tài)進行優(yōu)化排列組合，或強化疊加，或精煉篩選，滿足對教學這一終極目標的要求。在這一設想內(nèi)，研究者應該對這一語言的使用優(yōu)化規(guī)則、多種模態(tài)之間的互動規(guī)律進行探索，從而盡早完成這種元語言“程序”的編制和優(yōu)化工作。

［1］Kress，G.，Jewitt，C.，Ogborn，J.＆ Tsatsarelis，C.Multimodal Teaching and Learning:The Rhetoric of the Science Classroom［M］.London:Continuum，2001.

［2］張德祿.多模態(tài)話語分析綜合理論框架探索［J］.中國外語，2008(1):24－30.

［3］張德祿.多模態(tài)話語模態(tài)的協(xié)同及在外語教學中的體現(xiàn)［J］.外語學刊，2010(2):97－101.

［4］朱永生.多模態(tài)話語分析的理論基礎與研究方法［J］.外語學刊，2007(5):82－86.

［5］Halliday，M.A.K.Explorations in the Functions of Language［M］.London:Edward Arnold，1973:1－2.

［6］O’Toole，M.The Language of Displayed Art［M］.London:Leicester University Press，1994.

［7］O’Halloran，Kay L.(ed.).Multimodal Discourse Analysis: Systemic Functional Perspectives［C］.London:Continuum，2004.

［8］Kress，G.，Jewitt，C.，Bourne，J.，F(xiàn)ranks，A.，Hardcastle，J.，Jones，K.＆ Reid，E.English in Urban Classrooms:A Multimodal Perspective on Teaching and Learning［M］.London:Routledge Farmer，2005.

［9］Royce，T.＆ Bowcher，W.(eds.).New Directions in the Analysis of Multimodal Discourse［C］.London:Lawrance Erlbaum Associates，2007.

［10］燕莉.EFL課堂元語言表達式的優(yōu)化設計.吉首大學學報［J］.2011(4):151 －53，157.

［11］Lyons，John.Language and Linguistics［M］.Cambridge and New York:Cambridge University Press，1981:171.

［12］Jokobson， Roman. Concluding Statement:Linguistics and Poetics［A］.Sebeok，T.(Eds).Style in Language［C］.Cambridge:MIT Press，1960:350－77.

［13］張正東，杜培俸.外語立體化教學法的原理與模式［M］.重慶:重慶出版社，1999.

［14］Jewitt，C.The Routledge Handbook of Multimodal Analysis［M］.London:Routledge，2009:14.

［15］燕莉，岳好平.EFL課堂元語言的實證研究.當代教育論壇［J］.2011(8):93－94.