商務(wù)英語視聽說教學中多模態(tài)教學的實證研究*

王云 王霞

石家莊鐵道大學

商務(wù)英語視聽說教學中多模態(tài)教學的實證研究*

王云 王霞

石家莊鐵道大學

本文通過采用樣本實證研究，對商務(wù)英語視聽說教學中多模態(tài)教學功能、不同模態(tài)的多種組合方式對商務(wù)英語專業(yè)學生視聽說能力的影響進行了調(diào)查研究。本次實證研究通過不同模態(tài)的多種組合考察學生對一段商務(wù)英語視聽說材料的信息把握能力和語言輸出能力。實驗結(jié)果表明，合理地對不同模態(tài)進行設(shè)計組合可以有效提高學生的聽力和口語表達能力；視覺模態(tài)和聽覺模態(tài)的有效結(jié)合發(fā)揮了最主要的功能，比單一的模態(tài)教學更能提高學生的視聽說能力。

多模態(tài)，聽力理解，口語表達，實證研究

1.引言

多模態(tài)也被稱之為多符號，是指運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現(xiàn)象(張德祿2009a:24-30)。計算機網(wǎng)絡(luò)的多媒體的集成功能、教學信息的擴展功能、教學過程的交互功能、教學方法的多樣化功能等使自然話語的研究更為廣闊，并且為多模態(tài)研究提供了有力的支持。多模態(tài)話語研究主張在教學中充分利用多種符號資源和豐富的教學手段來達到教學效果的最優(yōu)化。本文試圖將多模態(tài)話語研究的成果與商務(wù)英語視聽說教學實踐相結(jié)合，采用實證研究的方法，分析多模態(tài)視聽說教學對學生視聽說能力的影響及不同的視聽說模態(tài)的優(yōu)缺點，進而探索有效的視聽說教學途徑、操作模式和運用策略，以期為有效的商務(wù)英語視聽說教學提供切實可行的實例教學模式。

2.國內(nèi)外相關(guān)研究概述

關(guān)于多模態(tài)視聽說教學的應(yīng)用，國內(nèi)外學者通過長期的努力已經(jīng)取得了頗具價值和意義的理論和實踐成果。自20世紀70年代后期開始，西方的研究者就已經(jīng)開始了對多模態(tài)話語的早期探索。R.Barthes在1977年發(fā)表論文《圖像的修辭》(Rhetoric of the Image)，探討視覺圖像在話語交際中的重要作用，這是關(guān)于多模態(tài)話語研究的啟蒙階段。Kress and Leeuwen(1996)創(chuàng)建了以“再現(xiàn)”、“互動”、“構(gòu)圖”三大意義為核心的視覺圖像語法分析框架，奠定了多模態(tài)話語研究的理論基礎(chǔ)及研究方法，成為多模態(tài)應(yīng)用于語言教學的先驅(qū)。Royce(2002:191-205)研究了多模態(tài)語篇中圖像與文字產(chǎn)生的互補關(guān)系以及多種復(fù)合模態(tài)在語言教學中的協(xié)調(diào)關(guān)系。Jewitt(2006)使用“互動白板”(Interactive Whiteboards)這一概念，對節(jié)奏、多模態(tài)和互動性資源分配進行觀察分析，討論了互動白板的語篇設(shè)計和課堂教學中多模態(tài)讀寫、教學方法和現(xiàn)代技術(shù)的關(guān)系。Guichon和Mclornan(2008:85-93)用實驗證明了多模態(tài)教學模式的使用有助于學生對于語料庫的把握。Domínguez Romero和Maíz Arévalo(2010:100-139.)研究了多模態(tài)在聽力教學中的作用，并且指出采用不同的模態(tài)，其發(fā)生作用的方式也不盡相同。

李戰(zhàn)子(2003:1-8)在國內(nèi)第一次把多模態(tài)話語理論引進來，指出了多模態(tài)話語分析的社會符號學分析方法對于英語教學具有重要的理論指導(dǎo)意義。劉曉杰(2011)使用多模態(tài)話語分析理論的相關(guān)原則指導(dǎo)大學英語聽力教學。他發(fā)現(xiàn)，基于多模態(tài)話語分析理論的聽力教學方法更有效，且能夠?qū)Σ煌降膶W生體現(xiàn)出不同的教學效果，更有利于高水平學生聽力成績的提高。李欣(2012:59-64)對多模態(tài)自主英語聽力教學模式進行了實證研究，探討了多模態(tài)自主聽力教學模式對學習者聽力水平和多元識讀能力的影響，結(jié)果發(fā)現(xiàn)該教學模式受到絕大多數(shù)學習者的歡迎并能切實有效地提高學習者的聽力水平以及多元識讀能力。徐艷麗(2013:168-170)分析了大學英語聽力教學中的多模態(tài)因素，分別揭示了聽覺模態(tài)、視覺模態(tài)和觸覺模態(tài)等大學英語聽力教學中的主要模態(tài)在大學英語聽力教學中的不同作用和配置方式，并指出了大學英語聽力教學中文化模態(tài)教學的必要性和可能途徑。

從整體上看，國內(nèi)外已經(jīng)取得了一定的成果，但是針對不同模態(tài)對視聽說教學影響和效果的研究相對較少，也沒有明確指出不同的模態(tài)在視聽說教學中的具體作用。為此，本研究選擇商務(wù)英語專業(yè)學生為研究對象，探討多模態(tài)的綜合運用對于視聽說能力培養(yǎng)和提高之間的關(guān)系以及不同模態(tài)的優(yōu)缺點。

3.研究設(shè)計

3.1 研究設(shè)計

本研究擬回答以下問題：

(1)商務(wù)英語視聽說多模態(tài)教學模式是否能夠充分調(diào)動學生的學習積極性及提高信息的獲取率？(2)視覺模態(tài)在視聽說教學過程中的優(yōu)缺點是什么？(3)聽覺模態(tài)在視聽說理解上的優(yōu)缺點是什么？(4)商務(wù)英語視聽說多模態(tài)教學模式與學生視聽說能力的提高之間的相關(guān)性如何？

3.2 研究對象

研究對象為石家莊市某高校商務(wù)英語專業(yè)三年級3個平行班的學生。從每個班里隨機選取25名學生作為研究對象，共分成3組。根據(jù)對3組學生的期末口語測試及專業(yè)四級聽力成績進行SPSS19.0單因素方差分析，結(jié)果顯示3組學生的聽說能力總體持平(如表1、表2)。在視聽說教學實驗過程中,對3個組別采用不同模態(tài)的教學手段，其中1組為單模態(tài)組，即教學過程主要以聽力為主；2組為雙模態(tài)組，教學過程包含音頻和視頻，但是視頻中不顯示字幕；3組為三模態(tài)組，教學過程包含音頻和視頻，并帶有字幕。以上三個組別采用聽覺模態(tài)、聽覺視覺混合模態(tài)。

(F=0.550,P=0.580>0.05,無顯著差異)

(F=0.145,P=0.865>0.05,無顯著差異)

3.3 研究語料、方法和步驟

本研究選取了一段時長為5分48秒的商務(wù)視聽材料為測試材料，共有單詞589個，主題是商務(wù)英語函電中需要注意的7個原則，分別是完整(completeness)、正確(correctness)、清楚(clearness)、簡潔(concreteness)、具體(concreteness)、禮貌(courtesy)和體諒(consideration)。整個視頻被放置在商務(wù)背景之下，將這7個原則分別以具體情景表演的方式予以解釋，較為直觀的呈現(xiàn)什么是7Cs。

三個組別分別采取了不同模態(tài)的教學方法，即1組為音頻組，2組為音頻、視頻(無字幕)組，3組為音頻、視頻(有字幕)組。測試材料播放三次后，請各組學生根據(jù)所記筆記，兩兩結(jié)組重現(xiàn)測試材料中的內(nèi)容，并錄音形成口語語料。老師對學生的口語語料進行分析，以捕獲學生對不同模態(tài)教學效果的反應(yīng)。具體實施方法：教師按照不同模態(tài)要求分別向3組學生播放測試材料，該材料共播放三次。第一次播放后，請學生注意全文大意，并做筆記記錄；第二次播放后，請學生對筆記查缺補漏；第三次播放后，請學生整理筆記，兩兩結(jié)組并口頭復(fù)述材料中內(nèi)容，同時錄音，形成口語語料庫。

3.4 數(shù)據(jù)的收集和分析

該測試材料層次清楚，共分7個要點，此外，還有2個實例。為了進行數(shù)據(jù)的分析，學生說出一個要點記1分，要點復(fù)述殘缺不全的記0.5分，總分為9分，以組為單位打分，每組得分即為兩個組員的得分。通過這種方式，將不同組別的學生對不同模態(tài)的教學方法的不同反應(yīng)量化，可以清晰的看出不同組別學生在教學實驗過程中的差異。所得到的量化數(shù)據(jù)采用統(tǒng)計軟件SPSS19.0，并進行單因素方差分析及應(yīng)用Post Hoc事后多重檢驗方法，得出不同模態(tài)下學習效果的差異。此外，基于對學生的調(diào)查問卷對分析結(jié)果進行佐證。

4.結(jié)果分析

4.1 不同模態(tài)教學手段間的差異

由于在不同組別間采用了不同模態(tài)的教學方法，為探究教學效果之間的差異，我們首先采用了統(tǒng)計軟件SPSS19.0對收集到的各組學生口語語料進行了描述，結(jié)果見表3.

如表3所示，1組的均值為3.9， 2組為5.26， 3組為6.22， 各組均值相比，3組最高，2組其次，1組最低。其次，我們對該組口語語料數(shù)據(jù)進行單因素方差分析，結(jié)果見表4。

由表4結(jié)果顯示，F(xiàn)=55.467，P=0.000<0.05，測試材料采用不同的方式傳遞給學生，學生的學習效果產(chǎn)生了顯著的差異。從以上兩個表格來看，單模態(tài)的1組，即音頻組，對教學效果的幫助最小；2組中采用了音頻和視頻相結(jié)合的方式，但是沒有字幕，對教學效果的幫助優(yōu)于1組；3組運用音頻、視頻，并配上了字幕，對教學效果的幫助最大。之后，我們又對該組語料數(shù)據(jù)進行了Post Hoc事后多重檢驗，以進一步驗證各組間存在的差異，分析結(jié)果見表5。

*.均值差的顯著性水平為 0.05。

表5顯示了3組之間視聽說成績的不同，結(jié)果進一步印證了上述分析數(shù)據(jù)結(jié)果?？傊覀兛梢钥闯?，采用不同模態(tài)對教學效果的影響大小依次為：聽覺和視覺(字幕)>聽覺和視覺(無字幕)>聽覺。我們以圖表的形式清晰地列出了不同組別均值差異，見下表：

4.2 學生對多模態(tài)教學方法的反應(yīng)

測試結(jié)束后，我們還對采用聽覺、視覺模態(tài)進行學習的二組、三組學生進行了問卷調(diào)查，目的是調(diào)查多模態(tài)視聽說教學模式對教學效果、學習態(tài)度、學習效率等的影響。本問卷共發(fā)放了50份，回收了50份，其中有效問卷48份。問卷的設(shè)計采用了Likert scale量表形式，即1=完全同意，2=同意，3=不確定，4=不同意，5=完全不同意。

調(diào)查表明多模態(tài)的教學方法對教學效果、學生的學習態(tài)度產(chǎn)生積極的影響。79%的學生認為多模態(tài)教學方法使他們獲得了更多的信息。58%的學生認為通過多模態(tài)方式學習，更有成就感，更愿意學習英語課程。而72%的學生認為這樣學習更有樂趣，增加了視頻、圖片，使得教學內(nèi)容的呈現(xiàn)更加生動，更有助于理解。68%的學生認為這樣學習可以激發(fā)興趣，62%的學生認為提高了他們的積極性。由此可見，多模態(tài)視聽說教學模式產(chǎn)生了良性的反撥效應(yīng)，達到了較好的預(yù)期效果。

4.3 不同模態(tài)的影響

4.3.1 視覺模態(tài)

首先，在商務(wù)英語視聽說課程中，視覺模態(tài)中的圖像，視頻等信息形式提供了具體的環(huán)境，其視頻中圖像、字幕、視頻的交互作用可以創(chuàng)造附加意義。其次，視覺模態(tài)具有其獨有的特性，即直觀性，使得在必要文字、音頻信息缺失的情況下，學習者可以輕易理解學習目標。再次，視覺模態(tài)還可以為學生創(chuàng)設(shè)身臨其境的情景，為其捕獲知識模擬了場景。

但是，視覺模態(tài)的運用并不適用于所有的商務(wù)英語課堂教學內(nèi)容，對這一模態(tài)的運用，要避免一個誤區(qū)，即過分運用。第一，視頻資料的甄選要以配合聽力為主。如果所選的視頻材料與聽力并不能協(xié)調(diào)配合，那么視覺模態(tài)的使用恐怕會產(chǎn)生不良影響。第二，視頻資料中圖像所提供的信息量應(yīng)該適中。信息量過多或過少，都不利于學生能力的鍛煉。如過早地出現(xiàn)字幕，使學生喪失鍛煉聽力的機會。

4.3.2 聽覺模態(tài)

從“商務(wù)英語視聽說”這一課程名稱即可看出，聽覺模態(tài)必然涉及到模態(tài)形式，且具有無可替代的作用。學生對信息的獲取，聽覺模態(tài)是主要形式之一。但是需要注意的是，聽覺作為主要的信息接收渠道，應(yīng)該與其他模態(tài)進行配合，適當運用圖片、視頻等二維甚至三維的視覺模態(tài)，為學生對信息進行整合、理解提供幫助，以加深學生對學習材料的理解。這樣，既保證學生聽力部分的練習起到應(yīng)有的鍛煉作用，又不損害學生學習的積極性、自信心。本次測驗對此提供了數(shù)據(jù)支持。例如，測驗中，只有聽覺模態(tài)的一組均值只有3.9，而采用多模態(tài)的二組，三組分別達到了5.25和6.22，差別非常顯著。

同時，要注意音頻資料的長短結(jié)合，避免產(chǎn)生疲勞感。不恰當?shù)厥褂靡纛l教學內(nèi)容，如音頻資料難度過大、時長過長、內(nèi)容乏味等都非常容易使學生失去興趣和注意力，進而造成聽力訓(xùn)練事倍功半。

4.3.3 觸覺模態(tài)等其他模態(tài)

除了視覺模態(tài)、聽覺模態(tài)之外，商務(wù)英語視聽說中還存在其他的模態(tài)形式，如觸覺模態(tài)、嗅覺模態(tài)和味覺模態(tài)等。而在商務(wù)英語視聽說課堂上，觸覺模態(tài)的使用也有助于提高教學效果。觸覺模態(tài)主要體現(xiàn)在師生互動、學生互動以及師生與教學道具互動等方面。例如，在本次測試的最后一個環(huán)節(jié)，要求學生兩人一組重現(xiàn)測試材料中的例子。例子本身就是一個商務(wù)背景下的兩人情境對話。學生在角色扮演的過程中產(chǎn)生了一些肢體接觸，如握手、擁抱等；另外，學生在角色扮演過程中也接觸了一些道具，如打印機、電腦等。這些接觸，強化了學生在具體情境下對具體語言的運用。

但是，觸覺模態(tài)切不可刻意求取，必須遵守視覺模態(tài)、聽覺模態(tài)為中心的原則，使觸覺模態(tài)與其他模態(tài)相協(xié)調(diào)，共同促進商務(wù)英語視聽說教學效果的提升。

4.3.4 各模態(tài)間的協(xié)作

商務(wù)英語是在特定環(huán)境下以英語為媒介進行的商務(wù)活動，而多模態(tài)的教學較大程度上為學生還原了商務(wù)情景。在綜合運用多種模態(tài)的教學中，我們發(fā)現(xiàn)視覺模態(tài)、聽覺模態(tài)對學生捕獲信息能力的提高有明顯效果，而觸覺模態(tài)對學生口語表達能力有著明顯的促進作用。

有研究表明，學生在通過各種途徑和模式接收信息的時候，由于面對繁多的信息，常常不知道如何去甄別、遴選、加工和輸出(Sweller,Van Merrienboer & Paas 1998:251-296)。鑒于此，在商務(wù)英語視聽說的教學過程中，各種模態(tài)間的配合必須遵循正效應(yīng)的原則，互相協(xié)調(diào)、互相強化，以增強學生學習效果為最終目標(張德祿2009b)。同時，在實際教學活動中，還應(yīng)該以某個模態(tài)為主，以其他模態(tài)為輔，使各個模態(tài)按不同比例配置在教學活動中。如本次測驗中，視覺、聽覺模態(tài)處于主導(dǎo)地位，觸覺模態(tài)處于輔助地位，幾種模態(tài)共同作用，強化教學效果。本次測驗中，對于難點出現(xiàn)的地方，如 definition of concreteness，除了以視頻、音頻的形式展現(xiàn)給學生外，還配上英文字幕，而對于其他非難點的地方，我們均以視頻和音頻的形式呈現(xiàn)。

此外，為了給學生呈現(xiàn)出更加逼真的商務(wù)活動情景，我們還需要注意觸覺模態(tài)、嗅覺模態(tài)、味覺模態(tài)等在學生口語練習時的積極作用。學生在口語組練習過程中，相互間的肢體接觸、道具等的恰當運用，都傳遞著社會特征和文化特征。更多地了解這些特征，可以為學生創(chuàng)設(shè)更加真實的語境。

5.結(jié)語

本研究的結(jié)果表明，將多模態(tài)進行合理的設(shè)計之后，應(yīng)用到商務(wù)英語視聽說的教學過程中是完全可行的。該模式能夠更為充分地調(diào)動學生的學習積極性并提高他們的信息獲取率。商務(wù)英語視聽說多模態(tài)教學模式對于學生視聽說能力的提高之間呈現(xiàn)正相關(guān)。其中，視覺模態(tài)、聽覺模態(tài)發(fā)揮了最主要的作用，觸覺模態(tài)等也發(fā)揮著作用。多模態(tài)教學鼓勵多種感官的協(xié)調(diào)參與，更加接近語言實際交際情境下的言語交際過程?？傊趯嶋H教學實踐中，任何一種模態(tài)都不是單獨存在的，是需要協(xié)調(diào)配合的。

本研究的語料范圍有限，只是基于石家莊某高校的樣本進行調(diào)查分析，而且研究對象是具有一定聽說基礎(chǔ)的商務(wù)英語專業(yè)高年級學生，研究結(jié)果具有一定的局限性。今后可針對英語專業(yè)低年級或者其他方向的學生進行多模態(tài)試驗研究，以進一步探討多模態(tài)對于視聽說教學的作用和影響。

Domínguez,R.E.& Maíz Arévalo C.2010.Multimodality and listening comprehension:Testing and implementing classroom material [J].System(1):85-93.

Guichon,N.& S.McLornan,2008.The effects of multimodality on L2 learners:Implications for CALL resource design [J].System(1):85-93.

Jewittt,C.2006.Technology,LiteracyandLearning:AMultimodalApproach[M].London and New York:Roufledge.

Kress,G.& T.Van Leeuwen,1996.ReadingImages:TheGrammarofVisualDesign[M].London:Rutledge.

Royce,T.2002.Multimodality in the TESOL Classroom:Exploring Visual-verbal Synergy [J].TESOLQuarterly(2):191- 205.

Sweller.J.,Van Merrienboer,J.J.G.& Paas,F.G.W.C,1998.Cognitive architecture and instructional design [J].EducationalPsychologyReview(3):251-296.

李欣、李玫瑛、王佳子，2012，多模態(tài)自主聽力教學模式有效性的實證研究[J]，《解放軍外國語學院學報》(6):59-64。

李戰(zhàn)子，2003，多模式話語的社會符號學分析[J]，《外語研究》(5):1-8。

劉曉杰，2011，多模態(tài)話語分析理論在大學英語聽力教學中的應(yīng)用研究[D]，東南大學碩士學位論文。

徐艷麗，2013，多模態(tài)視域下大學英語聽力教學模式的構(gòu)建[J]，《黑龍江高教研究》(11)：168-170。

張德祿，2009a，多模態(tài)話語分析綜合理論框架探索[J]，《中國外語》(1):24-30。

張德祿，2009b，多模態(tài)話語理論與媒體技術(shù)在外語教學中的應(yīng)用[J]，《外語教學》(4)：15-20。

(王 云：石家莊鐵道大學四方學院外語系講師； 王 霞：石家莊鐵道大學四方學院外語系講師)

通訊地址：050000 河北省石家莊市橋西區(qū)南二環(huán)和濱河街交叉口南東尹泰東苑18號樓3單元202

*本文系河北省教育廳人文社會科學研究重點項目“實用型商務(wù)英語課程優(yōu)化和教學有效性研究和河北省教育科學研究“十二五”規(guī)劃青年專項課題“新媒體時代下實用型英語多模態(tài)研究”的階段性，課題項目編號分別為SD141029，1404550。

H319

A

2095-9645(2015)03-0076-05

2015-04-30