多模態(tài)輸入對英語詞匯附帶習(xí)得影響研究

竇 泓

（陜西師范大學(xué)外國語學(xué)院）

英語詞匯學(xué)習(xí)根據(jù)注意力的分配可分為有意學(xué)習(xí)和偶然學(xué)習(xí)。相較于有意學(xué)習(xí)在詞匯學(xué)習(xí)過程中將注意力直接集中在詞形、詞義等方面，偶然學(xué)習(xí)則是通過閱讀、聽力、看視頻等活動習(xí)得詞匯，即詞匯附帶習(xí)得。對于大部分高校學(xué)生而言，有意學(xué)習(xí)是識記單詞的主要方法，而該方法已經(jīng)讓部分學(xué)生對英語產(chǎn)生厭倦甚至抵觸心理，詞匯教學(xué)和學(xué)習(xí)方法亟待改變。因此，探究多模態(tài)輸入在詞匯附帶習(xí)得中的影響和對詞匯教學(xué)的啟示十分有必要。

一、多模態(tài)輸入概述

“模態(tài)”一詞來源于語言學(xué)，最初指關(guān)于世界陳述的可信度或真實價值。Kress 和 Van Leeuwen將模態(tài)應(yīng)用到視覺傳達(dá)中，指出模態(tài)在視覺傳達(dá)中的重要性[1]。在此基礎(chǔ)上，模態(tài)被定義為物理媒介在長期社會影響后形成的意義潛勢，以及可以通過單一或多個媒介實現(xiàn)的意義表征。隨著時間的推移，模態(tài)的定義擴(kuò)展到產(chǎn)生意義的各種符號資源，如姿態(tài)、文字、圖像等，不再局限于語言。模態(tài)是一種符號系統(tǒng)，可以通過特定的感知過程來解釋，是人類通過視覺、聽覺等感官與外部環(huán)境交互的方式。

是否為多模態(tài)輸入取決于所涉及的模態(tài)數(shù)量和符號系統(tǒng)的數(shù)量。據(jù)此，部分學(xué)者認(rèn)為多模態(tài)輸入應(yīng)包含兩個及以上模態(tài)，或單個模態(tài)由兩個或多個符號系統(tǒng)組成。例如，看視頻屬于多模態(tài)輸入的其中一種，因為在該過程中同時動用了聽覺和視覺感官。而視頻本身也可以被視為一種多模態(tài)輸入，因為其包含了圖像、字幕、聲音等至少兩個符號系統(tǒng)。而另一部分學(xué)者認(rèn)為多模態(tài)輸入在交互過程中則應(yīng)至少同時調(diào)動三個感官，利用聽覺、視覺、觸覺等通過圖像、聲音、動作等多種符號資源進(jìn)行交流。

雖然以往的定義未能對多模態(tài)中的模態(tài)個數(shù)達(dá)成一致，但根據(jù)上述定義，多模態(tài)指至少同時通過兩個及以上感官或符號系統(tǒng)傳達(dá)意義的形式，多模態(tài)輸入則指信息接收過程中需要同時調(diào)動兩個及以上感官才能理解的輸入材料或方式。事實上，語言學(xué)習(xí)者在生活中無時無刻不接受著多模態(tài)輸入。日常對話中，學(xué)習(xí)者需要同時調(diào)動多個感官以解碼和處理聲音、面部表情、肢體語言等多方面的信息。

多媒體輸入是多模態(tài)輸入中最典型、最常見的方式之一，二者既相互聯(lián)系又相互區(qū)別。根據(jù)字面解釋，前者是多個模態(tài)的混合，后者是多種媒體的整合。模態(tài)是感官與外部環(huán)境的抽象作用，媒體是傳播聲音、圖像、色彩、文字等信息的具體載體，多媒體是則涉及聲音、圖片、文字等的技術(shù)或產(chǎn)品。因此，多模態(tài)輸入與多媒體輸入的區(qū)別在于前者是抽象的符號系統(tǒng)，后者則是具體的物理方法。

隨著科學(xué)技術(shù)的發(fā)展，各種多模態(tài)輸入方式被應(yīng)用于二語的教與學(xué)之中。課內(nèi)，老師為學(xué)習(xí)者播放二語短片，通過文字、畫面、語音相結(jié)合的方式學(xué)習(xí)；課外，學(xué)習(xí)者可以自行通過玩英語游戲、看外國電影、與外國人在線聊天等多模態(tài)方式學(xué)習(xí)語言。由此可以得出，多模態(tài)輸入在提高二語習(xí)得效率和豐富二語學(xué)習(xí)方法等方面具有很高的應(yīng)用價值。

二、多模態(tài)輸入對詞匯附帶習(xí)得的影響

多模態(tài)輸入在二語習(xí)得領(lǐng)域的研究多集中于詞匯習(xí)得。Neuman 和 Koskinen[2]最先設(shè)計了實驗探究多模態(tài)輸入對詞匯附帶習(xí)得的影響：經(jīng)過為期十二周的實驗，調(diào)查雙語學(xué)生通過不同輸入模態(tài)附帶習(xí)得詞匯的效率和保持率。129名七至八年級二語水平相當(dāng)?shù)谋辉嚫鶕?jù)輸入模態(tài)被分為觀看有字幕電視片段、觀看無字幕電視片段、邊聽錄音邊閱讀文本、僅閱讀文本的四組，電視片段與文本的內(nèi)容一致。每組在完成輸入后需完成同樣的詞形辨認(rèn)和詞義回憶測試。結(jié)果顯示，觀看有字幕電視片段的一組在測試中的分?jǐn)?shù)顯著高于其他三組。該實驗從實證研究角度證明多模態(tài)輸入（觀看帶字幕視頻）可能是促進(jìn)學(xué)生詞匯附帶習(xí)得和保持的有效方式。而后又有更多實驗證明了多模態(tài)輸入在詞匯附帶習(xí)得方面的潛力。

雖然在九十年代末和二十世紀(jì)初有許多關(guān)于觀看電視節(jié)目學(xué)習(xí)單詞的研究，但是多模態(tài)輸入在詞匯附帶習(xí)得領(lǐng)域并沒有得到很大的發(fā)展。一方面是因為文本閱讀始終被視為學(xué)習(xí)和擴(kuò)大詞匯量最有效和最常見的輸入途徑，紙質(zhì)課本和練習(xí)冊依舊是最主要的學(xué)習(xí)媒介。另一方面，相比于閱讀輸入，多模態(tài)輸入在課堂中的普及率和利用率并不高，它更多地被視為一種放松和娛樂的方式，而不是有效的學(xué)習(xí)方法。然而，閱讀輸入并不總能達(dá)到理想的單詞學(xué)習(xí)效果。一旦學(xué)生詞匯學(xué)習(xí)落后，理解英文文章的難度就會增加，而理解難度增加會反過來會導(dǎo)致學(xué)到的單詞更少。如此往復(fù)，形成惡性循環(huán)，學(xué)生不僅在知識上有欠缺，而且會喪失信心逃避學(xué)習(xí)。加之在多年單一閱讀輸入之下學(xué)習(xí)詞匯，學(xué)生難免心生厭倦。因此，多模態(tài)輸入的出現(xiàn)對于詞匯學(xué)習(xí)十分有必要。是時候改變傳統(tǒng)的語言輸入方式，讓學(xué)生重獲語言學(xué)習(xí)的樂趣。

于是，多模態(tài)輸入在二語習(xí)得領(lǐng)域的作用于2009-2010年間再度獲得重視并延續(xù)至今天。更多關(guān)于多模態(tài)輸入的研究集中于詞匯附帶習(xí)得領(lǐng)域中，以探索尋求更佳的詞匯教學(xué)和學(xué)習(xí)方法。近十年的研究包括但不限于多模態(tài)注釋的作用、多模態(tài)輸入中不同字幕類型的作用、各種具體多模態(tài)輸入方法的比較等。許多學(xué)者研究了諸如玩英文電子游戲、聽英文歌曲、觀看英文電影等各種多模態(tài)輸入對詞匯附帶習(xí)得的影響。Reynolds在研究中發(fā)現(xiàn)一款“繪畫和猜字（Drawing Something）”的游戲可以實現(xiàn)詞匯的附帶習(xí)得和保持，并指出其他英文游戲在特定條件下也會達(dá)到相同的結(jié)果[3]。

視聽輸入是最常見的多模態(tài)輸入之一，因此有大量研究集中在探究視聽輸入在詞匯附帶習(xí)得方面的效果，并致力于探究如何提高詞匯附帶習(xí)得率和保持率。電視劇、新聞播報、電影、紀(jì)錄片、視頻片段是教學(xué)和研究中最常見的幾類視聽輸入。前人通過研究發(fā)現(xiàn)觀看完整電視節(jié)目可以產(chǎn)生詞匯的附帶習(xí)得。在觀看完整的電視節(jié)目后，對被試進(jìn)行了目標(biāo)詞匯意義回憶和意義識別兩項測試，結(jié)果證明了詞匯附帶習(xí)得的發(fā)生[4]。電視節(jié)目的優(yōu)點就在于易于獲得、引人入勝，除此之外視覺信息可以為學(xué)生提供更多的上下文線索，進(jìn)而促進(jìn)詞匯的學(xué)習(xí)，尤其是在遇到生詞時。

在關(guān)于如何通過視聽輸入提高詞匯附帶習(xí)得和保持的研究中，大部分研究著眼于字幕在視聽輸入中的作用，通過比較不同類型的字幕探究對詞匯習(xí)得的影響。研究比較了一語字幕和二語字幕、有字幕和無字幕以及其他不同類型的字幕在進(jìn)詞匯的附帶習(xí)得和保持中的作用。研究表明，一語字幕和二語字幕都能產(chǎn)生詞匯的附帶習(xí)得，后者的效果優(yōu)于前者，而當(dāng)學(xué)習(xí)者對理解視頻內(nèi)容有困難時，有字幕比無字幕的效果更好，因為字幕此時起到了補(bǔ)充講解的作用。除一語和二語字幕之外，其他類型的字幕也被證實對詞匯習(xí)得是有效的，例如帶注釋的字幕和僅有關(guān)鍵詞的字幕。

多模態(tài)輸入在詞匯附帶習(xí)得和保持方面具有積極影響和巨大潛力。結(jié)合聲音、圖片、文字、動畫等輸入方式，調(diào)動學(xué)習(xí)者的聽覺、視覺、觸覺等感官，通過多模態(tài)輸入優(yōu)化詞匯附帶習(xí)得和保持將是是未來的研究趨勢[5]。

三、多模態(tài)輸入對大學(xué)英語詞匯教學(xué)的啟示

（一）優(yōu)化詞匯教學(xué)模式

教師應(yīng)積極關(guān)注現(xiàn)代信息技術(shù)的發(fā)展，并主動嘗試將新技術(shù)應(yīng)用于大學(xué)英語的課堂教學(xué)之中，將詞匯教學(xué)模式多樣化，在課堂內(nèi)積極使用多模態(tài)輸入調(diào)動學(xué)生的學(xué)習(xí)興趣和增加他們的學(xué)習(xí)投入量。在以往的大學(xué)英語詞匯教學(xué)中，教師們多傾向于直接講解生詞或難詞，除此之外對詞匯不再做過多的處理。部分教師認(rèn)為在大學(xué)英語課堂內(nèi)觀看視頻的多模式輸入屬于浪費時間，學(xué)生只會注意畫面而忽視詞匯學(xué)習(xí)，甚至把看視頻作為課堂消遣。事實上，在經(jīng)過小、初、高多年的單一閱讀輸入學(xué)習(xí)英語之后，大學(xué)生對多模式輸入感到新鮮又有趣，因此會更加積極地參與并投入到學(xué)習(xí)過程中。如今的大學(xué)英語不只是語音、詞匯、語法等方面的學(xué)習(xí)，更是要通過英語能夠用另一個的角度去看待世界和理解問題。因此，教師在課堂中應(yīng)積極使用多模態(tài)輸入進(jìn)行詞匯教學(xué)，一方面可以提升學(xué)生學(xué)習(xí)興趣，促進(jìn)詞匯的附帶習(xí)得，另一方面可以擴(kuò)展學(xué)生視野，既能讓學(xué)生學(xué)習(xí)如何用英語講中國故事，又能從另一個視角看世界。

（二）選擇合適的多模態(tài)輸入材料

將多模態(tài)輸入運用于課堂詞匯教學(xué)，教師應(yīng)選用難度適宜、主題積極的材料。首先，根據(jù)克拉申的“i+1”輸入理論，即可理解性輸入理論，“i”指學(xué)生現(xiàn)有的學(xué)習(xí)水平，“1”指略高于學(xué)生現(xiàn)有學(xué)習(xí)水平的難度，最理想的輸入難度應(yīng)是略高于學(xué)生當(dāng)前的學(xué)習(xí)水平。過于簡單的輸入會使學(xué)生過分關(guān)注意義而忽視詞匯的習(xí)得，而過于困難的輸入會加大理解難度使學(xué)生喪失信心，從而無法達(dá)到良好的詞匯學(xué)習(xí)效果。因此，教師應(yīng)依據(jù)學(xué)生現(xiàn)有的英語水平選取難度略高的多模態(tài)輸入材料。其次，多模態(tài)輸入的材料在滿足主題積極向上的前提下，內(nèi)容應(yīng)與即將學(xué)習(xí)或已經(jīng)學(xué)過的單元主題相關(guān)聯(lián)。教師可以在一個主題單元的學(xué)習(xí)開始前、進(jìn)行中或結(jié)束后，選取內(nèi)容相似的材料讓學(xué)生進(jìn)行觀看，加強(qiáng)學(xué)習(xí)效果。例如，教師既可以在學(xué)習(xí)“運動”主題的單元前讓學(xué)生觀看關(guān)于歷屆奧運會的視頻，以熟悉相關(guān)話題和詞匯，降低后續(xù)學(xué)習(xí)難度，又可以在單元學(xué)習(xí)過程中讓學(xué)生觀看相關(guān)的視頻，進(jìn)一步加強(qiáng)詞匯學(xué)習(xí)，也可以在完成一個單元的教學(xué)后，找難度適中的視頻片段供學(xué)生觀看。不僅可以加深學(xué)生對所學(xué)的單元的理解，而且也可以實現(xiàn)詞匯的附帶習(xí)得。

（三）教師應(yīng)給予適當(dāng)?shù)母深A(yù)

在課堂內(nèi)完全利用多模態(tài)輸入學(xué)習(xí)詞匯附帶習(xí)得是不現(xiàn)實的，學(xué)生始終是課堂的主體，教師需發(fā)揮自身在課堂中的引領(lǐng)作用。因此，在多模態(tài)輸入的背景下，教師應(yīng)發(fā)揮自身作用進(jìn)行適當(dāng)?shù)母深A(yù)。首先，教師可以對多模態(tài)輸入材料中的目標(biāo)詞進(jìn)行處理，通過加粗、加黑、下劃線等方式增強(qiáng)輸入，加深學(xué)生的視覺記憶。例如，教師可以在視頻片段、新聞報道、紀(jì)錄片等材料的二語字幕中將目標(biāo)詞加粗、高亮并配以中文注釋，在吸引學(xué)生注意力的同時也能促進(jìn)其對詞匯的習(xí)得。其次，為提高附帶詞匯習(xí)得和保持率，教師可以根據(jù)多模態(tài)材料的內(nèi)容設(shè)計需要學(xué)生高投入量的任務(wù)，讓學(xué)生接收輸入后完成任務(wù)，以達(dá)到更好的習(xí)得效率。教師可以根據(jù)多模態(tài)輸入的內(nèi)容設(shè)計相關(guān)聯(lián)的任務(wù)，例如根據(jù)材料內(nèi)容填單詞、利用目標(biāo)詞匯造句、復(fù)述原材料內(nèi)容等，在理解原材料的基礎(chǔ)上完成各項任務(wù)，加強(qiáng)詞匯的習(xí)得和記憶。此外，在多模態(tài)輸入的前提下，教師依舊可以對詞匯進(jìn)行顯性的教學(xué)，通過有意學(xué)習(xí)和偶然學(xué)習(xí)相結(jié)合，進(jìn)一步提升詞匯學(xué)習(xí)效果。

四、結(jié)束語

詞匯是大學(xué)英語中重要的組成部分，而單一的輸入模態(tài)使得詞匯學(xué)習(xí)和詞匯教學(xué)枯燥乏味，學(xué)習(xí)效果也因此大打折扣。隨著信息化技術(shù)的發(fā)展，多模態(tài)輸入逐漸走入二語習(xí)得研究，并在詞匯附帶習(xí)得領(lǐng)域產(chǎn)生一定影響。利用諸如英美電影、英美電視劇、紀(jì)錄片、新聞等多模態(tài)輸入進(jìn)行詞匯學(xué)習(xí)是一種全新的嘗試，通過在學(xué)習(xí)過程中同時刺激學(xué)習(xí)者的多個感官，激發(fā)學(xué)習(xí)者的興趣和投入度，從而提高詞匯的習(xí)得率。因此，在多模態(tài)輸入的基礎(chǔ)上，教師豐富和改善詞匯教學(xué)模式、選擇合適的材料、給予一定的干預(yù)是優(yōu)化詞匯附帶習(xí)得和保持的發(fā)展趨勢。