多模態(tài)視角下對(duì)手機(jī)配音軟件的可行性分析

馬玉娟

【摘要】隨著智能手機(jī)的普及應(yīng)用，手機(jī)配音軟件受到了學(xué)習(xí)者的青睞。本文以多模態(tài)話語(yǔ)理論為依據(jù)，對(duì)以英語(yǔ)趣配音為例的配音軟件進(jìn)行了分析，同時(shí)對(duì)其在課堂中的應(yīng)用進(jìn)行了研究。

【關(guān)鍵詞】多模態(tài) 英語(yǔ)趣配音 可行性

隨著網(wǎng)絡(luò)科技的發(fā)展，現(xiàn)代技術(shù)媒體形式開(kāi)始出現(xiàn)。英語(yǔ)趣配音作為一款深受學(xué)生歡迎的學(xué)習(xí)軟件，包括了圖文音等各種媒介，可以同時(shí)練習(xí)學(xué)生的聽(tīng)、說(shuō)、讀的能力。相對(duì)于傳統(tǒng)課本的學(xué)習(xí)的方式，它的使用極大地提高了學(xué)生的學(xué)習(xí)效率和學(xué)習(xí)興趣。多模態(tài)的協(xié)同運(yùn)用正是英語(yǔ)趣配音受學(xué)生歡迎的理論基礎(chǔ)。

一、多模態(tài)話語(yǔ)理論

多模態(tài)話語(yǔ)理論是在二十世紀(jì)前后由Halliday，kress 等西方學(xué)者提出的概念。Kress和Leeuwen 在《閱讀圖像》一書(shū)中以系統(tǒng)功能語(yǔ)法為基礎(chǔ)提出了圖像分析的社會(huì)符號(hào)學(xué)框架———視覺(jué)語(yǔ)法框架。張德祿（2009）總結(jié)了多模態(tài)話語(yǔ)分析綜合理論框架，將多模態(tài)話語(yǔ)分為五個(gè)層面的系統(tǒng)，分別是：文化層面、語(yǔ)境層面、意義層面、形式層面、媒體層面。根據(jù)他的觀點(diǎn)，多模態(tài)話語(yǔ)指運(yùn)用聽(tīng)覺(jué)、視覺(jué)、觸覺(jué)等多種感覺(jué)，通過(guò)語(yǔ)言、圖像、聲音、動(dòng)作等多種手段和符號(hào)資源進(jìn)行交際的現(xiàn)象。在語(yǔ)言教學(xué)中，多模態(tài)側(cè)重于應(yīng)用多種感官（視覺(jué)、聽(tīng)覺(jué)，觸覺(jué)等），借助于多種資源和方式來(lái)實(shí)現(xiàn)語(yǔ)學(xué)習(xí)的過(guò)程。

二、多模態(tài)視角下的英語(yǔ)趣配音

1.英語(yǔ)趣配音的媒體系統(tǒng)分析。

（1）語(yǔ)言媒體。從傳統(tǒng)語(yǔ)言學(xué)的角度講，聲音符合和書(shū)寫(xiě)符號(hào)是進(jìn)行意義傳播的主要途徑，因此語(yǔ)言媒體是人際交流的主要媒介之一。根據(jù)張德祿的觀點(diǎn)，語(yǔ)言又包括伴語(yǔ)言和純語(yǔ)言。其中伴語(yǔ)言包括音調(diào)，音響和布局等。

用戶在使用英語(yǔ)趣配音軟件的過(guò)程中，可以在視頻中發(fā)現(xiàn)很多純語(yǔ)言因素，包括地道的中英文語(yǔ)言和文字形式的字幕。除此之外，視頻中還有伴語(yǔ)言形式的音響音調(diào)、字幕的字體和布局等。雖然伴語(yǔ)言在意義的傳輸中起到輔助和補(bǔ)充的作用，但其對(duì)語(yǔ)境中意義的整體表達(dá)起著必不可少的作用，這些因素共同作用形成了意義傳播的媒體形式。

（2）非語(yǔ)言媒體。表達(dá)意義的非語(yǔ)言媒體包括交際者的身體動(dòng)作和交際者在意義表達(dá)中所使用的非語(yǔ)言手段，如工具、環(huán)境等。隨著現(xiàn)代技術(shù)的發(fā)展，非語(yǔ)言媒體在意義表達(dá)方面變得更加豐富。如網(wǎng)絡(luò)的使用，PPT和同聲傳譯室等工具性媒體的普及。這些都成為輔助意義表達(dá)的非語(yǔ)言媒體。除此之外，人在交往中使用的各種身體語(yǔ)言也屬于意義傳播的媒介之一。

在英語(yǔ)趣配音軟件中，大多數(shù)視頻是影片的截取片段，具有一定的語(yǔ)境和語(yǔ)意。因此隨處可見(jiàn)人物豐富的表情和肢體語(yǔ)言。這些非語(yǔ)言模態(tài)不僅可以吸引聽(tīng)話者的注意力，使要表達(dá)的信息形象化，更重要的是激發(fā)了學(xué)生的興趣。

模態(tài)與媒體是形式和實(shí)體的關(guān)系，模態(tài)是抽象的系統(tǒng)，媒體是具體的，是模態(tài)的物質(zhì)基礎(chǔ)。模態(tài)的多樣性取決于選擇的媒體。由于英語(yǔ)趣配音媒體系統(tǒng)的多樣性和豐富性，由此可見(jiàn)，它是一款以多模態(tài)形式出現(xiàn)的配音軟件。根據(jù)顧曰國(guó)的觀點(diǎn)，多模態(tài)，多媒體的學(xué)習(xí)比單模態(tài)更能引起學(xué)生興趣，因此更有效果。

2.英語(yǔ)趣配音的形式層面分析。媒體作為意義傳遞的載體，本身并沒(méi)有一定的意義，只有通過(guò)形式層面的組織和模式化才具有直接表達(dá)意義的能力。多模態(tài)話語(yǔ)的形式即實(shí)現(xiàn)意義的不同形式系統(tǒng)，包括語(yǔ)言、圖覺(jué)、聲覺(jué)和感覺(jué)。

在英語(yǔ)趣配音軟件中，我們可以發(fā)現(xiàn)多模態(tài)話語(yǔ)的多種形式，包括語(yǔ)言，圖覺(jué)和聲覺(jué)。該軟件平臺(tái)提供的視頻多種多樣，包括美劇、紀(jì)錄片、歌曲和演講等。每個(gè)視頻集語(yǔ)言、圖像和聲音為一體。多種模態(tài)形式共存。

在多模態(tài)話語(yǔ)理論中，模態(tài)間關(guān)系分為互補(bǔ)關(guān)系和非互補(bǔ)關(guān)系，互補(bǔ)關(guān)系又分為強(qiáng)化關(guān)系和非強(qiáng)化關(guān)系，非互補(bǔ)關(guān)系分為交疊、內(nèi)包和語(yǔ)境交互。在此配音平臺(tái)中，圖文音各模態(tài)緊密結(jié)合共同表意，這種多模態(tài)結(jié)合的關(guān)系更有利于幫助學(xué)習(xí)者學(xué)習(xí)。如用戶在對(duì)視頻進(jìn)行多次模仿跟讀后對(duì)配音不滿意時(shí)，學(xué)習(xí)者此時(shí)可以借助圖覺(jué)媒介，觀察視頻中人物的口型等面部畫(huà)面，再次進(jìn)行模仿以達(dá)到最佳效果。即，如果一種模態(tài)形式無(wú)法獨(dú)立幫助學(xué)習(xí)者學(xué)習(xí)，則需要其他模態(tài)媒體形式的配合，如圖畫(huà)、圖形、實(shí)物等。各媒介之間形成互補(bǔ)的關(guān)系，對(duì)整個(gè)意義的表達(dá)共同作用。

三、英語(yǔ)趣配音在教學(xué)中的可行性研究

英語(yǔ)教學(xué)的目的是提高學(xué)生的交際能力和應(yīng)用能力，因此在課堂中創(chuàng)建真實(shí)的語(yǔ)境是一種有效的教學(xué)方法。但由于傳統(tǒng)課堂的有限性，教師很難把真實(shí)的語(yǔ)境搬到課堂中。網(wǎng)絡(luò)平臺(tái)為多模態(tài)話語(yǔ)交際提供了條件和新的途徑。英語(yǔ)趣配音作為受歡迎的英語(yǔ)學(xué)習(xí)軟件，彌補(bǔ)了傳統(tǒng)教學(xué)的不足。其為學(xué)習(xí)者提供了大量的學(xué)習(xí)材料和真實(shí)的語(yǔ)境進(jìn)行模擬。教師可以在平臺(tái)中布置作業(yè)，學(xué)生完成作業(yè)后可以進(jìn)行作品展示、同學(xué)間可以進(jìn)行作品互評(píng)等。其多模態(tài)的結(jié)合形式可以更好的激發(fā)學(xué)習(xí)者的興趣。因此，英語(yǔ)趣配音軟件輔助教學(xué)具有很強(qiáng)的可行性。

四、結(jié)語(yǔ)

綜上所述，多模態(tài)話語(yǔ)理論是配音軟件“英語(yǔ)趣配音”受歡迎的理論基礎(chǔ)。其多模態(tài)模式有助于學(xué)習(xí)者積極自主的學(xué)習(xí)，同時(shí)為課堂教學(xué)提供了新的思路。

參考文獻(xiàn)：

[1]李戰(zhàn)子.多模式話語(yǔ)的社會(huì)符號(hào)學(xué)分析[J].外語(yǔ)研究，2003（5）.