英語教學中圖片文本的多模態(tài)分析

溫浩

英語教學中圖片文本的多模態(tài)分析

在英語教學中，圖片文本是常用的教學材料，但圖片文本大多是通過直覺或經(jīng)驗進行選擇。通過對英語教學中圖片文本的多模態(tài)分析研究，總結(jié)圖片文本分析的視覺語法理論，可以給圖片教材編撰和評估工作提供更多的借鑒。

圖片文本；視覺語法；系統(tǒng)功能語言學

引言

隨著現(xiàn)代科技的發(fā)展，意思表達媒介日趨多樣化。除文字之外，我們還用圖片、聲音、影像以及互動軟件來表達意思（Kress 2008）。因此，英語教學中的文本也日趨多模態(tài)化，在課堂內(nèi)外出現(xiàn)了許多彩色的教材和媒介，這對教學材料和教育文本的設(shè)計提出了新的要求（佩因特2008）。圖片文本，即含有豐富圖片的教材或是繪本，被廣泛運用在英語教學當中。佩因特（2008）指出兒童故事繪本是重要的教育文本，培養(yǎng)了兒童的語言能力和社會價值觀。路易斯（2003）指出，過去出版社只是簡單地將圖片分為有趣的和無趣的，漂亮的和普通的，并未關(guān)注圖片文本的多模態(tài)特點。本文將回顧英語教學中圖片文本的多模態(tài)分析，給圖片教材的編寫和使用提供借鑒。

一、圖片文本的關(guān)鍵元素

通過研究大量的圖片，路易斯（2003）總結(jié)了圖片中意思表達的關(guān)鍵元素：線條、顏色、行動、畫幅、圖像分布和象征意義。在路易斯（2003）看來，線條可以用來構(gòu)建獨立的圖像元素，也可用來表達陰影和紋理；顏色可以用來表達物品的突出性；圖片中的行動可以用矢量和對角來表現(xiàn)；圖像分布可以用來傳達社會地位，擁有更高社會地位的形象或虛構(gòu)的形象通常放在高處；圖像中的象征意義可以用來激發(fā)讀者的文化意識，也需特別關(guān)注。筆者根據(jù)自己的教學經(jīng)驗，發(fā)現(xiàn)這些元素正是教師挑選教材的重點。但是路易斯的理論只是簡單列舉了圖片中的意義表達元素，并沒有系統(tǒng)地構(gòu)建圖片的視覺語法。

二、圖片文本的視覺語法

克雷斯和范·萊文（2006）在韓禮德“純理功能”的基礎(chǔ)上，提出圖像文本通過視覺語法來表達意思。視覺語法由三個方面來構(gòu)建：表征意義、人際意義和構(gòu)造意義，分別對應(yīng)系統(tǒng)功能語言學中概念功能、人際功能和語篇功能。

圖片的構(gòu)造意義指的是圖像的結(jié)構(gòu)。斯坦林和Iedema（2002）表明圖像元素的分布、圖像的框架應(yīng)該是分析圖片文本的重點。在圖片文本中右邊的圖像比左邊更突出，因為人們的閱讀順序是從左到右，心理期待是從固有信息到新信息，從真實信息到理想信息。因此在設(shè)計圖片文本時，應(yīng)按照信息的性質(zhì)，將不同的圖像放在相應(yīng)的位置，這符合讀者的心理預期。給圖像加框架也是一種表達強調(diào)的方法，所以通過圖像分布和框架的方法放大和縮小圖片就可以在圖片文本中創(chuàng)建一個時間順序文本。

圖片的表征意義指的是圖像中發(fā)生的事件（Painter 2008）。克雷斯和范·萊文（2006）將圖片分為敘述圖片和概念圖片，敘述圖片通過矢量描繪了圖片中參與者的一個行為。在英語課堂中，清晰的矢量圖片文本可以用來激發(fā)學生預測事情的發(fā)展思維，從而更好地理解語言和文章的結(jié)構(gòu)。

佩因特（2008）關(guān)注了一連串圖片文字的敘述結(jié)構(gòu)，他將其分為擴展結(jié)構(gòu)和投射結(jié)構(gòu)。通過研究兒童的圖畫書，佩因特（2008）發(fā)現(xiàn)圖片文本中事件的展開是通過連續(xù)圖片中相同圖像的延續(xù)和新圖像的出現(xiàn)來實現(xiàn)的。他指出，在敘述圖片時，隨著時間的推進、事件的展開可以通過敘述人物的“重復”出現(xiàn)來實現(xiàn)，人物的位置和動作的變化就表達了時間的推進。在時間推進中，也會有新形象的突然或偶然出現(xiàn)來表達時間的跳躍。而對于年齡較小的語言學習者來說，時間發(fā)展順序是容易理解的，而時間的跳躍需要設(shè)計者仔細設(shè)計來避免誤解，這影響了兒童語言能力的培養(yǎng)。圖片的投射結(jié)構(gòu)指圖片中人物的心理活動，佩因特（2008）指出，對于年齡較小的學習者來說心理活動的投射是較難理解的，所以圖片設(shè)計者將心理活動的圖像放在“氣泡”中，“氣泡框架”的使用使心理活動突出，更能被讀者關(guān)注和理解。在教學過程中，筆者發(fā)現(xiàn)，教師挑選圖片材料時，較多地關(guān)注圖片和文字的關(guān)聯(lián)性，而忽略了圖片文本與讀者理解過程的關(guān)系。

圖片的人際意義指的是圖片文本與讀者之間的關(guān)系。視線接觸、人物聚焦和視覺形態(tài)都可用來傳達圖片文本的人際意義。斯坦林和Iedema（2002）指出，若圖片中人物與讀者有直接視線接觸，這樣的圖片文本就可以傳達出鼓勵讀者參與的互動關(guān)系，而沒有直接的視線接觸說明圖片文本需要讀者用客觀的角度觀察圖片，讀者的參與度降低。佩因特（2008）還指出，在敘述性圖片介紹人物階段，圖片中人物會與讀者有直接的視線接觸，鼓勵讀者參與進事件的發(fā)展中。閱讀圖片文本時，讀者通過人物的眼睛來觀察，就叫人物聚焦。多種的人物聚焦，可引導讀者從不同的角度觀察圖片。視覺形態(tài)指的是圖片的真實性，通過顏色或焦距來實現(xiàn)（Painter 2008）。圖像真實性的增加，讀者的參與值也隨之增加。在日常教學中，要求教師圖片生動、有吸引力。

三、圖片文本與文字文本的關(guān)系

如果我們仔細分析圖片文本，就會很容易發(fā)現(xiàn)，不管在圖畫書或是教材中，圖片并不是唯一傳達意義的媒介，圖片通常與文字一起出現(xiàn)。圖片文本與文字文本的關(guān)系同樣吸引了很多研究者的注意。他們運用Kress&Van Leeuwen（2006）的視覺語法理論，從系統(tǒng)功能語言學角度分析了圖片文本和文字文本的三大元功能。通過比較兩種文本的元功能，研究者發(fā)現(xiàn)其中主要有三種關(guān)系：圖片文本與文字文本意思一致，文字文本與圖片文本互相闡述，文字本文與圖片文本相互補充（Moya 2011）。

在日常教學中，教師通常宣稱自己會選擇與教學內(nèi)容（相應(yīng)的語言知識）相關(guān)的圖片文本，但是教師無法解釋為何某些圖片文本相關(guān)，某些圖片文本又是無關(guān)的。所以通過總結(jié)圖片文本與文字文本關(guān)系的特點，教師在選擇相關(guān)教學輔助圖片、作者在選擇教材或圖畫書的圖片文本時就能有規(guī)律可依了。

結(jié)束語

在教學中，教師往往通過直覺或經(jīng)驗來選擇圖片，而圖片文本的視覺語法給教師研究圖片語法意義以及圖片文本和文字文本關(guān)系提供重要方法，這給圖片和文字之間搭建了一座橋梁。教材的編撰者和教師在設(shè)計、選擇和評估教材時應(yīng)從多模態(tài)的角度來分析，給英語學習者提供更好的學習材料。

引用文獻

Kress，G&Van Leeuwen.T.2006.Reading images：The grammarof visualdesign[M].London：Routledge.

Kress，G.2008.Meaning，learning and representation in a social sem iotic approach tomultimodal communication[C]//A.Mc Cabe，M.O’Donnell&R，Whittaker.Advances in language and education [M].London：Continuum.

Lewis，D.2003.A word aboutpictures[C]//T.Grainger. The Routledge Falmer reader in language and literacy. New York：Routledge Falmer.

Moya，J.2011.Engaging readers through langage and pictures.A case study[J].Fuel&Energy Abstracts, 43（12）：2982-2991.

Painter,C.2008.Children’s picture book narratives：Reading sequence of images[C]//A.M cCabe，M. O’Donnell&R，Whittaker.Advances in language and education.London：Continuum.

Stenglin，M.&Iedema，R.2002.How to analyse visual images：a guide for TESOL teachers[C]//A.Burns &C.Coffin.Analyzing English in aglobal context. London：Routledge.

作者信息：341000，江西贛州，贛州師范高等?？茖W校外語系