現(xiàn)代學習型詞典的“多模態(tài)化”與符際模態(tài)配置研究

錢亦斐

摘要近年來，從Halliday的社會符號學出發(fā)，將語言的社會符號特性擴展到視覺、聽覺、動作、觸感等模態(tài)作為交際手段的研究不斷增多，其成果也不斷應用于詞典編纂中。因此，選擇最恰當?shù)纳鐣枺B(tài)）進行釋義，從而達到交際目的，做到用戶友善，是詞典研編者理應重視的問題。自2010年以來，國內外學者陸續(xù)提出了“多模態(tài)詞典學”“多模態(tài)學習詞典”等概念，但其研究從嚴格意義上說應該是一種“雙模態(tài)”研究，僅涉及紙質學習詞典視覺模態(tài)中的圖、文關系，極少關注其他模態(tài)和語言符號間的配置。文章以社會符號學框架下的多模態(tài)理論為基礎，以學習型詞典中的五大家族“Big5”的紙質及新型電子詞典為藍本，對現(xiàn)代學習型詞典發(fā)展過程中的“多模態(tài)化”展開討論，探究該類詞典的符際模態(tài)配置模式，以期為詞典學研究提供全新視角。

關鍵詞模態(tài)多模態(tài)語篇分析多模態(tài)化現(xiàn)代學習型詞典符際配置

一、 引言

近年來，從Halliday的社會符號學出發(fā)，通過文本、圖像、視頻、三維動畫等多種媒介和符號載體，將語言的社會符號特性擴展到視覺、聽覺、動作、觸感等模態(tài)的研究層出不窮，“多模態(tài)語篇分析”已然成為語言學和其他學科共同關注的研究領域?！岸嗄B(tài)詞典”是將詞目的釋義、例證等看作“語篇”，利用視覺（文字、圖片、視頻）、聽覺（聲控、語音識別、人機對話）、觸感（觸控、手勢）等多種模態(tài)進行編纂的詞典。該類詞典充分體現(xiàn)了編纂者的意圖并能對詞典交際活動進行強化、補充、調節(jié)和協(xié)同，能反映整體意義。隨著視覺文化、多媒體及網(wǎng)絡技術的高速發(fā)展，將多種模態(tài)應用于學習型詞典編纂必將成為趨勢，現(xiàn)代詞典學中的“多模態(tài)化”（multimodalization）值得研究者關注。本文以社會符號學框架下的多模態(tài)理論為基礎，以近五年來多模態(tài)理論視角下學習型詞典圖、文關系研究成果為重要依托，以流行度極高的“Big5”（學習型詞典中的五大家族）的紙質及新型電子詞典為藍本，對現(xiàn)代學習型詞典學中的“多模態(tài)化”展開討論。初步探索“多模態(tài)學習型詞典”的發(fā)展歷程及該類詞典的符際模態(tài)配置關系，以期為詞典學研究提供全新視角。

二、 多模態(tài)語篇分析及“多模態(tài)詞典學”研究

1. 多模態(tài)及多模態(tài)語篇分析理論

“多模態(tài)”指綜合運用視覺、聽覺、觸感等模態(tài)，通過文本、圖像、視頻、手勢、三維動畫等多種手段和符號載體進行交際的現(xiàn)象（Iedema 2001： 1—2；OHalloran 2006）。20世紀90年代興起的“多模態(tài)語篇分析”主要建立在Halliday（1985）提出的語言的社會符號系統(tǒng)三大元功能（概念功能、人際功能和語篇功能）之上。研究者們（Kress 1990；Leeuwen & Jewitt 2001；Matthiessen 2007；Royce 2007；Bateman 2008）認為，在特定的社會文化領域，同種意義可由不同符號來表達。語言符號不再是呈現(xiàn)經(jīng)驗和交際的唯一手段，所有模態(tài)都能表達意義，都具有元功能特征。多模態(tài)語篇分析將語言的社會符號特性擴展到視覺、聽覺、觸感、動作等多種模態(tài)交際手段方面，很大程度上克服了語篇分析的不足。隨著人類社會發(fā)展、科技進步、意義表達及交際方式（媒介）的變化，各領域研究都涉及多模態(tài)語篇分析。

2. “多模態(tài)詞典學”研究

（1） 歷時研究： 詞典編纂趨勢的“多模態(tài)化”

從語言單一模態(tài)到多模態(tài)的發(fā)展促使交流從語言向多種符號的轉變，“多模態(tài)化”已成為人類交際的普遍特征。選擇最適合的社會符號（模態(tài)）進行釋義、設例達到交際目的并做到用戶友善（user friendliness），是編纂者一直考慮的問題。詞典的雛形是詞表（glossary），利用視覺模態(tài)中的語言符號進行編纂。公元15世紀的詞典中首次出現(xiàn)了插圖（Hartmann & James 1998： 70），而1850年John Ogilvie編纂的The Imperial Dictionary of the English Language《帝國英語詞典》采用了大量插圖，標志著插圖在詞典編纂中開始占據(jù)重要位置。進入20世紀后，各國陸續(xù)出現(xiàn)了以視覺模態(tài)中的圖片來釋義的圖解詞典（如《杜登圖解詞典》1956、Visual Dictionary《視覺詞典》 1987、Childrens Illustrated Dictionary《兒童圖解詞典》 2009等）。各類學習型詞典也開始大量配置插圖，逐步實現(xiàn)了由單一語言符號向文字為主、圖形媒介為輔的編纂形式過渡。除視覺模態(tài)（圖、文為主）之外，現(xiàn)代詞典還采用聽覺模態(tài)。第一部指導母語、二語及外語學習者發(fā)音的詞典是由劍橋大學出版社于1917年發(fā)行的Cambridge English Pronouncing Dictionary《劍橋英語發(fā)音詞典》， 該詞典于1997年出版第15版時建立了語料庫并于第16版出版時開發(fā)了電子詞典版本。隨后陸續(xù)出現(xiàn)了The Oxford Dictionary of Pronunciation for Current English（《牛津當代英語發(fā)音詞典》2003）、Longman Pronunciation Dictionary《朗文發(fā)音詞典》（最新版為2008年的第3版，并配有The Longman Pronunciation Coach CDROM）等以聽覺模態(tài)為主、偏重對用戶聽覺能力培養(yǎng)的發(fā)音詞典。目前主流學習詞典都配有DVDROM，可實現(xiàn)紙質詞典視覺模態(tài)和光盤詞典聽覺模態(tài)的交互。20世紀80年代后期，由于視覺文化興起，計算機和網(wǎng)絡技術的高速發(fā)展催生了匯集多種模態(tài)協(xié)同的電子詞典（光盤詞典、在線詞典和手機詞典等）。在詞典編纂技術和理念日新月異的變革中，無論是紙質還是電子詞典都在試圖通過多種社會符號對客觀事物進行描寫。各模態(tài)既相對獨立，又相互依存，體現(xiàn)了多模態(tài)語篇的三大元功能，做到了形、音、義的結合。因此，詞典編纂歷程呈現(xiàn)了“多模態(tài)化”的趨勢。

（2） 共時研究：“多模態(tài)詞典學”研究的興起和發(fā)展

盡管多模態(tài)語篇分析理論已走過近20年，詞典編纂歷程也呈現(xiàn)“多模態(tài)化”趨勢，但“多模態(tài)詞典學”研究起步較晚。該理論首先由Lew（2010： 290—306）在《多模態(tài)詞典學： 電子詞典的意義呈現(xiàn)方式》（Multimodal Lexicography： The Representation of Meaning in Electronic Dictionaries）一文中提出。文中將詞典意義的表達模式分為九類： 1） 言語模態(tài)，2） 音頻呈現(xiàn)言語成分模態(tài)，3） 非言語模態(tài)，4） 非語言音頻錄音，5） 靜態(tài)插圖，6） 照片，7） 圖表，8） 動畫，9） 視頻片段。然而Lew的表述混淆了“多模態(tài)”與“多媒體”兩者的概念，因為“多模態(tài)”是運用多種模態(tài)中的“媒介”和符號系統(tǒng)進行交際的現(xiàn)象，而“多媒體”是符號分布印跡的物質手段。（胡壯麟2007： 1—10）

國內研究方面，閆美榮（2011： 93）、楊信彰（2012： 45—51）提出了“多模態(tài)學習詞典”（Multimodal Learners Dictionary）這一概念。他們認為，多模態(tài)語篇研究成果對“多模態(tài)學習詞典”插圖配置有積極作用。通過以關鍵詞“多模態(tài)詞典”在CNKI全文搜索，截至2015年底，國內共有10篇該類型論文。學者們普遍認為，“多模態(tài)詞典”是多元符號學和多模態(tài)技術的應用（引自《牛津高階英漢雙解詞典》第8版前言，胡壯麟2012），它不僅通過語言文字符號傳遞讀音、語義、語法等傳統(tǒng)信息，還通過圖片、動畫和圖像等媒介增強直觀性，提高學習興趣，加強詞匯理解和記憶。但是，國內“多模態(tài)學習詞典”的研究基本僅涉及紙質學習型詞典中的圖、文關系，從嚴格意義上說，更像是一種“雙模態(tài)”研究，極少關注其他模態(tài)和語言符號間的配置關系。研究者可通過進一步探討學習型電子詞典、新型網(wǎng)絡搜索引擎或信息提取類詞典中的符際模態(tài)配置關系，真正做到“多模態(tài)詞典學”研究。

三、 現(xiàn)代學習型詞典的符際模態(tài)配置關系研究

現(xiàn)代學習型詞典是視覺、聽覺、觸感多種模態(tài)同語言符號間相互協(xié)同的產物。國內相關研究主要集中在“Big5”紙質詞典中的圖、文關系并取得了一定成果。因此，該部分討論主要基于文獻。

在論述聽覺、視覺、觸感與語言符號的配置關系時，鑒于“電子詞典界面結構的多模態(tài)性、互動性是傳統(tǒng)詞典無可比擬的”（魏向清等2014： 181），我們選取了《牛津高階英漢雙解詞典》（第7版、第8版）（OALECD7、OALECD8）；《牛津高階英語詞典》（第9版）（Oxford Advanced Learners Dictionary， 9th Edition）（OALD9）；《朗文高級美語詞典》（第2版）（ Longman Advanced American Dictionary， 2nd Edition） （LAAD）；《朗文當代英語辭典》（第5版、第6版）（Longman Dictionary of Contemporary English， 5th Edition & 6th Edition）（LDOCE5、LDOCE6）；《柯林斯COBUILD高級英語詞典》（Collins COBUILD Advanced Dictionary of English）；DioDict3 Collins COBUILD Aduanced Dictionary of English；《麥克米倫高階英漢雙解詞典》第2版（Macmillan EnglishChinese Dictionary for Advanced Learners， 2nd Edition）（MECDA2）；《劍橋高階英語詞典》（Cambridge Advanced Learners Dictionary）（CALD）；《劍橋高階英漢雙解詞典》（第3版）（Cambridge Advanced Learners Englishchinese， 3rd Edition）（CALD3）和《歐路詞典》的最新電子詞典版本作為語料進行分析比對，關注電子學習型詞典各模態(tài)間的呈現(xiàn)形式和協(xié)同關系。此外，我們也嘗試利用新型網(wǎng)絡搜索引擎庫（如google）、信息提取類詞典（如網(wǎng)易有道、金山詞霸）等進行輔助研究。

1. 視覺模態(tài)中的圖文配置關系

作為學習型詞典視覺模態(tài)中最重要的兩種形式，靜態(tài)圖片和語言符號在意義表征方面相互作用、相輔相成?，F(xiàn)階段對視覺模態(tài)中圖、文配置方面的研究主要是利用Halliday（1985）、Kress & Leeuwen（1996，2006）、Royce（2007）、Martinec & Salway（2005）和Bateman（2007）等人的“多模態(tài)語篇分析理論”對“Big5”的紙質版本進行分析。學者們（魏向清等2014；田晶晶2011；何娟，楊正軍2012；燕娜2011；閆美榮2011；楊信璋2012；羅永勝2012；馬娜娜2014）圍繞圖像的再現(xiàn)、互動和構圖三大功能展開研究，內容主要涉及紙質學習型詞典中的圖文位置和圖文關系。結果表明： 詞典中的圖片和語言文字相似，能體現(xiàn)“概念功能”（“經(jīng)驗功能”和“邏輯功能”）。學習型詞典以圖、文釋義的詞目主要包括名詞、動詞、形容詞和短語。插圖與文字的協(xié)同作用在概念功能層面存在同義、反義、上下義、整體與部分及復合關系。詞條文字釋義與圖片釋義的關系主要包括列舉、整體與部分、類屬、原因和結果、詳述及近反義辨別等六種關系。圖、文間的邏輯語義關系有相互依存（并列和主從關系）和擴展（詳述、延伸和增強），兩種關系相互交織。圖、文模態(tài)的釋義模式有“短語+圖像模式”“句子+圖像模式”和“短語+句子+圖像模式”三類。前人的研究僅關注了紙質詞典中的圖、文配置關系，而極少關注電子詞典中的該類關系。電子詞典是現(xiàn)代信息技術和傳統(tǒng)詞典學共同作用的產物，可以實現(xiàn)單個及多個模態(tài)的意義傳遞和互動?！岸嗄B(tài)”的人機交互界面與傳統(tǒng)紙質詞典相比，更能協(xié)同各模態(tài)間關系，克服單一模態(tài)的缺陷。該類詞典能針對特定的使用需求采取不同的交互方式，實現(xiàn)符際間配置的互補。

Moebius（1986： 141—158）和Royce（2007： 63—109）的“圖文位置理論”認為，“信息值”是通過元素在構圖中的位置實現(xiàn)的，即任何元素在圖片中的角色取決于它被放置的位置。被置于圖片上方的信息是“理想的、權威的”，圖片下方的是“真實的、淺薄的”，正中的是要被“凸顯”的，邊緣是要被“弱化”的，左邊是“已知信息”，右邊是“新信息”。我們對比分析了LAAD、OALECD8、CALD、OALECD7、LDOCE5、CALD3、OALD 9、《歐路詞典》電子詞典中的“cup，football，baseball，volcano，curved，tree”等詞條（見圖1—圖4），將其共性總結為： 1） 文在左，圖靠右。這說明詞典突出文的重要性，圖則作為“未知信息”對文進行增強或補充。2） 詞目詞被置于左上方顯著位置，是“已知的權威信息”，而“聲音”圖標則被安排在靠右的位置作為“新信息”的入口。3） 詞目的釋義、例證多置于正中位置，是需要被“凸顯”的信息。4） 無論是電子學習型詞典還是新型網(wǎng)絡搜索引擎、信息提取類詞典，詞目的詞源、用法等次要信息一般位于“邊緣”位置，用戶查詢該類信息的頻度最低，所以要“弱化”。

此外，我們還發(fā)現(xiàn)CALD、MECDA2、DioDict3 Collins COBUILD Advanced Dictionary of English、LDOCE6等為節(jié)約電子詞典的“呈現(xiàn)空間”，基本只采用了文字符號進行釋義，圖片較紙質版本大幅減少。OALECD7、LDOCE5、CALD3的圖、文釋義與其紙質詞典的呈現(xiàn)方式則基本相同。其中，OALECD7、LDOCE5采用“短語+圖像”“句子+圖像”和“短語+句子+圖像”等圖、文釋義組合的模式放置于詞目右下方，位于純文字釋義之前，“凸顯”圖、文釋義的重要性，讀者可更直觀地了解該詞目（如圖2）。CALD3則通常采用“短語+圖像”的釋義模式放置于純文字釋義或例證之后（如圖3），更重視使用文字符號來呈現(xiàn)意義。在OALD9的電子詞典中，通常在平行于詞目的右側出現(xiàn)相應圖片（僅為可視圖片而不配文字），用戶需要通過點擊圖片（如圖4），詞典才會轉至新的復合組圖（同紙質版本圖、文一致）。插圖與文字的協(xié)同在概念功能、邏輯語義層面所表達的意義和紙質詞典基本相同。這樣的圖、文配置方式最大化精簡了電子詞典的“呈現(xiàn)空間”，用戶可根據(jù)實際使用需求自行選擇有效信息，提高查詢速度。由此可見，編纂者首先考慮的是突出詞典的信息焦點（詞目）。其次關注的是圖文在詞條中的相對位置。再次則是明確“已知信息”和“新信息”，以達到合理布局的目的。在新型網(wǎng)絡搜索引擎庫（如google、Wiktionary）中，也通常將詞目置于左上方，圖片置于詞頭右下方?！靶畔⑻崛☆愒~典”（如網(wǎng)易有道）則將圖片集植入其中并默認隱藏，使用者可以點開圖片集以獲取圖文關系。此外，在最新版本的有道iPhone app（Version 6.1.0）中還設有“圖解詞典”（共含基本詞類、人類、家居等21項，7000余條詞目配圖），同時設有“百科搜索”欄，使用者可通過在線查詢功能獲得更多的圖文釋義和例證信息。

2. 視覺模態(tài)中的視頻與語言符號的配置關系

傳統(tǒng)紙質詞典由于受媒介限制，視覺模態(tài)中很難實現(xiàn)視頻與語言符號的配置。編纂者僅能以語言對視頻媒介的出處、內容進行描寫，通過詞典用戶的前經(jīng)驗、空間聯(lián)想構建符際間的關聯(lián)性。電子詞典的“多媒體性”優(yōu)勢使視頻與語言符號的配置成為可能，表現(xiàn)為一系列同詞目關聯(lián)的“圖片+文字+音頻”的連續(xù)體，是視覺、聽覺模態(tài)及多種媒介手段（文本+圖像+視頻+三維動畫）和符號載體的有機組合體。光盤型電子詞典因光盤容量有限，基本沒有提供與語言符號模態(tài)對應的視頻模態(tài)。上述模態(tài)的整合主要體現(xiàn)在依托網(wǎng)絡的電子詞典（包括手機詞典app、新型網(wǎng)絡搜索引擎庫、信息提取類詞典等）上。該類詞典（如LDOCE5、Danish Sign Language Dictionary《丹麥手語詞典》）中畫面、聲音和文字相互協(xié)調，充分體現(xiàn)了“多模態(tài)性”。視頻與語言符號的結合可以反映社會情境層中的“目標、參與者、活動、架構、地點和時間”等6個變量，起到詳述、延伸和增強的作用，用戶通過搜索，可得到與詞目存在同義、反義、上下義、整體與部分及復合關系的音、視頻信息。

3. 聽覺、觸感模態(tài)與語言符號的配置關系

紙質學習型詞典通常利用圖、文模式對詞目的讀音進行描寫，如利用國際音標進行標注、采用“圖例”描述發(fā)音方式和位置。盡管很直觀，但用戶無法確定詞目的正確讀音，還需借助其他媒體手段加以驗證。電子詞典在此方面有了很大進步，加入了發(fā)音、聲控、語音識別、人機對話等聽覺模態(tài)要素。聽覺模態(tài)通常出現(xiàn)在電子詞典的查詢欄和詞目的發(fā)音中（如圖5）。電子詞典不僅具備文字輸入功能，還可實時進行語音輸入并進行音頻和文字符號間的轉換，將音頻信息識別為文字符號信息輸出。同時，多數(shù)英語學習電子詞典配有美式和英式發(fā)音情況統(tǒng)計和對比（如圖6），以方便用戶選擇和辨析語音。此外，新型網(wǎng)絡搜索引擎還可接入大量互聯(lián)網(wǎng)真實音頻語料作為例證和其他輔助信息，這些音頻信息同文字符號一樣，可再現(xiàn)交際中的人、事、物間的關系。詞典編纂者還可將其編纂動機通過音頻材料傳遞給用戶，并通過語音識別、人機對話等多媒體手段獲取用戶的反饋，從而體現(xiàn)“人際意義”。依據(jù)上述模式編纂的電子學習型詞典能協(xié)助用戶及時獲取詞目未被紙質詞典收錄的讀音、釋義、例證及用法等，可做到實時更新。

隨著掌上設備和觸控技術的流行，輸入信息的便捷性和提高查詢效率成為電子詞典編纂者不斷改進觸感體驗的動力。廣泛采用觸感模態(tài)（按壓、手勢、滑動、觸摸等）的電子學習型詞典能快速進入詞目的查詢，更方便地獲取該詞目的衍生信息。通過觸感模態(tài)，從詞典的任意位置（釋義、例證或其他部分）都能進入全新的詞條查詢，這是紙質詞典難以企及的。此外，大多數(shù)電子詞典都將觸感模態(tài)作為切換文字輸入法的首選方式，用以切換中英文輸入或切換文字符號的鍵盤與手寫輸入，體現(xiàn)了觸感模態(tài)和用戶間的互動關系。

四、 現(xiàn)代學習型詞典符際模態(tài)配置關系研究的新思考

1. 建設“多模態(tài)詞典語料庫”

詞典學與語料庫語言學有著不解之緣，大型英語詞典的編纂基本都運用了語料庫輔助詞典編纂技術。近年來興起的“多模態(tài)語料庫”是“將文字語料音頻語料和靜動態(tài)圖像語料進行集成處理，用戶可以通過多模態(tài)方式進行檢索統(tǒng)計等操作的語料庫”（顧曰國 2013： 3）。Elan、Anvil等軟件的普及促進了“多模態(tài)語料庫”的建設，國內外分別建立了Baldry & Thibaul的基于XML的“在線多模態(tài)檢索器”和顧曰國的“現(xiàn)場即席話語語料庫”。如何結合傳統(tǒng)文字符號語料庫和新興“多模態(tài)語料庫”，建設“多模態(tài)詞典語料庫”，從而服務于現(xiàn)代學習型詞典的研編，是詞典學家和編纂機構努力的方向。該領域涉及符合多模態(tài)詞典編纂所需音、視頻語料的采集、轉寫、切分、標注等步驟，這都是傳統(tǒng)詞典語料庫所不具備的，必定對未來系統(tǒng)編纂“多模態(tài)學習型詞典”具有深遠意義。

2. 紙質與電子詞典并舉，大力發(fā)展“手機詞典”

隨著移動互聯(lián)網(wǎng)及隨身辦公系統(tǒng)的盛行，手機詞典逐步成為現(xiàn)代詞典發(fā)展的新方向，也是最適合展現(xiàn)詞典“多模態(tài)化”的平臺。我們應盡力做到紙質與電子詞典并舉，大力發(fā)展符際模態(tài)配置合理的“手機詞典”。國外辭書出版社綜合實力較強并具備自有語料庫，便于開發(fā)同類型的手機詞典，如牛津大學出版社開發(fā)的OALD8和OALD9， 《牛津同義詞學習詞典》（Oxford Learners THESAURUS），《牛津搭配詞典》（Oxford Collocations Dictionary for Students of English），培生教育開發(fā)的LAAD、LDOCE5、LDOCE6及《朗文成語詞典》（Longman Idiom Dictionary），基于Mobisystem和WordNet 3.0編纂的《高級英語詞典》（Advanced English Dictionary and Thesaurus）（Version 8.1.4.15）和CALD3，由DioTEK與柯林斯出版社聯(lián)合發(fā)行的DioDict3 Collins COBUILD Advanced Dictionary of English等。國內主要辭書出版社在該方面也逐步與國際接軌。從2015年起，上海教育出版社、外語教學與研究出版社、上海交通大學出版社、商務印書館、上海辭書出版社、四川辭書出版社等同上海詞海信息技術有限公司合作，使用先進的詞典編纂平臺DPS（Dictionary Production System），推出了一系列紙質詞典及配套的手機詞典。其中，《新牛津英漢雙解大詞典》《新世紀英漢大詞典》《商務國際現(xiàn)代漢語詞典》《新華大字典》等最具代表性。此外，他們合作開發(fā)的手機學習型詞典，如《新課標英漢雙解小詞典》《新課標漢英小詞典》《學生英漢漢英多用詞典》《初中英語應考短語詞典》《英語核心18000單詞詞典》等數(shù)量也逐年增加。這都體現(xiàn)了辭書編纂機構同專業(yè)數(shù)字化機構強強聯(lián)合、資源整合、齊頭并進、共謀發(fā)展的新趨勢。

3. 處理好符際模態(tài)間的協(xié)同配置關系

Halliday（1978）指出，“現(xiàn)實中運用的語言和其他符號水乳交融，不能分割，共同制造意義”。因此，僅關注或加強某一模態(tài)是無法完成一部現(xiàn)代學習型詞典編纂的，處理好符際模態(tài)間的協(xié)同配置至關重要。傳統(tǒng)紙質學習型詞典的編纂目的是為廣大學習者提供查詢服務，其以語言文字符號表示的釋義、例舉功能最強，而插圖僅對語言符號的表述起延展、增強的作用。兩者在邏輯語義上體現(xiàn)為主從關系。電子詞典中視覺、聽覺、觸感模態(tài)除對語言文字符號所表述內容具有延伸和增強等功能外，還具有相對獨立性和邏輯語義上的相互依存、相互擴展和相互投射性。根據(jù)紙質和電子詞典在符際模態(tài)協(xié)同配置方面的不同特性及作用，編纂者可從以下幾方面進行努力。

（1） 加強音、視頻信息處理

音、視頻是社會情境的“再語境化”，它們的有效、合理配置是編纂高質量“多模態(tài)學習詞典”的保障。編纂者和技術人員可按以下三個步驟處理音、視頻信息： 1） 對可對應于詞目的例證進行音、視頻錄制或利用互聯(lián)網(wǎng)搜索引擎收集語篇資源（包括自然語料，影視作品，名校公開課，教材中的音、視頻例句等）。對采集的語篇資源進行篩選、轉寫、切分、標注，建立“多模態(tài)詞典語料庫”。2） 為凸顯“多模態(tài)學習型詞典”中音、視頻和其他符號的整合關系，對“多模態(tài)詞典語料庫”中的內容進行編輯，如剪輯，加快或減緩播放速度，增加字幕、背景音樂、情境效果或動畫等。3） 將編輯過的“音、視頻語篇”作為子數(shù)據(jù)庫，并按需要與電子詞典中的有關內容建立“超鏈接”，以便用戶通過點擊相關圖標獲取音頻或視頻內容。通過以上三步處理過的詞典音、視頻信息能激活用戶的“前經(jīng)驗”、再現(xiàn)社會情境語境，較充分地滿足他們的查詢需求。此外，編纂者還可以利用Leeuwen & Jewitt （2001）的“聲音透視和社會距離系統(tǒng)網(wǎng)絡”和普多金夫（1962）的“聲音蒙太奇”理論針對各類音、視頻語篇中的語言（同期聲、解說詞、對白、旁白）、音樂（主客觀音樂）、音響（人聲和環(huán)境音）所構建的意義對用戶的影響進行解讀，以便編纂更實用的“多模態(tài)學習詞典”。

（2） 既重視模態(tài)的多樣性，又突出各模態(tài)的相對獨立性

現(xiàn)代學習型詞典編纂既應重視模態(tài)的多樣性，又應突出各模態(tài)的相對獨立性。2016年由Collins與外語教學與研究出版社、上海詞海信息技術有限公司聯(lián)合開發(fā)的《新世紀英漢大詞典》為處理各模態(tài)間的配置關系提供了參考（如圖7）?！缎率兰o英漢大詞典》紙質詞典部分按傳統(tǒng)詞典框架結構提供了視覺模態(tài)中的語言符號信息，而其他模態(tài)的功能則通過手機詞典的多媒體屬性實現(xiàn)。用戶可通過詞典app中視覺和觸控模態(tài)的“屏幕取詞”功能，從紙質詞典中掃描并獲取查詢詞目，繼而由手機詞典呈現(xiàn)聽覺模態(tài)（英式、美式發(fā)音，macaw生存情境音頻）和視覺模態(tài)（圖解詞典）的信息。該詞典既涵蓋了“多模態(tài)詞典”的特性，又突出了模態(tài)間的相對獨立性，做到了分工明確、各司其職。因此，現(xiàn)代學習型詞典編纂應盡量做到紙質和電子詞典，視覺、聽覺、觸感等模態(tài)的“融合”。

（3） 依據(jù)不同用戶需求配置相應的模態(tài)

無論是紙質還是電子詞典，用戶的查詢需求和“多模態(tài)識讀能力”對各模態(tài)的選擇程度是不同的。“普通用戶”關注的是信息的“查得率”“直觀性”和“快捷性”，“專業(yè)用戶”則更注重信息的“全面性”及“可靠性”。電子詞典在詞典結構上的靈活性和動態(tài)性，可提供分層級的內容接入結構，可為用戶提供模態(tài)的“多維選擇”。若能針對用戶類型分別開設“普通用戶”和“專業(yè)用戶”入口，基于“觸感”模態(tài)針對兩類用戶的不同需求呈現(xiàn)詞目的視覺、聽覺模態(tài)的組合信息，電子學習型詞典的結構能更為有序，更具實用性。

五、 結語

“多模態(tài)學習詞典”作為一種不斷更迭的歷史文化產物，其形式應適應社會發(fā)展的趨勢，符合詞典用戶的需求。用戶對模態(tài)選擇的好惡決定了詞典的多樣性和可變性。因此，編纂者有義務編纂符際模態(tài)配置合理的詞典，同時協(xié)助用戶理解其整體意義。詞典用戶則需要加強自身的“多模態(tài)識讀能力”培養(yǎng)，以更充分、更扎實地利用詞典。所以，現(xiàn)代學習型詞典的“多模態(tài)化”與符際模態(tài)配置關系值得我們繼續(xù)關注，進一步研究。

參考文獻

1. 顧曰國.論言思情貌整一原則與鮮活話語研究.當代修辭學，2013（6）.

2. 何娟，楊正軍.淺議網(wǎng)絡詞典的符號模態(tài)選擇與意義整合——以有道網(wǎng)絡詞典為例.內蒙古農業(yè)大學學報.2012（6）.

3. 胡壯麟.社會符號學研究中的多模態(tài)化.語言教學與研究，2007（1）.

4. 胡壯麟.牛津高階英語詞典（第8版）·序言.∥霍恩比著.牛津高階英語詞典（第8版）.北京： 商務印書館，牛津大學出版社（中國）有限公司，2012.

5. 羅永勝.多模態(tài)英語學習詞典圖文釋義模式研究.廣西民族大學學報，2012（1）.

6. 馬娜娜.多模態(tài)語篇分析理論視角下詞典插圖配置研究.陜西師范大學碩士學位論文，2014.

7. 普多金夫.普多金夫論文選.北京： 中國電影出版社，1962.

8. 田晶晶.高階英語學習詞典的多模態(tài)釋義研究.四川外國語大學碩士學位論文，2011.

9. 魏向清，耿云冬，盧國華.雙語學習型詞典設計特征研究.北京： 外語教學與研究出版社，2014.

10. 閆美榮.SFL邏輯功能視角下多模態(tài)英語詞典圖文關系的解構.中北大學學報，2011（5）.

11. 燕娜.英漢學習詞典的多模態(tài)語篇分析.西南大學碩士學位論文，2011.

12. 楊信彰.學習型英漢雙解詞典中的圖文關系.北京科技大學學報，2012（4）.

13. Bateman J D， Henschel R. Mapping the Multimodal Genres of Traditional and Electronic Newspapers. ∥Royce T， Bowcher W. （eds.）New Directions in the Analysing of Multimodal Discourse. Mahwah： Lawrence Erlbaum Associations， 2007.

14. Bateman J. Multimodality and Genre： A Foundation for the Systematic Analysis of Multimodal Documents. Hampshire： Pal grave Macmillan， 2008.

15. Barthes R. ImageMusicText. Trans. by Iswolsky H. London： Oxford University Press， 1977.

16. Halliday M A K. Language as a Social Semiotic. London： Edward Arnold，1978.

17. Halliday M A K.An Introduction to Functional Grammar. London： Edward Arnold， 1985.

18. Hartmann R R K， James G.Dictionary of Lexicography. London， New York： Rutledge， 1998.

19. Iedema R. Analysing Film and Television： A Social Semiotic Account of Hospital： An Unhealthy Business.∥Van Leeuwen T， Jewitt C. Handbook of Visual Analysis. London： Sage， 2001.

20. Kress G， Van Leeuwen T.Reading Images： The Grammar of Visual Images. London/New York： Routledge， 1990，1996，2006.

21. Lew R. Multimodal Lexicography： The Representation of Meaning in Electronic Dictionaries.Lexikos， 2010（20）.

22. Martinec R， Salway A. A System for Imagetext Relations in New （and old） Media.Visual Communication， 2005（3）.

23. Matthiessen C. The Multimodal Page： A Systemic Functional Exploration.∥Royce T D， Bowcher W. （eds.）New Directions in the Analysis of Multimodal Discourse. New Jersey and London： Lawrence Erlbaum Associates， 2007.

24. Moebius W. Introduction to Picture Books Codes.Word and Image， 1986（2）.

25. O Halloran K L.Multimodal Discourse Analysis. London， New York： Continuum， 2006.

26. Royce T D. Intersemiotic Complementarity： A Framework for Multimodal Discourse Analysis.∥Royce T D， Bowcher W L. （eds.） New Directions in the Analysis of Multimodal Discourse. New Jersey， London： Lawrence Erlbaum Associates， 2007.

27. Van Leeuwen T， Jewitt C. Handbook of Visual Analysis. London： Sage，2001.

（廈門大學外文學院英語語言文學系福建361005；

貴州師范大學外國語學院貴陽550001）

（責任編輯李瀟瀟）