系統(tǒng)功能語(yǔ)言學(xué)視角下多模態(tài)話語(yǔ)分析理論的發(fā)展歷程

摘? 要：本文主要目的是闡述近年基于系統(tǒng)功能語(yǔ)言學(xué)的多模態(tài)話語(yǔ)分析理論框架，探討在各多模態(tài)話語(yǔ)分析理論與系統(tǒng)功能語(yǔ)言學(xué)的關(guān)系、各多模態(tài)話語(yǔ)分析理論之間的練習(xí)與區(qū)別。論文先簡(jiǎn)要回顧系統(tǒng)功能語(yǔ)言學(xué)的基本內(nèi)涵和基本框架，再?gòu)年U明系統(tǒng)功能語(yǔ)言學(xué)理論在多模態(tài)話語(yǔ)分析中的應(yīng)用以及在此基礎(chǔ)上形成的其他多模態(tài)話語(yǔ)分析理論，最后著力澄清各個(gè)理論之間的區(qū)別和聯(lián)系。

關(guān)鍵詞：系統(tǒng)功能語(yǔ)言學(xué)理論;多模態(tài)話語(yǔ)分析理論;區(qū)別和聯(lián)系

作者簡(jiǎn)介：黃鉑玲（1995-），女，漢族，甘肅天水人，西安外國(guó)語(yǔ)大學(xué)英文學(xué)院2018級(jí)外國(guó)語(yǔ)言學(xué)及應(yīng)用語(yǔ)言學(xué)研究生。

[中圖分類號(hào)]：H0-0? [文獻(xiàn)標(biāo)識(shí)碼]：A

[文章編號(hào)]：1002-2139（2020）-29--03

1、系統(tǒng)功能語(yǔ)言學(xué)理論的內(nèi)涵和基本框架

系統(tǒng)功能語(yǔ)言學(xué)創(chuàng)立于20世紀(jì)50年代末，在過(guò)去的半個(gè)世紀(jì)中不斷發(fā)展 （黃國(guó)文，2000; Matthiessen， 2007）， 從句法模型發(fā)展成一個(gè)普通語(yǔ)言學(xué)理論模型來(lái)不斷適應(yīng)語(yǔ)言研究的需求。近年來(lái)語(yǔ)言研究的加速發(fā)展使得Halliday本人對(duì)系統(tǒng)功能語(yǔ)言學(xué)有了更加深刻的認(rèn)識(shí)，因此Halliday（2008b）又稱系統(tǒng)功能語(yǔ)言學(xué)為“適用語(yǔ)言學(xué)”。系統(tǒng)功能語(yǔ)言學(xué)的創(chuàng)立基礎(chǔ)來(lái)源于倫敦學(xué)派奠基人弗斯的學(xué)術(shù)思想。創(chuàng)立之初，Halliday提出了階和范疇語(yǔ)法理論框架，后來(lái)發(fā)展成系統(tǒng)語(yǔ)法，在系統(tǒng)語(yǔ)法的基礎(chǔ)上，Halliday又增加了功能部分，所以系統(tǒng)語(yǔ)法既可稱為系統(tǒng)功能語(yǔ)法又可稱之為功能語(yǔ)法。而系統(tǒng)功能語(yǔ)言學(xué)的靈魂就是系統(tǒng)語(yǔ)法和功能語(yǔ)法，這也是系統(tǒng)功能語(yǔ)言學(xué)理論的內(nèi)涵所在。

1.1系統(tǒng)語(yǔ)法

“系統(tǒng)”這個(gè)概念是Halliday于1956年引進(jìn)，但其重要性是通過(guò)1961年的文章才體現(xiàn)出來(lái)的。在上文提到的階和語(yǔ)法中，“系統(tǒng)”是一個(gè)主要的語(yǔ)法范疇，“系統(tǒng)”與“系統(tǒng)”的結(jié)合便構(gòu)成了一個(gè)系統(tǒng)網(wǎng)絡(luò)。而“精密度”使得單一的系統(tǒng)組成系統(tǒng)網(wǎng)絡(luò)成為可能?！熬芏取北硎痉懂牭膮^(qū)分程度或細(xì)節(jié)，它不僅使語(yǔ)義區(qū)分精確，而且也可以表示依賴關(guān)系（黃國(guó)文，2000）。Halliday將語(yǔ)法分析的尺度按照不同的層次分為級(jí)的階，冪的階和精密度的階，一個(gè)句子的形成必須按照這個(gè)層次嚴(yán)格展開(kāi)，即從“級(jí)的階”開(kāi)始，形成各種詞素的排列，之后過(guò)渡到“冪的階”，將抽象的語(yǔ)法概念和句子聯(lián)系起來(lái)，最后才上升到“精密度的階”，即將結(jié)構(gòu)和類別兩大范疇加入到句子中。如前所述，在系統(tǒng)語(yǔ)法的研究過(guò)程中Halliday經(jīng)歷了兩個(gè)階段，分別為“階和范疇”和“系統(tǒng)”，而連鎖軸和選擇軸的提出是這兩個(gè)階段的區(qū)分標(biāo)志。連鎖軸是指組成一句話的各種單位，比如語(yǔ)法、詞匯等，而選擇軸是指這些單位之間的對(duì)比關(guān)系。所以連鎖軸和選擇軸進(jìn)一步可以理解為“表層意義”和“深層意義”。

因此，系統(tǒng)語(yǔ)法可以理解為對(duì)深層的縱聚合關(guān)系之間的研究。系統(tǒng)本身是處于比較深的層次上，因此，對(duì)系統(tǒng)的描述實(shí)際上暗含這對(duì)深層橫組合關(guān)系的闡述。

1.2 功能語(yǔ)法

語(yǔ)法“功能部分”探討大約始于1967年，基于對(duì)深層縱聚合關(guān)系和橫組合關(guān)系的研究，而四個(gè)“功能”的正式提出是在1967年Halliday的文章之中。Halliday功能語(yǔ)法中的四個(gè)功能分別為“經(jīng)驗(yàn)功能”，“邏輯功能”，“話語(yǔ)功能”和“人際功能”（黃國(guó)文，2000）。在經(jīng)過(guò)仔細(xì)研讀分析之后，Halliday在之后的文章（1970）中將上述的四個(gè)功能進(jìn)行了調(diào)整或修改，其中經(jīng)驗(yàn)功能和邏輯功能成為“概念功能”的組成部分，而話語(yǔ)功能修改為“語(yǔ)篇功能”，人際功能保持不變，這三大功能也就是我們沿用至今的三大“元語(yǔ)言功能”。概念功能主要涉及及物性、語(yǔ)態(tài)和作格性;語(yǔ)篇功能主要涉及主位結(jié)構(gòu)、信息結(jié)構(gòu)和銜接;人際功能主要涉及交際者的“角色”、言語(yǔ)功能、語(yǔ)氣、情態(tài)和語(yǔ)調(diào)。通俗而言，概念功能是指人們用語(yǔ)言進(jìn)行一個(gè)物品或者現(xiàn)象的描述，使對(duì)方通過(guò)語(yǔ)言認(rèn)識(shí)和了解世界;交際功能可以使人們用語(yǔ)言來(lái)進(jìn)行交流和溝通，是人們?cè)谏钪斜３秩后w性的必要保障;語(yǔ)篇功能可以使人們?cè)诹?xí)得或者表達(dá)中得出的信息利用語(yǔ)篇進(jìn)一步表達(dá)思想，是社會(huì)得以進(jìn)步的關(guān)鍵。

功能語(yǔ)法的出現(xiàn)使得有些學(xué)者將更多的注意力放在韓禮德語(yǔ)言理論中的“功能”部分，所以有學(xué)者直接把這個(gè)語(yǔ)言理論稱之為“功能語(yǔ)法”或“功能語(yǔ)言學(xué)”。這實(shí)際上是對(duì)此語(yǔ)言理論模式的一種誤解，嚴(yán)格意義來(lái)講，此語(yǔ)言理論模式應(yīng)稱為“系統(tǒng)功能語(yǔ)法（語(yǔ)言學(xué)）”或“系統(tǒng)語(yǔ)法（語(yǔ)言學(xué)）”，這也是我們現(xiàn)在對(duì)韓禮德語(yǔ)言學(xué)理論模式的認(rèn)識(shí)，也被絕大多數(shù)學(xué)者所接受。

總體而言，系統(tǒng)功能語(yǔ)言學(xué)理論的內(nèi)涵由兩部分構(gòu)成：系統(tǒng)語(yǔ)法和功能語(yǔ)法，這兩部分涵蓋了韓禮德語(yǔ)言學(xué)模式的所有內(nèi)容，因此，不少學(xué)者進(jìn)行語(yǔ)言學(xué)研究時(shí)都會(huì)以此理論模型為基礎(chǔ)或依據(jù)分析語(yǔ)言學(xué)中出現(xiàn)的現(xiàn)象。

2、基于系統(tǒng)功能語(yǔ)言學(xué)理論的多模態(tài)話語(yǔ)分析框架

多模態(tài)話語(yǔ)是指應(yīng)用聽(tīng)覺(jué)、視覺(jué)、觸覺(jué)等多種感覺(jué)，通過(guò)語(yǔ)言、聲音、圖像等多種手段和符號(hào)資源進(jìn)行交際的現(xiàn)象（張德祿，2009）。然而，作為多模態(tài)話語(yǔ)分析的框架與系統(tǒng)功能語(yǔ)言學(xué)又有什么聯(lián)系呢？專家學(xué)者們多年的潛心研究發(fā)現(xiàn)系統(tǒng)功能語(yǔ)言學(xué)理論本身不需要做任何改動(dòng)就可以直接作為多模態(tài)話語(yǔ)分析的框架，可以說(shuō)多模態(tài)話語(yǔ)的最合適理論模式是系統(tǒng)功能語(yǔ)言學(xué)理論，因?yàn)樗恍枰獮檫m應(yīng)新的目的而對(duì)理論框架本身進(jìn)行改造。在此基礎(chǔ)上建立的多模態(tài)話語(yǔ)分析的綜合框架的主要解決以下幾個(gè)方面的問(wèn)題：

（1）用來(lái)探討不同的模態(tài)及其之間的關(guān)系;（2）探討實(shí)現(xiàn)模態(tài)的不同媒體系統(tǒng);（3）探討如何在外語(yǔ)教學(xué)中選擇模態(tài)和媒體。

這個(gè)框架由5個(gè)層面組成（Martin，1992），分別為文化層面、語(yǔ)境層面、意義層面、形式層面和媒體層面。

（1）文化層面，強(qiáng)調(diào)作為文化的主要存在形式的意識(shí)形態(tài)和作為話語(yǔ)模式的體裁結(jié)構(gòu)潛勢(shì)，簡(jiǎn)單而言，這個(gè)層面主要涉及意識(shí)形態(tài)和體裁，意識(shí)形態(tài)即人的思維模式、處世哲學(xué)、生活習(xí)慣及一切的社會(huì)潛規(guī)則組成;體裁是指具體可以實(shí)現(xiàn)這種意識(shí)形態(tài)的結(jié)構(gòu)潛勢(shì)或交際程序。這個(gè)層面可以決定交際的傳統(tǒng)、交際的形式和技術(shù)，因此可以說(shuō)文化層面是使多模態(tài)交際成為可能的關(guān)鍵層面。

（2）語(yǔ)境層面，強(qiáng)調(diào)由話語(yǔ)范圍、話語(yǔ)基調(diào)和話語(yǔ)方式組成的語(yǔ)境構(gòu)型，在具體的交際環(huán)境中，交際受到語(yǔ)境因素的制約，其中包括由話語(yǔ)范圍、話語(yǔ)基調(diào)和話語(yǔ)方式?jīng)Q定的語(yǔ)境因素。

（3）意義層面，強(qiáng)調(diào)由話語(yǔ)范圍、話語(yǔ)基調(diào)和話語(yǔ)方式?jīng)Q定的概念意義、人際意義和謀篇意義。

（4）形式層面，強(qiáng)調(diào)實(shí)現(xiàn)意義的不同形式系統(tǒng)，這些系統(tǒng)包括詞匯語(yǔ)法系統(tǒng)、視覺(jué)語(yǔ)法系統(tǒng)、聽(tīng)覺(jué)語(yǔ)法系統(tǒng)、觸覺(jué)語(yǔ)法系統(tǒng)等。除此之外，形式層面還強(qiáng)調(diào)各個(gè)模態(tài)的語(yǔ)法之間的關(guān)系，分為互補(bǔ)性和非互補(bǔ)性兩大類。

（5）媒體層面，強(qiáng)調(diào)話語(yǔ)最終在物質(zhì)世界表現(xiàn)的物質(zhì)形式，而這種表現(xiàn)形式可以分為語(yǔ)言的和非語(yǔ)言的兩大類，語(yǔ)言的既包含純語(yǔ)言同時(shí)也包含伴語(yǔ)言;非語(yǔ)言的既涉及身體性的也涉及非身體性的，身體性的是指手勢(shì)、身勢(shì)、面部表情等，非身體性的是指PPT、網(wǎng)絡(luò)平臺(tái)、音響等因素。

根據(jù)Halliday的系統(tǒng)功能語(yǔ)言學(xué)理論框架和和Lim（2004）多模態(tài)話語(yǔ)分析框架，張德祿（2009）提出了多模態(tài)話語(yǔ)分析的綜合理論框架。新的理論框架由四個(gè)層面構(gòu)成，即文化層面，語(yǔ)境層面，內(nèi)容層面和表達(dá)層面。文化層面主要由意識(shí)形態(tài)和體裁構(gòu)成。意識(shí)形態(tài)指人的思維模式、處世哲學(xué)、生活習(xí)慣及一切的社會(huì)潛規(guī)則組成;體裁是指具體可以實(shí)現(xiàn)這種意識(shí)形態(tài)的結(jié)構(gòu)潛勢(shì)或交際程序。文化層面是使多模態(tài)交際成為可能的關(guān)鍵層面。語(yǔ)境層面主要涉及話語(yǔ)范圍、話語(yǔ)基調(diào)、話語(yǔ)方式同時(shí)實(shí)現(xiàn)所選擇的體裁。在具體的交際環(huán)境中，交際要受到語(yǔ)境因素的制約，其中包括由話語(yǔ)范圍、話語(yǔ)基調(diào)和話語(yǔ)方式?jīng)Q定的語(yǔ)境因素;除此之外，在交際過(guò)程中還要實(shí)現(xiàn)所選擇的體裁，而這個(gè)過(guò)程要以一定的交際模式進(jìn)行。話語(yǔ)意義層面涉及概念意義、人際意義和謀篇意義，其中概念意義是由話語(yǔ)范圍、話語(yǔ)基調(diào)和話語(yǔ)方式所決定的。在形式層面上，每種模態(tài)都有自己的形式系統(tǒng)，比如我們所熟悉的視覺(jué)語(yǔ)法、聽(tīng)覺(jué)語(yǔ)法、觸覺(jué)語(yǔ)法等，

通過(guò)對(duì)比分析可以得出多模態(tài)話語(yǔ)分析綜合理論框架較系統(tǒng)功能語(yǔ)言學(xué)理論框架更加的完善，操作性更強(qiáng)。新的理論框架前兩個(gè)層面保持不變，意義和形式層面在心得理論框架中歸結(jié)為一個(gè)層面，即內(nèi)容層面，這不僅僅只是對(duì)兩個(gè)層面進(jìn)行歸納總結(jié)，更重要的是對(duì)意義和形式層面的認(rèn)知變化;而將媒體層面上升到表達(dá)層面更是體現(xiàn)了人類對(duì)語(yǔ)言發(fā)展有了更加深刻的了解和清晰的認(rèn)識(shí)：所有的媒體系統(tǒng)都是為語(yǔ)言表達(dá)提供大量新的可選擇方式。而整個(gè)理論框架的結(jié)構(gòu)顯示出不管是文化、語(yǔ)境、內(nèi)容，其最終目的都是為了語(yǔ)言表達(dá)，這也是此框架的最主要功能。

3、多模態(tài)話語(yǔ)分析理論框架的聯(lián)系和區(qū)別

目前利用多模態(tài)話語(yǔ)分析框架對(duì)多模態(tài)話語(yǔ)的研究雖然進(jìn)行得如火如荼，但是很少有學(xué)者提到各個(gè)理論框架之間具體有什么聯(lián)系，只是一概而論的提到某個(gè)框架是基于某個(gè)理論而建立起來(lái)的，對(duì)于基于理論中的具體部分卻很模糊?；谝陨嫌^察，本文將對(duì)目前大多數(shù)文獻(xiàn)中應(yīng)用到的幾種多模態(tài)話語(yǔ)分析理論框架進(jìn)行更加詳細(xì)的介紹并會(huì)指出各個(gè)理論框架之間的聯(lián)系和區(qū)別。本文將以Jewitt （2009b）提出的三種多模態(tài)話語(yǔ)分析方法為指導(dǎo)進(jìn)行闡釋，即社會(huì)符號(hào)學(xué)研究方法、系統(tǒng)功能語(yǔ)法的多模態(tài)話語(yǔ)分析方法和多模態(tài)互動(dòng)分析方法。

社會(huì)符號(hào)學(xué)研究方法最早由Kress和van Leeuwen （1996）提出，在此研究方法中應(yīng)用于多模態(tài)話語(yǔ)分析最多的理論框架即為視覺(jué)語(yǔ)法，此語(yǔ)法認(rèn)為再現(xiàn)意義、互動(dòng)意義和構(gòu)圖意義構(gòu)成了圖像。而這三種意義是基于Halliday的系統(tǒng)功能語(yǔ)法建立起來(lái)的，準(zhǔn)確地說(shuō)是建立在功能語(yǔ)法的基礎(chǔ)上，根據(jù)Halliday（2008b）語(yǔ)篇的功能可分為概念功能、交際功能、語(yǔ)篇功能。因此，社會(huì)符號(hào)學(xué)視角下的視覺(jué)語(yǔ)法和系統(tǒng)功能語(yǔ)言學(xué)中的功能語(yǔ)法有了密切聯(lián)系：視覺(jué)語(yǔ)法中圖像的再現(xiàn)意義對(duì)應(yīng)功能語(yǔ)法中的概念功能，再現(xiàn)意義是指圖像中的各種符號(hào)模態(tài)，如文字、圖案、意象等;視覺(jué)語(yǔ)法中的互動(dòng)意義與功能語(yǔ)法中的人際意義相對(duì)應(yīng)，而圖像的觀看者、制作者及圖像中的各種模態(tài)相互作用的關(guān)系構(gòu)成了互動(dòng)意義;視覺(jué)語(yǔ)法中的構(gòu)圖意義與功能語(yǔ)法中的語(yǔ)篇功能相對(duì)應(yīng)，構(gòu)圖意義由互動(dòng)元素和表征元素的協(xié)同作用構(gòu)成。以上則為視覺(jué)語(yǔ)法和功能語(yǔ)法的聯(lián)系，而它們之間的區(qū)別則是視覺(jué)語(yǔ)法是在社會(huì)符號(hào)學(xué)理論中發(fā)展起來(lái)的，而功能語(yǔ)法則屬于系統(tǒng)功能語(yǔ)言學(xué)的一部分。

系統(tǒng)功能語(yǔ)法的多模態(tài)話語(yǔ)分析方法則是來(lái)源與Halliday的系統(tǒng)功能語(yǔ)法，基于這一研究方法，張德祿（2009）提出了系統(tǒng)功能語(yǔ)法視角下多模態(tài)話語(yǔ)分析的綜合框架，此理論框架是對(duì)語(yǔ)言和圖像所形成的多模態(tài)話語(yǔ)的分析框架，可以用來(lái)解決語(yǔ)篇中不同模態(tài)的分布呈現(xiàn)出哪些特征等問(wèn)題。

視覺(jué)語(yǔ)法框架和多模態(tài)話語(yǔ)分析綜合框架都與系統(tǒng)功能語(yǔ)言學(xué)密切相關(guān)。

多模態(tài)互動(dòng)分析方法的理論基礎(chǔ)是Scollon關(guān)于中介話語(yǔ)和實(shí)踐結(jié)點(diǎn)分析的研究，同時(shí)也是對(duì)互動(dòng)社會(huì)語(yǔ)言學(xué)和社會(huì)符號(hào)學(xué)的多模態(tài)相關(guān)研究。在此分析模式和系統(tǒng)功能語(yǔ)言學(xué)理論的結(jié)合下，一個(gè)新的多層次多模態(tài)互動(dòng)分析綜合框架出現(xiàn)在人們的視野中（張德祿，2009）。但是目前互動(dòng)分析綜合框架還處于初級(jí)階段，應(yīng)用此框架進(jìn)行語(yǔ)言現(xiàn)象分析的文章很少，這為語(yǔ)言分析今后的發(fā)展提供了一個(gè)新的方向。

綜上所述，適用于多模態(tài)話語(yǔ)分析的理論框架來(lái)自三個(gè)研究方向：社會(huì)符號(hào)學(xué)研究視角、系統(tǒng)功能語(yǔ)法研究視角、多模態(tài)互動(dòng)分析研究視角。在有著明顯區(qū)別的同時(shí)各個(gè)研究方向之間又有者密切聯(lián)系：社會(huì)符號(hào)學(xué)視角下的視覺(jué)語(yǔ)法與系統(tǒng)功能語(yǔ)言學(xué)中功能語(yǔ)法一一對(duì)應(yīng)，而多模態(tài)話語(yǔ)分析綜合框架則是對(duì)系統(tǒng)功能語(yǔ)法的提煉升華;以多模態(tài)互動(dòng)理論的分析模式為基礎(chǔ)，多層次多模態(tài)互動(dòng)分析綜合框架結(jié)合系統(tǒng)功能語(yǔ)法的相關(guān)部分而形成。由此可以得出，適用于多模態(tài)話語(yǔ)分析的理論框架之間有著明顯區(qū)別外還有著密切的關(guān)聯(lián)。

參考文獻(xiàn)：

[1]黃國(guó)文.韓禮德系統(tǒng)功能語(yǔ)言學(xué)40年發(fā)展述評(píng)[J].外語(yǔ)教學(xué)與研究，2000（01）：15-21+78.

[2]張德祿.多模態(tài)話語(yǔ)分析綜合理論框架探索[J].中國(guó)外語(yǔ)，2009，6（01）：24-30.

[3]Jewitt，C. Different approaches to multimodality [C].In C. Jewitt （ed）. The Routledge Handbook of Multimodal Analysis[C].London & New York： Routledge， 2009b：28-39.

[4]Matthiessen， C. M. I. M. The “architecture” of language according to systemic functional theory： developments since the 1970 [A]. In R. Hasan， C. M. I. M. Matthiessen & J. Webster（eds）. Continuing Discourse on Language： A Functional Perspective（Vol. 2）[C].London： Equinox， 2007： 505-561.

[5]Kress， G. & T. van Leeuwen. Reading Images： The Grammar of Visual Design[M] . London： Routledge， 1996.

[6]Halliday， M. A. K. Complementarities in Language[M].北京： 商務(wù)印書(shū)館， 2008b.