視聽訓(xùn)練在日本學(xué)習(xí)者漢語焦點(diǎn)重音產(chǎn)出中的作用

張勁松，吳 靜，王穎陽

（1.北京語言大學(xué)漢語國際教育研究院，北京100083；2.北京語言大學(xué)信息科學(xué)學(xué)院，北京100083）

1.引言

1.1 焦點(diǎn)與重音

焦點(diǎn)（focus）和重音（accent）是兩個(gè)不同領(lǐng)域的術(shù)語。焦點(diǎn)是句法語義學(xué)層面的概念，國內(nèi)外學(xué)者對(duì)這一概念的定義不盡相同，Ladd（1980）認(rèn)為，焦點(diǎn)是語句中需要強(qiáng)調(diào)、突出的信息，根據(jù)語境又可以分為寬焦點(diǎn)和窄焦點(diǎn)。寬焦點(diǎn)是指整個(gè)句子都是焦點(diǎn)，而窄焦點(diǎn)是指句中的某個(gè)成分作為焦點(diǎn)。重音是韻律層面的概念，通常認(rèn)為，重音是發(fā)音時(shí)比較用力且在語流中聽起來相比其他音節(jié)更為突出的音節(jié)（林燾，1992），根據(jù)其作用范圍可被稱為詞、短語或句重音。焦點(diǎn)的實(shí)現(xiàn)手段有詞匯、句法及語音等形式，其中句重音是窄焦點(diǎn)的主要實(shí)現(xiàn)形式，亦稱為焦點(diǎn)重音（focal accent，曹文，2010），它是人們語音交際中常用的重要手段。

從語音的聲學(xué)表現(xiàn)來看，前人研究表明，漢語焦點(diǎn)重音具有“三區(qū)段”特征（趙元任，1968；曹文，2010；Xu，1999，2001；王蓓，2002；賈媛，2008），當(dāng)焦點(diǎn)音節(jié)的聲調(diào)為含有高音點(diǎn)的一、二、四聲時(shí)，高音點(diǎn)上升且調(diào)域擴(kuò)大；焦點(diǎn)后音高驟降且調(diào)域壓縮，焦點(diǎn)前音高變化不大。當(dāng)焦點(diǎn)音節(jié)為缺少高音點(diǎn)的三聲時(shí)，大家報(bào)告的聲學(xué)線索則有不同的看法：Xu（1999）發(fā)現(xiàn)焦點(diǎn)三聲的低音點(diǎn)明顯下降，王蓓（2002）則認(rèn)為三聲負(fù)載重音時(shí)雖有低音點(diǎn)下降但更多的表現(xiàn)為相鄰音節(jié)的上升，賈媛（2008）則得出了焦點(diǎn)三聲變化復(fù)雜沒有規(guī)律性的結(jié)論。除了音高特征外，時(shí)長變化也是焦點(diǎn)重音的是重要輔助手段：大家一般都傾向于認(rèn)為焦點(diǎn)音節(jié)往往時(shí)長顯著加長（趙元任，1968；Xu，1999；賈媛，2008），而曹文（2010）則認(rèn)為時(shí)長是音高的輔助手段，音高受限時(shí)時(shí)長會(huì)作彌補(bǔ)手段，音高特征存在時(shí)則有加強(qiáng)重音的作用。

1.2 研究背景

以往的研究顯示在對(duì)外漢語教學(xué)實(shí)踐中，焦點(diǎn)重音的教學(xué)是最薄弱的環(huán)節(jié)之一（魯健驥，1984）。無論是母語語調(diào)為節(jié)奏重音的英語母語學(xué)習(xí)者（Chen，2012）、亦或音高重音的日語母語學(xué)習(xí)者（朱川，1997；肖瑤，2018）、或者聲調(diào)語言的泰語母語學(xué)習(xí)者（劉妍李，2009；王功平，2018），甚或漢語方言之一的粵語學(xué)習(xí)者（魯莎莎，2014）等，他們?cè)趯W(xué)習(xí)漢語的焦點(diǎn)重音時(shí)都存在困難，表現(xiàn)出焦點(diǎn)重音音高升幅較小、時(shí)長延長不足和少有音高落差等問題（陳文芷，1981；楊立明，1989；肖瑤，2018）。焦點(diǎn)重音產(chǎn)出不到位問題被認(rèn)為是“洋腔洋調(diào)”的重要原因（魯健驥，1984；曹文，2010），改善重音教學(xué)效果是對(duì)外漢語教學(xué)的重要要求。

針對(duì)留學(xué)生在漢語焦點(diǎn)重音產(chǎn)出中存在的問題，已有的研究主要從以下兩個(gè)方面尋找解決方法：

（1）語音學(xué)知識(shí)講解為先：在向?qū)W生講清楚焦點(diǎn)重音的語音特點(diǎn)基礎(chǔ)上再進(jìn)行焦點(diǎn)重音的產(chǎn)出教學(xué)（曹文，2010；林茂燦，2015）。

（2）聽覺模仿為主：在課堂教學(xué)實(shí)踐中，以聽覺模仿為主，試圖用比較法和模仿法來幫助學(xué)生產(chǎn)出焦點(diǎn)重音（林燾，1996；李曉朋，2012）。

以上的語調(diào)教學(xué)方法主要適用于課堂教學(xué)。囿于課堂教學(xué)中教師與學(xué)生“一對(duì)多”的模式，這些方法耗時(shí)耗力且很難大范圍推廣。并且學(xué)生的語音練習(xí)大都發(fā)生在課堂之外，單憑關(guān)于焦點(diǎn)重音的理論知識(shí)以及聽覺模仿方式，學(xué)生難以自檢產(chǎn)出焦點(diǎn)正確與否，進(jìn)而影響到其對(duì)于語調(diào)產(chǎn)出的掌握。

近年來，隨著計(jì)算機(jī)語音技術(shù)發(fā)展，人們提出了利用人機(jī)交互方式，以實(shí)時(shí)圖形的方式給出語音語調(diào)的視覺反饋，從而達(dá)到幫助學(xué)生不僅可以聽到，還可以“看到”語調(diào)的目的，引導(dǎo)學(xué)生理解、模仿并掌握二語的語調(diào)。例如Anderson-Hsieh（1992）使用Visi-Pitch軟件讓學(xué)生同時(shí)對(duì)比教師和自己的基頻曲線，通過修正二者之間的差異改善英語語調(diào)產(chǎn)出；Minematsu（2017）提出了一個(gè)日語語調(diào)視覺反饋教學(xué)系統(tǒng)，可以實(shí)時(shí)對(duì)比基于語音合成系統(tǒng)生成的基頻輪廓和學(xué)生的發(fā)音參數(shù)，引導(dǎo)學(xué)生進(jìn)行日語語調(diào)練習(xí)；Ding（2016）提出一種突出語調(diào)特征的可視化方案，可以用于研究及幫助二語學(xué)習(xí)者產(chǎn)出英語作為二語的語調(diào)。

相對(duì)于其他語言，針對(duì)基于實(shí)時(shí)圖形視覺反饋的漢語語調(diào)教學(xué)研究則幾乎是空白。曹文、王瑞（2010）曾經(jīng)提出過利用音高曲線示意圖的漢語雙音節(jié)句焦點(diǎn)重音的教學(xué)方案，不過并沒有付諸教學(xué)實(shí)踐。由于漢語是聲調(diào)語言，音高曲線不僅受到語調(diào)重音的影響，還要受到聲調(diào)的調(diào)制，其可視化設(shè)計(jì)方案設(shè)計(jì)需要在表達(dá)語調(diào)作用之外，還要考慮聲調(diào)的影響。能否設(shè)計(jì)出一套有效的可視化方案，尚是一個(gè)挑戰(zhàn)。

基于以上考慮，本文以日本留學(xué)生為對(duì)象，研究可視化方法在漢語焦點(diǎn)重音訓(xùn)練中的應(yīng)用，具體問題包括以下幾個(gè)方面：（1）能否基于漢語焦點(diǎn)重音的聲學(xué)表現(xiàn)設(shè)計(jì)一套有效的可視化方案？（2）視聽訓(xùn)練能否幫助日本學(xué)生改善焦點(diǎn)重音的產(chǎn)出？（3）基于可視化的視聽訓(xùn)練與傳統(tǒng)的聽覺模仿訓(xùn)練是否存在差異？如果存在那么差異又有什么具體表現(xiàn)？

2.漢語焦點(diǎn)重音的即時(shí)視覺反饋方案設(shè)計(jì)

針對(duì)語音語調(diào)的即時(shí)可視化視覺反饋方案，目前主要分為兩類：一類是計(jì)算機(jī)實(shí)時(shí)提取學(xué)習(xí)者的聲學(xué)參數(shù)并以圖形形式展示給學(xué)生，目前主要是反饋語音的基頻輪廓曲線，如Minematsu et al.（2017）的工作；另一類則是在聲學(xué)參數(shù)的基礎(chǔ)上進(jìn)一步提取與音系特征有關(guān)的物理參數(shù)，再以特征凸顯的方式示意給學(xué)生，例如在Ding（2016）的工作中，他們以“圓圈”圖案表征每個(gè)音節(jié)，圓心的高度代表音節(jié)的平均音高，圓圈的直徑代表音節(jié)的絕對(duì)時(shí)長。

比較上述兩種視覺化方案，我們認(rèn)為音系特征凸顯示意方案更加合理。原因在于：一方面受限于學(xué)習(xí)者的語言能力和認(rèn)知能力，輸入語音中充滿了眾多的變量，如詞匯、語法、音段、音高、時(shí)長、停延、能量等等，學(xué)習(xí)者難以即時(shí)處理語音頻譜及基頻輪廓曲線中眾多的聲學(xué)變量，從而影響學(xué)習(xí)的效果。另一方面，特征凸顯原則是語音教學(xué)中被證明為行之有效的教學(xué)原則，例如李曉朋（2012）就認(rèn)為教師應(yīng)將夸張法與模仿法相結(jié)合，在示范重音發(fā)音時(shí)應(yīng)將重音音節(jié)的音高和時(shí)長過分提高或增長，使學(xué)生留下深刻印象。因此，我們提出借鑒Ding（2016）中所使用的語調(diào)方案，根據(jù)漢語特點(diǎn)稍作修正，用于漢語焦點(diǎn)重音訓(xùn)練的視覺反饋。

i.在時(shí)間橫軸-音高縱軸的xy二維平面上以圓圈代表漢語音節(jié)；

ii.圓圈圓心的x值代表音節(jié)在句中的序列號(hào)，y代表聲調(diào)的特征點(diǎn)音高值。聲調(diào)一、二、四聲取高音點(diǎn)，三聲則取低音點(diǎn)；

iii.圓圈的直徑大小代表音節(jié)的時(shí)間長短；

iv.音高采用半音表示，且教師模板采取男性、女性兩套發(fā)音人數(shù)據(jù)，用于減小說話人調(diào)域差異的影響；

v.時(shí)長采用相對(duì)時(shí)長表示，用于克服語速、音段、不正常停頓所造成的影響。

音高的赫茲-半音轉(zhuǎn)換公式如下：

其中St表示半音，f0表示基頻值，fref表示話者調(diào)域基頻下限值。

相對(duì)時(shí)長的計(jì)算公式如下：

其中i、j表示音節(jié)序號(hào)，di、dj表示第i、j個(gè)音節(jié)的時(shí)長，dri表示第i個(gè)音節(jié)的相對(duì)時(shí)長。需要說明的是，二語學(xué)習(xí)者的語音中經(jīng)常有不正常的停頓，這部分時(shí)間被剔除在總時(shí)長的計(jì)算之外。

音節(jié)的時(shí)間切分信息來自于語音識(shí)別系統(tǒng)。學(xué)生的語音輸入計(jì)算機(jī)后，即經(jīng)由語音識(shí)別系統(tǒng)進(jìn)行強(qiáng)制對(duì)齊處理，得到聲母、韻母層級(jí)的對(duì)齊信息，進(jìn)而得到各音節(jié)的相對(duì)時(shí)長參數(shù)。

圖1 給出了一個(gè)我們所開發(fā)的焦點(diǎn)重音可視化訓(xùn)練的交互界面示意圖。在圖中我們可以看到：界面分為三個(gè)部分，上部是同文異焦錄音文本提示框，A 句為語境提示信息，B 句為發(fā)音文本，其中焦點(diǎn)詞以紅色提醒，按錄音按鈕即可錄入聲音；左下部為教師標(biāo)準(zhǔn)發(fā)音語調(diào)示意圖，學(xué)生會(huì)被事先提醒注意高音點(diǎn)、音高落差及相對(duì)時(shí)長等主要聲學(xué)特征，下面的播放按鈕按下后會(huì)播放教師的發(fā)音；右下部為學(xué)生發(fā)音的語調(diào)示意圖，在學(xué)生錄音后即時(shí)呈現(xiàn)，供學(xué)生對(duì)比本次發(fā)音與標(biāo)準(zhǔn)音的相似與否，其下的播放按鈕按下后可重復(fù)播放錄入的聲音。

3.實(shí)驗(yàn)一：視聽方案合理性驗(yàn)證實(shí)驗(yàn)

為了評(píng)估上述所提焦點(diǎn)重音可視化方案的合理性，我們進(jìn)行了基于視覺信息的焦點(diǎn)聲學(xué)特征驗(yàn)證實(shí)驗(yàn)?；痉椒ㄊ窃谌鐖D1 所示的顯示界面上，文本框給出同文異焦文本，在左右兩個(gè)語調(diào)示意框內(nèi)給出兩個(gè)不同的焦點(diǎn)聲學(xué)示意圖，讓漢語母語被試判斷哪一個(gè)為同文異焦句B 文本對(duì)應(yīng)的語音特征。本次實(shí)驗(yàn)不提供語音信號(hào)作聽辨用。

圖1：焦點(diǎn)重音可視化訓(xùn)練方案示意圖

3.1 實(shí)驗(yàn)語料

實(shí)驗(yàn)語料為同文異焦句（吳宗濟(jì)，2004）?？紤]到雙音節(jié)組合是語調(diào)的基本單元，且雙音節(jié)可以蘊(yùn)含句子的重音/焦點(diǎn)分布信息，可被認(rèn)為是“語調(diào)核心單元”（曹文，2006），語料從雙音節(jié)句入手，共有雙音節(jié)句和三音節(jié)句。又因考慮到三聲作為焦點(diǎn)時(shí)的聲學(xué)表現(xiàn)在前人的研究中沒有一致的結(jié)論，且三聲低音點(diǎn)難以精準(zhǔn)測(cè)量，本文實(shí)驗(yàn)的聲調(diào)組合中排除三聲。如此，雙音節(jié)句中有9 種組合，涉及兩種焦點(diǎn)狀態(tài)（前焦、末焦），共18（=9×2）句話，三音節(jié)句首、末音節(jié)同調(diào)，可表示為TXT，其中T=｛一聲，二聲，四聲｝，X=｛一聲，二聲，四聲｝，三音節(jié)句中有9 種組合，涉及三種焦點(diǎn)狀態(tài)（前焦、中焦、末焦），共27（=9×3）句話，實(shí)驗(yàn)語料總共45（=18+27）個(gè)短句。

3.2 實(shí)驗(yàn)被試

本次實(shí)驗(yàn)被試為10 名普通話水平二級(jí)甲等及以上的中國北方人，均為北京語言大學(xué)學(xué)生，平均年齡26 歲，皆無聽力障礙。其中，男性4 名，女性6 名。

3.3 實(shí)驗(yàn)過程

實(shí)驗(yàn)界面由PowerPoint 呈現(xiàn)，屏幕內(nèi)容如圖1 所示，要求被試在沒有音頻輔助的情況下選出文本所對(duì)應(yīng)的可視化圖形。在正式實(shí)驗(yàn)之前，有關(guān)于漢語焦點(diǎn)重音聲學(xué)表現(xiàn)知識(shí)的簡單培訓(xùn)以及少量適應(yīng)性質(zhì)的練習(xí)。

3.4 實(shí)驗(yàn)結(jié)果

10 名被試關(guān)于圖示信息判斷結(jié)果的正確率如圖2 所示，個(gè)人正確率在88%到100%之間，平均值為96%。

圖2：漢語母語者判斷正確率

3.5 討論

驗(yàn)證實(shí)驗(yàn)結(jié)果顯示，母語者可以僅憑借可視化程序所呈現(xiàn)的圖形來準(zhǔn)確判斷漢語焦點(diǎn)所在的位置（實(shí)驗(yàn)中96%的準(zhǔn)確率），這表明本文所使用的焦點(diǎn)可視化方案能夠有效地作為焦點(diǎn)的視覺表征。我們?nèi)绻褂迷摽梢暬桨缸鳛榻裹c(diǎn)重音訓(xùn)練的視覺提示線索，作為留學(xué)生語音學(xué)習(xí)過程中的視覺反饋，應(yīng)該能夠起到“可理解性輸入”特征的作用（Krashen，1981）。根據(jù)Krashen 的輸入假說理論，這種特征作為略高于學(xué)習(xí)者現(xiàn)有水平的可理解性輸入，可以激活學(xué)習(xí)者已有的知識(shí)，將能夠幫助學(xué)習(xí)者理解所學(xué)內(nèi)容并最終提高語言能力。

4.實(shí)驗(yàn)二：日本學(xué)生焦點(diǎn)重音的視聽訓(xùn)練與聽覺訓(xùn)練

為了考察上文所提出的焦點(diǎn)重音視覺反饋方案對(duì)于留學(xué)生習(xí)得漢語重音的作用，我們開展了基于此方案的重音視聽訓(xùn)練實(shí)驗(yàn)。為了對(duì)比，我們做了另外兩組對(duì)照實(shí)驗(yàn)，一組聽覺組參加傳統(tǒng)聽覺模仿的重音訓(xùn)練實(shí)驗(yàn)，另一組普通對(duì)照組則只參加實(shí)驗(yàn)的測(cè)試。

4.1 實(shí)驗(yàn)方法

4.1.1 實(shí)驗(yàn)語料

實(shí)驗(yàn)語料分為訓(xùn)練語料、測(cè)試語料和泛化測(cè)試語料三部分，設(shè)計(jì)思路與實(shí)驗(yàn)一基本一致，均為同文異焦句和與之同文本的自然焦點(diǎn)句?；诮虒W(xué)“由易到難”的原則，訓(xùn)練語料按句子長度分為雙音節(jié)、三音節(jié)和五音節(jié)句。其中，雙音節(jié)句共9 種組合，焦點(diǎn)模式分前、后及無三種，總計(jì)27 句話（=9×3）；三音節(jié)句為首、末音節(jié)同調(diào)的TXT 格式，共9 種組合設(shè)計(jì)，36 句話（=9×4）。五音節(jié)句不可避免地涉及到詞重音，同樣被設(shè)計(jì)為首、末雙音節(jié)同調(diào)，可表示為TT`XTT`，其中T/T`=｛一聲，二聲，四聲｝，共9 種組合設(shè)計(jì)，36 句話（=9×4），X 被固定為高平調(diào)“飛”，選用高平調(diào)的原因是：可以幫助日本學(xué)生最大程度地練習(xí)聲調(diào)的升高與降低。因此訓(xùn)練語料總共99（=27+36+36）句。測(cè)試語料與訓(xùn)練語料結(jié)構(gòu)相同（均為同文異焦句），數(shù)量相同但所選音節(jié)不同。

音節(jié)的選取遵循以下原則：（1）選HSK5級(jí)以下較為簡單的詞匯和漢字；（2）盡量不選日本學(xué)生習(xí)得困難的聲韻母，如后鼻音韻尾，輔音 l、r、zh、ch、sh 等。

為了避免訓(xùn)練過程中的練習(xí)效應(yīng)，在訓(xùn)練結(jié)束后，通過17 個(gè)同文異焦句對(duì)被試進(jìn)行泛化測(cè)試。泛化測(cè)試語料與測(cè)試語料相比，或是句子結(jié)構(gòu)相同但音節(jié)數(shù)不同，或是句子結(jié)構(gòu)和音節(jié)數(shù)均不同。

4.1.2 被試

實(shí)驗(yàn)被試為24 名北京語言大學(xué)在讀日本留學(xué)生，均出生于日本，母語為日語，學(xué)習(xí)漢語 1～3 年，HSK 水平 4～5 級(jí)，平均年齡 22 歲，均無聽力障礙。他們被隨機(jī)平均分配到視聽組、聽覺組及對(duì)照組中。其中，視聽組有8 名被試 （2 男 6 女），聽覺組有8 名被試 （2 男6女），對(duì)照組有8 名被試（1 男7 女）。

4.1.3 實(shí)驗(yàn)流程

整個(gè)實(shí)驗(yàn)采用“前測(cè)-中測(cè)-后測(cè)”的設(shè)計(jì)，流程示意圖如圖3 所示。實(shí)驗(yàn)周期為8天，第1 天、第8 天僅做測(cè)試，其余6 天兩個(gè)訓(xùn)練組每天進(jìn)行45 分鐘左右的視聽或聽覺訓(xùn)練，對(duì)照組則不參與任何訓(xùn)練，第4 天訓(xùn)練后加做一次中間測(cè)試。具體內(nèi)容如下：

圖3：實(shí)驗(yàn)流程示意圖圖

·培訓(xùn)：三組被試皆參加實(shí)驗(yàn)前的培訓(xùn)。由實(shí)驗(yàn)主試借助Praat 軟件對(duì)其進(jìn)行漢語聲調(diào)音高特征、焦點(diǎn)重音聲學(xué)特征、語音感知、焦點(diǎn)產(chǎn)出測(cè)試等基本知識(shí)和概念進(jìn)行指導(dǎo)。

·前測(cè)/中測(cè)/后測(cè)：被試依據(jù)測(cè)試語料的同文異焦句文本進(jìn)行錄音，保存為16K 采樣率的wav 文件。錄音在安靜的錄音室進(jìn)行。

·泛化測(cè)：被試依據(jù)泛化測(cè)試語料錄音，保存為wav 文件。

·視聽/聽覺訓(xùn)練：訓(xùn)練時(shí)，每個(gè)句子的引導(dǎo)界面如圖4 所示，界面提供引導(dǎo)句文本、語音提問、以及增加語境自然度的相關(guān)圖片。學(xué)生錄入自己的發(fā)音后，聽覺組可以對(duì)比標(biāo)準(zhǔn)發(fā)音和自己的差異，反復(fù)練習(xí)；視聽組則進(jìn)入圖1 所示的焦點(diǎn)重音可視化訓(xùn)練界面，再進(jìn)行對(duì)比練習(xí)。訓(xùn)練期間，主試在旁監(jiān)督，如果有音段或聲調(diào)錯(cuò)誤，則予以指出讓被試改正。

泛化測(cè)結(jié)束后，我們對(duì)三組被試進(jìn)行了問卷調(diào)查，問題主要圍繞著關(guān)于產(chǎn)出焦點(diǎn)重音的意識(shí)、自我滿意度等主觀感受。

4.2 實(shí)驗(yàn)數(shù)據(jù)處理

通過母語者聽辨、聲學(xué)參數(shù)分析、被試問卷調(diào)查三種方法對(duì)母語者及日本被試的前測(cè)、中測(cè)、后測(cè)和泛化測(cè)數(shù)據(jù)進(jìn)行分析。

·母語者聽辨：日本被試每個(gè)句子焦點(diǎn)表達(dá)的正確與否，由3 名語言學(xué)專業(yè)的漢語母語者通過聽辨來判斷，三人不一致的情況下采用少數(shù)服從多數(shù)原則。

·聲學(xué)參數(shù)分析：提取以下音高和時(shí)長參數(shù)來考察日本被試的焦點(diǎn)重音產(chǎn)出的發(fā)展情況。

圖4：訓(xùn)練引導(dǎo)界面示意圖

·焦點(diǎn)音節(jié)相對(duì)時(shí)長的話者規(guī)一化z分?jǐn)?shù)

·被試問卷調(diào)查：統(tǒng)計(jì)問卷調(diào)查的被試主觀感受。

·統(tǒng)計(jì)檢驗(yàn)：以重復(fù)測(cè)量方差分析及事后多重比較分析為主。

4.3 實(shí)驗(yàn)結(jié)果分析

4.3.1 焦點(diǎn)重音產(chǎn)出情況分析

基于漢語母語者的聽辨結(jié)果，圖5 給出了日本被試焦點(diǎn)重音產(chǎn)出錯(cuò)誤率。圖中橫軸表示不同的測(cè)試階段，縱軸表示錯(cuò)誤率。整體而言，兩組訓(xùn)練組（視聽、聽覺）的產(chǎn)出錯(cuò)誤率在中測(cè)、后測(cè)階段都顯著下降，而對(duì)照組則趨勢(shì)平緩，變化較小。比較兩組訓(xùn)練組，則試聽組錯(cuò)誤率下降幅度更大。

對(duì)視聽組和聽覺組的數(shù)據(jù)進(jìn)行事后多重比較分析，結(jié)果顯示，前測(cè)和中測(cè)（t=0.520，p=0.045；t=0.48，p=0.001），前測(cè)和后測(cè)（t=0.625，p=0.01；t=0.49，p=0.001） 均存在顯著性差異，中測(cè)和后測(cè)（t=0.105，p=0.473；t=0.01，p=0.802）均不存在顯著性差異。分別對(duì)前測(cè)、中測(cè)及后測(cè)這三個(gè)時(shí)間點(diǎn)上的數(shù)據(jù)進(jìn)行分析，結(jié)果發(fā)現(xiàn)，在前測(cè)時(shí)，三組均無顯著性差異，在中測(cè)時(shí)，視聽組與對(duì)照組存在顯著性差異（p=0.003），視聽組與聽覺組無顯著性差異（p=0.496），在后測(cè)時(shí)，視聽組與聽覺組、視聽組與對(duì)照組均存在顯著性差異（p=0.011，p=0.001）。

圖5：三組被試前、中、后測(cè)焦點(diǎn)重音產(chǎn)出錯(cuò)誤率

泛化測(cè)試的正確率如圖6 所示，視聽組、聽覺組與對(duì)照組的正確率分別為91%、72%和54%，統(tǒng)計(jì)分析的結(jié)果發(fā)現(xiàn)視聽組與對(duì)照組差異顯著（p=0.006），但聽覺組與對(duì)照組之間無顯著性差異。

以上結(jié)果表明，在訓(xùn)練日本學(xué)生產(chǎn)出漢語焦點(diǎn)重音的實(shí)驗(yàn)中，視聽訓(xùn)練優(yōu)于聽覺訓(xùn)練，這種優(yōu)勢(shì)在中測(cè)時(shí)就已顯現(xiàn)，在后測(cè)時(shí)達(dá)到最大化，并且這種產(chǎn)出效果可以泛化到新的句子結(jié)構(gòu)中。

圖6：視聽組、聽覺組與對(duì)照組泛化測(cè)正確率

4.3.2 聲學(xué)參數(shù)分析

為了考查視聽訓(xùn)練及聽覺訓(xùn)練在提高漢語焦點(diǎn)重音產(chǎn)出中的具體表現(xiàn)，以下從焦點(diǎn)音節(jié)高音點(diǎn)、調(diào)域、時(shí)長三個(gè)方面的聲學(xué)參數(shù)展開討論，下文圖7～9 中橫軸皆表示不同測(cè)試階段，縱軸表示經(jīng)規(guī)一化處理的聲學(xué)數(shù)據(jù)。

（1）焦點(diǎn)音節(jié)高音點(diǎn)發(fā)展變化

焦點(diǎn)音節(jié)高音點(diǎn)z 分?jǐn)?shù)的發(fā)展變化如圖7所示?？傮w而言，視聽組、聽覺組和對(duì)照組都呈上升趨勢(shì)，視聽組上升幅度最大，聽覺組在中測(cè)時(shí)達(dá)到最大值，隨后基本保持不變，對(duì)照組的上升幅度最小。視聽組在中測(cè)時(shí)已達(dá)到母語者水平，并在后測(cè)時(shí)達(dá)到最優(yōu)訓(xùn)練效果，聽覺組在后測(cè)時(shí)也達(dá)到母語者水平，但與視聽組相比差距較大。

對(duì)各組日本被試的數(shù)據(jù)進(jìn)行事后多重比較分析，結(jié)果顯示，無論是視聽組還是聽覺組，前測(cè)和中測(cè)（p=0.000，p=0.001）均存在顯著性差異，中測(cè)和后測(cè)（p=0.238，p=0.857） 均不存在顯著性差異。分別對(duì)前、中、后測(cè)這三個(gè)時(shí)間點(diǎn)上的數(shù)據(jù)作統(tǒng)計(jì)分析，結(jié)果顯示，前測(cè)時(shí)三組被試與母語者（p = 0.000，p = 0.000，p = 0.000） 均差異顯著，中測(cè)時(shí)視聽組與聽覺組、視聽組與母語組無顯著差異，后測(cè)時(shí)視聽組、聽覺組分別與母語者差異不顯著，但視聽組與聽覺組（p=0.008）差異顯著。

圖7：焦點(diǎn)音節(jié)高音點(diǎn)發(fā)展變化圖

以上結(jié)果說明，視聽訓(xùn)練和聽覺訓(xùn)練均能有效幫助被試提高焦點(diǎn)音節(jié)高音點(diǎn)的產(chǎn)出，視聽訓(xùn)練的效果優(yōu)于聽覺訓(xùn)練。對(duì)照組也有提高，但是幅度較小，推測(cè)改善來自于測(cè)試的重復(fù)效應(yīng)。

（2）焦點(diǎn)音節(jié)音域發(fā)展變化

焦點(diǎn)音節(jié)音域z 分?jǐn)?shù)的發(fā)展變化如圖8 所示，三組日本被試呈現(xiàn)出不同的發(fā)展趨勢(shì)。視聽組不斷上升并在后測(cè)時(shí)達(dá)到了母語者的水平，聽覺組先上升后下降，在中測(cè)時(shí)達(dá)到了母語者水平，但在后測(cè)時(shí)回落到最初水平，對(duì)照組基本保持不變。

圖8：焦點(diǎn)音節(jié)音域發(fā)展變化圖

對(duì)日本被試的數(shù)據(jù)進(jìn)行事后多重比較分析，結(jié)果顯示，視聽組前測(cè)和中測(cè)（p=0.013）存在顯著性差異，中測(cè)和后測(cè)不存在顯著性差異，聽覺組前測(cè)和中測(cè)（p=0.000），中測(cè)和后測(cè)（p=0.000）均存在顯著性差異，前測(cè)和后測(cè)不存在顯著性差異。分別對(duì)前、中、后測(cè)這三個(gè)時(shí)間點(diǎn)上的數(shù)據(jù)作多重測(cè)量方差分析，結(jié)果發(fā)現(xiàn)，前測(cè)時(shí)三組被試均與母語者差異顯著，但彼此間差異不顯著，中測(cè)時(shí)視聽組和聽覺組分別與母語者差異不顯著，但聽覺組與視聽組（p=0.039）差異顯著，后測(cè)時(shí)視聽組與母語者之間差異不顯著，但母語組與聽覺組（p=0.000），視聽組與聽覺組 （p = 0.000） 差異顯著。

以上結(jié)果說明，視聽訓(xùn)練可以提高被試焦點(diǎn)音節(jié)音域的產(chǎn)出能力，聽覺訓(xùn)練在短期內(nèi)可以看到效果，但經(jīng)過幾天的訓(xùn)練又迅速退步，可見并不能真正提高被試音域的產(chǎn)出能力。對(duì)照組沒有明顯改善效應(yīng)。

（3）焦點(diǎn)音節(jié)相對(duì)時(shí)長發(fā)展變化

焦點(diǎn)音節(jié)相對(duì)時(shí)長z 分?jǐn)?shù)變化趨勢(shì)如圖9所示，總體的趨勢(shì)為：視聽組基本保持不變，聽覺組于中測(cè)后快速上升，對(duì)照組中測(cè)上升但后測(cè)又回落到較低水平。

對(duì)日本被試的數(shù)據(jù)進(jìn)行重復(fù)測(cè)量方差分析，結(jié)果發(fā)現(xiàn)：視聽組內(nèi)部存在不顯著性差異，聽覺組前測(cè)和后測(cè)之間（p=0.043）、中測(cè)和后測(cè)之間（p=0.038）均存在顯著性差異。分別對(duì)前、中、后測(cè)這三個(gè)時(shí)間點(diǎn)上的數(shù)據(jù)作進(jìn)行重測(cè)量方差分析，結(jié)果發(fā)現(xiàn)，前測(cè)時(shí)三組被試分別與母語者存在顯著差異（p=0.045，p=0.047，p=0.03），中測(cè)時(shí)視聽組與聽覺組分別與母語組存在顯著性差異（p=0.041，p=0.036），但母語者與對(duì)照組之間不存在顯著性差異，后測(cè)時(shí)視聽組、對(duì)照組分別與母語組存在顯著性差異（p=0.036，p=0.043），但母語者與聽覺組之間不存在顯著性差異。

圖9：焦點(diǎn)音節(jié)相對(duì)時(shí)長發(fā)展變化圖

這說明視聽訓(xùn)練不能改善學(xué)習(xí)者的焦點(diǎn)時(shí)長，我們推測(cè)可能是受音高特征影響，被試關(guān)注視點(diǎn)更多在于高音點(diǎn)。聽覺組在中測(cè)時(shí)相對(duì)時(shí)長延長并在后測(cè)時(shí)達(dá)到了類似母語者的水平，一個(gè)可能的原因是他們借助音高來表達(dá)焦點(diǎn)的能力有限，需要用時(shí)長來彌補(bǔ)，形成補(bǔ)償機(jī)制，這與曹文（2010）的結(jié)論相似。對(duì)照組在中測(cè)時(shí)由于掌握了焦點(diǎn)音節(jié)時(shí)長更長這一理論知識(shí)，機(jī)械地將音節(jié)時(shí)長拖長，但在后測(cè)時(shí)回落顯著，不過仍高于前測(cè)，這說明延長焦點(diǎn)音節(jié)時(shí)長對(duì)日本學(xué)生而言并沒有以往研究（史有為，2012）中所認(rèn)為的那么難。

4.3.3 日本學(xué)生反饋分析

圖10 為日本學(xué)生關(guān)于焦點(diǎn)重音產(chǎn)出能力自我評(píng)價(jià)分?jǐn)?shù)的示意圖。橫軸為7 度量表分?jǐn)?shù)，縱軸為三個(gè)組別。三組被試在試驗(yàn)后的評(píng)分均高于訓(xùn)練前，說明視聽訓(xùn)練和聽覺訓(xùn)練均能提高被試的焦點(diǎn)產(chǎn)出能力，視聽訓(xùn)練的效果更優(yōu)，對(duì)照組自我評(píng)價(jià)得分的小幅增長，主要得益于練習(xí)效應(yīng)和實(shí)驗(yàn)前的指導(dǎo)。

圖10：日本學(xué)生焦點(diǎn)重音產(chǎn)出能力自我評(píng)價(jià)分?jǐn)?shù)示意圖

5.總結(jié)和討論

針對(duì)對(duì)外漢語教學(xué)實(shí)踐中焦點(diǎn)重音教學(xué)困難的問題，本文提出了一套突出語調(diào)特征的可視化教學(xué)方案，并以日本留學(xué)生為被試進(jìn)行了教學(xué)實(shí)驗(yàn)，結(jié)果表明使用此套方案進(jìn)行發(fā)音訓(xùn)練的試驗(yàn)組學(xué)生在正確率上取得了顯著改善，表明了該方法的有效性?；貞?yīng)引言中提到的三個(gè)問題，下面進(jìn)行進(jìn)一步的討論。

（1）能否基于漢語焦點(diǎn)重音的聲學(xué)表現(xiàn)設(shè)計(jì)一套有效的可視化方案？

根據(jù)前人研究的結(jié)果，漢語焦點(diǎn)重音的聲學(xué)特征具有“三區(qū)段”特征?；诖颂卣?，我們參照Ding（2016）中的語調(diào)圖示方案，設(shè)計(jì)了凸顯焦點(diǎn)音節(jié)高音點(diǎn)、音節(jié)時(shí)長以及音高落差特點(diǎn)的視覺即時(shí)反饋方案，并通過漢語母語者的視覺辨別實(shí)驗(yàn)，證明此方案有助于母語者準(zhǔn)確判斷漢語焦點(diǎn)的位置。

（2）視聽訓(xùn)練能否幫助日本學(xué)生改善焦點(diǎn)重音的產(chǎn)出？

通過三組被試，我們對(duì)比了視聽訓(xùn)練、聽覺（模仿）訓(xùn)練及無訓(xùn)練三種方式對(duì)于焦點(diǎn)重音產(chǎn)出的影響。實(shí)驗(yàn)結(jié)果表明，無論是視聽訓(xùn)練，還是聽覺訓(xùn)練，效果都顯著好于對(duì)照組，這表明兩種方法都有助于改善焦點(diǎn)重音的產(chǎn)出。在兩種訓(xùn)練方法中，視聽訓(xùn)練取得了更高的正確率，表明參加視聽訓(xùn)練的被試能夠更好地掌握焦點(diǎn)重音正確的產(chǎn)出方式。另外，泛化實(shí)驗(yàn)表明改善的產(chǎn)出能力，還可以泛化到新結(jié)構(gòu)的句子中。

（3）基于可視化的視聽訓(xùn)練與傳統(tǒng)的聽覺模仿訓(xùn)練是否存在差異？如果存在那么差異又有什么具體表現(xiàn)？

實(shí)驗(yàn)中，兩種訓(xùn)練方法都顯著改善了焦點(diǎn)重音的產(chǎn)出正確率，由圖5 可見，兩種訓(xùn)練之后平均錯(cuò)誤率下降都超過50%。不過，二者之間也存在程度差異：聽覺（模仿）訓(xùn)練的改善為51%，視聽訓(xùn)練則為63.5%，視聽法的改善效果顯得更顯著。由圖6 泛化測(cè)的結(jié)果更可見：視聽法結(jié)果的正確率比聽覺（模仿）法高近20%，進(jìn)一步驗(yàn)證了視聽法的優(yōu)越性?？疾煊?xùn)練結(jié)果的細(xì)節(jié)，由圖7 和圖8 可見：視聽法訓(xùn)練對(duì)于提升焦點(diǎn)音節(jié)高音點(diǎn)和音域范圍都持續(xù)有效，而聽覺（模仿）訓(xùn)練法對(duì)于音高這兩個(gè)關(guān)鍵特征在后期都出現(xiàn)了下降和衰退現(xiàn)象。由圖9 的相對(duì)時(shí)長結(jié)果可見：視聽組的時(shí)長特征幾乎沒有改善，而聽覺組則在后期取得了接近漢語母語者的性能。

針對(duì)以上結(jié)果原因開展分析，我們認(rèn)為與以下幾種因素有關(guān)：視聽的多通道性、輸入的可理解性、視覺的監(jiān)控性和選擇性注意。首先，視聽的多通道性認(rèn)為多模態(tài)（視覺、聽覺）的信息有利于促進(jìn)語音的感知和產(chǎn)出。無論是在視聽，還是在聽覺（模仿）訓(xùn)練方法中，系統(tǒng)提供的語音及視覺信息在訓(xùn)練過程中都充當(dāng)了“可理解性輸入”（Krashen，1981）的角色，有利于幫助學(xué)生加強(qiáng)對(duì)于焦點(diǎn)重音聲學(xué)特征的理解，從而有助于提高產(chǎn)出的正確性。相較于單純的教師語音線索，直觀生動(dòng)的焦點(diǎn)重音視覺信息更易于學(xué)生對(duì)于所學(xué)對(duì)象的理解。正如諸多前人的工作所示，基于多模態(tài)信息的視聽訓(xùn)練效果往往優(yōu)于基于單一聲學(xué)刺激的聽覺訓(xùn)練（Massaro，1998；Hardison，2003；Hazan，2005；洪煒，2019）。

其次，雖然在某些前人研究中對(duì)于視覺信息的貢獻(xiàn)尚有異議（賈琳，2013），但是本文所設(shè)計(jì)的焦點(diǎn)重音視聽訓(xùn)練方法不僅僅為學(xué)習(xí)者提供了關(guān)于焦點(diǎn)重音易于理解的多模態(tài)輸入信息，更提供了一種針對(duì)學(xué)習(xí)者語音產(chǎn)出正確與否的即時(shí)正音反饋信息。如圖1 所示，左邊提示了教師語音的關(guān)鍵特征，右邊則即時(shí)描繪學(xué)習(xí)者的練習(xí)語音特征。通過視覺比對(duì)，學(xué)習(xí)者可以獲得關(guān)于剛才發(fā)音質(zhì)量的主觀評(píng)價(jià)。這樣的視覺信息即充當(dāng)了提醒學(xué)生修正發(fā)音錯(cuò)誤的“監(jiān)控者”的角色，起到了日漸受二語教學(xué)屆廣泛重視的糾正性反饋的作用（Hossein 2017），正與“監(jiān)控假說”（Krashen，1981）中“有意識(shí)的監(jiān)控才能使二語者不斷地修正、練習(xí)從而最終轉(zhuǎn)換為直覺性習(xí)得”的觀點(diǎn)相符合。

再次，學(xué)習(xí)者的選擇性注意機(jī)制可能也在其中發(fā)揮了重要的作用。人的一切心理活動(dòng)都以注意為前提（Kahneman，1973），如果同時(shí)給被試呈現(xiàn)多個(gè)維度的信息，他們可以選擇性地注意其中一個(gè)維度。從實(shí)驗(yàn)結(jié)果來看，視聽組被試的選擇性注意可能聚焦于焦點(diǎn)音節(jié)的音高特征上，而對(duì)于表征時(shí)長的圓周周長采取了忽視策略。對(duì)于聽覺組的日語母語學(xué)習(xí)者而言，母語經(jīng)驗(yàn)中的時(shí)長敏感機(jī)制令他們選擇性地優(yōu)先注意焦點(diǎn)音節(jié)的時(shí)長變化，雖然初期的語音學(xué)知識(shí)培訓(xùn)令他們注意到焦點(diǎn)音高的特征，但是這一能力隨著時(shí)間進(jìn)程逐漸有所退化。

最后，本研究有兩點(diǎn)值得注意的地方：（1）實(shí)驗(yàn)二的結(jié)果與最初的可視化設(shè)計(jì)的預(yù)期不完全相符：可視化圖形中，焦點(diǎn)音節(jié)高音點(diǎn)和時(shí)長均為凸顯的視覺信息，但實(shí)驗(yàn)二的結(jié)果表明視聽組被試更關(guān)注高音點(diǎn)而忽視時(shí)長。這可能是因?yàn)橐曈X通道的信息量較大且彼此間形成注意資源競爭，容易形成高知覺負(fù)載（Lavie，1995），在實(shí)際聽感上較為突出的高音點(diǎn)捕獲了被試大部分注意力，時(shí)長信息因此被忽視。（2）聲學(xué)參數(shù)結(jié)果和聽辨結(jié)果不完全相符：聽辨結(jié)果顯示聽覺組的訓(xùn)練效果在后測(cè)時(shí)達(dá)到最佳，但在聲學(xué)參數(shù)上，僅相對(duì)時(shí)長與這一結(jié)果相符，高音點(diǎn)和音域與之不相符合。這可能是因?yàn)橥ｎD的作用，聽覺組可能由于難以產(chǎn)出焦點(diǎn)，在焦點(diǎn)前有較長時(shí)間的停頓，而這無意中與重音前增加停延邊界（曹劍芬，2002）這一規(guī)律相符。

6.余論

本研究尚存在不少待改善的空間：1）為了對(duì)比視覺信息與聽覺信息在焦點(diǎn)重音產(chǎn)出中的作用，更為嚴(yán)謹(jǐn)?shù)淖龇☉?yīng)是在僅有視覺信息的情況下考察被試的訓(xùn)練效果。2）本研究實(shí)驗(yàn)語料均為經(jīng)過設(shè)計(jì)的陳述句，但王韞佳等（2006）認(rèn)為相比自然語料，較為簡單的實(shí)驗(yàn)句語料可能會(huì)掩蓋研究問題的復(fù)雜程度，以后的研究可以加入適當(dāng)?shù)淖匀徽Z料及其他語氣的語料。3）在聲學(xué)參數(shù)的選擇上，本研究中將焦點(diǎn)音節(jié)的高音點(diǎn)作重要衡量指標(biāo)之一，但有研究認(rèn)為二聲、四聲的升幅也是漢語焦點(diǎn)重音的表現(xiàn)（Shih，2000）。以上反思對(duì)后續(xù)研究應(yīng)有一定的啟發(fā)。