留學(xué)生接受性和產(chǎn)出性詞匯量測試的信效度檢驗

劉書慧

摘要：為了評估留學(xué)生HSK五級漢語詞匯量，本研究設(shè)計了測試接受性和產(chǎn)出性詞匯量套題，通過邏輯分析和統(tǒng)計軟件對試題項目難度、區(qū)分度、信度和效度進行了一系列的分析得出，測試套題難度整體適中，整體區(qū)分度接近良好，產(chǎn)出性詞匯量的測試區(qū)分度良好，試卷整體具有較高的信效度，可以用來診斷留學(xué)生HSK五級的接受性和產(chǎn)出性詞匯量水平。

關(guān)鍵詞：漢語詞匯量；接受性；產(chǎn)出性

一、引論

研究者和語言教師都認(rèn)為詞匯知識的發(fā)展對語言學(xué)習(xí)起著關(guān)鍵作用，從詞匯教學(xué)的角度看，教師為了使課堂教學(xué)的指導(dǎo)更有針對性，有必要了解各學(xué)習(xí)階段的留學(xué)生漢語詞匯知識的掌握狀況。詞匯知識一般分為廣度知識和深度知識，前者指學(xué)習(xí)者詞匯量的大小，后者指學(xué)習(xí)者對詞匯語音（口語、書面語）、含義、詞性、搭配、聯(lián)想、近義詞的掌握。研究表明，學(xué)習(xí)者詞匯量的大小與閱讀理解、寫作、聽說以及整體語言水平都存在著一定的關(guān)系，因此本研究試圖設(shè)計一份漢語詞匯量測試套題，為有效全面地評估本科三年級留學(xué)生詞匯量提供準(zhǔn)確的測評工具。

（一）國外研究者對詞匯量研究方法的探究

研究者對詞匯量的測試方法可謂風(fēng)格迥異，按照被試的回答方式（expected response）可以分為判斷、選擇、填空和寫作四種形式。（1）判斷題是以Meara等研究者設(shè)計的Eurocentres Vocabulary SizeTest為代表，在詞表里對認(rèn)識的詞劃勾，這種詞匯量測試方法的問題在于學(xué)習(xí)者容易過高估計自己的詞匯知識，而研究者又無法證實學(xué)習(xí)者的回答是否可靠。（2）選擇題使用廣泛的是Nation設(shè)計的Vo.cabulary Levels Test，從5個詞頻等級（2000，3000，5000，10000和大學(xué)詞匯）中各選出目標(biāo)詞18個，根據(jù)解釋要求從36個選項中選出相應(yīng)的18個詞。（3）填空題則是由Nation和Laufer設(shè)計更新的Vocabu.1ary Levels Test（Productive），每個詞頻級別有18個題目，根據(jù)字母提示寫出單詞完成句子。（4）通過寫作文測試詞匯量需要借助Vocabulary Profile軟件，可以顯示作文在各個詞頻等級中使用單詞的數(shù)量。

以上四種詞匯量測量方式中，（1）和（2）測量的是能理解的接受性詞匯量，（3）和（4）測量的是產(chǎn)出性詞匯量，即可理解并應(yīng)用的詞語。根據(jù)提示填空又被稱為可控制的產(chǎn)出性詞匯，作文測試了自由產(chǎn)出性詞匯量；按照有無語境提示，（1）和（2）是不依賴語境或去語境的詞匯量測試，（3）和（4）是依賴語境的詞匯量測試，也可分別稱為分離式和綜合式測試。詞匯測試的構(gòu)念，按照語言測試領(lǐng)域的當(dāng)前趨勢，應(yīng)采用交互式理念來定義，也就是能夠在有意義的語境中使用詞匯，而不只是能夠呈現(xiàn)分離的詞匯，因此，本研究接受性詞匯量的測試題型是有語境的詞語選擇題，產(chǎn)出性詞匯量測試采用可控制產(chǎn)出性測試形式，根據(jù)拼音提示完成句子。

（二）國內(nèi)對留學(xué)生漢語詞匯量的研究

國內(nèi)對漢語詞匯量的研究不是很多。錢旭菁、張和生和吳思娜通過詞語識別、翻譯、釋義法測試了初、中、高級留學(xué)生接受性詞匯量。另外，還有一些學(xué)者對產(chǎn)出性詞匯量作了研究，任春艷、王曉慧、黃立和錢旭菁等的研究結(jié)果顯示詞匯的復(fù)雜度和詞語偏誤率與作文的總成績顯著相關(guān)。孫曉明則通過實驗解釋了學(xué)習(xí)者接受性和產(chǎn)出性詞匯機制的差異。盡管目前的研究對漢語詞匯習(xí)得和教學(xué)作出了一些貢獻(xiàn)，但仍有不足：一、國內(nèi)對于接受性詞匯量的研究方法較多采用識別法，就是在詞表里對認(rèn)識的詞劃勾，這種詞匯量測試方法的問題在于學(xué)習(xí)者容易過高估計自己的詞匯知識。相比較而言，選擇題或匹配題的測試結(jié)果更可靠，但缺點在于缺少真實的語境；二、就產(chǎn)出性詞匯量測量方法而言，Laufer在研究中發(fā)現(xiàn)學(xué)生在自由表達(dá)中更愿意使用一些常用詞語（由于石化現(xiàn)象或避免出錯），所以在自由表達(dá)中顯示的詞匯量與學(xué)生的可接受性詞匯和可控制性詞匯量都不相關(guān)，這表明自由表達(dá)如寫作并不能有效測出學(xué)生實際掌握的詞匯量，而可控制產(chǎn)出詞匯才能真正體現(xiàn)學(xué)生掌握詞匯的寬度；三、國內(nèi)對第二語言漢語的詞匯量研究大都分為接受性或產(chǎn)出性，但實際上他們是學(xué)習(xí)者習(xí)得詞匯過程的兩個階段，所以只有同時從兩個角度評估才能全面了解學(xué)習(xí)者掌握的詞匯量現(xiàn)狀。

因此，本研究試圖設(shè)計一套測試學(xué)習(xí)者接受性和產(chǎn)出性詞匯量的測試套題，接受性詞匯量測試采用有語境的選擇題，產(chǎn)出性詞匯量測試采用可控制的完詞填空題型，并從題目質(zhì)量、試卷內(nèi)容、試卷內(nèi)部結(jié)構(gòu)和與外部變量之間的關(guān)系三個方面驗證測試的效度，為有效全面評估本科三年級留學(xué)生詞匯量提供準(zhǔn)確的測評工具。

二、研究方法

（一）研究對象

被試為國內(nèi)某大學(xué)漢語系46名本科三年級留學(xué)生（男20，女26），年齡在18-22歲之間，來自印尼、泰國、俄羅斯、越南、塔吉克斯坦等國。研究是在三年級上學(xué)期進行，被試均已學(xué)習(xí)1年半或2年漢語。

（二）詞匯量測試套題

本次研究設(shè)計的HSK 5級詞匯量測試套題包括兩部分：接受性詞匯量和產(chǎn)出性詞匯量測試，共36題，測試時間為25分鐘。第一部分有三組詞語，每組6個目標(biāo)詞作為選項，完成6個句子，三組共18個句子。：

第二部分可控制產(chǎn)出性詞匯量測試由18個完詞填空的句子組成，例如：

根據(jù)提示的拼音寫出詞語完成句子，詞語由1個字、2個字或3個字組成。

評分標(biāo)準(zhǔn)為答對一道題得1分，答錯一道題得0分，滿分36，將評閱結(jié)果輸入Excel表，建立數(shù)據(jù)庫，測試結(jié)果使用SPSS21.0進行T檢驗、相關(guān)分析和回歸分析等。

三、研究結(jié)果和分析

（一）題目質(zhì)量分析

（1）HSK五級詞匯量測試結(jié)果

從表1可以看到，詞匯量測試套題的平均分是30.54分，正確率84.83%，第一部分接受性詞匯量平均分16.46，正確率91.44%，第二部分產(chǎn)出性詞匯量平均分14.09，正確率78.28%，兩部分的均值相差2.37，差異顯著（p<0.01）。偏度<0表示得分大部分高于平均分，第一部分有20人滿分。結(jié)果顯示，可識別理解的詞語多于可使用的詞語，心理語言學(xué)研究表明詞匯的產(chǎn)生過程要比其理解過程復(fù)雜得多，產(chǎn)出目標(biāo)詞所需的信息也多于理解該詞需要的信息。

（2）試題項目難度和區(qū)分度

從表1可以看出測試套題的整體均值為30.54，難度為0.85。作為標(biāo)準(zhǔn)參照考試，整體難度適中，第一部分測試接受性詞匯量，而且題型為多項選擇題，難度較低，所以成績略高可以理解。第二部分要求考生根據(jù)提示的拼音寫出詞語，考生不僅要理解詞的意思，還要知道詞語的用法和書寫，難度高于第一部分，所以這部分難度符合題目的設(shè)計。

題目整體區(qū)分度ID是0.29，接受性詞匯量部分是0.23，產(chǎn)出性測試部分0.38，根據(jù)Ebel題目區(qū)分度的標(biāo)準(zhǔn)，第二部分的區(qū)分度良好（0.30～0.39），而第一部分和整體題目的區(qū)分度尚可，因為第一部分的題目比較容易，難度較低，所以導(dǎo)致這部分區(qū)分度較低，但接受性詞匯量是詞匯量測試的重要部分，所以這部分題目可以保留。

（二）詞匯量測試套題信度檢驗

本套詞匯測試套題的整體信度a系數(shù)為0.87，第一部分0.81，第二部分0.83，比較可靠。影響信度的因素有試卷長度，如果整套試卷信度達(dá)到0.9，那么需要試題數(shù)量應(yīng)該是75題，也就是還需要增加39個題目；試卷難度也會影響信度，第一部分接受性詞匯量測試的難度較低，分?jǐn)?shù)差異很小，區(qū)分度也比較低，因此都影響了整體信度。

（三）詞匯量測試套題效度檢驗

（1）試卷內(nèi)容

本研究設(shè)計的詞匯量測試套題的題目和測試方法都具有較高的效度。本次測試的36個詞語從《國際漢語教學(xué)通用課程大綱》（2014）中規(guī)定的HSK五級1300個詞匯表中每隔22個抽取一個，共抽取60個詞匯（只包括名詞、動詞、形容詞），兩部分各30個詞。經(jīng)試測，刪除區(qū)分度<0.1的題目，測試套題只保留36個題目，兩部分各18個題目，抽樣比例占2.8%，具有代表性；套題句子都是在“漢語教材語料庫”通過查詢目標(biāo)詞命制，結(jié)合難度相應(yīng)的教材選擇合適的句子作為題目，然后通過“漢語文本指南針”檢測套題文本難度級別并根據(jù)提示修改超綱詞語。最終套題文本難度級別整體為2.64，屬于HSK4級，第一部分難度均值3.11，屬于HSK五級（三組的難度范圍3.10～3.12），第二部分難度均值為2.17，屬于三級，試卷文本的難度等于或低于目標(biāo)詞匯的難度，因而被試不會因為語境難度大于目標(biāo)詞而影響對句子的理解，從而保證了試卷的內(nèi)容效度。

本套題的測試方法也具有較高的效度，第一部分目標(biāo)詞出現(xiàn)在左邊，需要完成的題目在右邊，這種題型結(jié)合了Nation設(shè)計的VLT，右邊句子的形式與學(xué)習(xí)者日常遇到的閱讀情境相似，要求學(xué)習(xí)者通過識別詞語的意思并作出選擇。第二部分可控制產(chǎn)出性詞匯量使用的完詞填空題型，在Nation、Laufer和任春艷的研究中都顯示了較高的效度。因此，本詞匯量測試套題從詞匯的代表性，文本的難度和測試方法上都體現(xiàn)了較高的內(nèi)容效度。

（2）試卷內(nèi)部結(jié)構(gòu)分析

用相關(guān)分析計算接受性和產(chǎn)出性詞匯量與總分之間的相關(guān)程度，結(jié)果顯示如表2。第一部分的接受性詞匯量和第二部分的產(chǎn)出性詞匯量水平相關(guān)系數(shù)r值為.445”（p=0.002），呈顯著中度相關(guān)，這表明兩部分既有聯(lián)系又有一定的獨立性，是測量詞匯量的兩個不同方面。第一、二部分與總分的相關(guān)系數(shù)分別為.756”和.922”（p=0.000），呈現(xiàn)顯著中度和高度相關(guān)，這表明詞匯量測試項目的內(nèi)部一致性較高，而且第二部分的產(chǎn)出性詞匯量成績與總分相關(guān)程度更高，這表明產(chǎn)出性詞匯量水平對學(xué)習(xí)者的整體詞匯量水平貢獻(xiàn)更大。

（3）試卷分?jǐn)?shù)與其他外部變量關(guān)系分析

從表2詞匯量測試與HSK五級語法的相關(guān)可以看到，第一部分接受性詞匯量水平與語法呈低度相關(guān)，r值為.468”（p=0.001），第二部分產(chǎn)出性詞匯量和套題與語法成績呈中度偏低顯著相關(guān)，r值分別為.581”和.626"（p=0.000），顯示了詞匯量測試與語法測試的區(qū)別性較好；詞匯量水平還與期末寫作考試成績低度顯著相關(guān)，r值為.389”（p=0.001）；但是研究顯示詞匯量大小與閱讀水平?jīng)]有關(guān)系，這個結(jié)果與預(yù)期不同，原因還需進一步探索。以上詞匯量水平與語法和寫作成績的相關(guān)分析顯示了詞匯量測試具有較高的結(jié)構(gòu)效度。

四、結(jié)論

詞匯是語言學(xué)習(xí)的基礎(chǔ)，漢語詞匯量測試能夠有效幫助漢語教師組織課堂詞匯教學(xué)，提高整體教學(xué)效果。本研究設(shè)計的HSK五級詞匯量測試套題既包括接受性也包括產(chǎn)出性詞匯量的測試，比前人只測試其中一部分的設(shè)計更全面。另外，在借鑒前人研究的基礎(chǔ)上，創(chuàng)新性地設(shè)計了接受性詞匯量的測試題型，為研究詞匯量測試提供了新的視角。通過邏輯分析和統(tǒng)計軟件對試題項目難度、區(qū)分度、信度和效度進行了一系列的分析得出，測試套題難度整體適中（IF=0.85），試卷整體區(qū)分度接近良好（ID=0.29），產(chǎn)出性詞匯量的測試區(qū)分度良好（ID=0.38）。試卷整體信度系數(shù)為0.878，比較可靠。試卷內(nèi)容（詞匯代表性、文本難度和測試方法）、內(nèi)部結(jié)構(gòu)和結(jié)構(gòu)效度方面的分析都表明，該試卷設(shè)計較為合理，具有較高的信度和效度，可以用來診斷留學(xué)生HSK五級的接受性和產(chǎn)出性詞匯量水平。

本研究的局限性在于，首先研究對象的樣本較少，在經(jīng)典測試?yán)碚撝杏绊戫椖康碾y度；其次，詞匯量測試可以按照HSK各級別的詞語分別制定不同級別的詞匯量測試套題，這樣可以更全面地診斷學(xué)習(xí)者的詞匯量水平；最后，本研究設(shè)計的接受性詞匯量測試還應(yīng)進一步探討其結(jié)構(gòu)效度，可以通過訪談，或者有聲思維的方式研究這部分考試方法的結(jié)構(gòu)效度。