新漢語(yǔ)水平考試HSK（六級(jí)）試卷難度控制研究

張晉軍 張慧君 張鐵英 符華均 黃賀臣

新漢語(yǔ)水平考試HSK（六級(jí)）是新HSK筆試難度最高的等級(jí)。為使不同次考試的分?jǐn)?shù)具有可比性，使參加不同次考試的考生得到公平對(duì)待，HSK（六級(jí)）拼卷人員采取“內(nèi)容均衡、形式統(tǒng)一、篇幅控制”等措施，努力使不同試卷在難度上保持一致。通過(guò)預(yù)測(cè)，可以更好地控制試卷難度。但預(yù)測(cè)有試題曝光的風(fēng)險(xiǎn)，須投入一定的人力物力，同時(shí)其準(zhǔn)確性受各種條件的限制。如果不預(yù)測(cè)，試卷難度控制就更為關(guān)鍵?？荚嚱Y(jié)束后，統(tǒng)計(jì)人員還要對(duì)分?jǐn)?shù)進(jìn)行等值處理。

HSK（六級(jí)）在試卷難度控制方面效果如何？試卷難度信息能為等值提供什么借鑒？我們擬通過(guò)對(duì)2011年全球8次HSK（六級(jí)）考試的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，來(lái)嘗試回答上述問(wèn)題。

1 研究設(shè)想

2011年，HSK（六級(jí)）在全球組織了8次考試，使用了8套試卷，考生共計(jì)36 484人，其中韓國(guó)籍考生25 939人，占全體考生的71.10%。具體信息見(jiàn)表1、表2。

表1

表2

要考查HSK（六級(jí)）不同試卷的難度差別，有兩種方法。一是正式考試時(shí)，在不同試卷中安置共同題，通過(guò)不同次考生在共同題上的表現(xiàn)來(lái)推測(cè)不同試卷的難度差。但是為應(yīng)對(duì)應(yīng)試沖擊，新HSK試題的使用是一次性的，不同試卷中不包含相同的試題。二是組織一批考生，將多套試卷都考一遍，考生是相同的，考生的水平?jīng)]有發(fā)生變化，那考生在不同試卷上的分差就是試卷難度差。這基本上也不具有可操作性。

通過(guò)表1可以看出，HSK（六級(jí)）每次考試，全球考生數(shù)量都在2 700人以上。如果將不同次考試的考生看做是總體考生的若干個(gè)隨機(jī)樣本，我們就可以假設(shè)他們具有相同或近似的漢語(yǔ)水平。這樣的話，不同次考試的考生在不同試卷上的得分差異就可視為試卷難度差。由此，在一定程度上，我們就可以對(duì)HSK（六級(jí)）不同試卷難度控制的質(zhì)量做出評(píng)價(jià)。

通過(guò)表1、表2可以看出，每次考試，韓國(guó)籍考生數(shù)量都在2 400人以上。因此，我們還可以韓國(guó)籍考生為統(tǒng)計(jì)對(duì)象，評(píng)價(jià)HSK（六級(jí)）不同試卷難度控制的質(zhì)量。

HSK（六級(jí)）含聽(tīng)力、閱讀、書(shū)寫(xiě)三部分。本文使用的是這8次考試的原始分?jǐn)?shù)據(jù)，只對(duì)客觀題聽(tīng)力分、閱讀分進(jìn)行統(tǒng)計(jì)分析，未對(duì)主觀題書(shū)寫(xiě)分做統(tǒng)計(jì)分析。

2 統(tǒng)計(jì)分析

HSK（六級(jí)）聽(tīng)力50題，閱讀50題。我們統(tǒng)計(jì)了HSK（六級(jí)）2011年8次考試全球考生、韓國(guó)籍考生的聽(tīng)力、閱讀平均分。具體信息見(jiàn)表3。

表3

HSK（六級(jí)）聽(tīng)力、閱讀原始分滿(mǎn)分都是50分。通過(guò)表3可以看出，全球考生聽(tīng)力平均分普遍高于閱讀平均分。聽(tīng)力平均分在34.36～40.60分波動(dòng)，波動(dòng)范圍為6.24分，均值為37.36分。閱讀平均分在30.63～34.34分波動(dòng)，波動(dòng)范圍為3.71分，均值為32.34分。聽(tīng)力平均分均值為37.36分，閱讀平均分均值為32.34分，相差5.02分。

韓國(guó)籍考生聽(tīng)力平均分普遍高于閱讀平均分。聽(tīng)力平均分在34.17～38.55分波動(dòng)，波動(dòng)范圍為4.38分，均值為36.76分。閱讀平均分在29.00～32.48分波動(dòng)，波動(dòng)范圍為3.48分，均值為31.35分。聽(tīng)力平均分均值為36.76分，閱讀平均分均值為31.35分，相差5.41分。

8次考試全球考生相關(guān)數(shù)據(jù)如圖1所示，8次考試韓國(guó)籍考生相關(guān)數(shù)據(jù)如圖2所示。

圖1

圖2

新加坡考生漢語(yǔ)水平普遍較高。統(tǒng)計(jì)顯示，4月考試，新加坡考生占全體考生的11.62%；6月考試，新加坡考生占全體考生的20.84%；其他6次考試的比例則都在2%以下。新加坡考生對(duì)4月、6月考試全球考生平均分有拉高的影響，會(huì)造成對(duì)4月、6月使用試卷難度系數(shù)的高估。

3 討論

根據(jù)上述統(tǒng)計(jì)分析可以發(fā)現(xiàn)，HSK（六級(jí)）8次考試，聽(tīng)力分普遍高于閱讀分，相差5分左右。聽(tīng)力分在35～40分波動(dòng)，閱讀分在30～35分波動(dòng)。這種波動(dòng)較為穩(wěn)定，反映了HSK（六級(jí)）試卷難度控制的現(xiàn)有水平。評(píng)價(jià)HSK（六級(jí)）試卷難度控制的質(zhì)量，可以韓國(guó)籍考生為統(tǒng)計(jì)對(duì)象，也可以剔除新加坡籍等特殊考生群體的全球考生為統(tǒng)計(jì)對(duì)象。

新HSK最初采用“共同題等值法”實(shí)現(xiàn)等值，但很快就在應(yīng)試培訓(xùn)的沖擊下放棄了這種等值方法?！肮餐M等值法”則因缺少可操作性，一直未能派上用場(chǎng)。在對(duì)HSK（六級(jí)）難度控制的研究過(guò)程中，我們發(fā)現(xiàn)，新HSK可以嘗試使用“平均分等值法”來(lái)實(shí)現(xiàn)等值。其假設(shè)是，在每次考試有足夠數(shù)量、足夠代表性考生的前提下，不同次考試考生群體的漢語(yǔ)水平相同或相似。如果某次考試聽(tīng)力平均分偏高，意味著聽(tīng)力分測(cè)驗(yàn)可能偏易，需要減分；閱讀平均分偏低，意味著閱讀分測(cè)驗(yàn)可能偏難，需要加分。結(jié)合圖1來(lái)看，如果下次考試，聽(tīng)力平均分在35～39分，可能就不做調(diào)整。但如果在這個(gè)區(qū)間之外，我們就須加分或減分，調(diào)整幅度由相關(guān)人員集體討論確定。這是一種粗略的等值方法，但它簡(jiǎn)便易行，可操作性強(qiáng)。

在聽(tīng)力均值線和閱讀均值線的確定上，“平均分等值法”有兩種選擇。一是將其固定，比如選擇近三年來(lái)的20次考試，獲得聽(tīng)力、閱讀平均分均值線，今后的考試圍繞這兩條均值線做調(diào)整。二是將其動(dòng)態(tài)化，每次考試都圍繞之前所有考試形成的均值線做調(diào)整。

[1] 謝小慶.對(duì)15種測(cè)驗(yàn)等值方法的比較研究[J].心理學(xué)報(bào),2000.

[2] 謝小慶.關(guān)于HSK等值的試驗(yàn)研究[J].世界漢語(yǔ)教學(xué),1998(2).

[3] 謝小慶.HSK和MHK的等值[J].考試研究,2005(4).

[4] 謝小慶.考試分?jǐn)?shù)等值的新框架[J].考試研究,2008(2).

[5] 謝小慶,任杰.關(guān)于HSK等值改進(jìn)的一項(xiàng)實(shí)驗(yàn)研究[J].世界漢語(yǔ)教學(xué),2006.

[6] 謝小慶,任杰.HSK等值方法的改進(jìn).對(duì)外漢語(yǔ)教學(xué)的全方位探索[M].商務(wù)印書(shū)館.2005.

[7] 約瑟夫·M·瑞安（美）.基于經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論的等值與連接（一）[M].考試研究.2001(1).

[8] 約瑟夫·M·瑞安（美）.基于經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論的等值與連接（二）[M].考試研究.2001(2).

[9] 約瑟夫·M·瑞安（美）.基于經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論的等值與連接（三）[M].考試研究.2001(3).

[10] 張晉軍.關(guān)于漢語(yǔ)水平考試（HSK）等值設(shè)計(jì)的新思考[J].中國(guó)考試,2008(8).

[11] 張晉軍.國(guó)家職業(yè)漢語(yǔ)能力測(cè)試（ZHC）拼卷工作介紹[J].中國(guó)考試,2007(1).