基于模擬測(cè)試的泰國(guó)高考漢語(yǔ)PAT7.4效度分析

陳善美 宋春陽(yáng)

摘 要：本文基于大樣本的模擬測(cè)試并以真實(shí)的泰國(guó)漢語(yǔ)高考PAT7.4成績(jī)作為效標(biāo)，對(duì)泰國(guó)高考漢語(yǔ)PAT7.4的效度進(jìn)行了研究。

關(guān)鍵詞：泰國(guó)漢語(yǔ)高考PAT7.4 信度 效度

一、引言

有關(guān)泰國(guó)高考漢語(yǔ)PAT7.4效度問(wèn)題，已經(jīng)有若干研究成果。但由于歷年考生的答卷都是保密的，不能對(duì)測(cè)試的成績(jī)進(jìn)行統(tǒng)計(jì)，所以前人研究結(jié)果基本都是基于試卷的內(nèi)容、題型、試卷結(jié)構(gòu)、時(shí)間或部分考生考試的感受及反饋的問(wèn)卷，并結(jié)合某種測(cè)試?yán)碚摶蛘Z(yǔ)言教學(xué)理論對(duì)其效度做出推斷和提出改進(jìn)建議，如：春麗娟（2012）、周?chē)?guó)鵑和春麗娟（2013）、泰宗（2013）、萬(wàn)惜春（2014）、李穎（2015）、楊凱（2016）等。這些論文由于缺乏大樣本的答卷統(tǒng)計(jì)數(shù)據(jù)的支持，顯得不夠客觀(guān)。為此，本文基于大規(guī)模模擬測(cè)試被試的成績(jī)統(tǒng)計(jì)，對(duì)泰國(guó)高考漢語(yǔ)PAT7.4的效度進(jìn)行研究。

二、被試、試卷及測(cè)試的實(shí)施

（一）被試

本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試一共有120人參加，考試模擬被試為泰國(guó)文科漢語(yǔ)班的高中三年級(jí)學(xué)生以及考過(guò)泰國(guó)漢語(yǔ)高考PAT7.4考試的大學(xué)生。參加模擬泰國(guó)漢語(yǔ)高考PAT7.4考試的學(xué)生分為三組，這三組學(xué)生分別來(lái)自泰國(guó)不同的地方：玫瑰園中學(xué)是在首都曼谷的學(xué)校、宋卡沃拉娜麗查棱學(xué)校是在宋卡南方的學(xué)校、考過(guò)泰國(guó)漢語(yǔ)高考PAT7.4考試的大學(xué)生是宋卡王子大學(xué)的學(xué)生。這些學(xué)生年齡一般在18～20歲之間。

（二）試卷

模擬試卷是根據(jù)課程教學(xué)大綱高中階段六個(gè)學(xué)期內(nèi)的知識(shí)能力的要求進(jìn)行的模擬命題。泰國(guó)高考漢語(yǔ)的命題內(nèi)容和要求如下：

1.泰國(guó)高考漢語(yǔ)試題分為兩部分，一部分用簡(jiǎn)體字，另一部分用繁體字，學(xué)生可以任意選擇其中一個(gè)部分。

2.所有的試題均是100道題目，分?jǐn)?shù)為300分，考試的時(shí)間是180分鐘，每道題的平均使用時(shí)間是1分鐘30秒。

3.泰國(guó)高考漢語(yǔ)試題的內(nèi)容所占比重：語(yǔ)法知識(shí)占40%，詞匯知識(shí)占40%，語(yǔ)音知識(shí)占5%，文字知識(shí)占5%，文化知識(shí)占10%。

4.泰國(guó)高考漢語(yǔ)試題只測(cè)試“閱讀能力”，沒(méi)有測(cè)試聽(tīng)力能力、寫(xiě)作能力、說(shuō)話(huà)能力。

5.泰國(guó)高考漢語(yǔ)試題分為七個(gè)部分：正確選擇詞語(yǔ)的位置、詞語(yǔ)辨析、判斷正確、同義詞替換、閱讀理解、選詞填空、句子的排列。

總體來(lái)說(shuō)，模擬測(cè)試的內(nèi)容與真題涉及的考查內(nèi)容一致，對(duì)學(xué)生的語(yǔ)音、語(yǔ)法、詞匯等語(yǔ)言知識(shí)和語(yǔ)言運(yùn)用能力進(jìn)行了綜合性的考察，同時(shí)也對(duì)學(xué)生關(guān)于中國(guó)文化歷史風(fēng)俗等的了解情況進(jìn)行了測(cè)試，試題難易結(jié)合，由淺入深。

（三）測(cè)試的實(shí)施

本次測(cè)試分三次進(jìn)行：第一次在宋卡沃拉娜麗查棱學(xué)校進(jìn)行，宋卡位于泰國(guó)南部，是一個(gè)港口城市，沃拉娜麗查棱學(xué)校是宋卡王子大學(xué)孔子學(xué)院簽署合作教學(xué)點(diǎn)的三所學(xué)校之一；第二次在玫瑰園中學(xué)進(jìn)行，玫瑰園中學(xué)坐落于曼谷的唐人街，該校建于一百二十七年前，已經(jīng)成立孔子學(xué)堂，這是泰國(guó)第三家正式的孔子學(xué)堂；第三次在宋卡王子大學(xué)，對(duì)象是參加泰國(guó)漢語(yǔ)高考PAT7.4考試的大學(xué)生。此次調(diào)查選取的三所學(xué)校都是具有濃厚的中華文化氛圍的學(xué)校。

在正式測(cè)試開(kāi)始的前一周，我們會(huì)通知學(xué)生進(jìn)行PAT 7.4模擬考試的日期，并且告訴學(xué)生可以就測(cè)試的項(xiàng)目有意識(shí)地進(jìn)行必要的考前準(zhǔn)備，在指定的日期參加模擬考試。雖然已經(jīng)告訴學(xué)生這只是模擬考試，但有些學(xué)生在模擬考試過(guò)程中依然比較緊張，這說(shuō)明了學(xué)生對(duì)模擬測(cè)試的重視程度很高。

三、PAT7.4模擬測(cè)試質(zhì)量分析

（一）試卷結(jié)構(gòu)效度分析

這次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試試卷分為八個(gè)部分：選擇詞語(yǔ)正確答案（判斷正誤）、選擇填空、同義詞替代、詞語(yǔ)辨析、完成對(duì)話(huà)、理解句子、閱讀理解、按要求選擇、句子排列。具體情況見(jiàn)表1。

表1：泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試試卷題型及得分率

題型 題量 分值 總計(jì) 得分率

一、判斷詞語(yǔ)正誤 10 3 30 56.25%

二、選擇詞填空 10 3 30 57.08%

三、同義詞替代 10 3 30 59.25%

四、詞語(yǔ)辨析 27 3 81 45.49%

五、理解句子 8 3 24 55.83%

六、指定詞語(yǔ)完成對(duì)話(huà) 7 3 21 49.40%

七、按要求選擇 10 3 30 47.41%

八、句子排列 3 3 9 53.88%

九、閱讀理解 15 3 45 53.66%

合計(jì) 100 300 53.14%

從表1可以看出，本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試試卷的題量總數(shù)為100題。其中讓考生從事先擬定的答案中辨認(rèn)出正確答案的客觀(guān)題為82題，包括第一部分選擇詞語(yǔ)正確答案、第二部分選詞填空、第三部分同義詞替代、第四部分詞語(yǔ)辨析、第七部分按要求選擇、第九部分閱讀理解，共計(jì)246分；考察考生理解能力的主觀(guān)題共18題，包括第五部分理解句子、第六部分完成對(duì)話(huà)、第八部分句子排列，共計(jì)54分。這次試題題量適中，主客觀(guān)題比例分布處于比較合理的范圍。

（二）考試總體成績(jī)分布

120名考生的考試成績(jī)中，最高分是279分，最低分是54分，平均分是151.6分。

表2：泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試成績(jī)分?jǐn)?shù)段人數(shù)及比重統(tǒng)計(jì)

分?jǐn)?shù)段 0～30 31～60 61～90 91～120 121～150 151～180 181～210 211～240 241～270 271～300

人數(shù) 0 2 29 13 14 19 17 20 5 1

得分率 0% 1.6% 24.1% 10.8% 11.6% 15.8% 14.1% 16.6% 4.1% 0.8%

由表2可以看出，考生分?jǐn)?shù)基本上集中在30～180分，211～300分的人數(shù)明顯減少，150分以上的人數(shù)為62人，占整個(gè)考生人數(shù)的51.67%。本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試考生平均成績(jī)?yōu)?51.6分，說(shuō)明本次模擬考試考生的成績(jī)不太理想，大多數(shù)考生成績(jī)?cè)?1～90分，因而拉低了平均成績(jī)。

（三）試卷各題型的難度

難度（得分率）是測(cè)試質(zhì)量的一個(gè)重要指標(biāo)。本次試卷的五種題型的得分率從表1可以看出：本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試各題型得分率很低，說(shuō)明簡(jiǎn)單題目較少，難題很多，該試卷偏難。從卷面分析和反饋看，學(xué)生的考試成績(jī)呈兩極分化狀態(tài)，其中失分最嚴(yán)重的是完成會(huì)話(huà)與改錯(cuò)句等主觀(guān)寫(xiě)作題，這說(shuō)明學(xué)生漢語(yǔ)綜合運(yùn)用能力較低，尤其是對(duì)漢語(yǔ)的語(yǔ)感與寫(xiě)作還處在較低水平上。

（四）試卷的內(nèi)部信度分析

根據(jù)表3的相關(guān)數(shù)據(jù)，利用SPSS軟件，從語(yǔ)音、文字、詞匯、語(yǔ)法、文化、閱讀六個(gè)方面以及與總分之間的相關(guān)性進(jìn)行數(shù)據(jù)分析，結(jié)果如下：

表3：試卷測(cè)試內(nèi)容相關(guān)性分析 Inter-Item Correlation Matrix

語(yǔ)音 文字 詞匯 語(yǔ)法 文化 閱讀 總分

語(yǔ)音 1.000 .348 .454 .485 .437 .489 .566

文字 .348 1.000 .441 .421 .389 .431 .504

詞匯 .454 .441 1.000 .860 .673 .798 .920

語(yǔ)法 .485 .421 .860 1.000 .704 .792 .928

文化 .437 .389 .673 .704 1.000 .871 .824

閱讀 .489 .431 .798 .792 .871 1.000 .945

總分 .566 .504 .920 .928 .824 .945 1.000

根據(jù)教育測(cè)量學(xué)家的研究，相關(guān)值介于0.71～0.99屬于高度相關(guān)，0.5～0.7屬于中度相關(guān)，0.3～0.49屬于低度相關(guān)，低于0.3說(shuō)明相關(guān)性過(guò)低。通過(guò)相關(guān)性的分析，可以得出下列結(jié)論：

1.在本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試中，閱讀和總分的相關(guān)性最高，達(dá)0.945。閱讀、詞匯、語(yǔ)法、文化與總分都呈高度相關(guān)。

2.語(yǔ)音、文字和總分相關(guān)性為0.566和0.504，屬于中度相關(guān)。

3.詞匯、語(yǔ)法、文化與閱讀的相關(guān)度分別為0.798、0.792和0.871，屬于高度相關(guān)。

4.語(yǔ)音、文字和閱讀的相關(guān)度分別為0.489和0.431，屬于低度相關(guān)。

（五）模擬成績(jī)與PAT7.4真實(shí)成績(jī)比較

120名考生的模擬考試成績(jī)與泰國(guó)高考漢語(yǔ)PAT7.4真實(shí)成績(jī)之間的相關(guān)性數(shù)據(jù)表如下：

表4：模擬考試成績(jī)與真實(shí)考試成績(jī)的相關(guān)性數(shù)據(jù)表

Paired Samples Statistics

Mean N Std. Deviation Std. Error Mean

Pair 1 模擬成績(jī) 151.6000 120 61.18074 5.58501

高考成績(jī) 120.9333 120 52.20028 4.76521

表4給出了泰國(guó)高考漢語(yǔ)PAT7.4模擬考試成績(jī)與泰國(guó)高考漢語(yǔ)PAT7.4真實(shí)成績(jī)的平均分（Mean）、參考數(shù)目（N）、標(biāo)準(zhǔn)差及標(biāo)準(zhǔn)誤差（Std.Deviation&Std.Error; Mean）這四項(xiàng)基本的描述統(tǒng)計(jì)指標(biāo)。

表5：模擬成績(jī)與PAT7.4真實(shí)成績(jī)相關(guān)檢驗(yàn)

Paired Samples Correlations

N Correlation Sig.

Pair 1 模擬成績(jī)&高考成績(jī) 120 .948 .000

表5是泰國(guó)高考漢語(yǔ)PAT7.4模擬考試成績(jī)與泰國(guó)高考漢語(yǔ)PAT7.4真實(shí)成績(jī)相關(guān)檢驗(yàn)表。該表顯示共有120對(duì)參考值，相關(guān)系數(shù)為0.948。

表6：Paired Samples Test

Paired Differences

95% Confidence Interval of the Difference

Lower Upper t df Sig.（2-tailed）

Pair 1 模擬成績(jī)—高考成績(jī) 27.00411 34.32923 16.579 119 .000

從表6可以看出標(biāo)準(zhǔn)差及95%的置信區(qū)間。配對(duì)成績(jī)T測(cè)試結(jié)果表明，t值為16.579，雙側(cè)顯著值為0.000。0.000小于0.05，顯示差異具有顯著意義，這說(shuō)明泰國(guó)高考漢語(yǔ)PAT7.4模擬考試成績(jī)高的考生，其泰國(guó)高考漢語(yǔ)PAT7.4的真實(shí)成績(jī)也比較高。

四、結(jié)語(yǔ)

本次泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試，盡管總體分?jǐn)?shù)與真實(shí)測(cè)試的總體分?jǐn)?shù)具有較大差異，但二者在平均分、標(biāo)準(zhǔn)差等指標(biāo)方面具有較高的相關(guān)性。這說(shuō)明模擬測(cè)試具有較高的質(zhì)量，可以將其作為PAT7.4的一個(gè)樣本分析。從題型角度分析，各題型得分率比較接近，說(shuō)明題型沒(méi)有對(duì)難度造成較大影響。從試卷各部分的內(nèi)容構(gòu)成看，漢語(yǔ)詞匯量、漢語(yǔ)語(yǔ)法、閱讀理解能力與文化知識(shí)這四個(gè)部分的內(nèi)容相關(guān)性也較高。這說(shuō)明試卷各部分內(nèi)容內(nèi)部一致性信度較高，考察對(duì)象具有同質(zhì)性。例如第一大題中的選擇詞語(yǔ)正確答案，既有對(duì)學(xué)生漢語(yǔ)詞匯量的考察又有對(duì)其閱讀理解能力的考察，可以看出泰國(guó)高考漢語(yǔ)PAT7.4的模擬考試的首要目的是考查考生綜合運(yùn)用漢語(yǔ)的能力。

綜上所述，就本次模擬測(cè)試成績(jī)統(tǒng)計(jì)而言，2015年的泰國(guó)高考漢語(yǔ)PAT7.4考試較好地考查了學(xué)生的漢語(yǔ)應(yīng)用能力。

參考文獻(xiàn)：

[1]春麗娟.泰國(guó)漢語(yǔ)高考PAT7.4調(diào)查[D].蘇州：蘇州大學(xué)碩士學(xué)位論文，2012.

[2]泰宗.泰國(guó)高考漢語(yǔ)研究[D].哈爾濱：黑龍江大學(xué)碩士學(xué)位論文，2013.

[3]周?chē)?guó)鵑，春麗娟.泰國(guó)漢語(yǔ)高考PAT7.4分析調(diào)查[J]海外華文教育，2013，（1）.

[4]萬(wàn)惜春.泰國(guó)高考漢語(yǔ)試題研究[D].天津：天津師范大學(xué)碩士學(xué)位論文，2014.

[5]李穎.泰國(guó)漢語(yǔ)高考PAT7.4試題分析研究[D].昆明：云南大學(xué)碩士學(xué)位論文，2015.

[6]楊凱.對(duì)泰國(guó)漢語(yǔ)高考試題PAT7.4的研究分析[D].西安：西安外國(guó)語(yǔ)大學(xué)碩士學(xué)位論文，2016.

[7]楊瑞和.語(yǔ)言研究應(yīng)用SPSS軟件實(shí)例大全[M].北京：中國(guó)社會(huì)科學(xué)出版社，2004.

[8]趙金銘.語(yǔ)言測(cè)試?yán)碚摷皾h語(yǔ)測(cè)試研究[M].北京：商務(wù)印書(shū)館，2006.

（陳善美（[泰]KANITHA JUTUNCHUN） 宋春陽(yáng) 上海交通大學(xué)人文學(xué)院漢語(yǔ)國(guó)際教育中心 200030）