大學(xué)英語(yǔ)校內(nèi)測(cè)試有用性研究

周文明

摘要：測(cè)試和教學(xué)密切相關(guān)，大學(xué)英語(yǔ)校內(nèi)測(cè)試的有用性對(duì)整個(gè)大學(xué)英語(yǔ)教學(xué)過(guò)程具有重要的影響。本文基于Bachman & Palmer提出的測(cè)試有用性框架，重點(diǎn)分析了大學(xué)英語(yǔ)校內(nèi)測(cè)試的信度、構(gòu)念效度、影響力以及可行性。結(jié)合理論分析和實(shí)踐經(jīng)驗(yàn)，揭示測(cè)試過(guò)程中潛在的問(wèn)題，為更多高校語(yǔ)言測(cè)試的開(kāi)發(fā)、實(shí)施和使用提供建議。

關(guān)鍵詞：大學(xué)英語(yǔ)；測(cè)試有用性；信度；構(gòu)念效度；影響力

中圖分類(lèi)號(hào)：G642.0 文獻(xiàn)標(biāo)志碼：A 文章編號(hào)：1674-9324（2017）32-0224-02

自上世紀(jì)60年代語(yǔ)言測(cè)試成為獨(dú)立的一門(mén)學(xué)科以來(lái)，國(guó)內(nèi)外專(zhuān)家學(xué)者從理論和實(shí)踐方面進(jìn)行了大量的研究，豐富了語(yǔ)言測(cè)試的研究成果。過(guò)去的幾十年里，語(yǔ)言測(cè)試領(lǐng)域的研究對(duì)象主要是大規(guī)模、高風(fēng)險(xiǎn)考試。而我國(guó)高校學(xué)生所必須參加的校內(nèi)考試具有校本特色，具有不同于大規(guī)模、高風(fēng)險(xiǎn)考試的特征。因此，有必要對(duì)具有校本特色的校內(nèi)測(cè)試進(jìn)行研究，從而更好地服務(wù)于教和學(xué)，實(shí)現(xiàn)測(cè)試的目的。

一、測(cè)試有用性框架

語(yǔ)言測(cè)試界的理論大多源自教育與心理測(cè)量學(xué)。信度和效度是一項(xiàng)測(cè)試優(yōu)劣最重要的指標(biāo)。20世紀(jì)80年代以前，效度的概念不斷演變發(fā)展，從單一的效度觀發(fā)展到“三位一體”效度觀。80年代中期，構(gòu)念效度逐漸成為效度的核心，進(jìn)入了效度整體觀時(shí)期。Bachman（1990）將教育與心理測(cè)量學(xué)家Messick的效度整體觀理論引入語(yǔ)言測(cè)試領(lǐng)域，從一個(gè)新的角度討論效度和效度驗(yàn)證理論。Messick認(rèn)為效度只有一個(gè)（構(gòu)念效度），其他的效度只是解釋構(gòu)念效度的證據(jù)。這種“一元多維”的效度整體觀將測(cè)試的“社會(huì)影響力”置于足夠的高度。但是Messick的效度理論抽象、復(fù)雜，涉及效度驗(yàn)證因素較多，且并未提供效度驗(yàn)證的具體方法。為了解決這一問(wèn)題，Bachmann & Palmer（1996）提出了語(yǔ)言“測(cè)試有用性框架”。該框架明確了信度、構(gòu)念效度、真實(shí)性、交互性、影響力和可行性六條質(zhì)量屬性，使用語(yǔ)言測(cè)試效度驗(yàn)證具有了可操作性。按照Bachman & Palmer（1996）的測(cè)試有用性理論，信度是指測(cè)試的穩(wěn)定性和可靠性；構(gòu)念效度指對(duì)測(cè)試分?jǐn)?shù)所做的解釋在多大程度上是有意義的；真實(shí)性指語(yǔ)言測(cè)試任務(wù)語(yǔ)言特征和真實(shí)使用語(yǔ)言特征之間的相似度；互動(dòng)性指考生哪些個(gè)體特征參與完成測(cè)試任務(wù)以及這些特征被激活的程度如何；影響力則是指一項(xiàng)測(cè)試對(duì)整個(gè)社會(huì)、教育體制及個(gè)人帶來(lái)的各種后效作用；可行性指在測(cè)試設(shè)計(jì)、開(kāi)發(fā)和使用過(guò)程中從物力、人力和財(cái)力方面考慮是否可行。

二、大學(xué)英語(yǔ)校內(nèi)測(cè)試

大學(xué)英語(yǔ)校內(nèi)測(cè)試主要指在校學(xué)生參加的常規(guī)性期末考試，也包括入學(xué)考試、分級(jí)考試等。筆者所在院校大學(xué)英語(yǔ)期末考試側(cè)重以語(yǔ)言知識(shí)為重點(diǎn)的語(yǔ)言能力考察，屬于心理測(cè)量學(xué)-結(jié)構(gòu)主義的測(cè)試模式。本測(cè)試模式將語(yǔ)言知識(shí)理解為語(yǔ)音、詞匯、語(yǔ)法以及流利度等的組合，認(rèn)為語(yǔ)言技能包括聽(tīng)、說(shuō)、讀、寫(xiě)四項(xiàng)，多采用分立式的題目進(jìn)行測(cè)試。通過(guò)多年的摸索，筆者所在院校大學(xué)英語(yǔ)期末測(cè)試已基本形成固定的試卷結(jié)構(gòu)，由聽(tīng)力理解、詞匯與語(yǔ)法、閱讀理解、完形填空以及翻譯或?qū)懽鞑糠謽?gòu)成。聽(tīng)力理解部分（25%）考查本學(xué)期所對(duì)應(yīng)級(jí)別的聽(tīng)力理解能力，時(shí)長(zhǎng)在20分鐘左右；詞匯（10%）語(yǔ)法部分主要考查本學(xué)期教材中所學(xué)習(xí)基礎(chǔ)語(yǔ)法詞匯知識(shí)；閱讀理解部分（40%）對(duì)應(yīng)該學(xué)期級(jí)別要求，選擇四篇不同題材的文章，考查學(xué)生的閱讀分析、歸納總結(jié)以及批判性思維能力；完形填空（10%）為綜合題目，全面考查學(xué)生各方面英語(yǔ)運(yùn)用能力；翻譯或?qū)懽鞑糠郑?5%）為主觀性試題，選擇恰當(dāng)?shù)?、教材話題相關(guān)的翻譯或者作文題目，全面考查學(xué)生輸出能力。本研究將依托Bachman & Palmer（1996）提出的“測(cè)試有用性框架”，結(jié)合校內(nèi)考試的特點(diǎn)，著重分析筆者所在院校大學(xué)英語(yǔ)期末測(cè)試的信度、構(gòu)念效度、影響力以及可行性。

三、測(cè)試有用性分析

1.信度。信度是指一項(xiàng)測(cè)試的可靠程度。影響考試信度的因素很多，但對(duì)于大學(xué)英語(yǔ)校內(nèi)測(cè)試來(lái)說(shuō)，主要有客觀題的內(nèi)部一致性信度和主觀題的評(píng)分信度。影響客觀試題內(nèi)部一致性信度因素包括以下幾點(diǎn)：第一，試題的難度和區(qū)分度。題目難度會(huì)影響區(qū)分度，進(jìn)而影響測(cè)試信度。第二，試題數(shù)量。從理論上來(lái)說(shuō)，題目越多，信度越高，但需要考慮考試時(shí)長(zhǎng)和考生承受力。第三，試題的同質(zhì)性，即試題是否屬于同一范疇。為保證試題的內(nèi)部一致性，筆者所在院校盡量做到試題編制標(biāo)準(zhǔn)化、規(guī)范化。學(xué)校成立專(zhuān)門(mén)考試中心，負(fù)責(zé)制定考試規(guī)范、命題準(zhǔn)則，并對(duì)命題人進(jìn)行集中專(zhuān)業(yè)培訓(xùn)，確保所選每一道試題質(zhì)量可靠、難易度和區(qū)分度適中。每一套試題題量在95和105之間，適合110分鐘完成。影響主觀題評(píng)分信度的主要是評(píng)閱人因素。主觀測(cè)試的評(píng)分常常因人而異，所以很難達(dá)到較高的信度。為了盡可能把評(píng)閱人主觀因素影響降到最低，首先要制定詳細(xì)明確、可操作性強(qiáng)的評(píng)分標(biāo)準(zhǔn)；其次，加強(qiáng)評(píng)閱人閱卷前的培訓(xùn)學(xué)習(xí)，使閱卷人員掌握統(tǒng)一、細(xì)致、穩(wěn)定的評(píng)閱程序和評(píng)閱要求。

2.構(gòu)念效度。效度回答的是一項(xiàng)測(cè)試在多大程度上考了想要考察的內(nèi)容的問(wèn)題。效度整體觀理論下，效度是一個(gè)整體概念，構(gòu)念效度是其核心，內(nèi)容和校標(biāo)關(guān)聯(lián)證據(jù)是構(gòu)念效度證據(jù)的一部分。

構(gòu)念，即“構(gòu)成語(yǔ)言能力的理念”。試卷開(kāi)發(fā)前首先要明確所要測(cè)量的構(gòu)念，也就是說(shuō)，要考查的能力是什么。測(cè)試與教學(xué)密切相關(guān)，兩則都是建立在一定的語(yǔ)言學(xué)理論和語(yǔ)言教學(xué)理論基礎(chǔ)之上的。大學(xué)英語(yǔ)校內(nèi)測(cè)試屬于成績(jī)測(cè)試的范疇，主要考查范圍是本學(xué)期所學(xué)內(nèi)容和能力。因此，在明確測(cè)試構(gòu)念時(shí)可以借助于本校的大學(xué)英語(yǔ)課程教學(xué)大綱中本學(xué)期能力量級(jí)的描述。教學(xué)大綱對(duì)各學(xué)期各級(jí)別學(xué)生從聽(tīng)、說(shuō)、讀、寫(xiě)、譯能力要求的角度給出了宏觀描述。首先，教學(xué)大綱涵蓋的能力要求轉(zhuǎn)化為具體的測(cè)試構(gòu)念時(shí)還需進(jìn)一步細(xì)化，明確各種能力在不同級(jí)別上的具體要求，以提高構(gòu)念框架的可操作性。此外，為保證測(cè)試效度的完整性，應(yīng)盡可能采用主、客觀相結(jié)合的多種題型。

3.影響力。大學(xué)英語(yǔ)校內(nèi)測(cè)試的影響力主要是指對(duì)教學(xué)過(guò)程、學(xué)生學(xué)習(xí)、教師教學(xué)的影響。期末測(cè)試除了檢驗(yàn)學(xué)生是否達(dá)到了該學(xué)期的教學(xué)要求，還兼有促教促學(xué)的功能。學(xué)生通過(guò)參加考試了解前一段時(shí)期的學(xué)習(xí)情況，發(fā)現(xiàn)自己的不足和努力方向；教師通過(guò)分析測(cè)試成績(jī)，發(fā)現(xiàn)教學(xué)中潛在的問(wèn)題，及時(shí)調(diào)整教學(xué)過(guò)程，優(yōu)化課程設(shè)計(jì)。

4.可行性。測(cè)試的可行性主要考慮在測(cè)試設(shè)計(jì)、開(kāi)發(fā)和使用過(guò)程中物力、人力和財(cái)力等方面的因素。校內(nèi)測(cè)試主要涉及到人力方面的因素。首先，試題的命制是一項(xiàng)技術(shù)含量高的專(zhuān)業(yè)性任務(wù)，并非每一位大學(xué)英語(yǔ)教師都是合格的命題者。命題人員必須進(jìn)行專(zhuān)業(yè)的培訓(xùn)，對(duì)試題的難易度、區(qū)分度等技術(shù)指標(biāo)有深刻的理解，否則，所命試題就達(dá)不到測(cè)試質(zhì)量要求，更難保證測(cè)試的信度和效度。組建專(zhuān)業(yè)的命題團(tuán)隊(duì)是十分必要的。此外，主觀試題閱卷費(fèi)時(shí)費(fèi)力，信度相對(duì)較低，命題者不得不忍痛割?lèi)?ài)，放棄一些效度較高的開(kāi)放性試題，這將影響測(cè)試整體效度的完整性，筆者所在院校大學(xué)英語(yǔ)測(cè)試由教務(wù)處統(tǒng)一組織管理。

四、總結(jié)

測(cè)試在整個(gè)教學(xué)過(guò)程中占據(jù)著至關(guān)重要的地位。研究大學(xué)英語(yǔ)校內(nèi)測(cè)試的有用性，對(duì)于開(kāi)發(fā)、實(shí)施具有校本特色的科學(xué)、合理的考試，切實(shí)保障大學(xué)英語(yǔ)教學(xué)質(zhì)量具有重要意義。根據(jù)以上分析，對(duì)各高校大學(xué)英語(yǔ)測(cè)試工作的開(kāi)展提出以下建議。

第一，成立專(zhuān)門(mén)的測(cè)試機(jī)構(gòu)，完善、優(yōu)化測(cè)試程序，制定測(cè)評(píng)工作章程，從制度上保證測(cè)試的信度。第二，加強(qiáng)命題人學(xué)習(xí)、培訓(xùn)、交流，在深入了解相關(guān)測(cè)試?yán)碚摵徒虒W(xué)理論的基礎(chǔ)上，合理組織試卷結(jié)構(gòu)，選擇考題類(lèi)型，保障測(cè)試的科學(xué)性，提高測(cè)試信度和效度。第三，針對(duì)自身人力、物力的不足，發(fā)揮形成性評(píng)價(jià)的積極作用，提高綜合評(píng)測(cè)的構(gòu)念效度完整性。第四，明確教學(xué)目標(biāo)和測(cè)試標(biāo)準(zhǔn)，引導(dǎo)學(xué)生樹(shù)立正確學(xué)習(xí)態(tài)度，走出教材，跨越課堂，全方位多渠道提高自身英語(yǔ)語(yǔ)言應(yīng)用能力。最后，提高任課教師專(zhuān)業(yè)素養(yǎng)，尤其是數(shù)據(jù)分析能力，以更加高效地利用測(cè)試數(shù)據(jù)，服務(wù)于教學(xué)。

參考文獻(xiàn)：

[1]Bachman.L.F.& A.S.Palmer.1996.Language Testing in Practice [M].Oxford：Oxford University Press.

[2]Messick S.Validity and washback in language testing [J].Language Testing，1996，13（3）：241-256.

[3]韓寶成，羅凱洲.語(yǔ)言測(cè)試效度及其驗(yàn)證模式的嬗變[J].外語(yǔ)教學(xué)與研究（外國(guó)語(yǔ)文雙月刊），2013，（3）：411-425.

[4]楊惠中.有效測(cè)試、有效教學(xué)、有效使用[J].外國(guó)語(yǔ)，2015，（1）：2-26.