論大學(xué)英語四級考試作文閱卷評分的高信度

摘要： 本文分析了大學(xué)英語四級考試的作文部分評分的信度，對認(rèn)識全國重大的考試評分必須保持高評分信度有一定的意義。

關(guān)鍵詞： 大學(xué)英語四級考試 作文閱卷評分 高信度

一、引言

信度，即可靠性，衡量測試的準(zhǔn)確性和穩(wěn)定性。每一項測試的結(jié)果都應(yīng)該盡可能保持高信度。大學(xué)英語四級考試中安排短文寫作這一部分，主要目的是考核學(xué)生用英語進(jìn)行書面表達(dá)的能力，也就是說主要是考核語言運用能力。

作文是主觀題。所謂主觀題是指在閱卷過程中評分要依靠閱卷員的主觀判斷的題目。至于命題和答題，當(dāng)然是主觀的。這些因素最終都會影響到對作文閱卷的判分。要使作文卷的分?jǐn)?shù)能正確地反映考生的真實能力，如果不考慮考生本身這一因素，則影響最大的主要是命題和閱卷兩個因素。

二、大學(xué)英語四級考試的作文部分評分方法

大學(xué)英語四級考試的作文部分對考生寫什么內(nèi)容有比較明確的要求，用各種明確的方式如提綱、圖表、關(guān)鍵詞等加以規(guī)定。采用有控制的作文也有利于提高評分的一致性。對作文評分影響最大的是評分過程。同一篇作文，不同的閱卷員可能給出不同的分?jǐn)?shù)。提高作文閱卷的信度就是要保證評分的一致性，包括閱卷員本人的一致性、閱卷員之間的一致性和閱卷點之間的一致性，要采取一定的質(zhì)量控制措施盡量減少和濾除閱卷員評分的主觀性對分?jǐn)?shù)客觀性的影響。作文題的評分通常有兩種方法：一種是綜合法，一種是分析法。綜合法是憑閱卷員通讀一遍的總體印象打分。綜合法的優(yōu)點是能從總體上把握通篇印象，評卷速度比較快?？紤]到大學(xué)英語四級考試規(guī)模太大，因此，決定采用綜合法。分?jǐn)?shù)要經(jīng)過加權(quán)處理、等值處理、正態(tài)化轉(zhuǎn)換等一系列轉(zhuǎn)換過程。［１］

三、如何保證大學(xué)英語四級考試作文閱卷評分的高信度

大學(xué)英語四級考試的作文閱卷如何保證高信度呢？以下略加論述。

第一，參加大學(xué)英語四級考試的作文閱卷者都要接受嚴(yán)格的培訓(xùn)。為了保證閱卷員的閱卷信度（包括閱卷員本人的評分一致性、閱卷員之間的評分一致性、閱卷點之間的評分一致性），大學(xué)英語四級考試采取了一系列措施，包括制定明確的評分標(biāo)準(zhǔn)、確定評分參照卷（range-finders）、嚴(yán)格的閱前培訓(xùn)、閱卷過程隨機(jī)抽查等。在采取以上這些有效措施后依然存在的誤差可以稱為系統(tǒng)誤差，大學(xué)英語四級考試開發(fā)了一套軟件系統(tǒng)，根據(jù)考生在主、客觀題上得分的相關(guān)性進(jìn)行調(diào)整，以濾除系統(tǒng)誤差。事實上，四級考試每次都要在全國范圍內(nèi)動員1500—2000名教師閱卷，閱卷工作是一種辛苦的付出，閱卷過程有嚴(yán)格的質(zhì)量控制措施，并且用計算機(jī)濾除閱卷員的主觀因素，使閱卷信度達(dá)到0.87，這在國內(nèi)各種大規(guī)?？荚囍惺呛懿蝗菀鬃龅降?。［２］

第二，閱卷者首先要熟練掌握四級考試的作文評分標(biāo)準(zhǔn)。大學(xué)英語四級考試的作文評分標(biāo)準(zhǔn)如下：

1.本題滿分為15分。

2.閱卷標(biāo)準(zhǔn)共分五等：2分、5分、8分、11分及14分。各有標(biāo)準(zhǔn)樣卷一至二份。

3.閱卷人員根據(jù)閱卷標(biāo)準(zhǔn)，對照樣卷評分，若認(rèn)為與某一分?jǐn)?shù)（如8分）相似，即定為該分?jǐn)?shù)（即8分）；若認(rèn)為稍優(yōu)或稍劣于該分?jǐn)?shù)，即可加一分（即9分）或減一分（即7分），但不得加或減半分。

4.評分標(biāo)準(zhǔn)：2分：條理不清，思路紊亂，語言支離破碎或在部分句子均有錯誤，且多數(shù)為嚴(yán)重錯誤。5分：基本切題。表達(dá)思想不清楚，連貫性差，有較多的嚴(yán)重語言錯誤。8分：基本切題。有些地方表達(dá)思想不夠清楚，文字勉強(qiáng)連貫；語言錯誤相當(dāng)多，其中有一些是嚴(yán)重錯誤。11分：切題。表達(dá)思想清楚，文字連貫，但有少量語言錯誤。14分：切題。表達(dá)思想清楚，文字通順，連貫性好?；旧蠠o語言錯誤，僅有個別小錯誤。［注：白卷，作文與題目毫不相關(guān)，或只有幾個孤立的詞而無法表達(dá)思想，則給0分。］

然后，根據(jù)評分標(biāo)準(zhǔn)，閱卷者被要求在規(guī)定的時間內(nèi)評閱20至30篇考生的四級作文，那些作文都已經(jīng)由評卷專家集體討論給出了分?jǐn)?shù)。如果閱卷者給出的分?jǐn)?shù)與專家給出的分?jǐn)?shù)基本一致，培訓(xùn)就可以結(jié)束。如果某些閱卷者給出的分?jǐn)?shù)與專家給出的分?jǐn)?shù)相差比較大，那么，他們將被要求繼續(xù)學(xué)習(xí)評分標(biāo)準(zhǔn)，再在規(guī)定的時間內(nèi)評閱20至30篇與開始類似的四級作文，直到他們給出的分?jǐn)?shù)與專家給出的分?jǐn)?shù)基本一致，才可以通過培訓(xùn)。

第三，CET作文網(wǎng)上聯(lián)機(jī)閱卷具有四大顯著特點：1.隨機(jī)分發(fā)試卷；2.實時監(jiān)控閱卷員；3.控制閱卷質(zhì)量；4.高效記錄分?jǐn)?shù)和數(shù)據(jù)。這些特點相應(yīng)構(gòu)成了CET作文網(wǎng)上聯(lián)機(jī)閱卷相對于傳統(tǒng)會議式閱卷所具有的四大優(yōu)勢。CET作文網(wǎng)上聯(lián)機(jī)閱卷得到了參與閱卷教師的肯定。每10至12位閱卷人被分為一個小組，統(tǒng)一由該組組長指導(dǎo)監(jiān)督。閱卷者可以看一看本組電腦上的本組閱卷者所給的分?jǐn)?shù)平均值圖表，以判斷自己所評的分?jǐn)?shù)是否信度比較高。如果某一位閱卷者在某一段時間內(nèi)給出的分?jǐn)?shù)與本組其他閱卷人給出的分?jǐn)?shù)的平均值相差太遠(yuǎn)，組長就會提醒閱卷者注意，甚至被要求重閱。

第四，閱卷者給出的作文分?jǐn)?shù)要與該考生的總分和其他各項成績（比如：閱讀、聽力和翻譯等）的相關(guān)系數(shù)基本一致。相關(guān)系數(shù)法是另一種測量題目區(qū)分度的方法。它的基本原理是：如果某個題目有比較高的區(qū)分度，那么，該題目的得分和總分一定有比較高的相關(guān)系數(shù)。我們想了解一個變量是怎樣和別的變量聯(lián)系的，這在統(tǒng)計學(xué)中叫做回歸。兩個變量的回歸并非那么絕對，有程度之別，這就是它們之間的相關(guān)系數(shù)。［３］相關(guān)系數(shù)高，信度也高。反之亦然。如果閱卷者給出的作文分?jǐn)?shù)與該考生的總分的相關(guān)系數(shù)太低，組長就會提醒閱卷者注意，甚至被要求重閱。

四、結(jié)語

綜上所述，全國大學(xué)英語四級考試委員會和全國大學(xué)英語四級考試的作文閱卷點的管理部門用科學(xué)的方法來保證四級考試的作文閱卷有高信度。因此，大學(xué)英語四級考試的作文閱卷的信度是很高的。

參考文獻(xiàn)：

［1］［2］楊惠中.金艷大學(xué)英語四、六級考試分?jǐn)?shù)解釋［J］.外語界，2001.（1）.

［3］桂詩春，寧春巖.語言學(xué)方法論［M］.外語教學(xué)與研究出版社，2002.