基于Bachman和Palmer的測試有效性模型評析2017年高考英語全國卷I試題命題質(zhì)量

摘 要：高考是中國教育體系中最重要的考試之一，而英語又是高考中的重要科目之一。因此，高考英語試卷的命題質(zhì)量直接關(guān)系到學(xué)生的升學(xué)和未來發(fā)展。本文旨在分析2017年高考英語全國卷I試題，應(yīng)用Bachman和Palmer的測試有效性模型評析該試卷的命題質(zhì)量，并提出一些意見和建議。

關(guān)鍵詞：語言測試；高考英語；信度；效度

作者簡介：劉詩琪（1996-），女，四川江油人，中國民航飛行學(xué)院綿陽分院。

一、基本介紹

全國高考英語測試（NMET）是一種大規(guī)模的、有規(guī)范參考的高風(fēng)險考試，對考生未來的學(xué)習(xí)和生活有很大的影響。因此，高考英語試卷的質(zhì)量一直是一個有爭議的問題。人們擔(dān)心，NMET是否可以被信任作為決定考生未來的重要甚至唯一途徑。在文獻(xiàn)檢索過程中，筆者發(fā)現(xiàn)相關(guān)研究主要集中在以下幾個方面：第一，對NMET的某一個特定組成部分的研究；第二，測試策略研究；第三，全國卷與自主命題試卷的比較研究。然而，從整體上對高考英語試題進(jìn)行評析的文獻(xiàn)卻很少。鑒于此，本文利用Bachman 和 Palmer的測試有效性模型對高考英語全國卷進(jìn)行評析。首先對NMET進(jìn)行概述，接著利用Bachman 和 Palmer的測試有效性模型評析NMET試卷的質(zhì)量。

二、全國高考英語測試（NMET）概述

（一）考試目的

由“一核”為指引的高考評價體系，英語科命題堅(jiān)持立德樹人，促進(jìn)學(xué)生形成開放意識和獨(dú)立思考能力，以高等學(xué)校人才選拔的要求為依據(jù)，評估考生的英語能力，考試結(jié)果將與語文、數(shù)學(xué)等其他科目的成績一起作為高校錄取新生的依據(jù)。

（二）考試題型

目前，NMET的題型有聽力、閱讀、語言知識運(yùn)用和寫作。表1對NMET的題型進(jìn)行了匯總。根據(jù)表1，單項(xiàng)選擇題占總分的比例最高（66.7%），非單項(xiàng)選擇題占總分的33.3%。非單項(xiàng)選擇題分別是完形填空、語法填空、短文改錯和短文寫作，非單項(xiàng)選擇題中，短文寫作所占比例最大（16.67%）。

截屏2023-11-18 上午11.42.21

（三）閱卷

單選題直接由機(jī)器評分，而主觀題由人工閱卷。閱卷人員主要為高校教師、高中骨干教師等。此外，會有一組人負(fù)責(zé)監(jiān)督閱卷工作，他們每半小時抽查一次閱卷人的工作。在評分之前，所有閱卷人員都要接受一天的培訓(xùn)，學(xué)習(xí)如何遵循評分標(biāo)準(zhǔn)評卷。

高考實(shí)行電子閱卷的形式，答題卡經(jīng)掃描后，由系統(tǒng)將答題卡圖片切割（無考生個人信息），每個閱卷人員只負(fù)責(zé)評閱一道大題，且評閱對象是隨機(jī)分配的。為確保評卷的公正性，人工評卷中主觀性較大的題目，如作文題采用多評形式，由兩人以上評閱，如果所給分?jǐn)?shù)的差值在2分以內(nèi)，他們將取平均分，如果兩人的評分差值大于規(guī)定的分值，則進(jìn)行三評。如果三評后誤差仍然過大，則交由評卷組長處理（或者退回后，重新隨機(jī)安排其他閱卷人員評閱）。

三、基于測試有效性模型的全國高考英語測試（NMET）試卷評析

（一） 測試有效性框架概述

1996年Bachman和Palmer提出的測試有效性框架為評析測試提供了一個更加具體的模型，彌合了語言測試?yán)碚摵蛯?shí)踐之間的差距。受Messick的統(tǒng)一效度框架的影響，Bachman和Palmer將“效度”這個傳統(tǒng)上以各種方式解釋和區(qū)分的復(fù)雜概念重新置于“測試有效性”的概念中，將測試評估的重點(diǎn)轉(zhuǎn)移到測試的預(yù)期用途和使用背景上。該模型包括測試有效性評估的六個標(biāo)準(zhǔn)（見圖1）。該模型已被廣泛應(yīng)用于大量研究不同類型語言測試的研究中。

下面，筆者將基于此模型評析NMET試卷，重點(diǎn)關(guān)注其信度、結(jié)構(gòu)效度、真實(shí)性。

（二）真實(shí)性

Bachman與 Palmer用目標(biāo)語言使用任務(wù)（TLU）的特征與測試任務(wù)的特征的對應(yīng)程度來測試真實(shí)性。Bachman認(rèn)為，可以通過IA（交互能力方法）來分析確定測試真實(shí)性的兩個前提條件：一個是考生的特征；另一個是測試任務(wù)的特征。通過測試情景、測試項(xiàng)目和考生之間的交互性來衡量測試的真實(shí)性。交互作用越強(qiáng)，測試的真實(shí)性就越高。下面以2017年高考英語全國卷I為例，分析其真實(shí)性。

1.與現(xiàn)實(shí)生活相關(guān)的寫作主題?，F(xiàn)在的高考英語試題更加注重英語語言知識、中國傳統(tǒng)文化和社會主義核心價值觀的整合，通過高考的反撥效應(yīng)，在高中英語教學(xué)中拓寬學(xué)生的國際視野，培養(yǎng)學(xué)生的愛國主義精神。這種改進(jìn)在寫作部分中尤為突出。本試卷寫作的題目要求是：“假設(shè)你是李華，正在教你的英國朋友Leslie學(xué)習(xí)中文。請寫一封電子郵件，告知下次上課的計(jì)劃。”學(xué)生可以通過這樣的寫作題目，提升自己的交際任務(wù)完成能力，能夠?qū)W以致用。本試卷閱讀文章的選擇結(jié)合了英語國家文化和中國文化。表2總結(jié)了本試卷的文章主題，可以看出，試題包含了大量的中西方文化元素和日常話題元素。這些元素貼合考生的認(rèn)知水平，文章主題會吸引考生。Widdowson認(rèn)為，語言的真正使用是語言使用者和他的話語之間的互動。這里的互動指的是考生在測試中參與的程度和類型。因此本試卷具有較高程度的真實(shí)性。

（三）考試信度

孫成崗指出，試卷的信度反映了測試結(jié)果與測試項(xiàng)目和考生之間的關(guān)系。人們普遍認(rèn)為，如果所有考生某次測試中的分?jǐn)?shù)相近，那么該測試的信度就不高。如果考生的分?jǐn)?shù)有差異，則信度越高。也就是說，如果使用了高可靠性和中等難度的測試題，則可以區(qū)分不同語言水平的學(xué)生。

1.評分標(biāo)準(zhǔn)。

提高測試可靠性的關(guān)鍵是制訂科學(xué)合理的、易于實(shí)施的標(biāo)準(zhǔn)。以2017年高考英語全國卷I寫作部分的評分標(biāo)準(zhǔn)為例。

從這個評分標(biāo)準(zhǔn)不難發(fā)現(xiàn)，重點(diǎn)是對語法和詞匯等語言知識的規(guī)范使用，而不是寫作能力。閱卷者更喜歡標(biāo)準(zhǔn)使用語言的文章，但忽視了文本的邏輯和批判性思維，這將不可避免地導(dǎo)致教師采用以考試為導(dǎo)向的教學(xué)策略。例如，學(xué)生花時間去記憶不同的句型和觀點(diǎn)，這些句型和觀點(diǎn)可以用于許多寫作主題，即使沒有個人見解，也可能贏得閱卷者的青睞。這個不科學(xué)的標(biāo)準(zhǔn)極大地影響了測試的可靠性。因此筆者認(rèn)為修改評分標(biāo)準(zhǔn)是提高NMET可靠性的方法之一。

2.閱卷者。

閱卷者也是影響可靠性的關(guān)鍵因素。命題者的命題意圖，閱卷者具備達(dá)到要求的語言能力才能完全理解。NMET的閱卷者來自不同的學(xué)校，閱卷者的水平無法完全保證。有一個詳細(xì)和全面的評分標(biāo)準(zhǔn)固然重要，但合格的閱卷者也是提高NMET可靠性的關(guān)鍵因素。因此，除了制訂可靠的試卷和評分標(biāo)準(zhǔn)外，還應(yīng)重視對閱卷者的培訓(xùn)，建立NMET閱卷人員資格認(rèn)證體系是提高檢測信度的重要保證。

3.評分。從表1可以看出，在NMET試卷中，66.7%的測試項(xiàng)目是選擇題的形式，這樣可以避免評分的主觀性。同時，選擇題的答案將由機(jī)器自動評分，可以保證其可靠性。通過機(jī)器評分的方式自動屏蔽考生的信息，確保公平性和客觀性。其次，實(shí)時監(jiān)控功能保證了評估的進(jìn)度和質(zhì)量。另外，通過自動評分和統(tǒng)計(jì)分析，避免了人工操作中可能出現(xiàn)的錯誤。

（四）考試的效度

Bachman和Palmer認(rèn)為，語言測試的構(gòu)念效度是指測試滿足理論要求的程度以及測試是否基于有效的語言觀點(diǎn)和語言學(xué)習(xí)觀點(diǎn)。本文以NMET的閱讀理解題為例，討論了其效度。

閱讀理解題全部是單選題，側(cè)重于訓(xùn)練學(xué)生歸納總結(jié)、預(yù)測推理的能力。作為一種被動測試形式，單選題側(cè)重考查學(xué)生的閱讀認(rèn)知能力，但對考查語言輸出方面有一定的不足。

第二，語言學(xué)習(xí)的目標(biāo)是用語言來實(shí)現(xiàn)交際，完成某項(xiàng)任務(wù)。換句話說，語言作業(yè)交流的一種工具，用于完成不同的任務(wù)，但單選題通常很難評估學(xué)生的綜合語言運(yùn)用能力，這可能導(dǎo)致學(xué)生可以得到一個好成績，但在現(xiàn)實(shí)生活中無法很好地應(yīng)用英語。

第三，選擇題的廣泛使用帶來負(fù)面反撥作用，不利于提高學(xué)生的綜合語言運(yùn)用能力。不難發(fā)現(xiàn)，排除法、猜測法等各種考試策略，一定程度上阻礙了正常的閱讀教學(xué)。教師和學(xué)生都更注重使用考試策略來獲得更高的分?jǐn)?shù)，而不是提高閱讀能力。在測試中，即使考生不明白文章大意，也可以通過使用這些策略來選擇正確的答案。

Bachman認(rèn)為，語言的學(xué)習(xí)不只是對語言知識的學(xué)習(xí)，更要掌握語言在語境中的用法。由于單選題具有局限性，NMET試卷中出現(xiàn)了七選五閱讀題目。其主要考查學(xué)生將文章內(nèi)容與選項(xiàng)連接起來的能力。這種基于任務(wù)的閱讀可以測試學(xué)生對文章的理解程度，也可以評估學(xué)生從文本中選擇有用信息和完成任務(wù)的能力。因此，學(xué)生的語言輸入能力和輸出能力能被同時測試。這是一種高效的測試方式，具有較高的信度和效度。因此，在筆者看來，任務(wù)型閱讀的效度高于單純的閱讀單選題。

然而，NMET的目的是考查學(xué)生的英語綜合能力，目前的七選五閱讀只是要求學(xué)生從選項(xiàng)中選擇答案，主要考查學(xué)生對單詞、語法和搭配的理解，不利于NMET目標(biāo)的達(dá)成。因此，閱讀測試的效度還有待提高。

四、結(jié)語

從效度、信度、影響、真實(shí)性四個方面來看，即使是最大規(guī)模的國家級考試，NMET的質(zhì)量也沒有人們想象的那么高。盡管對高考英語試卷不斷進(jìn)行改革，但仍然存在很多問題。“啞巴英語”仍然是當(dāng)前英語教學(xué)的一大癥結(jié)，口語考查的缺失降低了考試的效度，也導(dǎo)致大多數(shù)考生甚至教師更愿意把時間花在做練習(xí)和掌握考試策略上，而不是語言的使用。為了進(jìn)一步提高學(xué)生的英語語言能力，NMET仍然需要進(jìn)一步改進(jìn)。

參考文獻(xiàn)：

[1]韓寶成.語言測試：理論、實(shí)踐與發(fā)展[J].外語教學(xué)與研究，2000（1）：47-52.

[2]單筱筱，黃芳. 淺談2016年高考英語全國卷Ⅰ卷閱讀信度效度[J].亞太教育，2016（31）：42，19.

[3]吳數(shù)元.高考英語閱讀理解的應(yīng)試策略分析與研究[J].英語廣場研，2017（11）：150-151.

[4]Bachman L F. Fundamental considerations in language testing[M]. Oxford： Oxford University Press， 1990.

[5]Bachman，L F ， Palmer A S Language testing in practice [M]. Oxford： Oxford University Press， 1996.

[6]Cheng Liying ， Qi Luxia. Description and Examination of the National Matriculation English Test[J]. Language Assessment Quarterly： An International Journal， 2006（3）：1，53-70.