TEM4閱讀題型的內(nèi)容效度研究

張珊??

摘要：英語專業(yè)四級考試（TEM4）作為國家級測試，旨在檢查各高校基礎(chǔ)階段的英語教學(xué)和學(xué)習(xí)情況，該測試的內(nèi)容效度成為試題使用者最關(guān)心的問題。本研究以2012-2016年的TEM4閱讀真題為對象，采用Bachman & Palmer的任務(wù)特點框架（A framework of language task characteristic），結(jié)合閱讀題型特點和新版《考試大綱》（2004）具體要求，通過分析語篇特征和期望回答特征來考查TEM4閱讀題型內(nèi)容與考試大綱的吻合度，即探究測試內(nèi)容是否達(dá)到《考試大綱》的要求。結(jié)果表明：1）從語篇輸入特征來看，題材、體裁、生詞、篇幅、閱讀速度基本符合2004年新版大綱的要求和規(guī)定；2）從預(yù)期回答特征來看，答題形式豐富，2016年呈現(xiàn)出新形式，閱讀技能覆蓋廣泛，側(cè)重細(xì)節(jié)提取和邏輯推理能力?？偠灾?，近五年的專四閱讀材料符合了《考試大綱》的基本要求，測試內(nèi)容和測試目的基本一致。

關(guān)鍵詞：TEM4閱讀；Bachman & Palmer任務(wù)框架；內(nèi)容效度

一、 研究背景

TEM4是由高等院校外語專業(yè)指導(dǎo)委員會實施的唯一的全國性考試，旨在檢查各高校英語專業(yè)基礎(chǔ)階段教學(xué)大綱的執(zhí)行情況，其具有極大的權(quán)威和影響力，也受到眾多機(jī)構(gòu)、專家的認(rèn)可。2004年頒布的《高校英語專業(yè)四級考試大綱》也對舊大綱做了重大改革和調(diào)整。閱讀是語言學(xué)習(xí)的最主要輸入方式，是獲取信息和擴(kuò)大知識最根本的途徑，對培養(yǎng)扎實的語言基礎(chǔ)知識具有重要的意義，在聽、說、讀、寫、譯五項語言技能中的重要地位不可動搖。在TEM4中，閱讀題型占有非常重要的地位，占總分的20%。為了更好地反映新大綱的實施力度，幫助英語專業(yè)學(xué)生和教師了解專四考試的測試效度，本研究將對2012-2016年的TEM4閱讀真題進(jìn)行內(nèi)容效度分析，探討TEM4閱讀內(nèi)容和《考試大綱》的吻合度。

二、 核心概念

（一） 測試效度和內(nèi)容效度

Brown，J.D.認(rèn)為測試效度是指對想要測試的內(nèi)容的測試程度，對想要測試的內(nèi)容的預(yù)期測試效果。測試效度在教師評價學(xué)生、安排教學(xué)中都起到特殊的作用。在語言測試效度中，通常有三種主要輔助效度測試的策略，即內(nèi)容效度、結(jié)構(gòu)效度和效標(biāo)關(guān)聯(lián)效度。其中，內(nèi)容效度（content validity）即內(nèi)容的有效性，指測試內(nèi)容應(yīng)符合測試的目的和要求，測試項目與教學(xué)內(nèi)容要一致，不涉及無關(guān)內(nèi)容。TEM4測試是一種語言測試效度，內(nèi)容效度是最核心的部分，能夠體現(xiàn)出語言測試的基本要素和基本技能。國內(nèi)對TEM4效度研究總體呈現(xiàn)兩個趨勢：第一，研究視角的多元性。具體表現(xiàn)在8個方面，分別是：效度分析、效度檢驗、效度和信度、效度的正用和誤用、效度與學(xué)業(yè)測試、效度測量以及效度理論的變遷。第二，研究題型的全面性。不僅涉及TEM4閱讀題目的研究，還涉及聽力、完形、語法與詞匯以及寫作這五方面的研究。

（二） Bachman & Palmer的考試任務(wù)特點框架

Bachman & Palmer（1996）提供了一個詳細(xì)的、可供參考的語言使用任務(wù)特征框架（A framework of language task characteristic）。該框架包括五部分：環(huán)境特征、測試規(guī)則特征、輸入特征、期望回答的特征以及輸入和回答的關(guān)系特征。本研究基于已有框架，結(jié)合閱讀測試的特點，從輸入特征和預(yù)期回答特征兩方面分析TEM4閱讀題的內(nèi)容效度，同時對基本的特征做了局部調(diào)整，輸入特征由體裁、題材、生詞、篇幅和閱讀速度五部分組成，預(yù)期回答特征主要分析測試答題形式和題目覆蓋閱讀技能。

輸入特征形式輸入的語言體裁、題材、生詞、篇幅、閱讀速度

期望回答特征形式期望回答的語言

測試答題形式、題目覆蓋閱讀技能

三、 研究設(shè)計

一方面，采用數(shù)據(jù)統(tǒng)計法。依照Bachman & Palmer（1996）的語言使用任務(wù)特征框架，對2012-2016年閱讀真題從輸入特征和預(yù)期回答的特征兩方面，即篇幅、生詞、體裁、題材、閱讀速度、答題形式和閱讀技能覆蓋這7個維度進(jìn)行整理，輸入原始數(shù)據(jù)，進(jìn)行分類統(tǒng)計。另一方面，采用內(nèi)容分析法。比較新版《考試大綱》對TEM4閱讀題型的具體要求和已收集的真題數(shù)據(jù)，并結(jié)合量性分析進(jìn)一步探究以上7個維度的與大綱要求的一致性。

四、 數(shù)據(jù)分析與討論

（一） 輸入特征

1. 題材

《考試大綱》規(guī)定：題材廣泛，包括社會、科技、文化、經(jīng)濟(jì)、日常知識、人物傳記等。由下表可知，2012-2016年專四閱讀題材基本能夠契合大綱要求，19篇閱讀材料包括了社會類、科技類、文化類、經(jīng)濟(jì)類以及人物傳記類，依次是社會類（42%）、文化類題材（21%）、人物傳記（15%）、科技類（11%）、經(jīng)濟(jì)類（11%），日常知識類基本無涉及。可看出，題材選擇較偏向社會類和文化類。同時，除了2015年題材安排失衡，其他年份的題材安排得當(dāng)?？傮w來說，改革后的閱讀題材基本符合大綱的考試規(guī)定和要求，不僅增加了關(guān)于社會類題材的閱讀量，也比較重視文化類題材，預(yù)期近幾年閱讀題材會有這兩方面的偏向。

2. 體裁

《考試大綱》規(guī)定：體裁多樣，包括記敘文、描寫文、說明文、議論文、廣告、說明書、圖表等。從下表可知，近五年的閱讀材料主要涉及記敘文、描寫文、說明文和議論文，未涉及廣告、說明書、圖表。具體來說，廣告、說明書、圖表也屬于說明文類。因此，2012-2016年英語專業(yè)四級閱讀理解的體裁也符合了大綱規(guī)定，類型多樣，依次是記敘文（43%）、說明文（27%）、描寫（15%）和議論（15%）。2012年對體裁的安排最為合理，2013-2015年涉及了3種體裁，2016年僅涉及兩種體裁，但是看得出改革后出題人在體裁選擇上偏向記敘文，說明文，重點培養(yǎng)考生對語言的基本應(yīng)用能力。endprint

3. 生詞（難易度）

生詞在閱讀材料中占有比例直接反映了閱讀材料的難易度?！犊荚嚧缶V》規(guī)定：閱讀語言材料難度中等，關(guān)鍵詞匯基本上不超過《大綱》規(guī)定的范圍。換言之，閱讀材料中的詞匯不能偏離專四基礎(chǔ)詞匯識記范圍。通過對近5年專四真題閱讀材料的生詞統(tǒng)計，如下表所示，整體超綱比例不到2%，即98%以上的單詞都在考生被要求識記的單詞范圍以內(nèi)，基本符合《大綱》要求，閱讀難度也就控制在可閱讀范圍內(nèi)，2014年和16年的生詞不到1%，閱讀難度相對更低了。

Krashen曾提出，在學(xué)習(xí)過程中，學(xué)習(xí)任務(wù)應(yīng)該稍微比學(xué)習(xí)者已有水平高一個層級，也就是著名的i+1理論。因此，這不到2%的生詞利于考生閱讀能力和閱讀技巧的提升，其目的是給考生提供一個合適的空間，刺激已有認(rèn)知詞匯，結(jié)合閱讀材料上下文和閱讀語境，進(jìn)一步強(qiáng)化個人的閱讀語感和猜詞意識。因此出題者應(yīng)適當(dāng)給考生提供有生詞的閱讀材料，在實施考綱要求的同時，為學(xué)習(xí)者提供一個更好的學(xué)習(xí)園地。

4. 篇幅長度

《考試大綱》規(guī)定：專四閱讀部分由數(shù)篇閱讀材料組成，閱讀材料共長1800個單次左右。由下表可看出，2012-2015年閱讀材料篇章總體在1650詞左右，僅2016年的篇幅字?jǐn)?shù)達(dá)到2100個詞，比《大綱》要求的篇章長度略多。近五年專四真題閱讀材料總計字?jǐn)?shù)，包括題干字?jǐn)?shù)，總體是在2100左右，尤其2016年總字?jǐn)?shù)達(dá)到2400個單詞。總體來說，改革以后專四篇幅長度基本符合了《大綱》基本要求。16年的篇幅長度明顯增加，預(yù)期未來的考試篇幅可能會延長，對考生的閱讀速度也提出了新挑戰(zhàn)。

5. 閱讀速度

《考試大綱》規(guī)定：考查學(xué)生閱讀技能的同時，既要求準(zhǔn)確性，也要求一定的速度，并能根據(jù)需要自覺調(diào)整閱讀速度，考試時間為25分鐘，閱讀速度為每分鐘120個單詞。上表對近五年的閱讀速度做了粗略統(tǒng)計，將每年的篇章字?jǐn)?shù)和總字?jǐn)?shù)與考試時間比算出，得到了閱讀速度的區(qū)間，可看出在規(guī)定時間內(nèi)，閱讀速度總體維持在1分鐘60-80個單詞，比規(guī)定的1分鐘120個單詞略慢。因為計算忽略了考生思考、做題的單位時間，得出的閱讀速度是有偏差的，也就是說考生的最慢閱讀速度可維持在1分鐘80個單詞?？傮w上也是接近《考試大綱》要求的。

（二） 期望回答特征

1. 答題形式

新《考試大綱》明確提出閱讀部分采用單項選擇題形式，學(xué)生根據(jù)材料可從每道題的四個選項中選出一個最佳的答案，共20道題目。為了本研究數(shù)據(jù)的科學(xué)性，不僅觀察了2012-2016年的測試真題，還分析了2004-2011年的考題形式，結(jié)果發(fā)現(xiàn)2004-2015年的閱讀部分考題嚴(yán)格遵循了考綱的要求，歷年都是20道單項選擇題。但2016年題型有了變化，題目減少為15道，10道題目是單選形式，其他5道題目為簡答題。盡管與《大綱》所要求的題型有一點出入，但這種新模式打破了之前的封閉式考題形式，添加了開放性題型，無疑是對考生閱讀技能的新型考查，有利于練習(xí)了考生的信息提取能力、強(qiáng)化信息的輸出能力，也更明確地反映考生的語言表達(dá)問題。

2. 閱讀技能覆蓋分析

《考試大綱》要求：能掌握閱讀材料的主旨大意，了解說明主旨大意的事實和細(xì)節(jié)；即理解字面意義，又能根據(jù)所讀材料進(jìn)行判斷和推理；即理解個別句子的意義，也能理解上下文的邏輯關(guān)系。基于《大綱》和考點，進(jìn)一步將閱讀技能細(xì)化成六部分：主旨類、細(xì)節(jié)類、態(tài)度類、推理類、詞匯類和指代類。結(jié)合下圖可知，2012-2016年95道閱讀題目中考查細(xì)節(jié)類的題目約占29%，考查推理題型約占27%，17%考查詞匯，14%考查主旨類題目，13%考查態(tài)度類，指代類題型無涉及。總體來看，這些題型既測試了考生對整篇短文的理解能力，又對文章提供的信息和事實進(jìn)行提問；既測試了考生的推理和判斷能力，又測試了考生在閱讀中理解詞義和詞組意義的能力。總體來說，題型設(shè)計囊括了《大綱》所要考查的各種閱讀技能，對閱讀能力進(jìn)行了綜合的、全面的考查。鑒于細(xì)節(jié)題和推理題的高頻次，預(yù)期未來考題會側(cè)重在這兩方面，因此，教師在考前輔導(dǎo)和考生在模擬練習(xí)時應(yīng)該有所偏倚，把握考題的類型，為考試的成功做好充分準(zhǔn)備。

五、 結(jié)論

（一） 從語篇輸入特征來看，題材、體裁、生詞、篇幅、閱讀速度基本符合2004年新版《大綱》的要求和規(guī)定。題材具有廣泛性，重視社會和文化類型；體裁具有多樣性，側(cè)重對記敘文和說明文的考查；詞匯基本在考綱范圍內(nèi)，歷年生詞未超過總字?jǐn)?shù)的2%；篇幅長短貼近考綱規(guī)定長度，僅2016年篇幅略有增加；考生的閱讀速度也接近《大綱》的要求。

（二） 從預(yù)期回答特征來看，首先，答題形式呈現(xiàn)出新形式，既保持了《大綱》要求的封閉式的選擇題，也出現(xiàn)了開放性的簡答題，尤其是2016年的考題。其次閱讀技能覆蓋較全面，多樣的題目設(shè)計考查了考生的閱讀基本技能，包括主旨理解、細(xì)節(jié)提取、態(tài)度判斷、邏輯推理、詞匯詞義的辨析，其中重點放在細(xì)節(jié)和推理題目上。

參考文獻(xiàn)：

[1]Brown，J.D.Testing in Language Programs：A Comprehensive Guide to English Language Assessment[M].Beijing：Tsinghua University Press，2013（p220-223）.

[2]?？≤S，劉雪蓮，蘇曉麗.英語專業(yè)四級考試指南及全真模擬[M].大連理工大學(xué)出版社，2011.5（p93-102）.

[3]侯艷萍.近七年英語專業(yè)四級閱讀理解內(nèi)容效度評估[J].河北大學(xué)學(xué)報（哲學(xué)社會科學(xué)版），2012.7.

[4]龍玉梅.英語專業(yè)四級考試批判性閱讀能力測試探析[J].淮北師范大學(xué)學(xué)報（哲學(xué)社會科學(xué)版），2012.2.

作者簡介：張珊，新疆維吾爾自治區(qū)石河子市，石河子大學(xué)。endprint