TEM4閱讀任務(wù)語篇輸入及預(yù)期回答分析

崔婷婷 劉敏

摘 ?要：文章以2016年改革后的三套TEM4閱讀試題為研究對(duì)象（2016-2018），以《關(guān)于英語專業(yè)四級(jí)考試（TEM4）題型調(diào)整的說明》（以下簡稱《調(diào)整說明》為參照依據(jù)，以Bachman和Palmar（1996）的任務(wù)特性框架為理論依據(jù)，從語篇輸入及預(yù)期回答特征兩個(gè)維度探討改革后TEM4閱讀試題的內(nèi)容效度[1]。研究結(jié)果表明，改革后TEM4閱讀試題的語篇輸入特征與預(yù)期回答特征總體上達(dá)到了《調(diào)整說明》的要求，具有較高的內(nèi)容效度。但在語篇類型的選取上仍可進(jìn)一步提高：命題人可適當(dāng)增大應(yīng)用文在體裁中的占比，提高對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋度。

關(guān)鍵詞：TEM4閱讀測試;內(nèi)容效度;語篇輸入;預(yù)期回答

中圖分類號(hào)：G640 文獻(xiàn)標(biāo)志碼：A 文章編號(hào)：2096-000X（2019）11-0091-04

Abstract： The article takes the three sets of TEM4 reading questions after the reform in 2016 as the research object （2016-2018）， and the "Description of the adjustment of the English majors （TEM4） questions" （hereinafter referred to as "adjustment instructions"） as the reference.The task characterization framework of Bachman and Palmar（1996）is based on the theoretical basis， and discusses the content validity of the post-reform TEM4 reading test from the two dimensions of text input and expected answer characteristics. The results suggest that the reading test enjoys higher content validity. However， further improvement can be made in material selection. Test designers are advised to include more passages of practical genre and passages related to science， economy and education.

Keywords： TEM4 readingtest; content validity; discourseinput; expected response

一、概述

高校英語專業(yè)四級(jí)考試（TEM4）是面向全國英語專業(yè)本科二年級(jí)學(xué)生的一項(xiàng)大規(guī)模、標(biāo)準(zhǔn)化考試，其權(quán)威性與影響力不斷擴(kuò)大，于2010年考生數(shù)量已達(dá)約27萬人次[2]，已成為評(píng)估英語專業(yè)本科“教與學(xué)”的一項(xiàng)重要指標(biāo)。

2015年，外語專業(yè)教學(xué)測試委員會(huì)對(duì)TEM4試題的研討商榷推動(dòng)了新一輪調(diào)整方案的出臺(tái)，其中閱讀測試部分有較大調(diào)整：題型從過去單一的選擇題調(diào)整為客觀選擇題與主觀簡答題相組合，題量由20題減少為15題，測試時(shí)長由25分鐘延長至35分鐘，而總分?jǐn)?shù)與權(quán)重均保持不變（見表1）[3]。

“考試效度研究項(xiàng)目的實(shí)施，對(duì)考試的可持續(xù)發(fā)展具有非同尋常的意義”（鄒申，陳煒2010）。[2]。考試效度是指考試達(dá)到其預(yù)期測試目標(biāo)的程度[4]。作為效度研究的一部分，內(nèi)容效度研究旨在檢測實(shí)際考試內(nèi)容與考試大綱的吻合度，為考試的改進(jìn)提供參考。鑒于TEM4逐年遞增的影響力和2016年TEM4閱讀測試任務(wù)的題型調(diào)整，對(duì)改革后的閱讀理解試題進(jìn)行內(nèi)容效度研究十分必要。

二、文獻(xiàn)綜述

在國內(nèi)，研討TEM4閱讀測試內(nèi)容效度的文獻(xiàn)很多，但研究樣本多為《調(diào)整說明》正式實(shí)施前的試題，如侯艷萍（2011）[5]、李恩耀（2012）[6]、強(qiáng)亞麗（2014）[7]等?！墩{(diào)整說明》執(zhí)行后，少數(shù)以2016年新大綱樣題或真題為研究對(duì)象的文獻(xiàn)開始出現(xiàn)，如何錫梗（2016）[8]、劉寶全、胡芳芳（2018）[9]等，但以改革后2016-2018年試題為研究對(duì)象的文獻(xiàn)仍處空缺狀態(tài)。

為對(duì)改革后的閱讀測試進(jìn)行更全面的內(nèi)容效度研究，本文結(jié)合《調(diào)整說明》，以近三年（2016-2018）的TEM4閱讀測試內(nèi)容作為研究對(duì)象，從語篇輸入和預(yù)期回答兩個(gè)維度分析其內(nèi)容效度，以期為試題命制者和考生提供一定價(jià)值的參考意見。

三、研究設(shè)計(jì)

（一）研究對(duì)象

本研究收錄了近3年（2016-2018）的TEM4閱讀理解試題，閱讀材料共計(jì)9篇文章，包括45道問題（選擇題30道，簡答題15道）。

（二）研究框架與理據(jù)

如表2所示，本研究以Bachman和Palmar（1996）提出的任務(wù)特性框架為理論依據(jù)，結(jié)合《調(diào)整說明》，制定 TEM4閱讀測試內(nèi)容效度的分析框架。其中，語篇輸入任務(wù)特征主要包括語篇類型（體裁、題材）、閱讀速度（總字?jǐn)?shù)、時(shí)間）與語言難度（易讀度）;預(yù)期回答任務(wù)特征主要包括回答類型及技能考察。

四、結(jié)果與討論

（一）語篇輸入特征

1. 語篇類型

（1）體裁

根據(jù)《調(diào)整說明》，閱讀材料應(yīng)保證體裁設(shè)置多樣化，需涵蓋描寫文、說明文、議論文、記敘文、應(yīng)用文（說明書、圖表、廣告）等體裁[3]。

如表3所示， 改革后閱讀試題中議論文與記敘文占比最大，分別為45%和33%;說明文與描寫文占比較小，均為11%;應(yīng)用類文本的占比為零。

可以看出改革后的閱讀材料具有較強(qiáng)的多樣性，達(dá)到了《調(diào)整說明》中的選材要求，但仍有繼續(xù)提高的空間。通常來講，議論文主要以抽象的思維方式來表達(dá)作者的主張與見解，側(cè)重考察考生的思辨能力與批判性思維，的確是測試中不可或缺的體裁。但同時(shí)，作為實(shí)用性最強(qiáng)的文體之一，應(yīng)用類文本能對(duì)學(xué)生檢索信息并整合信息的能力進(jìn)行有效考察。因此，在體裁的選擇上，試題命制者可適當(dāng)增加說明書、圖表、廣告等應(yīng)用類文本。

（2）題材

根據(jù)《調(diào)整說明》，閱讀材料的題材選擇應(yīng)具有多樣性，需涵蓋文化、社會(huì)、科技、學(xué)習(xí)、常識(shí)、人物等題材[3]。

如表4所示，改革后閱讀試題中人物題材的占比為45%，社會(huì)和文化緊隨其后，分別為22%和33%。

由此可見，改革后的閱讀材料涵蓋了社會(huì)、文化和人物三種題材，占比相對(duì)均勻，符合《調(diào)整說明》中的選材要求， 但對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋尚有不足，不利于促進(jìn)考生在學(xué)習(xí)過程中廣泛涉獵不同題材，拓寬閱讀面。因此，試題命制者可在題材的選擇上稍作調(diào)整，進(jìn)一步拓廣題材的涵蓋面。

2. 閱讀速度

閱讀速度是影響考生閱讀成績的一個(gè)不可忽視的因素?！墩{(diào)整說明》對(duì)考生的閱讀速度也提出了一定要求：TEM4閱讀材料總字?jǐn)?shù)可控制在1800字的范圍，要求考生每分鐘閱讀約120個(gè)單詞[3]。

由于考生需要分配一部分時(shí)間用于讀題并作答，實(shí)際閱讀時(shí)間與考試規(guī)定的總時(shí)長存在一定偏差。根據(jù)楊惠中和Weir（1998）[10]提出的時(shí)間比例公式，當(dāng)閱讀任務(wù)的回答類型為選擇題時(shí)，候選人閱讀材料的時(shí)間與回答問題的時(shí)間之比約為1：0.75。據(jù)此推算出TEM4考生的實(shí)際閱讀時(shí)長約為20分鐘，答題時(shí)長約為15分鐘。

如表5所示，改革后閱讀材料的平均長度為1948詞，符合《調(diào)整說明》中對(duì)字?jǐn)?shù)的要求;閱讀速度平均保持每分鐘98個(gè)單詞左右，稍慢于《調(diào)整說明》中要求的閱讀速度。由于閱讀測試中有一部分問答題，計(jì)算得出的閱讀速度存在一定偏差，考生的實(shí)際閱讀速度應(yīng)略高于每分鐘98詞，試題總體符合《調(diào)整說明》中的要求。

3. 語言難度

《調(diào)整說明》要求考生能讀懂英美國家出版的語言難度中等的文字材料[3]。易讀度，作為測量閱讀材料難度的指標(biāo)，主要用于描述文字材料易于閱讀理解的程度，與文字材料的句子長度、語法復(fù)雜程度等等緊密相關(guān)[11]。

本研究應(yīng)用了Flesh易讀度計(jì)算公式對(duì)2016-2018年閱讀試題的易讀度進(jìn)行計(jì)算，其參考量表如表6所示：易讀度數(shù)值和文字材料的難度成反比關(guān)系，指數(shù)越高，表明閱讀材料易于理解的程度越低。

計(jì)算結(jié)果如表7所示，改革后TEM4閱讀材料的平均易讀度為63.73，難度介于中等（standard）和略難（Fairly difficult）之間，與《調(diào)整說明》中提出的測試要求高度契合，內(nèi)容效度非常良好。

（二）預(yù)期回答特征

1. 技能考察

根據(jù)《調(diào)整說明》，從技能考察方面來看，TEM4閱讀測試要求考生“掌握材料的主旨大意，理解事實(shí)和細(xì)節(jié);理解字面意義以及判斷和推理;理解單個(gè)句子的意義以及上下文的邏輯關(guān)系”。[3]

據(jù)此，TEM4閱讀題型可劃分為四大類：大意類、細(xì)節(jié)類、推斷類和釋義類。其中，大意題注重考生對(duì)篇章、段落大意的把握，考察總結(jié)概括能力;細(xì)節(jié)題注重考察考生檢索信息與整合信息進(jìn)行綜合判斷的能力;推斷題注重考察考生對(duì)非字面信息的推理判斷能力;釋義題注重考察考生對(duì)詞匯短語的語義理解能力。

如表8所示，在改革后TEM4閱讀試題中，細(xì)節(jié)類與推斷類題型占比最高，分別為38%和36%;大意類與釋義類的占比稍低，分別為16%與10%。由此可見，在保持對(duì)基礎(chǔ)能力考察的同時(shí)，改革后的TEM4閱讀十分注重對(duì)考生推理判斷能力的考察，有效地檢驗(yàn)了考生對(duì)文本的真實(shí)理解，也對(duì)考生提出了較高的要求。

2. 回答類型

根據(jù)《調(diào)整說明》，TEM4閱讀題型采用選擇題和問答題相結(jié)合的回答類型，不再使用單一的選擇題形式。

通常來說，選擇題的作答有許多應(yīng)試技巧，猜測、排除法的使用在一定程度上阻礙了考生真實(shí)的語言能力的體現(xiàn)，但改革后新增的問答題較好地彌補(bǔ)了這一不足。從表9來看，問答題中推斷題占比53%，釋義題及大意題占比分別為13%和7%，從而有效地考察了考生的文本理解能力和語言產(chǎn)出能力，保證了試題對(duì)考生的閱讀理解能力的切實(shí)反映。

總體來看，改革后的TEM4閱讀任務(wù)技能考察比例分布得當(dāng)，回答類型設(shè)計(jì)合理;在注重考生推理判斷能力與信息提取整合能力的同時(shí)，也對(duì)考生的總結(jié)概括能力和語義理解能力進(jìn)行了合理考察，表明改革后的試題達(dá)到了《調(diào)整說明》的要求，具有較好的內(nèi)容效度。

五、結(jié)束語

研究結(jié)果表明，改革后的TEM4閱讀試題設(shè)計(jì)與《調(diào)整說明》基本吻合，內(nèi)容效度較高。從語篇輸入角度來看，改革后TEM4的閱讀速度和語言難度與《調(diào)整說明》高度契合，但在語篇類型的選擇上仍有提升空間，試題命制者可在體裁與題材的選擇上稍做調(diào)整，提高對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋度。此外，應(yīng)用文在往年試題中基本被忽略，而這一體裁具有較好的真實(shí)性，建議在今后的試題中適當(dāng)提高其比例。從預(yù)期回答角度來看，改革后的TEM4閱讀試題技能考察比例分布得當(dāng)，回答類型設(shè)計(jì)合理，減少了考生對(duì)應(yīng)試技巧的依賴，能夠?qū)忌拈喿x能力進(jìn)行較為準(zhǔn)確的考察。

參考文獻(xiàn)：

[1]Bachman， L. F. & A. S. Palmer. Language Testing in Practice [M].Oxford： Oxford University Press，1996.

[2]鄒申，陳煒.回顧與展望——寫在英語專業(yè)四、八級(jí)考試開考20周年之際[J].外語界，2010.

[3]高校外語專業(yè)教學(xué)測試辦公室.關(guān)于英語專業(yè)四級(jí)考試（TEM4）題型調(diào)整的說明[R].2016.

[4]王麗紅.論提高英語閱讀測試效度的方法[J].高教學(xué)刊，2016.

[5]侯艷萍.近七年英語專業(yè)四級(jí)閱讀理解內(nèi)容效度評(píng)估[J].河北大學(xué)學(xué)報(bào)（哲學(xué)社會(huì)科學(xué)版），2012.

[6]李恩耀.TEM4閱讀理解測試內(nèi)容效度分析[J].黑龍江教育學(xué)院學(xué)報(bào)，2012，31（11）：165-167.

[7]強(qiáng)亞麗.英語專業(yè)四級(jí)閱讀理解測試（2007-2013）內(nèi)容效度研究[D].廣西師范大學(xué)，2014.

[8]何錫梗.新考綱下2016年英語專業(yè)四級(jí)考試閱讀理解題的延續(xù)與創(chuàng)新[J].寧德師范學(xué)院學(xué)報(bào)（哲學(xué)社會(huì)科學(xué)版），2016.

[9]劉寶權(quán)，胡芳芳.英語專業(yè)四級(jí)閱讀測試效度研究——以TEM4（2016）新大綱樣題閱讀任務(wù)為例[J].外語電化教學(xué)，2018.

[10]楊惠中，Weir， C.J.大學(xué)英語四、六級(jí)考試效度研究[M].上海外語教育出版社，1998.

[11]Richard， J. C. et al. Longman Dictionary of Language Teaching and Applied Linguistics[M].Beijing： Foreign Language Teaching and Research Press，2005.