全國英語應(yīng)用能力考試Ａ級閱讀題的內(nèi)容效度分析

孫　云　張富麗

【摘 要】 本文通過11份全國英語應(yīng)用能力考試A級(2008-2003)的統(tǒng)計分析,對照該考試大綱從閱讀材料的類型、閱讀技能、總閱讀量、句長等方面綜合考察該試卷的內(nèi)容效度,認(rèn)為其總體上基本符合考試大綱的規(guī)定,但在試題設(shè)計和技能考察方面尚需進(jìn)一步完善。

【關(guān)鍵詞】 全國英語應(yīng)用能力考試;內(nèi)容效度;閱讀技能

對于英語試卷內(nèi)容效度分析,目前主要集中于四、六級、高考、研究生入學(xué)考試等關(guān)注度高的全國大型考試。而全國英語應(yīng)用能力考試A級(以下簡稱PRETCOA)作為反映和評價高等學(xué)校?？茖哟涡尥暧⒄Z課程的非英語專業(yè)的在校生較高英語應(yīng)用能力而設(shè)立的標(biāo)準(zhǔn)化英語水平考試卻很少受關(guān)注。對?？茖哟蔚膶W(xué)生應(yīng)用英語能力的培養(yǎng)與導(dǎo)向的PRETCOA的忽視將大大制約高職應(yīng)用性英語教學(xué)的發(fā)展和完善。

一、研究方法

內(nèi)容效度指測驗(yàn)題目對有關(guān)考試內(nèi)容或行為范圍取樣的適當(dāng)性。成就測驗(yàn)和熟練測驗(yàn)特別注重這種效度。例如,在成就測驗(yàn)中,測驗(yàn)題目是根據(jù)教學(xué)大綱和教材內(nèi)容適當(dāng)抽出的,內(nèi)容效度就是判斷測驗(yàn)題目(內(nèi)容)是否符合它欲測的目標(biāo)。PRETCOA中閱讀題由五個Task組成。總閱讀量約1,000詞。閱讀材料涉及的語言技能和詞匯限于大綱中的“閱讀技能表”所列的全部技能范圍和“詞匯表”中3,400詞的范圍;閱讀一般題材的文字材料,如:科普、生活、人物、政治、商貿(mào)、文化、等。除一般性文章外,閱讀的應(yīng)用文限于大綱中“交際范圍表”所規(guī)定的閱讀范圍,如:業(yè)務(wù)信函、傳真、電子郵件等。PRETCOA主要測試以下閱讀技能:A.掌握語篇中的事實(shí)和主要情節(jié)。B.理解語篇上下文的邏輯關(guān)系。C.對句子和段落進(jìn)行推理。D.了解作者的目的、態(tài)度和觀點(diǎn)。E.根據(jù)上下文正確理解生詞的意思。F.了解語篇的結(jié)論。G.進(jìn)行信息轉(zhuǎn)換。H.了解語篇和段落的主旨和大意。

二、試題閱讀材料的分析

根據(jù)對2008年12月到2003年12月共11份試卷閱讀材料統(tǒng)計數(shù)據(jù),在這11份試卷中,Task 1和Task 2的閱讀材料中科普類和生活類占86%,其中,科普類占36%,生活類占50%。說明該試題這兩部分主要考察的是學(xué)生對一般性英語材料的理解和掌握,除此之外,仍舊體現(xiàn)出了科技英語應(yīng)用性的特點(diǎn)。Task 3和Task5的閱讀材料都屬于應(yīng)用文的范疇。其中Task 3商務(wù)信函,備忘錄,廣告,及通知各占18%,產(chǎn)品與廠家介紹占27%,Task4科技詞匯匹配題中只有WTO Terms 重復(fù)出現(xiàn)過占18%。Task5廣告占27%。商務(wù)信函,產(chǎn)品與廠家介紹及服務(wù)指南各占18%,通知及合同各占9%。從以上各閱讀任務(wù)數(shù)據(jù)不難看出英語應(yīng)用能力考試閱讀材料的選擇較為均衡科學(xué)。但是在Task 3和Task5共22篇閱讀材料中廣告及產(chǎn)品與廠家介紹各5篇各占23%,商務(wù)信函4篇占18%,通知3篇占14%,服務(wù)指南和備忘錄各兩篇各占9%,合同1篇占5%。在現(xiàn)實(shí)生活中,合同作為商務(wù)領(lǐng)域的重要單據(jù)是高職學(xué)生在英語應(yīng)用領(lǐng)域必須涉獵的知識范疇,也屬于大綱規(guī)定的范圍,但其重要性在應(yīng)用能力考試中卻沒有體現(xiàn)出來。今后應(yīng)加強(qiáng)合同方面的閱讀材料。另一方面,通知、服務(wù)指南和備忘錄超出了“交際范圍表”所規(guī)定的應(yīng)用文閱讀范圍,

翻譯總分35分,其中Task 1和Task2 為10個多項(xiàng)選擇題共20分占閱讀理解分值的57%,其考察重點(diǎn)在于一般題材的文字材料,而Task 3、Task4和Task5共15分考察的是學(xué)生閱讀應(yīng)用文的能力,占閱讀理解總分的43%。以上數(shù)據(jù)并沒有體現(xiàn)出英語應(yīng)用能力考試對學(xué)生閱讀應(yīng)用文的指導(dǎo)性作用。此外,Task4專業(yè)詞匯匹配題,通過關(guān)鍵詞很容易就找出答案。例如:2008年12月Task4匹配題的52題()手術(shù)室()強(qiáng)迫性過度飲食,只需通過兩個簡單的單詞room和 eating?？忌芎芸鞆?7個選項(xiàng)中選出L-compulsive over-eating,I-operating room。缺少有質(zhì)量的干擾項(xiàng)使這個題目失去了原本考察學(xué)生閱讀方面應(yīng)用能力的效果。Task 3的填空題和Task5簡答題的題干基本沒有轉(zhuǎn)換原文信息,不需要運(yùn)用大綱所涉及的閱讀技能也能直接找出答案,因此試卷的效度將受到影響。

三、試題閱讀技能的分析

統(tǒng)計結(jié)果表明PRETCO 閱讀技能考察重點(diǎn)在于掌握語篇中的事實(shí)和主要情節(jié)占65%其次了解語篇和段落的主旨和大意占14%。這些都屬于閱讀中較為容易掌握的技能。而對于C.對句子和段落進(jìn)行推理占7%。D.了解作者的目的、態(tài)度和觀點(diǎn)占3%。E.根據(jù)上下文正確理解生詞的意思占6%。G.進(jìn)行信息轉(zhuǎn)換層次6%。對后四位難度較大的閱讀技能考察量較小共占21%。此外對 B.理解語篇上下文的邏輯關(guān)系、F.了解語篇的結(jié)論沒有進(jìn)行相應(yīng)的考察。

四、其它因素的分析

由于篇章所限筆者從11份試題中抽出4份(分別為2008年12月、2008年6月、2006年6月、2005年6月)做了總閱讀量和句長的統(tǒng)計。本文的總閱讀量是試卷中正文閱讀量與所有問題中閱讀量之和。以上四份試題的正文閱讀量W依次分別為662、778、883、887?？傞喿x量W依次分別為1073、1291、1454、1370?？偩鋽?shù)N依次分別為48、43、57、43。文中平均句長依次分別為W/S13.81、16.93、14.40、19.09?？荚嚧缶V規(guī)定的總閱讀量約1,000詞,但是這4份試題的總閱讀量都超出了大綱的范圍,其中2006年6月和2005年6月分別超出了454詞和370詞?？偩鋽?shù)中2006年6月試題的總句數(shù)超出2008年和2005年總句數(shù)14句。在正文閱讀量一定的情況下,總句數(shù)與英文易讀度成正比。句長也作為影響英文易讀度(readability)的因素之一會影響考生對閱讀題的理解。句長與英文易讀度成反比。以上數(shù)據(jù)不難看出PRETCOA的閱讀題在正文閱讀量、平均句長、總句數(shù)、總閱讀量等影響閱讀難度的因素控制及穩(wěn)定性方面應(yīng)該加以改進(jìn),從而保證該試題的信度與效度。

五、結(jié)論

本文通過對11份PRETCOA試題中閱讀題的數(shù)據(jù),從閱讀材料、閱讀技能、干擾項(xiàng)設(shè)計等角度進(jìn)行了系統(tǒng)的分析。結(jié)果表明PRETCOA閱讀題總體上基本符合考試大綱規(guī)定的閱讀范圍和欲測閱讀技能,但是在大綱范圍內(nèi)一些重要的英語應(yīng)用文閱讀材料涉及較少,今后應(yīng)加強(qiáng)對合同等實(shí)用性強(qiáng)的閱讀材料的選擇。閱讀技能的考察角度較為單一,不利于考生綜合理解力的提高。此外,試題設(shè)計方面應(yīng)適當(dāng)加強(qiáng)閱讀技能的考察深度及考察多樣性。在正文閱讀量、平均句長、總句數(shù)、總閱讀量等方面的試題穩(wěn)定性仍需進(jìn)一步改進(jìn)。

【參考文獻(xiàn)】

[1] Bachman?L.F.1990 Fundamental Considerations in LanguageTesting.Oxford.UK.:0xford University Press.

[2] 江讕 馮曉媛.對教師自行設(shè)計的英語考試內(nèi)容效度和表面效度的調(diào)查與反思[J].外語教學(xué),2003(5).

【作者簡介】

孫云,安徽人,陜西科技大學(xué)講師,西安外國語大學(xué)在讀碩士研究生,主要從事語言測試學(xué)及二語習(xí)得研究.