英語四級統(tǒng)考完形填空試題的內(nèi)容效度分析

陸 彥

(廣東女子職業(yè)技術(shù)學(xué)院,廣州 511450)

英語四級統(tǒng)考完形填空試題的內(nèi)容效度分析

陸 彥

(廣東女子職業(yè)技術(shù)學(xué)院,廣州 511450)

在回顧測試中完形填空試題形式的演變及其發(fā)展的基礎(chǔ)上,采用定性分析方法對 2007—2009年大學(xué)英語四級完形填空分別從字?jǐn)?shù)、題材、體裁及實(shí)詞和虛詞、句子層面和語篇層面等綜合運(yùn)用能力方面進(jìn)行內(nèi)容效度分析,分析結(jié)果表明完形填空題的內(nèi)容效度較高并滿足測試目的。

完形填空;效度;內(nèi)容效度;銜接;語篇

完形填空是外語教學(xué)中常采用的一種綜合性較高的測試題型,是獲取學(xué)生個體發(fā)展和教學(xué)反饋信息的重要手段,可以了解和檢查學(xué)生掌握課程教學(xué)大綱所規(guī)定的語言知識和語言技能的深度、廣度和熟練程度,使學(xué)生能了解自己的學(xué)習(xí)情況,同時也是對教師的教學(xué)活動以及教學(xué)計劃、教學(xué)大綱所體現(xiàn)的教育目標(biāo)的檢驗(yàn)。

一、完形填空及其演變

劉潤清提及完形填空最初稱完形程序 (Cloze Procedure),是由W.L Taylor在 1953年發(fā)明的,其根據(jù)來源于格式塔心理學(xué) (Gestalt Psychology)。Gestalt是德語詞,意為“完形”、“經(jīng)驗(yàn)的整體”。這派心理學(xué)家認(rèn)為,人們在觀察物體形狀時,會下意識地把形狀中的空缺填補(bǔ)上去[1]。

Taylor認(rèn)為,人的閱讀過程也是完形的。但對有空缺的語言片段的完形過程有不同于對有空缺的圖形的完形,還原有空缺的語言片段,實(shí)際上是進(jìn)行信息處理。自然語言中有許多冗余的信息,由于其意義的重復(fù)和詞匯之間的內(nèi)在聯(lián)系,故能夠去掉許多詞而不影響傳遞信息。但是,完形測試不僅涉及到破壞信息量,而且涉及語言本身的難易程度,這種難易程度不僅與文字本身有關(guān),而且與內(nèi)容的熟悉程度有關(guān)[2]。

完形填空發(fā)明之初是用來測試母語文章的可讀性,后來被廣泛應(yīng)用于外語測試中,隨著新的問題的出現(xiàn),其形式也在發(fā)生變化,出現(xiàn)了多種不同的題型。

定距刪詞完形填空 (the fixed-ratio cloze)。所謂定距刪詞完形填空,是指固定地每隔多少個詞刪掉一個詞。據(jù)稱,有規(guī)律地去掉詞才能保證測試的信度和效度。但問題很明顯,刻板的刪詞不能滿足出題者的測試意圖。于是,出現(xiàn)了許多完形測試的變體。

合理刪詞完形填空(the rational cloze)。所謂合理刪詞完形填空是指打破標(biāo)準(zhǔn)完形填空測試的規(guī)定,不定距地、有選擇地刪除短文中的一些詞,這樣就改變了測試的隨機(jī)性,加強(qiáng)了目的性和使用性。

改型完形填空(modified cloze)。由于前面提到的兩種完形填空都會面臨這樣的一個問題,即考生的填詞雖然與原文的不一樣,但卻是可以接受的,這為評分帶來一定的麻煩。于是,誕生了選擇式完形填空,即給每個空格提供幾個選擇項(多數(shù)情況下提供四個選擇項),其中有一個正確答案,其他是干擾項。這避免了評分中的爭議,但題目的難度有所降低。

完詞式完形填空(C-cloze)。C-cloze是指將空缺處單詞去掉幾個字母的完形填空題,這種變體是德國于 20世紀(jì) 80年代發(fā)明的。其優(yōu)點(diǎn)是命題容易,考點(diǎn)多,評分客觀。缺點(diǎn)是試題的效度不夠好,表面看去題目缺少整體感。

二、大學(xué)英語四級統(tǒng)考真題完形填空內(nèi)容效度分析

(一)效度、內(nèi)容效度及內(nèi)容效度的分析方法

效度和信度是測試中必須考慮的基本問題。其中效度的高低是衡量語言測試目標(biāo)的成功程度的最重要的質(zhì)量指標(biāo),或者說是語言測試的基本出發(fā)點(diǎn)。林連書認(rèn)為效度也叫有效性,指研究結(jié)果是否反映了研究者想要研究的東西[3]。1974年美國心理學(xué)會發(fā)行的《教育和心理測驗(yàn)的標(biāo)準(zhǔn)》一書將效度分為三大類:內(nèi)容效度、觀念效度和效標(biāo)關(guān)聯(lián)效度,也可從兩個方面去理解:一是考試的目的,二是考試的內(nèi)容。

Heaton認(rèn)為內(nèi)容效度基于對被測試語言的認(rèn)真分析及特定的課程目標(biāo),為了明顯地含有代表性的樣題,體現(xiàn)出測試題目之間的關(guān)系,這才是測試設(shè)計的目的[4]。Richard同樣認(rèn)為內(nèi)容效度是測試中有效性的一種,以測試能充分地測出所要測量的技能程度為基礎(chǔ)[5]。簡單的說,內(nèi)容效度主要采用定性分析方法,指的是測驗(yàn)的內(nèi)容是否概括了所要研究的內(nèi)容,測驗(yàn)內(nèi)容是否有代表性,是否全面,是否考了大綱規(guī)定要考的內(nèi)容,考試題目在多大程度上能代表它所要測量的目標(biāo)。

內(nèi)容效度主要靠試題設(shè)計和試題生產(chǎn)(命題和審題)時嚴(yán)格遵守考試大綱要求,黃光揚(yáng)主張其分析主要依靠有關(guān)專家對測驗(yàn)題目與應(yīng)測內(nèi)容范圍的吻合程度作出判斷[6]62。

(二)大學(xué)英語四級統(tǒng)考完形填空題內(nèi)容效度分析

我國大學(xué)英語考試是一種標(biāo)準(zhǔn)化考試,按照考試的方式劃分可分為分離式測試(discrete-point test)和綜合式測試(integrative test)。現(xiàn)在常用的聽寫、完形填空、翻譯、作文等都屬于綜合式測試,其中,完形填空采用的是改型完形填空形式。2006年修訂的《大學(xué)英語四級考試大綱》(以下簡稱《大綱》)明確規(guī)定在 220～250詞為學(xué)生熟悉題材的短文中有 20個空白,空白處所刪去的詞既有實(shí)詞也有虛詞,要求考生選擇一個最佳答案,使短文的意思和結(jié)構(gòu)恢復(fù)完整。對測試的語料選擇要求題材廣泛,包括人文科學(xué)、社會科學(xué)、自然科學(xué)等領(lǐng)域,所涉及的背景知識應(yīng)為學(xué)生所了解;體裁多樣,包括記敘文、說明文、議論文等[6]4-5。

本文就 2007年、2008年和 2009年大學(xué)英語四級統(tǒng)考五套真題的完形填空分別從字?jǐn)?shù)、題材、體裁及實(shí)詞和虛詞、句子層面和語篇層面等綜合運(yùn)用能力方面進(jìn)行內(nèi)容效度分析。

表1

表1顯示,過去三年進(jìn)行的五次試題無論在短文字?jǐn)?shù)還是短文題材和體裁方面都較嚴(yán)格地完成了《大綱》的明確規(guī)定。五次試題短文長度控制在 222～257字?jǐn)?shù)之間;語料選擇最多的是社會科學(xué),其次是自然科學(xué)領(lǐng)域,社會科學(xué)領(lǐng)域中兩篇短文選擇的都是學(xué)生們關(guān)注的教育話題;文章體裁以議論文和說明文為主,說到體裁,值得一提的是有些短文體裁不單純只有某種文體特征,往往同時具有多種文體特征。再者,數(shù)據(jù)表明,短文中人文科學(xué)題材涉及的較少,可能是今后出題應(yīng)該注意彌補(bǔ)的一點(diǎn)。

《大綱》還明確規(guī)定:“完形填空測試考生各個層面上的語言理解能力及語言運(yùn)用能力?！盵6]5具體地講,從基本層面——詞匯層面看,試題中是否存在較為合理比例的實(shí)詞和虛詞選項;或者從較高層面——句子層面到更高層面——語篇層面分析,選項中的正確選擇是否兼顧了基于句子層面或語篇層面的理解,楊惠中強(qiáng)調(diào)它首先是測試考生對篇章的理解能力[7]112。見表2。

表2

表2中的統(tǒng)計數(shù)據(jù)表明:

1.從詞匯層面來看,選項中實(shí)詞通常占到大約 15個,約占75%,很明顯,實(shí)詞始終是考試的重點(diǎn)。實(shí)詞指動詞、名詞、形容詞、副詞、數(shù)詞等。對實(shí)詞的選擇既要看其意思用在句子中是否得當(dāng),也要看它與其他詞的搭配關(guān)系是否合適,是否符合英語語言表達(dá)習(xí)慣。虛詞占到5題左右,約占25%。虛詞指介詞、連詞等,主要用來表示語法結(jié)構(gòu)關(guān)系。楊惠中同樣認(rèn)為在上下文中選擇虛詞是語法問題,但必須基于對上下文的正確理解才能判斷出作者真正要表達(dá)的意思[7]114。數(shù)據(jù)表明短文一直是以較穩(wěn)定的比例兼顧實(shí)詞和虛詞的考查檢測。

從考題統(tǒng)計分析來看,詞義辨析題和邏輯銜接題是考查的重點(diǎn),尤其是近年來,邏輯銜接題的比重在不斷加大,這足以見得考試中完形填空的命題注重的是短文意義的理解,而不僅僅局限于掌握句法結(jié)構(gòu)。

如果說單純測試詞匯層面屬于對語言基礎(chǔ)知識的基本要求,那么考查句子層面和語篇層面則無疑是對考生提出更高的要求。

2.從句子層面和語篇層面看,短文完形填空題較側(cè)重考查學(xué)生語篇層面的知識和技巧的運(yùn)用,五次試題相比較,句子層面占到 20%～55%,語篇層面占到45%～80%。

華先發(fā)認(rèn)為句子是能夠單獨(dú)存在并能表達(dá)相對完整意義的語言單位。英語句子按其結(jié)構(gòu)可分為簡單句(由一個獨(dú)立分句組成)和非簡單句(由兩個或兩個以上的分句組成)[8]96。在這一層面上,試題應(yīng)不僅檢測學(xué)生分析句子結(jié)構(gòu)、句子各主要部分之間的邏輯關(guān)系的能力,還且要考查學(xué)生分析句子之間的邏輯關(guān)系、句子與段落之間的關(guān)系及其他相關(guān)背景知識的綜合能力。

語篇(text或 discourse),簡言之是指有意義的表述的集合。華先發(fā)認(rèn)為它是語言的最高層面,是一個語義整體,語篇的分析可以解決許多語法解決不了的問題。結(jié)構(gòu)上的銜接或者稱為黏著性(cohesion)和意義上的連貫性(coherence)是其兩大重要標(biāo)記,常通過段落來建構(gòu)[8]123。當(dāng)語篇中一個成分的含義依賴于另一個成分的解釋時,便產(chǎn)生銜接關(guān)系。銜接的手段主要有:照應(yīng)(reference)、替代 (substitution)、省略 (ellipsis)、重復(fù) (repetition)、同義/反義 (synonym/antonym)、上下義(hyponomy)、搭配(collocation)及連接 (conjunction),其中照應(yīng)、替代和省略屬于語法銜接手段,重復(fù)、同義/反義、上下義和搭配 (collocation)屬于詞匯銜接手段。胡壯麟認(rèn)為連接是通過連接成分來體現(xiàn)語篇中各個成分的各種邏輯關(guān)系的手段,連接成分往往是一些過渡性的詞語,如表示時間、條件、因果等邏輯上的聯(lián)系,主要由連詞、連接副詞和介詞短語體現(xiàn)。它們可以表示為順接、逆接、添加、對比、同位等語義關(guān)系。需要強(qiáng)調(diào)的是,表示時間、因果邏輯關(guān)系時,有時并不用明顯的連接成分來表示,這時稱為零形式連接或意合形式連接[9]。

表2數(shù)據(jù)顯示出近三年的完形填空短文基于語篇層面的選擇呈明顯遞增趨勢,表明對語篇層次的要求愈來愈高,還有一個有趣的發(fā)現(xiàn)就是在采用語篇銜接手段體現(xiàn)語義時連接手段運(yùn)用得最多。

三、結(jié)語

測試的后效應(yīng)對教與學(xué)起著不可低估的反撥作用,完形測試題分析結(jié)果提示教師在教學(xué)中,應(yīng)從語篇的題材、體裁和句法、詞匯等層面分析文本,重視語篇銜接手段對語義連貫表達(dá)的地位作用,分析理解語篇的建構(gòu)過程,注重培養(yǎng)學(xué)生具有從語篇的層次來宏觀分析文章的內(nèi)容和結(jié)構(gòu)、領(lǐng)悟作者的寫作意圖、把握主題、獲取完整信息的邏輯判斷思維能力,提高英語教學(xué)效率和效果。

[1]劉潤清.語言測試和它的方法[M].北京:外語教學(xué)與研究出版社,1991:52.

[2]Taylor,W.Cloze Procedure:A New Tool for Measuring Readability.Journalism Quarterly30,1953:415-433.

[3]林連書.應(yīng)用語言學(xué)實(shí)驗(yàn)研究方法[M].廣州:中山大學(xué)出版社,2001:5.

[4]Heaton.J.B.W riting English Language Tests[M].Longman:Longman Group UKLimited,1988:160.

[5]Richard,J.C.,Platt,J,&Platt,H.Longman Dictionary of Language Teaching&Applied Linguistics[M].Hong Kong:AddisonWesleyLongman China Press,1992:101.

[6]全國大學(xué)英語四、六級考試委員會.大學(xué)英語四級考試大綱(2006修訂版)[M].北京:高等教育出版社,2007.

[7]楊惠中,C.Weir.大學(xué)英語四、六級考試效度研究 [M].上海:上海外語教育出版社,1998.

[8]華先發(fā).新編大學(xué)英譯漢教程[M].上海:上海外語教育出版社,2004.

[9]胡壯麟,朱永生,張德祿.系統(tǒng)功能語法概論[M].長沙:湖南教育出版社,1989:156-157.

The Analysis on Content Validity of Some Cloze Tests of CET-4

LU Yan
(GuangdongWomen's Polytechnic College,Guangzhou 511450,China)

This paper first reviews the evolution of cloze forms,and then analyzes some cloze tests of CET-4 from the perspective of content validity with the method of qualitative analysis,and the result shows that these cloze tests satisfy the demand of testing students'comprehensive ability.

cloze test;validity;content validity;cohesion;text

H319

A

1001-7836(2010)03-0170-03

(責(zé)任編輯:孫大力)

2009-11-30

陸彥 (1964-),女,江蘇新沂人,副教授,文學(xué)碩士,從事英語語言文學(xué)研究。