學(xué)業(yè)測(cè)試閱讀項(xiàng)目的真實(shí)性芻議

朱曉華

(肇慶學(xué)院外國(guó)語學(xué)院,廣東肇慶 526061)

學(xué)業(yè)測(cè)試閱讀項(xiàng)目的真實(shí)性芻議

朱曉華

(肇慶學(xué)院外國(guó)語學(xué)院,廣東肇慶 526061)

真實(shí)性是交際語言測(cè)試面臨的最重要的問題之一。引述有關(guān)現(xiàn)代測(cè)試?yán)碚搶?duì)真實(shí)性的論述以及對(duì)閱讀測(cè)試的要求,然后對(duì)一份英語學(xué)業(yè)測(cè)試卷閱讀項(xiàng)目進(jìn)行相關(guān)分析和對(duì)比研究。通過與理論標(biāo)準(zhǔn)的對(duì)照,求證這份試卷的真實(shí)性程度,以達(dá)到發(fā)現(xiàn)差距、縮小差距,對(duì)測(cè)試的科學(xué)性和客觀性進(jìn)行有益探索的目的。

真實(shí)性;閱讀測(cè)試;對(duì)比分析

20世紀(jì)80年代中期,隨著語言學(xué)、教育測(cè)量學(xué)等相關(guān)學(xué)科的發(fā)展和交際外語教學(xué)法的逐步普及,交際法外語測(cè)試也不斷完善。該測(cè)試強(qiáng)調(diào)考查考生在真實(shí)的(authentic)語言環(huán)境中完成真實(shí)語言任務(wù)的能力,因而也被稱為真實(shí)性語言測(cè)試。[1]真實(shí)性是交際語言測(cè)試的“核心”問題。[2]330首先,只有根據(jù)真實(shí)性測(cè)試的結(jié)果,才能推測(cè)考生在目的語使用域中(target language use domain)或其他非測(cè)試語境中的語言使用能力。其次,真實(shí)性測(cè)試潛在影響考生對(duì)測(cè)試的接受程度及其測(cè)試行為,有助于激發(fā)他們發(fā)揮最佳水平。第三,真實(shí)性測(cè)試的反饋?zhàn)饔媚艽偈箤W(xué)生學(xué)習(xí)真實(shí)的語言材料,從而更有利于提高他們的語言交際能力。[3]23-44

Bachman和Palmer[3]23-44指出,真實(shí)性即“某一測(cè)試任務(wù)的特征與目的語使用任務(wù)的特征的一致性程度”。目的語使用域的范圍不僅包括真實(shí)生活中的語言使用任務(wù),而且包括以交際為目的的(或以任務(wù)為根據(jù)的)外語教學(xué)的課堂用語。

Bachman和Palmer對(duì)真實(shí)性的論述為其在測(cè)試中的可操作性提供了依據(jù),對(duì)語言測(cè)試實(shí)踐具有劃時(shí)代的指導(dǎo)意義。首先,只要使測(cè)試任務(wù)特征盡可能地接近或具有目的語使用任務(wù)的特征,即保持高度的一致性,該測(cè)試就具有較高的真實(shí)性。其次,目的語使用任務(wù)的特征主要涉及交際能力、語言環(huán)境及其他測(cè)試方法層面的因素,這些因素可以一一總結(jié)出來。第三,真實(shí)性是一個(gè)相對(duì)的、動(dòng)態(tài)的概念,一項(xiàng)測(cè)試的真實(shí)性或高或低,沒有百分之百的真實(shí)性或完全沒有真實(shí)性。[1]

本研究旨在討論外語教學(xué)環(huán)境下的閱讀任務(wù)特征與測(cè)試環(huán)境下的閱讀任務(wù)特征的一致性,以求證一份學(xué)業(yè)測(cè)試卷閱讀項(xiàng)目的真實(shí)性程度。

一、理論背景

(一)閱讀測(cè)試的真實(shí)性

楊惠中教授指出:閱讀測(cè)試是否有效真實(shí)主要取決于兩個(gè)因素,即閱讀材料的選擇和試題的質(zhì)量。[4]65-67

1.閱讀材料的真實(shí)性

選擇閱讀材料首先要考慮材料內(nèi)容和語言的合適性。選材內(nèi)容的真實(shí)性包括交際目的的真實(shí)性、文體的真實(shí)性和語言的真實(shí)性幾個(gè)方面。[4]65-67

根據(jù)《大學(xué)英語教學(xué)大綱》(以下簡(jiǎn)稱《大綱》)的要求,大學(xué)英語教學(xué)的最終目的是使學(xué)生能夠借助英語閱讀原著,以獲取本專業(yè)所需的信息。[5]6-7

因此,為確保交際目的和文體的真實(shí)性,閱讀測(cè)試材料的選擇應(yīng)與課本保持一致,以學(xué)術(shù)英語為主。文體應(yīng)盡量貼近課本閱讀材料,體裁應(yīng)多樣化,包括議論文、敘述文、說明文等,以體現(xiàn)多方面的閱讀需要。Weir指出:題材應(yīng)涵蓋多個(gè)層面,但應(yīng)限制在一個(gè)合適的專業(yè)知識(shí)范圍內(nèi),以保證對(duì)不同專業(yè)的考生機(jī)會(huì)公平,做到既不會(huì)因材料太生疏而使考生不能應(yīng)用已有的圖式知識(shí)實(shí)現(xiàn)閱讀目的,也不會(huì)因材料太熟悉而使考生脫離材料利用已有知識(shí)獲取答案。[6]67此外,閱讀材料的選材還應(yīng)有利于測(cè)試各種層次的閱讀能力,最好選擇有新意、觀點(diǎn)上有轉(zhuǎn)折、有一定信息密度的材料,以便從不同角度提問。

一是有利于開拓教學(xué)新陣地。院校各系部、各教研室可以結(jié)合自身特點(diǎn)開設(shè)專欄，及時(shí)發(fā)布并更新政府部門制定的一系列會(huì)計(jì)、稅收、工商等財(cái)經(jīng)法規(guī)，引入在線精品課程、在線題庫、在線交流、掌上高校等教學(xué)資源，作為會(huì)計(jì)教學(xué)的出發(fā)點(diǎn)和落腳點(diǎn)。同時(shí)，積極回應(yīng)學(xué)生、企事業(yè)單位、學(xué)生家長(zhǎng)和社會(huì)關(guān)注的問題，利用微博、微信及時(shí)處理學(xué)生反應(yīng)的問題，解疑釋惑。

閱讀材料除了內(nèi)容合適真實(shí)外,語言也要合適,即符合《大綱》規(guī)定的學(xué)生應(yīng)考時(shí)應(yīng)具備的語言水平。這主要從詞匯量和閱讀材料的易讀度(readability)兩個(gè)方面考慮。

《大綱》基礎(chǔ)階段教學(xué)要求規(guī)定,學(xué)生領(lǐng)會(huì)式掌握的四級(jí)詞匯量為4200個(gè)單詞。閱讀材料中的超綱詞匯不得超出短文總字?jǐn)?shù)的3%。[5]1-166《大綱》測(cè)試要求則明確規(guī)定:考試命題以所學(xué)課本內(nèi)容為基本依據(jù)?；A(chǔ)階段學(xué)習(xí)結(jié)束后,按《大綱》的基本要求組織考試。據(jù)此,我們認(rèn)為,閱讀成就測(cè)試中閱讀語言水平應(yīng)嚴(yán)格做到與課本水平保持一致。

除詞匯量適當(dāng)外,閱讀材料易讀度的合適性也應(yīng)予以考慮。迄今為止,國(guó)際上從事閱讀教學(xué)研究的應(yīng)用語言學(xué)家們已提出了不少公式,如Flesh公式、Lorge公式、Bormuth公式等等,力求從語言形式上對(duì)閱讀材料的易讀度進(jìn)行量化。按照Flesh易讀度參考量表,易讀度愈低的材料愈難讀。易讀度為50～60的閱讀材料為“相當(dāng)難”(fairly difficult);易讀度為30～50的閱讀材料為“難”(difficult)。據(jù)此,我們認(rèn)為,應(yīng)把閱讀材料的易讀度控制在60以上。因?yàn)?易讀度太難或太易都考不出學(xué)生的實(shí)際水平。

選擇閱讀材料還需考慮閱讀材料總量的合適性。因?yàn)殚喿x材料過短或過長(zhǎng)都不能測(cè)量考生的真實(shí)閱讀能力。那么,閱讀材料的總量應(yīng)該如何控制才算合適呢?這里有一個(gè)公式[7]340:閱讀材料的總量=考試時(shí)間×閱讀速度。《大綱》明確規(guī)定,基礎(chǔ)階段學(xué)生閱讀語言難度中等的一般性題材文章,閱讀速度應(yīng)達(dá)到70字/分鐘。[5]1-166而我們?cè)O(shè)計(jì)的成就測(cè)試閱讀理解部分的考試時(shí)間通常為35分鐘。那么,根據(jù)上述公式計(jì)算,難度中等的閱讀材料總量,即材料總字?jǐn)?shù)加題目字?jǐn)?shù)應(yīng)以2450字左右為宜。

2.試題質(zhì)量的真實(shí)性

根據(jù)《大綱》規(guī)定,四級(jí)成就測(cè)試中閱讀理解部分主要測(cè)試的閱讀技能有11項(xiàng)。因此,閱讀測(cè)試部分應(yīng)全面考核多層次的閱讀技能,命題時(shí)題眼應(yīng)體現(xiàn)理解得不同層次:不但應(yīng)涉及理解字面意義,而且應(yīng)涉及理解字里行間隱含的意義;不但要考核詞、句層次的微技能,而且要考核語篇水平的微技能;不但要考查局部理解,而且要考查總體理解。只有這樣,閱讀測(cè)試的效度才能得到保證,閱讀成就測(cè)試的真實(shí)性也才能得以實(shí)現(xiàn)。因此,閱讀技能的覆蓋率是確保閱讀測(cè)試試題質(zhì)量的關(guān)鍵。

(二)測(cè)試任務(wù)及形式的真實(shí)性

Clark指出,測(cè)試的真實(shí)性就是“測(cè)試形式和過程盡可能多地重現(xiàn)實(shí)際語言運(yùn)用情景及其過程”[8]10。根據(jù)這個(gè)觀點(diǎn),“測(cè)試形式及具體測(cè)試任務(wù)只要近似于實(shí)際語言運(yùn)用,那么測(cè)試就具備了真實(shí)性”[9-10]。閱讀測(cè)試通常采用的考試形式是否近似于實(shí)際語言運(yùn)用情形呢?它們與課堂閱讀任務(wù)有無一致性?眾所周知,在中國(guó),閱讀測(cè)試常用的題型有多項(xiàng)選擇題、簡(jiǎn)答題和正誤判斷題。[10]

多項(xiàng)選擇題的優(yōu)點(diǎn)是:第一,閱卷客觀,信度高,可以避免閱卷人員對(duì)考生分?jǐn)?shù)的主觀偏見影響。第二,試題可以預(yù)考,因此,題目的難度和缺陷可以提前調(diào)整和修改。最重要的是,多項(xiàng)選擇題不會(huì)牽涉其他技能,如寫作技能,可以保證閱讀技能考核的精確性。但是,這種題型的使用有一定的局限性:第一,考生猜測(cè)的可能性比較大。第二,設(shè)計(jì)題目的要求極高,要設(shè)計(jì)出合適的選項(xiàng)決非易事。第三,用這種題型能否測(cè)試閱讀能力受到質(zhì)疑,因?yàn)?在現(xiàn)實(shí)生活中,我們并不是通過選擇答案證實(shí)自己理解閱讀材料的。盡管如此,在課堂閱讀活動(dòng)中,多項(xiàng)選擇題依然是最常見的測(cè)試題型,因?yàn)?它可以考多樣的語言閱讀材料,可以問多種多層次的問題,是保證大面積考試高信度,同時(shí)又可以提高效度的可能的閱讀題型。

2.簡(jiǎn)答題

簡(jiǎn)答題這種測(cè)試題型比較接近自然的閱讀過程,效度較高。它的優(yōu)點(diǎn)正如Weir[11]46-48指出的那樣:第一,這種題型可以排除猜測(cè)的因素,直接測(cè)量考生的語言能力和理解程度。第二,精心設(shè)計(jì)的考題只要求考生進(jìn)行簡(jiǎn)短回答。這樣,大量的題目可以設(shè)計(jì)出來,保證閱讀技能的覆蓋率。第三,在這種題型中能夠有效地考查諸如歸納推理、確認(rèn)語義順序、辨認(rèn)短文主旨大意這類需要跨距離連通信息的閱讀技能。當(dāng)然,簡(jiǎn)答題也有它的局限性:第一,書面回答問題牽涉到文字表達(dá)能力,從而會(huì)影響測(cè)試的構(gòu)想效度(construct validity)。第二,由于涉及到書面表達(dá),評(píng)分時(shí)難以保證客觀,從而影響測(cè)試的信度。

3.正誤判斷題

正誤判斷題的優(yōu)點(diǎn)是設(shè)計(jì)容易,評(píng)分簡(jiǎn)單,信度高。缺點(diǎn)也很明顯:因?yàn)橹挥袃蓚€(gè)選擇項(xiàng),猜測(cè)機(jī)率達(dá)50%,所以,除非設(shè)計(jì)許多項(xiàng)目,否則不能很好地區(qū)分考生的實(shí)際語言水平。[12]110

基于以上因素,正誤判斷題雖然也常用于課堂閱讀活動(dòng)和成就測(cè)試中,但與多項(xiàng)選擇題和簡(jiǎn)答題相比,使用的頻率相對(duì)低一些。

二、案例分析

(一)研究工具

本項(xiàng)研究的工具為廣東省肇慶學(xué)院外國(guó)語學(xué)院命題人員自編的校級(jí)題庫中的一份四級(jí)試卷。閱讀理解部分采用多項(xiàng)選擇題的形式,共包括4篇短文,20道題。

(二)閱讀測(cè)試的真實(shí)性分析

1.閱讀材料的真實(shí)性分析

根據(jù)前文所述,閱讀材料的真實(shí)性需從內(nèi)容和語言兩個(gè)方面考察。我們先考查閱讀測(cè)試的選材內(nèi)容。本次考試的閱讀理解部分包括四篇短文。題材涉及生物學(xué)和人文學(xué),文體以學(xué)術(shù)英語為主。體裁包括說明文和議論文。短文字?jǐn)?shù)為:第一篇310個(gè)詞,第二篇285個(gè)詞,第三篇330個(gè)詞,第四篇380個(gè)詞。

分析結(jié)果表明,閱讀測(cè)試材料的內(nèi)容與課本基本相符,閱讀材料總量達(dá)到了標(biāo)準(zhǔn),為68字/分鐘。但也發(fā)現(xiàn)了一些問題。例如,第一篇短文的題材涉及蛇的生活習(xí)性,專業(yè)知識(shí)過淺,考生可以脫離材料單憑常識(shí)就能獲取答案,不牽涉閱讀能力。這樣,測(cè)試的構(gòu)想效度不高,測(cè)試的目的就無法達(dá)到。再如,體裁的多樣性體現(xiàn)得不夠。課本中考生熟悉的敘述文和描寫文沒有納入測(cè)試范圍,使考生感到不適應(yīng),影響了他們答題的效果。

語言的合適性又是怎樣的情形呢?一方面,統(tǒng)計(jì)數(shù)據(jù)表明,有些短文中超綱詞匯的出現(xiàn)頻率已超出了《大綱》設(shè)定的限度。例如,第二篇短文和第四篇短文中分別有11個(gè)超綱詞匯。第二篇中的生詞加了中文注釋,而第四篇中的生詞未作任何處理。這樣無疑會(huì)增加閱讀的難度,造成考生閱讀困難,使考生產(chǎn)生生疏感,不利于他們發(fā)揮應(yīng)有的水平。

語言合適性的另一個(gè)方面是閱讀材料的易讀度。根據(jù)Flesh的公式,我們計(jì)算出的四篇短文的易讀度分別為:67.3,64.2,66.8和66.6。依據(jù)前文所述,他們屬于易讀度比較適中這個(gè)檔次,這對(duì)提高閱讀測(cè)試的真實(shí)性起到了正面效應(yīng)。

2.試題質(zhì)量的真實(shí)性分析

根據(jù)前文所述,閱讀成就測(cè)試應(yīng)考核11項(xiàng)閱讀微技能。本次考試閱讀理解部分涉及到的閱讀技能請(qǐng)參見表1。

表1 四級(jí)成就測(cè)試閱讀理解微技能覆蓋情況表

從表1所列的數(shù)據(jù)可以看出,在應(yīng)考核的11項(xiàng)技能中本次考試涉及到了7項(xiàng)。沒有考核的技能有:“作結(jié)論”“猜測(cè)生詞的詞義”“理解句內(nèi)關(guān)系”和“利用參閱技能”4項(xiàng),他們均屬于次能力。這些技能的漏考肯定會(huì)對(duì)測(cè)試的真實(shí)性小有影響。嚴(yán)格地講,閱讀測(cè)試應(yīng)全面覆蓋所有技能,在題目數(shù)量有限的情況下,我們應(yīng)該分清主干信息和分支信息的測(cè)試,重點(diǎn)測(cè)試那些獲取主要信息的能力,以求對(duì)考生的主要閱讀能力有個(gè)框架性的認(rèn)識(shí),不必追求小而全,試圖測(cè)試所有的次能力。從這個(gè)意義上講,本次考試基本上全面考核了多層次的閱讀能力。試題質(zhì)量的真實(shí)性基本上得到了保證。

(三)測(cè)試任務(wù)及形式的真實(shí)性分析

通過課堂閱讀任務(wù)及練習(xí)形式與測(cè)試任務(wù)及形式的對(duì)比,我們發(fā)現(xiàn),他們之間存在很大程度的一致性。在兩種情況下的閱讀任務(wù)都包括運(yùn)用仔細(xì)閱讀以獲取相關(guān)信息(不論明確表達(dá)的還是隱含表達(dá)的)、查閱尋找特定信息、略讀了解文章大意、理解作者觀點(diǎn)態(tài)度、辨別文章中心思想、通過上下文猜測(cè)詞義等技能。閱讀練習(xí)和閱讀測(cè)試都采用多項(xiàng)選擇題的題型。從表面上看沒有什么問題,但應(yīng)當(dāng)指出的是,只有多項(xiàng)選擇題一種題型,閱讀測(cè)試就顯得單薄。因?yàn)槎囗?xiàng)選擇題只能間接測(cè)試閱讀能力,而且考生有猜測(cè)的機(jī)率。如果閱讀測(cè)試能補(bǔ)充其他主觀題型,比如簡(jiǎn)答題,直接測(cè)試閱讀能力,測(cè)試的效度會(huì)更高,測(cè)試的真實(shí)性也就相應(yīng)更高。

通過以上的對(duì)比分析和與理論標(biāo)準(zhǔn)的對(duì)照,得出以下結(jié)論:總的來說,這份試卷的真實(shí)性達(dá)到了較高的水平,但也存在著一些問題,與理想的標(biāo)準(zhǔn)還有一定的差距,這些問題應(yīng)該得到我們的重視與改進(jìn),有待于我們進(jìn)一步的研究和探討。

三、結(jié)語

真實(shí)性是交際語言測(cè)試中最重要和最棘手的問題之一。它牽涉到測(cè)試的目的、測(cè)試任務(wù)、測(cè)試材料與非測(cè)試語境中的語言任務(wù)及形式的一致性等問題。只有兩者保持高度的一致,測(cè)試的真實(shí)性才能得到保證,我們才能科學(xué)、客觀、公正地推斷考生的語言使用能力。

[1]李清華.論交際測(cè)試中的“真實(shí)性”[J].外語界,2001, (6):68-71.

[2]Bachman L.F.Fundamental Considerations in Language Testing[M].Oxford:Oxford University Press,1990.

[3]Bachman L.F.&Palmer A.S.Language Testing in Practice[M].Oxford:Oxford University Press,1996.

[4]楊惠中.大學(xué)英語四、六級(jí)考試效度研究[M].上海:上海外語教育出版社,1998.

[5]大學(xué)英語教學(xué)大綱(修訂本)[M].上海:上海外語教育出版社,1999.

[6]Weir C.J.Understanding&Developing Language Tests [M].London:Prentice Hall International(UK)Ltd., 1993.

[7]李筱菊.語言測(cè)試科學(xué)與藝術(shù)[M].長(zhǎng)沙:湖南教育出版社,1997.

[8]Clark J.L.D.Theoretical and Technical Considerations in Oral Proficiency Testing[A].Randall L.J.Spolsky B. Testing Language Proficiency[C].Virginia:Centre for Applied Linguistics,1975.

[9]鄒申.試論口語測(cè)試的真實(shí)性[J].外語界,2001,(3): 74-78.

[10]劉建達(dá).測(cè)試方法對(duì)閱讀測(cè)試的影響[J].外語教學(xué)與研究,1998,(2):48-52.

[11]Weir C.J.Communicative Language Testing[M].Great Britain:University of Exeter,1988.

[12]劉潤(rùn)清.語言測(cè)試和它的方法[M].北京:外語教學(xué)與研究出版社,2000.

【責(zé)任編輯 馬小俠】

A Study of Authenticity of a Reading Achievement Test

ZHU Xiao-hua
(School of Foreign Language,Zhaoqing University,Zhaoqing 526061,China)

Authenticity is one of the most important qualities of communicative language tests.This paper quotes some rules about authenticity and reading test from the language testing theory first and chooses one college-wide reading achievement test paper for non-English majors as a sample to investigate its authenticity.A comparative study of the characteristics of the reading materials between the test and non-test language use domain is followed,with reference to modern testing theory and associated criteria.The purpose is to bring strengths and weaknesses of such tests to the attention of test developers,so that corresponding measures can be adopted to guarantee test authenticity.

authenticity;reading achievement test;comparative study

H319

A

1009-5128(2014)04-0062-04

2013-09-22

朱曉華(1964—),女,陜西渭南人,肇慶學(xué)院外國(guó)語學(xué)院講師,主要從事應(yīng)用語言學(xué)研究。