巴克曼的考試方法特性理論框架下英語(yǔ)專業(yè)八級(jí)考試的內(nèi)容效度解析

（閩南理工學(xué)院 福建 石獅 362700）

0.引言

自2016年起，從《高校英語(yǔ)專業(yè)教學(xué)大綱》的實(shí)行和新修訂的《高校英語(yǔ)專業(yè)八級(jí)考試大綱》看，該考試的性質(zhì)、構(gòu)念領(lǐng)域、任務(wù)要求、分?jǐn)?shù)比重等都發(fā)生了較大的變化。這對(duì)于英語(yǔ)教師和學(xué)習(xí)者來(lái)說(shuō)，都是巨大的挑戰(zhàn)。所以，作者主要通過(guò)研究專業(yè)八級(jí)考試和教學(xué)大綱之間的關(guān)系去分析八級(jí)試題的質(zhì)量，即分析八級(jí)試題的內(nèi)容效度。整個(gè)分析過(guò)程以Bachman的TEM(Test Method Facets)理論框架為理論支撐。本文主要研究專業(yè)八級(jí)考試與教學(xué)大綱的關(guān)系如何，即專業(yè)八級(jí)的內(nèi)容效度研究。為了對(duì)試卷質(zhì)量進(jìn)行多角度的觀察，一方面采用了問(wèn)卷調(diào)查的方式，調(diào)查對(duì)象為本校外國(guó)語(yǔ)學(xué)院和其他高校外國(guó)語(yǔ)學(xué)院的英語(yǔ)專業(yè)學(xué)生，他們已參加了2017年的專業(yè)八級(jí)考試。研究意義在于通過(guò)探討學(xué)生在2017年專業(yè)八級(jí)考試中的各部分，發(fā)現(xiàn)一些問(wèn)題，幫助命題者提高今后的專業(yè)八級(jí)考試試題質(zhì)量，同時(shí)，也希望通過(guò)這次研究，為英語(yǔ)專業(yè)教師的教學(xué)和學(xué)生的學(xué)習(xí)提供一些啟示。

1.巴克曼的考試方法特性

巴克曼指出了他自己的框架，用來(lái)描述測(cè)試方法的特定特征或方面。這樣做的目的是為了更好地了解這些方面對(duì)語(yǔ)言測(cè)試性能的影響程度。巴克曼提供了一個(gè)描述考試任務(wù)和語(yǔ)言使用任務(wù)的考試方法特性框架，包括考試環(huán)境、考試說(shuō)明、語(yǔ)言輸入、期待反應(yīng)以及輸入和反應(yīng)的關(guān)系五個(gè)方面。

2.內(nèi)容效度分析

2.1 聽(tīng)力理解的內(nèi)容效度分析

聽(tīng)力理解是眾多考試中最普遍的題型之一，英語(yǔ)專業(yè)八級(jí)考試也不例外，而且所占比例為25%。測(cè)試學(xué)生口頭獲取信息的能力，要求學(xué)生能聽(tīng)懂有關(guān)經(jīng)濟(jì)、文化、政治、教育、文學(xué)、語(yǔ)言等方面的演講，能聽(tīng)懂真實(shí)場(chǎng)景中的各種英語(yǔ)對(duì)話。測(cè)試的目的是測(cè)量學(xué)生的口語(yǔ)交流能力。選擇材料的原則是：(a)迷你講座的內(nèi)容接近于英語(yǔ)專業(yè)知識(shí)課程;(b)會(huì)話部分內(nèi)容與學(xué)生的日常生活、工作和學(xué)習(xí)有關(guān);(c)美國(guó)之音和英國(guó)廣播公司的新聞材料，是一篇新聞廣播、簡(jiǎn)短的評(píng)論或演講，學(xué)生們對(duì)此非常熟悉;(d)在聽(tīng)力材料中出現(xiàn)的詞匯和短語(yǔ)并不超出原則所要求的范圍。聽(tīng)力材料的難度中等以上。Section A部分包含一篇900詞左右的講座和完成填空任務(wù)。Section B包含約1000個(gè)單詞的會(huì)話或兩個(gè)約500個(gè)單詞的會(huì)話組成，會(huì)話后有10道多項(xiàng)選擇題。此部分被認(rèn)為是所有考題中最難的部分。要求考生在聽(tīng)力過(guò)程中快速做筆記，根據(jù)瞬時(shí)記憶完成填空，無(wú)疑增加了考生的緊張心理和考試難度。大綱要求滿分為25分，及格分?jǐn)?shù)為15分，調(diào)查問(wèn)卷中考生的平均分?jǐn)?shù)為10分。

從巴克曼的考試方法特性中期待反應(yīng)角度來(lái)看，大部分考試未能達(dá)到及格等級(jí)。由此可見(jiàn)，聽(tīng)力理解的內(nèi)容效度未能與大綱保持一致。一般來(lái)說(shuō)，測(cè)試任務(wù)的特征和語(yǔ)言使用環(huán)境的基本特征之間的一致性越接近，測(cè)試任務(wù)的真實(shí)性就越高。作為英語(yǔ)專業(yè)的學(xué)生，平時(shí)應(yīng)練習(xí)聽(tīng)BBC,VOA,CNN以提高聽(tīng)力理解能力。如果考生想要在聽(tīng)力部分獲得高分，他們必須具備一定的聽(tīng)力水平和技巧。同時(shí)，英語(yǔ)專業(yè)八級(jí)考試也能影響學(xué)生的聽(tīng)力學(xué)習(xí)。

2.2 閱讀理解的內(nèi)容效度分析

閱讀是語(yǔ)言輸入的關(guān)鍵途徑，也是獲取信息和知識(shí)的最有效途徑之一。因此，閱讀技能是大學(xué)生最重要的技能之一。因此，設(shè)計(jì)一個(gè)適當(dāng)?shù)姆椒▉?lái)衡量一個(gè)人的閱讀能力是非常重要的。直到現(xiàn)在，大多數(shù)標(biāo)準(zhǔn)化考試都使用閱讀理解測(cè)試，英語(yǔ)專業(yè)八級(jí)考試也是如此。本部分采用多項(xiàng)選擇題和簡(jiǎn)答題形式，由數(shù)篇閱讀材料組成。閱讀材料共長(zhǎng)3000個(gè)單詞左右。學(xué)生應(yīng)根據(jù)所讀材料內(nèi)容，從每題的四個(gè)選項(xiàng)中選出答案，或根據(jù)問(wèn)題做簡(jiǎn)短回答。閱讀理解部分測(cè)試學(xué)生通過(guò)閱讀獲取和理解有關(guān)信息的能力，既要求準(zhǔn)確性，也要求一定的速度。2017年的專業(yè)八級(jí)考試真題中閱讀理解長(zhǎng)度為3500詞左右，已經(jīng)超出了大綱的要求。此外還應(yīng)考慮到以下幾個(gè)因素：首先，在測(cè)試的壓力下，考生必須更仔細(xì)地閱讀，并試著清楚地理解每一個(gè)單詞的意思，因?yàn)槊總€(gè)文本后面都有一些多選題和簡(jiǎn)答題需要回答;第二，有時(shí)候考生需要重讀一些困難的句子或部分。當(dāng)完成多選題或簡(jiǎn)答題時(shí)，他們可能會(huì)返回去尋找一些信息的文本，以確保他們的選擇的正確性;第三，在有限的時(shí)間內(nèi)，它需要花費(fèi)他們的時(shí)間來(lái)將答題紙涂黑。因此，在考慮了這些因素后，英語(yǔ)專業(yè)八級(jí)的測(cè)試大綱規(guī)定了文本的總長(zhǎng)度應(yīng)該約為3000字，這需要考慮到花在思考問(wèn)題上的時(shí)間，重讀課文的部分內(nèi)容，并將答題紙變黑。閱讀理解的長(zhǎng)度稍有增加了難度。

閱讀理解文章的體裁多樣，包括記敘文、描寫文、說(shuō)明文、議論文等。記敘文和描寫文相對(duì)來(lái)說(shuō)比較容易完成，而說(shuō)明文和議論文則需要較高的閱讀能力，因?yàn)樗鼈兘忉屃艘恍┓椒?、理論、事?shí)或試圖說(shuō)服讀者同意他們的觀點(diǎn)。2017的專業(yè)八級(jí)考試真題中體裁基本與大綱保持一致，輸入和反應(yīng)的關(guān)系符合巴克曼的考試方法特性。

2.3 翻譯的內(nèi)容效度分析

翻譯是為了測(cè)試學(xué)生把源語(yǔ)言轉(zhuǎn)換成目的語(yǔ)過(guò)程的能力。專業(yè)八級(jí)考試大綱要求學(xué)生能在25分鐘內(nèi)把我國(guó)報(bào)刊雜志上的文章和一般文學(xué)作品翻譯成英文，譯文要求忠實(shí)原文，并且語(yǔ)言通順。2017年專業(yè)八級(jí)考試真題的翻譯長(zhǎng)度不到150詞，符合大綱要求。翻譯部分的內(nèi)容效度是可以接受的。我們都知道，內(nèi)容效度是語(yǔ)言測(cè)試和語(yǔ)言教學(xué)的一個(gè)關(guān)鍵問(wèn)題。將會(huì)從以下幾個(gè)方面進(jìn)行詳細(xì)的分析和測(cè)量的研究。

首先，測(cè)試說(shuō)明：考生首先閱讀文章，然后在答題紙上寫下答案。在閱讀文本之前，一個(gè)簡(jiǎn)短的說(shuō)明在目標(biāo)語(yǔ)言中通過(guò)一個(gè)視覺(jué)通道展示給考生即：將下面的下劃線部分翻譯成英語(yǔ)，把你的譯文寫在答題卡上。考生對(duì)特定測(cè)試的反應(yīng)將由給定的指令決定。因此，測(cè)試任務(wù)應(yīng)該得到一個(gè)明顯的指示，說(shuō)明審查員需要什么。它需要一個(gè)可理解的、全面的、簡(jiǎn)短的、明確的和可訪問(wèn)的測(cè)試規(guī)則。換句話說(shuō)，測(cè)試說(shuō)明不應(yīng)比文章或任務(wù)更難。在分析了專業(yè)八級(jí)考試翻譯部分的測(cè)試說(shuō)明后，我們發(fā)現(xiàn)它確實(shí)達(dá)到了這些要求。然而，問(wèn)卷中的問(wèn)題反映了測(cè)試者對(duì)測(cè)試說(shuō)明感到滿意?？忌猓@些指示應(yīng)該提供作者的一般信息和原始段落的來(lái)源。與此同時(shí)，大多數(shù)接受采訪的教師認(rèn)為測(cè)試說(shuō)明應(yīng)該包括正確的標(biāo)準(zhǔn)，并指出這部分的潛在讀者。

其次，命題內(nèi)容：本文從命題內(nèi)容的角度出發(fā)，主要研究中英文翻譯材料的主題和體裁。事實(shí)上，有時(shí)很難將翻譯材料分類為不同的主題類型。在此基礎(chǔ)上，筆者就翻譯材料的比較偏性進(jìn)行了分類：記敘文、描述文、說(shuō)明文和議論文。我們需要在合適的特定層次上從合適的類型選擇主題。2017年考試真題就選擇了記敘文，考生理解起來(lái)相對(duì)容易一些。翻譯是指讀者與文章之間的相互作用。這種互動(dòng)將以閱讀段落的方式來(lái)實(shí)現(xiàn)，這樣讀者就能確定作者的意圖，并從他們自己的角度解讀文章。

最后，句子的類型：句子類型也是分析翻譯部分的因素之一。不同于英語(yǔ)句子,漢語(yǔ)結(jié)構(gòu)松散,它是一種分析性語(yǔ)言，沒(méi)有任何變化，而“了、過(guò)、著“等詞匯需要特別體現(xiàn)出來(lái)。在漢語(yǔ)語(yǔ)法體系中，小句是主要語(yǔ)言單位,是可以獨(dú)立表達(dá)意義的最小單位。如果 僅僅使用一個(gè)小句，它就構(gòu)成一個(gè)簡(jiǎn)單的句子;當(dāng)它與另一個(gè)子句相結(jié)合時(shí)，兩個(gè)從句構(gòu)成復(fù)合句。此外，復(fù)合句可以根據(jù)其關(guān)系分為因果句、并列句和過(guò)渡句。2017年考試真題中出現(xiàn)了很多小句，結(jié)構(gòu)比較松散。但是翻譯成英文后，卻更多使用了復(fù)合句與短語(yǔ)相結(jié)合的方式。考生也應(yīng)掌握英漢兩種語(yǔ)言的句式結(jié)構(gòu)特點(diǎn)，盡量使譯文符合目的語(yǔ)表達(dá)習(xí)慣。

2.4 寫作的內(nèi)容效度分析

考試大綱要求能根據(jù)所給閱讀材料和要求撰寫各類體裁的文章，文章長(zhǎng)度約300個(gè)單詞;能做到內(nèi)容切題、充實(shí)，條理清楚，結(jié)構(gòu)嚴(yán)謹(jǐn)，語(yǔ)法正確，語(yǔ)言通順，表達(dá)得體。2017真題中翻譯符合大綱規(guī)范，其內(nèi)容效度是可以接受的。在正式考試中寫作文的情況與日常寫作有很大的不同，因?yàn)榭忌藢懽饕酝?，還需要完成其他部分。作者認(rèn)為這是一項(xiàng)密集的工作。因此，在專業(yè)八級(jí)考試中要多花15分鐘。

寫作測(cè)試一般采用“情境/觀點(diǎn)+標(biāo)題”的特點(diǎn)。也就是說(shuō)，在寫作提示中，它要求考生在一定的立場(chǎng)上表達(dá)自己的觀點(diǎn)，或者根據(jù)既定的設(shè)置來(lái)表達(dá)一種現(xiàn)象。在提示語(yǔ)中，通常出現(xiàn)正面或負(fù)面的觀點(diǎn)，并簡(jiǎn)單地介紹原因。然后，考生必須聲明自己的喜好，并解釋為什么要這樣做，并表達(dá)自己的觀點(diǎn)。考試規(guī)范給出了寫作形式：第一部分是陳述立場(chǎng)，第二部分是提出論點(diǎn)，它還提供了簡(jiǎn)單的評(píng)分標(biāo)準(zhǔn)。很明顯，寫作的內(nèi)容與考試目標(biāo)有著密切的關(guān)系。

設(shè)計(jì)寫作測(cè)試時(shí)應(yīng)考慮到以下幾點(diǎn)要素：首先，測(cè)試任務(wù)的設(shè)置應(yīng)該與考生的實(shí)際水平相對(duì)應(yīng);其次，寫作的主題需要一個(gè)真實(shí)的情境，也就是說(shuō)，這種情況將會(huì)在目前或?qū)?lái)的測(cè)試者中得到滿足，并且只說(shuō)與日常生活密切相關(guān)的一些話題；第三，寫作任務(wù)一定要明確，這樣才能激發(fā)考生的思維和溝通;第四，寫作時(shí)間不能更苛刻，以免產(chǎn)生不真實(shí)的寫作效果。因此，當(dāng)測(cè)試設(shè)計(jì)者建立一個(gè)寫作任務(wù)時(shí)，他們應(yīng)該確保考生有一些話要說(shuō)，并且可以通過(guò)一個(gè)清晰而準(zhǔn)確的問(wèn)題來(lái)提出，激勵(lì)他們寫作。真題中換工作這個(gè)話題并不罕見(jiàn)，可能考生在畢業(yè)后會(huì)不斷面臨跳槽的現(xiàn)象。所以對(duì)于考生來(lái)說(shuō)更容易寫出文章。此外，問(wèn)卷調(diào)查中許多教師和學(xué)生的回答都集中在一些抽象的方面，如個(gè)人素質(zhì)、大學(xué)生活、名言和教育等等。這些話題的范圍比英語(yǔ)專業(yè)的學(xué)生要小，尤其是那些即將畢業(yè)的高年級(jí)學(xué)生。這些學(xué)生不僅有文化、經(jīng)濟(jì)、文學(xué)、教育、政策、新聞等方面的專業(yè)知識(shí)。此外，他們的閱讀范圍更廣。

寫作的測(cè)試設(shè)計(jì)者必須始終牢記確?？忌性捒烧f(shuō)，或主題與日常生活密切相關(guān)。如果我們選擇一些與考生真實(shí)生活需要相關(guān)的話題，可以更好地提高考試效度。寫作情境越真實(shí)，就越能測(cè)驗(yàn)出考生的真實(shí)寫作能力。

3.結(jié)語(yǔ)

本研究主要通過(guò)分析2017年專業(yè)八級(jí)考試的內(nèi)容，探討了各部分的內(nèi)容效度，提出了對(duì)測(cè)試設(shè)計(jì)者、英語(yǔ)專業(yè)教師和學(xué)生的啟示。