摘 要:分析比較了雅思作文評(píng)分標(biāo)準(zhǔn)和專業(yè)八級(jí)作文評(píng)分標(biāo)準(zhǔn)。通過(guò)研究專業(yè)八級(jí)傳統(tǒng)寫(xiě)作評(píng)分體系所存在的問(wèn)題,從信度、操作性以及反撥作用三個(gè)角度指出相較于雅思寫(xiě)作評(píng)分標(biāo)準(zhǔn),專業(yè)八級(jí)考試寫(xiě)作部分所存在的主要問(wèn)題,并由此提出了改進(jìn)的方向,提高考試信度,增強(qiáng)閱卷人可操作性,促進(jìn)英語(yǔ)專業(yè)寫(xiě)作實(shí)踐和教學(xué)發(fā)展。
關(guān)鍵詞:專業(yè)八級(jí)寫(xiě)作;雅思;信度;反撥作用
寫(xiě)作測(cè)試是外語(yǔ)能力綜合測(cè)試,特別是大規(guī)模的標(biāo)準(zhǔn)化測(cè)試的一個(gè)必要組成部分和評(píng)價(jià)指標(biāo)。語(yǔ)言能力測(cè)試專家和測(cè)試者,試卷研究和開(kāi)發(fā)人員都對(duì)此愈加重視。英語(yǔ)專業(yè)八級(jí)考試(TEM-8)作為唯一針對(duì)綜合性大學(xué)英語(yǔ)專業(yè)學(xué)生所設(shè)立的語(yǔ)言能力綜合測(cè)試,具有專門性、高難度、高權(quán)威等特點(diǎn)。而寫(xiě)作所占的20%的比重也直接關(guān)系到受試者最后綜合得分。
一、整體評(píng)分與分項(xiàng)評(píng)分
整體評(píng)分(holistic scoring)或者印象法(impression method)是大規(guī)模寫(xiě)作測(cè)試中最常用的評(píng)分方法。 所謂整體評(píng)分,就是評(píng)分者在通讀待評(píng)作文的基礎(chǔ)上,根據(jù)評(píng)分量表(scoring scale)或者評(píng)分細(xì)則(scoring rubric)評(píng)分。評(píng)分過(guò)程中,沒(méi)有分項(xiàng)分,而是在1至5、1至10或1至15區(qū)間內(nèi)整體評(píng)分。英語(yǔ)專業(yè)八級(jí)考試中,評(píng)分者通讀后,憑借對(duì)文章的整體印象在四個(gè)分?jǐn)?shù)段位(6~8,9~11,
12~14, 15~17, 18~20)進(jìn)行打分。正如Cooper(1977)所說(shuō),整體評(píng)分過(guò)程實(shí)際上是一個(gè)根據(jù)評(píng)分要求對(duì)學(xué)生作文進(jìn)行“排隊(duì)”的要求。
分項(xiàng)評(píng)分(analytic scoring)或者分析法(analytical method)是將測(cè)試語(yǔ)言劃分為幾個(gè)組成部分,根據(jù)考試要求賦予各部分不同
的權(quán)重。雅思的寫(xiě)作評(píng)分標(biāo)準(zhǔn)(band descriptors)將寫(xiě)作能力劃分為了四個(gè)部分,分別是寫(xiě)作任務(wù)回應(yīng)情況(Task Response),連貫與銜接(Coherence and Cohesion),詞匯豐富程度(Lexical Resource)與語(yǔ)法多樣性及準(zhǔn)確性(Grammatical Range and Accuracy)。評(píng)分者通過(guò)對(duì)各個(gè)部分分別在1~9分區(qū)間打分,然后將四個(gè)部分累加后
再進(jìn)行平均,所得到的平均值就是該評(píng)分員所給評(píng)分。
二、當(dāng)前專業(yè)八級(jí)寫(xiě)作評(píng)分體系問(wèn)題
1.信度飽受爭(zhēng)議
整體評(píng)分的信度如何歷來(lái)飽受學(xué)界爭(zhēng)議?,F(xiàn)有研究結(jié)果表明,使用整體評(píng)分法時(shí)評(píng)分員之間的信度相關(guān)系數(shù)通??蛇_(dá)到0.86,0.90,或0.721~0.932,中數(shù)為0.880。評(píng)分員自身的信度相關(guān)系數(shù)可達(dá)到0.874~0.936(鄒申,2002)。然而,Vaughan(1991)根據(jù)其所做的調(diào)查指出,“評(píng)分員雖然事先所接受的訓(xùn)練相同,但評(píng)分員的個(gè)體差異使得他們?cè)谠u(píng)改作文當(dāng)中仍會(huì)側(cè)重作文的不同方面,并且更有可能采用個(gè)人的閱卷方式。由此看出,整體評(píng)分方法事實(shí)上是一種個(gè)人獨(dú)立思考后作出決定的行為。”這一主觀性和其帶有的不穩(wěn)定性體現(xiàn)在評(píng)閱人評(píng)閱方式多樣性。Vaughan(1991)曾經(jīng)對(duì)評(píng)分員的風(fēng)格做過(guò)一個(gè)調(diào)查。調(diào)查結(jié)果表明評(píng)分員各有其鮮明的評(píng)閱方式。例如,有的采用“單一側(cè)重點(diǎn)”方式(The Single—Focus Approach),側(cè)重作文的及格與否。有的是靠“第一印象”評(píng)閱(The“First Impression Dominates”Approach),作文所給予的最初印象決定了分?jǐn)?shù)的等級(jí)。有的采用“雙重類別”策略(The“Two—Category”Strategy),在評(píng)閱中既側(cè)重作文的組織又側(cè)重作文的語(yǔ)法。還有的則采用“語(yǔ)法為中心”的方法(The Grammar—Oriented Approach)。既然整體評(píng)分方法相較其他評(píng)分方法更多變,其信度自然更具不
穩(wěn)定性。
2.缺乏反撥作用
無(wú)論是測(cè)驗(yàn)寫(xiě)作還是課堂寫(xiě)作,其評(píng)估的目的是對(duì)學(xué)生的能力進(jìn)行診斷分析,讓學(xué)生明確其寫(xiě)作中存在哪些問(wèn)題,在哪些方面能力有待加強(qiáng)。因此,評(píng)價(jià)標(biāo)準(zhǔn)中的描述必須對(duì)提高學(xué)生的寫(xiě)作能力起到指導(dǎo)作用。有研究者調(diào)查發(fā)現(xiàn),絕大多數(shù)學(xué)科負(fù)責(zé)人熟悉TEM8考試大綱,但對(duì)考試評(píng)分標(biāo)準(zhǔn)熟悉程度不夠(約14.7%),對(duì)評(píng)分標(biāo)準(zhǔn)選擇“不清楚”的人數(shù)也是最多的(約13.7%)(徐倩,2012)。在探討反撥作用對(duì)日常寫(xiě)作實(shí)踐之間關(guān)系之前,首先需要了解當(dāng)前英語(yǔ)寫(xiě)作,尤其是ESL學(xué)生在寫(xiě)作中集中體現(xiàn)的問(wèn)題。首先,英語(yǔ)專業(yè)八級(jí)考試測(cè)試的是英語(yǔ)專業(yè)高年級(jí)學(xué)生的英語(yǔ)水平。因此作文時(shí)要充分調(diào)動(dòng)創(chuàng)造性和寫(xiě)作技巧(王馥芳,劉險(xiǎn)峰
2003)。以2003年TEM8考試作文題目為例:2003年TEM8作文部分的題目如下:An English newspaper is currently running a discussion on whether young people in China today are(not) more selfcentred and unsympathetic than previous generations were. And the newspaper is inviting contributions from university students.You have been asked to write a short article for the newspaper to air your views. 在對(duì)考生試卷統(tǒng)計(jì)中,有研究者調(diào)查得出,考生的主要問(wèn)題,并不是來(lái)源于文章篇章結(jié)構(gòu),相反,考生文章結(jié)構(gòu)組織得比較好,也就是說(shuō),文章普遍做到了開(kāi)篇亮出觀點(diǎn)、層次較清晰、論據(jù)與主題關(guān)系較密切、論述較合情理、結(jié)尾點(diǎn)題等。這些都在專八評(píng)分標(biāo)準(zhǔn)有所描述。而考生主要的問(wèn)題出現(xiàn)在以下幾個(gè)方面:(1)觀點(diǎn)和內(nèi)容普遍缺乏新意。絕大多數(shù)考生審題時(shí)非肯定即否定,持部分肯定或者“無(wú)可比性”的考生比例極低,辯證思維不強(qiáng)。(2)語(yǔ)氣鮮明性不夠,體現(xiàn)在文章感染力不強(qiáng)和讀者意識(shí)不強(qiáng)。
3.缺乏可操作性
尤其對(duì)于缺乏經(jīng)驗(yàn)的評(píng)分人員尤其如此,在對(duì)TEM8寫(xiě)作考試評(píng)分員差異性研究中發(fā)現(xiàn),缺乏經(jīng)驗(yàn)的評(píng)分人員評(píng)分寬松,個(gè)別評(píng)分人員對(duì)評(píng)分標(biāo)準(zhǔn)的把握有偏差(張艷莉,彭康洲,2012)。專家和學(xué)科負(fù)責(zé)人都希望分?jǐn)?shù)報(bào)告能夠更為具體,不僅提供總分,也要有單項(xiàng)分和各分?jǐn)?shù)段對(duì)應(yīng)語(yǔ)言能力的描述(徐倩,2012)。這都要求寫(xiě)作評(píng)改當(dāng)中,評(píng)分標(biāo)準(zhǔn)和評(píng)分描述要更為具體。在TEM8評(píng)分標(biāo)準(zhǔn)中,評(píng)分標(biāo)準(zhǔn)共分為五檔,而雅思評(píng)分標(biāo)準(zhǔn)中卻分為了九檔,在檔位上更為細(xì)致。在組織(organization)上,TEM8評(píng)分描述顯得缺乏操作性,評(píng)分描述從well developed, a generally well developed, an adequately developed, an inadequate organizational structure到最低的has neither an organizational structure nor coherence.我們可以看出這五個(gè)檔位的描述差異細(xì)微、籠統(tǒng),讓缺乏經(jīng)驗(yàn)的評(píng)分人員感到茫然。相比之下,雅思在結(jié)構(gòu)中評(píng)價(jià)中凸顯了cohesion或cohesive devices(銜接手段)、paragraphing (分段)、clear progression(清晰的行文推進(jìn)),central topic within each paragraph(每段的核心主題)等一系列顯性指標(biāo),使評(píng)分員操作性更強(qiáng)。
三、關(guān)于專業(yè)八級(jí)寫(xiě)作評(píng)分標(biāo)準(zhǔn)與雅思寫(xiě)作評(píng)分標(biāo)準(zhǔn)的幾點(diǎn)
思考
1.鼓勵(lì)在評(píng)分標(biāo)準(zhǔn)中體現(xiàn)創(chuàng)新,提倡學(xué)生日常寫(xiě)作逆向思維
寫(xiě)作本身是一個(gè)創(chuàng)造性和批判思維的過(guò)程。而專業(yè)八級(jí)寫(xiě)作中普遍反映出觀點(diǎn)和內(nèi)容缺乏新意,只有從專業(yè)八級(jí)寫(xiě)作評(píng)分標(biāo)準(zhǔn)這一“指揮棒”上進(jìn)行改造,最大程度調(diào)動(dòng)學(xué)生寫(xiě)作創(chuàng)造性和教師教學(xué)創(chuàng)造性。
2.培養(yǎng)讀者意識(shí),與中文“讀者責(zé)任型”寫(xiě)作思維不同,英語(yǔ)提倡“作者責(zé)任型”寫(xiě)作思維
所謂“作者責(zé)任型”是指英語(yǔ)作者在使讀者理解文章內(nèi)容方面得承擔(dān)大部分的責(zé)任??ㄆ仗m曾說(shuō),與漢語(yǔ)作者相比,英語(yǔ)作者認(rèn)為自己對(duì)讀者負(fù)有更大的責(zé)任(尤澤順,2002)。這就要求評(píng)價(jià)英文作文時(shí)首先要看本文作者是否具有讀者意識(shí),而相應(yīng)的考試評(píng)分標(biāo)準(zhǔn)也必須把讀者意識(shí)納入考量。只有這樣,才能促進(jìn)學(xué)生實(shí)踐和教師教學(xué)中最大程度地重視讀者意識(shí)的培養(yǎng)。Moffett(見(jiàn)鄧志勇,2002)曾說(shuō):“任何教寫(xiě)作的人,其首要任務(wù)是培養(yǎng)讀者意識(shí),如果不培養(yǎng)讀者意識(shí),教學(xué)難有什么效果?!?/p>
3.引入和借鑒雅思分項(xiàng)評(píng)分標(biāo)準(zhǔn)
不斷細(xì)化和量化評(píng)分指標(biāo)的描述,要避免像“adequately”“relatively”“effectively”等模糊不清的評(píng)分描述。增強(qiáng)評(píng)分指標(biāo)的操作性。只有這樣才可以減少不同評(píng)閱人所帶來(lái)的誤差,最大限度增加專八寫(xiě)作部分考試的信度。
評(píng)分標(biāo)準(zhǔn)的制定是評(píng)分效度的基礎(chǔ),做到如何科學(xué)、全面、便于操作不是件簡(jiǎn)單的事情。
英語(yǔ)作文作為一種英語(yǔ)技能的測(cè)試方式,可以考查考生的寫(xiě)作能力,能較如實(shí)地反映其綜合應(yīng)用英語(yǔ)的能力,因而,各種英語(yǔ)考試中作文題常常是必要的項(xiàng)目,在國(guó)外一些考試中甚至是唯一的項(xiàng)目。只有不斷借鑒包括IELTS在內(nèi)的國(guó)外標(biāo)準(zhǔn)化英語(yǔ)水平測(cè)試寫(xiě)作評(píng)分標(biāo)準(zhǔn),取其精華,去其糟粕。改善專業(yè)八級(jí)寫(xiě)作評(píng)價(jià)信度,操作性以及對(duì)于寫(xiě)作實(shí)踐與教學(xué)的反撥作用,才能真正將專業(yè)八級(jí)考試作為英語(yǔ)專業(yè)高年級(jí)水平測(cè)試的公信力和權(quán)威性樹(shù)立起來(lái),指導(dǎo)我國(guó)英語(yǔ)專業(yè)學(xué)科發(fā)展。
參考文獻(xiàn):
[1]鄒申,楊任明.他們?nèi)绾问褂脤?xiě)作評(píng)分標(biāo)準(zhǔn)?:TEM4新老評(píng)分員調(diào)查[J].國(guó)外外語(yǔ)教學(xué)(FLTA),2002(3):1-6.
[2]張艷莉,彭康洲.TEM8寫(xiě)作考試評(píng)分員差異性研究[J].外語(yǔ)電化教學(xué),2012(143):42-46.
[3]徐倩.英語(yǔ)專業(yè)八級(jí)考試的反撥作用研究:對(duì)外語(yǔ)專家和英語(yǔ)學(xué)科負(fù)責(zé)人的一次調(diào)查[J].外語(yǔ)界,2012(3):21-31.
(作者單位 福建農(nóng)林大學(xué)金山學(xué)院)
編輯 王 輝