高職院校航海英語(yǔ)測(cè)試與評(píng)估的現(xiàn)狀與對(duì)策

(南通航運(yùn)職業(yè)技術(shù)學(xué)院，南通 226000)

測(cè)試和評(píng)估是教學(xué)中非常重要的環(huán)節(jié)，其目的是提供一種科學(xué)的測(cè)試工具，對(duì)學(xué)生的語(yǔ)言能力進(jìn)行客觀、準(zhǔn)確、公正的評(píng)價(jià)，反映教學(xué)中的長(zhǎng)處和短處，為提高教學(xué)質(zhì)量服務(wù)。[1]海船船員英語(yǔ)評(píng)估是為履行STCW公約馬尼拉修正案，進(jìn)一步提高我國(guó)海船船員英語(yǔ)運(yùn)用能力而采取的一種強(qiáng)制性評(píng)估。航海英語(yǔ)測(cè)試和評(píng)估包括航海英語(yǔ)閱讀考證和航海英語(yǔ)聽(tīng)力與會(huì)話評(píng)估，是對(duì)海船船員在相關(guān)航海技能、航海知識(shí)、日常操作、船舶管理等各方面進(jìn)行英語(yǔ)應(yīng)用能力的全面考查，有力地促進(jìn)了船員(特別是無(wú)限航區(qū)船員)英語(yǔ)水平的提高。但從實(shí)踐來(lái)看，航海英語(yǔ)在測(cè)試和評(píng)估方式上還需要進(jìn)一步改進(jìn)和完善。

一、測(cè)試評(píng)估的信度和效度

1. 測(cè)試評(píng)估的信度

所謂信度就是測(cè)試結(jié)果的可靠性，它體現(xiàn)了分?jǐn)?shù)與試題、試題與應(yīng)試者之間的關(guān)系。語(yǔ)言測(cè)試信度的高低主要說(shuō)明的是測(cè)試結(jié)果在多大程度上反映了受試者真實(shí)的語(yǔ)言行為。影響信度的因素有很多，他們存在于語(yǔ)言測(cè)試的每個(gè)環(huán)節(jié)中。首先，試卷本身要有一定的量，試題的難度要適中，要能檢驗(yàn)出應(yīng)試者不同的水平層次，而且試題的內(nèi)容要屬于同一個(gè)范疇、同一個(gè)領(lǐng)域，試題與應(yīng)試者之間要相互具有適應(yīng)性；其次，在測(cè)試的組織、實(shí)施這個(gè)環(huán)節(jié)中，各個(gè)考場(chǎng)每次考試要保持條件一致，另外，各個(gè)考場(chǎng)的環(huán)境、考試設(shè)備乃至監(jiān)考人員必須保證條件一致；最后，試卷的評(píng)判工作要保持一致，同一個(gè)測(cè)試的評(píng)分標(biāo)準(zhǔn)必須保持一致或穩(wěn)定。此外，評(píng)分者之間以及同一個(gè)評(píng)分者前后在評(píng)分標(biāo)準(zhǔn)的把握上應(yīng)當(dāng)保持一致。[2]

2. 測(cè)試評(píng)估的效度

效度就是考試的有效性，是指考試是否測(cè)量了它所想要測(cè)量的東西。關(guān)于考試的效度，體系不同、分類(lèi)方法也不同，對(duì)其理解也不完全一致。[3]測(cè)試的效度一般可分為以下幾類(lèi)：表面效度、內(nèi)容效度、編制效度和經(jīng)驗(yàn)效度。表面效度是指測(cè)試應(yīng)達(dá)到的卷面標(biāo)準(zhǔn)，即一套測(cè)試題從表面看來(lái)是否合適。內(nèi)容效度是指一套測(cè)試題是否測(cè)試了應(yīng)該測(cè)試的內(nèi)容或者說(shuō)所測(cè)試的內(nèi)容是否反映了測(cè)試的要求，即測(cè)試的代表性和覆蓋面的程度。編制效度是指一套測(cè)試題的諸項(xiàng)目對(duì)編制該測(cè)試所依據(jù)的理論的各個(gè)基本方面的反映程度。經(jīng)驗(yàn)效度是一種衡量測(cè)試有效性的量度，通過(guò)把一項(xiàng)測(cè)試與一個(gè)或多個(gè)標(biāo)準(zhǔn)尺度相對(duì)照而得出。經(jīng)驗(yàn)效度可分為兩種：一種是共時(shí)效度，即將一項(xiàng)測(cè)試的結(jié)果同另一次時(shí)間相近的有效測(cè)試的結(jié)果相比較或同教師的鑒定相比較而得出的系數(shù)；二是預(yù)測(cè)效度，即將一次測(cè)試的結(jié)果同后來(lái)的語(yǔ)言能力相比較，或同教師后來(lái)對(duì)學(xué)生的鑒定相比較而得出的系數(shù)。[4]

二、當(dāng)前航海英語(yǔ)測(cè)試評(píng)估的現(xiàn)狀

當(dāng)前航海英語(yǔ)聽(tīng)力與會(huì)話的評(píng)估內(nèi)容分為聽(tīng)力與會(huì)話兩個(gè)部分。聽(tīng)力部分由考生在計(jì)算機(jī)上回答，考生做完試題后計(jì)算機(jī)會(huì)直接給出客觀的成績(jī)。會(huì)話是由考生把自己的答案錄進(jìn)計(jì)算機(jī)，再由評(píng)估員對(duì)考生的答案進(jìn)行評(píng)分。這種評(píng)分雖然有一定的主觀性，但是在評(píng)分過(guò)程中評(píng)估員只能聽(tīng)到考生的匿名錄音，因此評(píng)估結(jié)果也基本客觀公正。航海英語(yǔ)評(píng)估要求考生聽(tīng)力與會(huì)話同時(shí)達(dá)到60分才算通過(guò)，否則需要重新評(píng)估聽(tīng)力與會(huì)話兩部分內(nèi)容。

航海英語(yǔ)評(píng)估的目的在于促進(jìn)我國(guó)船員英語(yǔ)聽(tīng)、說(shuō)能力的提高，建立相應(yīng)的培訓(xùn)機(jī)制，從而使船員英語(yǔ)聽(tīng)、說(shuō)能力的培訓(xùn)走上一條良性循環(huán)的軌道。[5]而目前的聽(tīng)力與會(huì)話評(píng)估系統(tǒng)還存在某些缺陷。首先試題庫(kù)的題量較少，適用性有待改進(jìn)，不符合考核與評(píng)估的實(shí)際需要，難以滿足STCW公約對(duì)船員英語(yǔ)適任方面的要求。一直以來(lái)，考生普遍使用人民交通出版社出版的《全國(guó)海船船員英語(yǔ)評(píng)估學(xué)習(xí)指南(航海英語(yǔ)聽(tīng)力與會(huì)話)》，航海英語(yǔ)評(píng)估的內(nèi)容也基本上來(lái)自該教材，而且多年沒(méi)有變更。雖然2012年出版了新的評(píng)估教材，但是題目變化較少，未能覆蓋評(píng)估規(guī)范的全部?jī)?nèi)容。有些考生英語(yǔ)實(shí)際能力較低，但是靠評(píng)估前死記硬背教材也能順利通過(guò)評(píng)估，因此其評(píng)估結(jié)果不能反映考生的真實(shí)水平和實(shí)際應(yīng)用能力；而且不同職級(jí)、不同航區(qū)的考生使用的是同一本教材，難易度、區(qū)分度小。其次，評(píng)估內(nèi)容不全面，聽(tīng)力題型多為選擇題，缺乏科學(xué)性。

評(píng)價(jià)一項(xiàng)測(cè)試是否成功，主要看它有沒(méi)有較高的信度和效度。航海英語(yǔ)評(píng)估的聽(tīng)力基本為選擇題，信度較高，但效度較低；會(huì)話部分占主要比重的問(wèn)答題效度較高，但信度較低。這些問(wèn)題在一定程度上影響了評(píng)估效果，同時(shí)也導(dǎo)致考生陷入“應(yīng)試”怪圈，忽視了文化知識(shí)的積累和語(yǔ)言能力的提高，并在某種程度上束縛了航海英語(yǔ)教學(xué)。[6]

三、航海英語(yǔ)測(cè)試評(píng)估體系的建立和完善

1. 完善評(píng)估材料和內(nèi)容

由海事局組織的全國(guó)海船船員英語(yǔ)聽(tīng)力與會(huì)話評(píng)估試題庫(kù)即《航海英語(yǔ)聽(tīng)力與會(huì)話評(píng)估學(xué)習(xí)指南》是公開(kāi)的，其結(jié)果是學(xué)員把精力都集中到記憶材料內(nèi)容上，尤其是聽(tīng)力部分，因考試形式過(guò)于單一，有些考生在考核時(shí)完全憑著記憶回答即能應(yīng)付，因此每期船員英語(yǔ)評(píng)估聽(tīng)力通過(guò)率都很高。其次是會(huì)話部分，口述題和問(wèn)答題事先都已經(jīng)有答案，考試之前考生只需把答案背誦下來(lái)，而無(wú)需經(jīng)過(guò)思考組織句子，同一個(gè)問(wèn)題的答案也是千篇一律的，不能反映考生真實(shí)的英語(yǔ)水平。因此，應(yīng)大幅度增加和完善評(píng)估材料，內(nèi)容應(yīng)涉及航海工作和生活的方方面面；與海事院校合作，把平時(shí)教學(xué)中聽(tīng)力與會(huì)話考核的內(nèi)容作為評(píng)估的一部分，使學(xué)員在平時(shí)學(xué)習(xí)中注重訓(xùn)練提高自己的聽(tīng)力和口語(yǔ)能力。只有這樣，評(píng)估才能真正達(dá)到應(yīng)有的目的。

2.改革評(píng)估手段和形式

目前的航海英語(yǔ)聽(tīng)力與會(huì)話評(píng)估沒(méi)有貫徹落實(shí)運(yùn)用能力的考核，不符合評(píng)估的實(shí)際需要，難以滿足STCW公約馬尼拉修正案對(duì)船員英語(yǔ)方面的要求。聽(tīng)力考試可以增加判斷題、排序題、聽(tīng)力填空等新題型，以便更真實(shí)地反映考生的聽(tīng)力狀況，迫使考生真正提高聽(tīng)力水平，實(shí)現(xiàn)航海英語(yǔ)聽(tīng)力評(píng)估的目的。另外，會(huì)話考試的形式應(yīng)更加完善。如對(duì)于簡(jiǎn)單的日常生活問(wèn)答題可以采用人機(jī)對(duì)話的形式；對(duì)于一些專(zhuān)業(yè)性很強(qiáng)的知識(shí)點(diǎn)，可以采用分組對(duì)話的形式，幾個(gè)考生一組，按考官指定的情景進(jìn)行對(duì)話，由考官和評(píng)估員組成考核小組對(duì)每個(gè)考生的表現(xiàn)進(jìn)行打分，這樣更能考查學(xué)員的真實(shí)口語(yǔ)能力和應(yīng)變能力，從而杜絕目前靠死記硬背蒙混過(guò)關(guān)的問(wèn)題。

3.保證評(píng)估的公正性

由于種種原因，目前航海英語(yǔ)聽(tīng)力與會(huì)話評(píng)估還存在把關(guān)不嚴(yán)的現(xiàn)象。有些學(xué)院為了保證學(xué)生通過(guò)率，評(píng)估員在評(píng)判時(shí)有意放松要求，對(duì)于有些答非所問(wèn)的考生也會(huì)給予一定的分?jǐn)?shù)，總分也能及格，從而失去了評(píng)估的意義。因此，首先要從制度上保證評(píng)估員做到公平、公正，不徇私舞弊，為此建議由兩個(gè)或兩個(gè)以上的評(píng)估員統(tǒng)一對(duì)考生進(jìn)行評(píng)判，然后進(jìn)行綜合評(píng)定，或通過(guò)海事院校之間交換評(píng)判的方式對(duì)學(xué)生進(jìn)行評(píng)分；此外，聽(tīng)力與會(huì)話評(píng)估應(yīng)制定一個(gè)具體的容易操作的評(píng)分標(biāo)準(zhǔn)，并對(duì)評(píng)估員進(jìn)行統(tǒng)一培訓(xùn)，保證測(cè)試的效度。[6]

四、結(jié) 語(yǔ)

測(cè)試和評(píng)估作為反映學(xué)習(xí)者學(xué)業(yè)成績(jī)的重要指標(biāo)，對(duì)英語(yǔ)口語(yǔ)和聽(tīng)力教學(xué)有著重要的實(shí)踐意義。因此，為了使我國(guó)的船員能與國(guó)際接軌，更好地與國(guó)外船員競(jìng)爭(zhēng)，航海英語(yǔ)測(cè)試與評(píng)估體系應(yīng)盡快加大力度深入改革。通過(guò)對(duì)考試內(nèi)容、信息、反饋形式以及考試組織和管理等進(jìn)行改革，科學(xué)地引導(dǎo)日常教學(xué)與考核評(píng)估，切實(shí)有效地提高我國(guó)船員的英語(yǔ)語(yǔ)言綜合運(yùn)用能力。

[1] 王淑君.多元化評(píng)估方式在大學(xué)英語(yǔ)口語(yǔ)聽(tīng)力課程中的運(yùn)用研究[J].消費(fèi)導(dǎo)刊，2010(6).

[2] 汪先鋒，倪建樂(lè).從信度與效度的相互關(guān)系看語(yǔ)言測(cè)試的取向[J].山東外語(yǔ)教學(xué)，2000(3).

[3] 孫成崗.現(xiàn)代語(yǔ)言測(cè)試與試卷分析[J].解放軍外國(guó)語(yǔ)學(xué)院學(xué)報(bào)，2000(4).

[4] 楊惠中. 大學(xué)英語(yǔ)四.六級(jí)考試效度研究[M].上海：上海外語(yǔ)教育出版社，1998.

[5] 張錦朋.剖析航海英語(yǔ)評(píng)估[J].航海技術(shù)，2001(6).

[6] 丁自華.現(xiàn)行航海專(zhuān)業(yè)英語(yǔ)考核評(píng)估體系的問(wèn)題與建議[J].航海教育研究，2008(4).