民航英語口語測試對(duì)英語學(xué)習(xí)反撥效應(yīng)的實(shí)證研究

曹佳,王愛國

摘 要 通過課堂觀察、問卷調(diào)查和面對(duì)面訪談的方法，從4個(gè)維度進(jìn)行定量與定性相結(jié)合的分析研究，旨在探討中國民航飛行人員英語能力測試口語面試對(duì)學(xué)生英語學(xué)習(xí)的反撥效應(yīng)。結(jié)果表明，口語能力面試對(duì)學(xué)生英語學(xué)習(xí)所產(chǎn)生的主要是正面反撥效應(yīng)，其中，對(duì)民航專業(yè)英語學(xué)習(xí)的反撥效應(yīng)顯著，對(duì)通用英語學(xué)習(xí)的反撥效應(yīng)較弱。

關(guān)鍵詞 民航飛行人員；英語口語測試；英語學(xué)習(xí)；反撥效應(yīng)

中圖分類號(hào) G712 文獻(xiàn)標(biāo)識(shí)碼 A 文章編號(hào) 1008-3219（2012）05-0023-05

一、研究背景

中國民航飛行人員英語能力測試（Pilots English Proficiency Examination of CAAC，PEPEC）用于評(píng)估飛行人員的基礎(chǔ)英語能力及在正常和非正常無線電通話中基本的語言交際能力，對(duì)被測試人的英語能力進(jìn)行評(píng)估，其中4級(jí)為工作級(jí)，5、6級(jí)為專家級(jí)。

測試的最后一部分是口語能力面試（Oral Proficiency Interv- iew，OPI），主要測試被測試人的口頭語言運(yùn)用能力及語言的綜合表達(dá)能力。從語言的發(fā)音、結(jié)構(gòu)、詞匯、流暢程度、理解能力以及應(yīng)對(duì)能力等六個(gè)方面，對(duì)被測試人的英語能力從6級(jí)到1級(jí)進(jìn)行評(píng)估。這是一種基于計(jì)算機(jī)視頻的、面試員與被測試人之間的半直接考試，即面試員與被測試人以電腦為媒介進(jìn)行視頻和發(fā)音連線，從而完成口語考試任務(wù)[1]。OPI測試分為：準(zhǔn)備階段、等級(jí)初評(píng)階段、等級(jí)評(píng)定階段以及結(jié)束階段。面試員根據(jù)不同測試階段的測試要求，進(jìn)行由淺入深的提問。該測試分值占PEPEC總成績的30%（4級(jí)）或40%（5、6級(jí)），考試時(shí)間約為15分鐘。

由于PEPEC是大規(guī)模高風(fēng)險(xiǎn)考試，以及OPI所占的分?jǐn)?shù)權(quán)重，必然會(huì)對(duì)學(xué)生英語學(xué)習(xí)產(chǎn)生明顯的反撥效應(yīng)。民航英語口語測試作為專門用途英語（ESP）測試的一個(gè)分支，國內(nèi)外在這個(gè)領(lǐng)域的研究并不多見，更沒有人對(duì)中國民航飛行人員英語能力測試口語能力面試進(jìn)行過研究。因此，本文從語言學(xué)習(xí)者角度對(duì)口語能力面試進(jìn)行反撥效應(yīng)實(shí)證研究，從而深入了解該項(xiàng)測試與學(xué)生英語學(xué)習(xí)的關(guān)系。

二、研究理據(jù)

反撥效應(yīng)（Backwash Effect）是指測試對(duì)教與學(xué)的影響[2]。在語言學(xué)界，不同學(xué)者用不同的術(shù)語表示測試與教學(xué)的關(guān)系，如基于測量的教學(xué)[3]、后果效度[4]、系統(tǒng)效度[5]、考試影響[6]、課程連結(jié)[7]等。由于在學(xué)術(shù)文獻(xiàn)中使用頻率最高的術(shù)語是反撥效應(yīng)，為了保證研究的連貫性和嚴(yán)謹(jǐn)性，本文采用這一表達(dá)方式。

有關(guān)反撥效應(yīng)的理論模式，Alderson和Wall[8]的反撥效應(yīng)假設(shè)和Hughes[9]的反撥效應(yīng)模式運(yùn)用得最為廣泛?；谏鲜隼碚摚瑒?chuàng)建OPI反撥效應(yīng)研究基本理論模型：參與者（教師、學(xué)生等）對(duì)該考試的態(tài)度，教師的教學(xué)過程和學(xué)生的學(xué)習(xí)過程以及結(jié)果（教師的教學(xué)效果和學(xué)生的學(xué)習(xí)效果）。

三、研究方法

（一）研究問題

結(jié)合上述理論模型及民航英語口語測試與學(xué)生英語學(xué)習(xí)的關(guān)系，提出四個(gè)研究問題：學(xué)生對(duì)OPI的了解程度；OPI對(duì)學(xué)生的學(xué)習(xí)態(tài)度產(chǎn)生的主要影響；OPI對(duì)學(xué)生英語學(xué)習(xí)反撥效應(yīng)的性質(zhì)和強(qiáng)度；備考課程對(duì)學(xué)生參加OPI起的作用。其中問題1、2涉及OPI對(duì)學(xué)生學(xué)習(xí)態(tài)度的反撥效應(yīng)，問題3、4涉及OPI對(duì)學(xué)生學(xué)習(xí)行為的反撥效應(yīng)。

（二）研究對(duì)象

個(gè)案學(xué)校為中國民航大學(xué)，被試為飛行學(xué)院大三2個(gè)班的養(yǎng)成飛行員。由于在出國飛行訓(xùn)練前，要對(duì)這些學(xué)生進(jìn)行民航專業(yè)英語培訓(xùn)，并且在培訓(xùn)期結(jié)束前要參加PEPEC考試，因此他們對(duì)該測試的認(rèn)識(shí)和態(tài)度是最直接、真實(shí)和重要的數(shù)據(jù)。被試人員共56名，均為男生，年齡為20~22歲，其中22人通過大學(xué)英語四級(jí)考試，且所有的學(xué)生都沒有參加過PEPEC考試。

（三）研究工具

采用多種研究手段，包括課堂觀察、問卷調(diào)查、面對(duì)面訪談，定量研究與定性研究相結(jié)合。首先進(jìn)行課堂觀察，調(diào)查課堂教學(xué)情況并為學(xué)生的具體學(xué)習(xí)行為提供細(xì)節(jié)性信息；其次通過問卷調(diào)查從學(xué)生對(duì)OPI的了解程度、對(duì)OPI各項(xiàng)措施的態(tài)度、OPI對(duì)學(xué)生英語學(xué)習(xí)的反撥效應(yīng)及對(duì)備考課程的評(píng)價(jià)四個(gè)維度進(jìn)行分析；最后，通過面對(duì)面訪談對(duì)得出的數(shù)據(jù)進(jìn)行分析和驗(yàn)證。

1.課堂觀察

研究中的課堂觀察是前期觀察，目的是調(diào)查OPI是否對(duì)學(xué)生的學(xué)習(xí)內(nèi)容及學(xué)習(xí)行為產(chǎn)生影響。主要包括：教師的教學(xué)內(nèi)容和教學(xué)方法；課堂上教學(xué)時(shí)間的分配；備考資料的使用；訓(xùn)練的語言技能；學(xué)生民航專業(yè)英語（主要是無線電陸空通話）和通用英語的學(xué)習(xí)；學(xué)生的反饋等。

OPI備考課程由一位教師承擔(dān)，共持續(xù)8周。在2011年4月~5月間共進(jìn)行6課時(shí)的課堂觀察與記錄。為保證信度和效度以及后續(xù)研究，在課堂觀察時(shí)采用現(xiàn)場做筆記并現(xiàn)場錄音的方法。

2.問卷調(diào)查

問卷調(diào)查是本研究的主要研究手段，以上述理論模型為基礎(chǔ)，根據(jù)國內(nèi)外實(shí)證研究的主要結(jié)論，以及專家同行的觀點(diǎn)和建議，設(shè)計(jì)OPI反撥效應(yīng)問卷調(diào)查表。為避免非預(yù)測性問題和歧義，在作為樣本發(fā)放之前，進(jìn)行了試測，由6名學(xué)生完成。根據(jù)試測的數(shù)據(jù)結(jié)果和反饋建議，對(duì)其進(jìn)行修改，形成最終的調(diào)查問卷。該調(diào)查問卷由兩部分構(gòu)成：第一部分為被試的個(gè)人基本信息；第二部分為OPI對(duì)被試的反撥效應(yīng)調(diào)查，共18題，均采用李克特式（Likert Scale）五級(jí)量表。問卷一次性發(fā)放給學(xué)生，被試自愿完成，共收回有效問卷54份。

3.面對(duì)面訪談

面對(duì)面訪談是輔助研究工具，目的是對(duì)收集的數(shù)據(jù)進(jìn)行定性解釋，并盡可能提供精確和細(xì)節(jié)性信息。訪談在問卷調(diào)查之后進(jìn)行，選取完成調(diào)查問卷的10名學(xué)生。主要包括兩方面內(nèi)容：學(xué)生對(duì)OPI的態(tài)度以及OPI對(duì)學(xué)生英語學(xué)習(xí)的影響。為使訪談自然、順利進(jìn)行，沒有進(jìn)行錄音，采取現(xiàn)場做筆記的方法。

四、研究結(jié)果與討論

表1、2、3、4是問卷中18個(gè)問題涉及的四個(gè)不同方面的人數(shù)比例、得分平均值和標(biāo)準(zhǔn)差，以下各表都按平均值從高到低排列而成。

（一）學(xué)生對(duì)OPI的熟悉程度

表1數(shù)據(jù)顯示，大多數(shù)學(xué)生對(duì)OPI的測試內(nèi)容和測試程序都有不同程度的了解，測試對(duì)這兩項(xiàng)的反撥效應(yīng)較弱。評(píng)分標(biāo)準(zhǔn)和測試題型兩項(xiàng)的平均值最高，標(biāo)準(zhǔn)差最低，說明測試對(duì)這兩項(xiàng)的反撥效應(yīng)較強(qiáng)，特別是評(píng)分標(biāo)準(zhǔn)一項(xiàng)，對(duì)其不了解的學(xué)生比例37%（25.9%+11.1%），高于對(duì)其了解的學(xué)生比例33.4%（3.7%+29.7%）。

有三個(gè)主要原因解釋以上現(xiàn)象：第一，PEPEC實(shí)行的時(shí)間比較短，學(xué)生對(duì)其組成部分OPI測試的了解程度不夠；第二，學(xué)生對(duì)測試內(nèi)容、測試程序比較了解與講授OPI課程的教師在課堂上反復(fù)強(qiáng)調(diào)密切相關(guān)；第三，學(xué)生認(rèn)為評(píng)分標(biāo)準(zhǔn)與他們的測試關(guān)聯(lián)度不大，一部分學(xué)生認(rèn)為只有教師才應(yīng)該去關(guān)心該問題。

（二）學(xué)生對(duì)OPI測試標(biāo)準(zhǔn)的態(tài)度

表2數(shù)據(jù)顯示，大多數(shù)學(xué)生認(rèn)可OPI測試的必要性，說明它對(duì)學(xué)生有顯著的反撥效應(yīng)。根據(jù)與題項(xiàng)的相符程度，排在前三位的分別是：OPI分?jǐn)?shù)所占PEPEC分?jǐn)?shù)的比例很合理，能準(zhǔn)確反映英語口語能力，考察的6方面內(nèi)容很合理。OPI在工作級(jí)（即4級(jí)）占PEPEC分?jǐn)?shù)比例為30%，在專家級(jí)（即5、6級(jí)）占40%。它體現(xiàn)了專門用途英語測試的重要特點(diǎn)：真實(shí)性。語言測試中的真實(shí)性是指受試者在測試中使用目標(biāo)語完成測試任務(wù)與其在現(xiàn)實(shí)生活中使用語言進(jìn)行交際活動(dòng)的相似程度，也就是語言測試與語言交際的一致程度[8]。所以，OPI是在真實(shí)或接近于真實(shí)的語境中，通過完成實(shí)際任務(wù)，測試考生運(yùn)用語言的能力，其特點(diǎn)是實(shí)用性和交互性強(qiáng)，因此，大多數(shù)學(xué)生認(rèn)為能準(zhǔn)確反映其英語口語能力。

對(duì)于喜歡OPI的測試形式，即基于計(jì)算機(jī)視頻的半直接考試選項(xiàng)，學(xué)生的態(tài)度各異。從平均值和標(biāo)準(zhǔn)差顯示的數(shù)據(jù)看，該項(xiàng)對(duì)學(xué)生有很強(qiáng)的反撥效應(yīng)?？傮w而言，學(xué)生的態(tài)度分為兩種：大多數(shù)學(xué)生認(rèn)為就傳統(tǒng)的面試型考試而言，機(jī)助英語口語考試具有顯而易見的優(yōu)勢，由于有過類似測試的培訓(xùn)或經(jīng)歷，這種形式在一定程度上能緩解心理緊張因素，比較公正；但是，另一部分學(xué)生認(rèn)為他們更喜歡傳統(tǒng)的與考官面對(duì)面形式的口試，因?yàn)槊鎸?duì)計(jì)算機(jī)，表達(dá)效果不夠真實(shí)自然，而且增加了他們考試的焦慮感。

（三）OPI對(duì)學(xué)生英語學(xué)習(xí)的反撥效應(yīng)

從表3可以看出，OPI測試對(duì)學(xué)生英語學(xué)習(xí)影響的整體性質(zhì)是正面的，該項(xiàng)的平均值最高，證明對(duì)學(xué)生的英語學(xué)習(xí)有顯著的積極反撥效應(yīng)。積極的反撥效應(yīng)是指考試能對(duì)教學(xué)和學(xué)習(xí)產(chǎn)生有利的影響，這種有利影響是指測試能“反映和鼓勵(lì)良好的課堂實(shí)踐”[9]。

關(guān)于OPI測試對(duì)學(xué)生英語學(xué)習(xí)的反撥效應(yīng)，表3數(shù)據(jù)顯示，OPI對(duì)學(xué)生的無線電陸空通話口語、聽力學(xué)習(xí)反撥效應(yīng)較強(qiáng)，而對(duì)通用英語（EGP）口語、聽力學(xué)習(xí)反撥效應(yīng)較弱。OPI屬于專門用途英語測試，體現(xiàn)了與通用英語測試的區(qū)別。二者的區(qū)別就是專業(yè)針對(duì)性：ESP測試中，受試者的專業(yè)知識(shí)和語言水平共同影響測試成績；而EGP測試中，影響受試者測試成績的主要是其語言水平。ESP測試的專業(yè)針對(duì)性直接影響其結(jié)構(gòu)效度的定義和對(duì)測試分?jǐn)?shù)的解釋[10]。在陸空通話中，管制員與飛行員使用的是一種有別于任何生活語言的專業(yè)語言。對(duì)這種專業(yè)語言特性掌握和理解的程度如何、對(duì)這種專業(yè)語言使用的熟練程度如何直接關(guān)系到陸空通話質(zhì)量的高低。而通話的每一句話都是在傳達(dá)有關(guān)的指令，必須要做到百分之百準(zhǔn)確，因?yàn)橥ㄔ捹|(zhì)量達(dá)不到要求所產(chǎn)生的任何差錯(cuò)和誤解都會(huì)給飛行安全埋下事故隱患[11]。因而，OPI測試既評(píng)估被測試人的通用英語能力，同時(shí)，也是對(duì)其民航專業(yè)英語（以無線電陸空通話為基礎(chǔ)）能力的測試。

從學(xué)生的訪談了解到，在英語學(xué)習(xí)的五項(xiàng)基本技能中，他們認(rèn)為口語能力是提高得最慢的一項(xiàng)，這也與陳紀(jì)梁、陶偉的研究一致[12]。而且，通用英語口語和聽力又是民航專業(yè)英語口語和聽力的基礎(chǔ)，所以，大多數(shù)學(xué)生認(rèn)為OPI測試對(duì)其英語學(xué)習(xí)有正面反撥效應(yīng)。同時(shí)，該測試還是一種高風(fēng)險(xiǎn)測試，因?yàn)闇y試的準(zhǔn)確性關(guān)系到飛行安全，測試成績關(guān)系到飛行員工作崗位的高低或有無[13]。而且，反撥效應(yīng)的程度和類型會(huì)因考試風(fēng)險(xiǎn)高低程度而發(fā)生變化[14]。因此，學(xué)生認(rèn)為測試對(duì)英語學(xué)習(xí)造成了很大的影響。

（四）學(xué)生對(duì)備考課程的評(píng)價(jià)

有關(guān)備考訓(xùn)練作用一項(xiàng)的平均值和標(biāo)準(zhǔn)差的數(shù)據(jù)說明，大多數(shù)學(xué)生對(duì)備考課程持肯定態(tài)度，測試對(duì)此項(xiàng)的反撥效應(yīng)不明顯。在前期的課堂觀察中，發(fā)現(xiàn)講授OPI的教師教學(xué)態(tài)度認(rèn)真、內(nèi)容充實(shí)。在第一次課首先對(duì)OPI進(jìn)行了整體介紹，包括測試內(nèi)容、題型、程序及評(píng)分標(biāo)準(zhǔn)，并對(duì)學(xué)生詳細(xì)講述了該測試主要從六個(gè)方面對(duì)被測試人的語言能力進(jìn)行考察。在以后的課堂教學(xué)中，基本按照OPI考試的四個(gè)階段（即準(zhǔn)備階段、等級(jí)初評(píng)階段、等級(jí)評(píng)定階段以及結(jié)束階段）所涉及到的內(nèi)容，以專題的形式分別進(jìn)行介紹。課堂活動(dòng)的主要形式包括：回答問題、小組討論、口頭陳述、情景對(duì)話。接受訪談的部分學(xué)生認(rèn)為：一方面，飛行學(xué)院的教學(xué)非常重視學(xué)生的英語口語訓(xùn)練，從大一開始就開設(shè)外教的口語課，大二時(shí)開始開設(shè)民航專業(yè)英語口語課，所以，一些學(xué)生認(rèn)為自己的英語水平比較高，不需要進(jìn)行備考訓(xùn)練；另一方面，英語口語能力的提高是一個(gè)長期的過程，而OPI又是一項(xiàng)水平測試，一部分學(xué)生認(rèn)為不可能通過短期的培訓(xùn)使英語口語提升一個(gè)層次，但是另一部分學(xué)生認(rèn)為備考課程確實(shí)幫助他們提升了民航專業(yè)英語口語能力。

關(guān)于教師的敬業(yè)精神、教學(xué)策略的數(shù)據(jù)表明，測試對(duì)這兩項(xiàng)有一定的反撥效應(yīng)，大多數(shù)學(xué)生都給予了充分的肯定對(duì)于教學(xué)效果一項(xiàng)，在4個(gè)題目數(shù)據(jù)中平均值最高，標(biāo)準(zhǔn)差較低，說明測試影響了教師在備考課程上的教學(xué)效果，大多數(shù)學(xué)生認(rèn)為對(duì)英語口語學(xué)習(xí)有正面反撥效應(yīng)，備考課程確實(shí)對(duì)自己的口語學(xué)習(xí)有促進(jìn)。但是，由于OPI的權(quán)重，整個(gè)備考過程產(chǎn)生了一定的學(xué)習(xí)焦慮。

對(duì)本研究的定量和定性數(shù)據(jù)分析表明，OPI對(duì)學(xué)生英語學(xué)習(xí)的反撥效應(yīng)比預(yù)見的要復(fù)雜，但是，整體而言，產(chǎn)生的是正面反撥效應(yīng)。其中，對(duì)學(xué)生的學(xué)習(xí)態(tài)度反撥效應(yīng)較強(qiáng)，對(duì)學(xué)生的學(xué)習(xí)行為反撥效應(yīng)較弱。具體表現(xiàn)為以下四點(diǎn)：第一，大多數(shù)學(xué)生對(duì)OPI測試有不同程度的了解，對(duì)評(píng)分標(biāo)準(zhǔn)和測試題型兩項(xiàng)的反撥效應(yīng)顯著；第二，OPI測試的必要性及測試的形式兩項(xiàng)對(duì)學(xué)生有顯著的反撥效應(yīng)；第三，OPI測試對(duì)學(xué)生的英語學(xué)習(xí)有正面反撥效應(yīng)，其中，對(duì)民航專業(yè)英語學(xué)習(xí)（主要是無線電陸空通話英語學(xué)習(xí)）有很強(qiáng)的反撥效應(yīng)，而對(duì)通用英語學(xué)習(xí)的反撥效應(yīng)較弱；第四，大多數(shù)學(xué)生對(duì)備考課程持肯定態(tài)度，對(duì)此項(xiàng)的反撥效應(yīng)不明顯，對(duì)于該課程教師的教學(xué)效果卻有顯著的反撥效應(yīng)。

總之，口語能力面試為飛行員英語能力的自我評(píng)價(jià)提供了一個(gè)客觀、公正的手段，有利于其發(fā)現(xiàn)自己的優(yōu)勢和不足，并意識(shí)到英語交流的重要性，使其在常規(guī)及非常規(guī)情景中與管制員的對(duì)話進(jìn)行靈活的轉(zhuǎn)換，保持對(duì)話的互動(dòng)性。

參考文獻(xiàn)：

[1]中國民用航空局飛行標(biāo)準(zhǔn)司.中國民航飛行人員語言能力考試大綱[Z]，2010-01-20.

[2]Alderson，J.C.& Wall，C.Does Washback Exist? [J].Applied Linguistics，1993 (2): 115-129.

[3]Popham，W.J.The Merits of Measurement-driven Instruction [J].Phi Delta Kappa，1987(68): 679-682.

[4]Messick，D.E.Meaning and Values in Test Validation: The Science and Ethics of Assessment [J].Educational Research，1989(18): 5-11.

[5]Fredericksen，J.R.and Collins，A.A Systems Approach to Educational Testing [J].Educational Researcher，1989(18): 27-32.

[6]Baker，E.Alternative Assessment and National Policy.Paper Presented at the National Research Symposium on Limited English Proficient Students'''' Issues: Focus on Evaluation and Measurement.Washington，D.C，1991.

[7]Andrews，S.The Washback Effect of Examinations-Its Impact upon Curriculum Innovation.Paper Pres- ented at the 19th International JALT Conference.Sonic City，Omiya，Japan，1993.

[8]Hughes，A.Testing for Language Teachers [M].Cambridge: Cambridge University Press，1989.

[9]Bachman，L.F.and Palmer，A.Language Testing in Practice [M].Oxford: Oxford University Press，1996.

[10]Bailey，K.M.Working for Washb- ack: A Review of the Washback Concept in Language Testing [J].Language Testing，1996(3):257-279.

[11]黃大勇.ESP測試的特征、存在依據(jù)和設(shè)計(jì)原理[J].考試研究，2007(3): 66-75.

[12]王愛國.陸空通話與飛行安全[J].中國民用航空，2006（1）：69-70.

[13]陳紀(jì)梁，陶偉.談大學(xué)英語口語考試及其反撥作用[J].山東外語教學(xué)，2001(1): 82-84.

[14]黃大勇，吳土星，張永忠.民航英語測試的特征和設(shè)計(jì)原理[J].中國民航飛行學(xué)院學(xué)報(bào)，2008（3）：18-25.

An Empirical Study of Washback Effect of Aviation English Oral Test on Students'''' English Learning

——A Case Study of OPI

CAO Jia，WANG Aiguo

(School of Foreign Languages，Civil Aviation University of China，Tianjin 300300, China)

AbstractAs a branch of ESP testing，Oral Proficiency Interview (OPI) is a high stakes test，so it has an impact on students'''' English learning.This paper aims to explore its washback effect on students'''' English learning in four dimensions.The research employs various methodological techniques such as classroom observations，questionnaires and interviews to collect both qualitative and quantitative data.The findings show that OPI mainly exerts positive washback effect on students'''' English learning，and it generates more intensive washback effect on aviation English learning，but EGP learning has received weak washback effect.

Key wordscivil aviation flight personnel; OPI; English learning; washback effect