藝術(shù)類專業(yè)學生TEP口語測試的信度與效度分析

白　靜，郭平建

(北京服裝學院 外語系，北京 100102)

?

藝術(shù)類專業(yè)學生TEP口語測試的信度與效度分析

白靜，郭平建

(北京服裝學院 外語系，北京 100102)

北京服裝學院外語系以實施大學英語應(yīng)用能力測試(TEP)研究項目為契機，對藝術(shù)類專業(yè)學生進行了為期2年的教學改革與實踐，在此期間先后對被試學生進行了從初級到高級分別為C、B、A三個級別的口語測試。2年的測試項目結(jié)束后，又對通過A級口語考試的被試學生進行了為期2年的跟蹤研究。從TEP口語測試的內(nèi)容與形式、考官的情況、被試學生英語綜合能力的提高三個方面，探討藝術(shù)類專業(yè)學生TEP口語測試的信度與效度。

藝術(shù)類專業(yè)；大學英語應(yīng)用能力測試(TEP)；信度；效度

語言學習中聽說能力培養(yǎng)的重要性不言而喻。改革后的大學英語四級考試已經(jīng)將聽力測試的比重從20%提高到35%。語言測試很難，因為“語言既是測試的目標又是測試的工具”[1]?；谶@種考慮，2012年底我校(北京服裝學院)申請加入“大學英語應(yīng)用能力測試” (Test of English Proficiency，TEP)研究項目的第二批建設(shè)單位，旨在加強大學英語教學中對非英語專業(yè)學生英語實際應(yīng)用能力，尤其是聽說交際能力的培養(yǎng)[2]。在項目負責人郭平建教授的總體規(guī)劃和指導(dǎo)下，對我校2012級藝術(shù)類專業(yè)學生進行了為期2年的教學改革與實踐，在此期間對學生進行了從初級到高級分別為C、B、A三個級別的TEP口語測試，正式測試再加上前測(摸底?？?和后測(強化訓(xùn)練后的補考)，共計10余次。每次測試結(jié)束后都有針對性地開展問卷調(diào)查，對測試結(jié)果進行定量和定性分析，及時總結(jié)并調(diào)整教學內(nèi)容和教學方法[3]。為期2年的大規(guī)?？谡Z測試結(jié)束后，又對通過A級口語考試的學生進行了2年的跟蹤研究，調(diào)查學生的英語綜合能力，特別是口語水平的變化。本文從TEP口語測試的內(nèi)容與形式、考官的情況、被試學生英語綜合能力的提高三個方面，來探討藝術(shù)類專業(yè)TEP口語測試的信度與效度問題。

一、 TEP口語測試的內(nèi)容及形式與口語課程所傳授的內(nèi)容和實踐形式相關(guān)聯(lián)

為了保證TEP口語測試的內(nèi)容與形式不與口語課程的訓(xùn)練和實踐相脫節(jié)，我們秉承“以測試促教改、以實踐促實效”的原則，在現(xiàn)有英語授課總課時不變的前提下，調(diào)整精讀與口語課的學時配比，在課上進行與TEP內(nèi)容及形式相關(guān)聯(lián)的口語訓(xùn)練。TEP口語測試的內(nèi)容與形式如表1所示。

表1　TEP口語測試的內(nèi)容與形式

TEP的C級有描述圖片部分。我們結(jié)合測試內(nèi)容與藝術(shù)類專業(yè)學生的繪畫特長，開展了12個教學周的“自畫自述”活動，深受學生喜愛。具體安排是，要求學生事先手繪一幅圖或多幅連環(huán)畫，內(nèi)容不限，但必須故事性強，有話可說。課堂上用5分鐘進行口語練習，2人一組講述自己創(chuàng)作的故事，再交換圖片，講述對方描繪的故事。由“自畫自述”切入，可保證不會出現(xiàn)無話可說的狀況，這對引導(dǎo)與培養(yǎng)學生的自信心效果顯著。同時，學生一次次的練習也為我們后期進行TEP實踐教學積累了數(shù)量可觀的圖片素材。

TEP的A級有辯論部分。我們對被試學生進行8學時“辯論錄像、課上點評、課后觀摩”的強化訓(xùn)練。這對學生來說是一個不小的挑戰(zhàn)，但實踐證明也是很好的鍛煉。具體實踐步驟為：(1)教師提前布置辯論題目，學生可以根據(jù)個人情況自己選擇辯手組合；(2)辨論展示環(huán)節(jié)，每組辯手到講臺上作5分鐘的辯論展示，教師主持辯論并全程錄像；(3)課后教師通過QQ、微信平臺將辯論視頻發(fā)給學生共享，讓大家相互評分并借鑒學習；(4)教師參考學生的互評結(jié)果進行課堂綜合點評。通過強化練習，學生很快就熟悉了辯論的程序、技巧以及TEP的要求[3]。

通過實踐我們感到，光說不練不行，盲目練習也不行，一定要結(jié)合TEP的各級測試內(nèi)容來進行有針對性的、高效的、大量的口語練習。同時，這也有效保證了TEP的信度與效度。

二、 考官的高素質(zhì)保證了TEP口語測試的信度與效度

TEP項目組專門印發(fā)了考官手冊，其中明確規(guī)定了考官的基本資格要求、工作要求與溝通技能、口試考官在口試過程中的行為要求，并分別明示了主、副考官的工作規(guī)范。我們請來參加TEP的考官均是我校外語系持有劍橋通用英語考試(MSE)口語考官證書的教師。每年一次的劍橋口語測試網(wǎng)上定標、一年多次的當面培訓(xùn)，以及每年多次的英語入門考試(Key English Test，KET)、初級英語考試(Preliminary English Test，PET)、第一英語證書考試(First Certificate in English，F(xiàn)CE)等口語考試擔任考官的經(jīng)驗，保證了考官的專業(yè)、嚴謹、高素質(zhì)。為進一步確保TEP口試的效度和信度，我們對所有主、副考官均進行考前培訓(xùn)，制定了詳細的口試辦法及評分細則。為減少TEP口語測試的主觀性，每次考試的主考官負責考試環(huán)節(jié)與考生交流和給出總體評價分，副考官負責按照交際效果、語音語調(diào)、語法和詞匯，以及結(jié)合C、B、A級的內(nèi)容和組織項(如描述圖片、話題陳述、辯論等部分的內(nèi)容和組織)分別打分。主、副考官給出的分數(shù)分別占考生總成績的40%和60%?？傊细竦母咚刭|(zhì)考官、詳細的口試辦法及評分細則保證了TEP口語測試的效度與信度。

三、 TEP口語測試對藝術(shù)類學生英語綜合應(yīng)用能力的影響

2年的TEP各級測試以及教學改革實踐結(jié)束后，我們繼續(xù)對2012級通過A級口語考試的口語實驗班15名學生和對照班13名學生進行了為期2年的后續(xù)跟蹤研究。結(jié)果發(fā)現(xiàn)，這28名學生中，除2名學生因個人原因放棄考研之外，其余26名全部考研成功。其中18名學生考取了本校的研究生，并且研究生入學口語測試成績均在各專業(yè)名列前茅。筆者參加了2016年本校造型藝術(shù)系研究生入學英語復(fù)試工作。在參加英語復(fù)試的20名考生中，筆者欣喜地發(fā)現(xiàn)有8名是之前參加TEP口語測試的學生。測試中，這8名學生無論是口語表達能力，還是臨場應(yīng)變能力均表現(xiàn)一流，平均口試成績?yōu)?.5分(滿分10分)，遠遠超過其他沒有參加口語測試的學生。另外，參加本校研究生入學復(fù)試的10名服裝設(shè)計和藝術(shù)設(shè)計專業(yè)的學生也表現(xiàn)優(yōu)異，平均口試成績?yōu)?.5分，有2名學生甚至得到了9.5分的高分。有8名考研成功的學生選擇了出國留學深造。其中，1名學生在大三時雅思就考到6.5分，先作為交換生去了英國的倫敦藝術(shù)大學，后成功轉(zhuǎn)學，現(xiàn)在本科即將畢業(yè)，正在申請美國的研究生院。1名學生大三時開始學習法語，即將去法國巴黎國立高等裝飾藝術(shù)學院深造。其余6名學生分別拿到英國南安普頓大學、利茲大學及比利時安特衛(wèi)普皇家藝術(shù)學院等學校的錄取通知書，他們的雅思成績平均為6.0分，口語成績平均為6.5分。這對于藝術(shù)類專業(yè)學生來說實屬不易。

與這些學生訪談后了解到，TEP口語測試以及平時大量的口語練習給他們帶來的最大收獲就是自信。通過一次次的前測、正式測試、后測，他們積累了大量的口語測試經(jīng)驗；通過平時大量的口語練習，如“自畫自述”、話題討論、辯論訓(xùn)練等，他們的語言知識轉(zhuǎn)換能力、英語思維能力、應(yīng)變能力都得到了有效提高。由此可見，這些經(jīng)過有效訓(xùn)練的學生能夠成功告別“聾啞英語”，切實提高英語聽說能力及英語綜合應(yīng)用能力。這也正是我們開展TEP口語測試的初衷。

四、 結(jié)語

四年來，無論是前期的TEP口語測試和配套教學改革與實踐，中期的對于測試結(jié)果的定性定量分析，還是后期的對被試學生的追蹤研究，我們投入了大量的時間與精力。雖然還存在種種問題，比如最初挑選的被試樣本不夠大，僅用高考、大學英語水平考試和平時的期末考試來對比分析TEP口語測試結(jié)果是否可行，在總課時不變的情況下通過減少精讀課時間來增加口語練習是否合理等等。但實踐結(jié)果表明，我校針對藝術(shù)類專業(yè)學生進行的TEP口語測試從內(nèi)容與形式、考官的情況，以及被試學生英語綜合能力的提高方面分析，都反映出TEP口語測試具有較高的信度與效度。

[1] BACHMAN L F．Fundamental considerations in language testing[M].Oxford：Oxford University Press，1990．

[2] 白靜，郭平建. TEP框架下紡織服裝專業(yè)學生英語口語教學改革初探[J]. 紡織服裝教育,2014, 29(2):180-182.

[3] 白靜，郭平建. TEP對藝術(shù)類專業(yè)學生英語教學的反撥作用[J]. 紡織服裝教育,2015,30(3): 244-246.

北京高等學校教育教學改革重點項目(2014-lh03)；北京高等學校教育教學改革面上項目(2014-ms151)；北京服裝學院大學英語教學改革創(chuàng)新團隊項目(JGTD-1406)；2016年度北京服裝學院教育教學改革項目

白靜(1976—)，女，山東濟南人，副教授，碩士，研究方向為中外服飾文化比較及應(yīng)用語言學。 E-mail:baijingbift@163.com

G642.0

A

2095-3860(2016)04-0326-03