職場英語水平考試的測試分析與反思

葉梅

【摘要】本文對上海工商外國語職業(yè)學院首屆職場英語水平考試，從正態(tài)性、信度效度、難度和區(qū)分度等方面進行了試卷質(zhì)量分析，在此基礎上對試卷各題型的設置及分值分配進行反思，以期編制出更好的職場英語水平考試試卷。

【關鍵詞】職場英語 考試分析 反思

教育部高職高專英語教指委頒布的《高等職業(yè)教育英語課程教學要求》（試行）（2010年6月）中明確提出“高職英語課程以培養(yǎng)學生實際應用英語的能力為目標，側(cè)重職場環(huán)境下語言交際能力的培養(yǎng)，使學生逐步提高用英語進行交流和溝通的能力”。在教學中，我們要遵循外語學習規(guī)律，結(jié)合高職教育特點，在打好語言基本功的基礎上，以職場崗位需求為主線開發(fā)和構建教學內(nèi)容體系，著力培養(yǎng)學生職場環(huán)境下的英語口頭和書面交際能力。因此，我們提出并實施了“三五”教改方案，就是將大學英語教學分成三個階段和五個學期，即：基礎英語階段（大一兩個學期）、通用職場英語階段（大二兩個學期）及專業(yè)職場英語階段（大三第一學期八周）。三階段五學期的教學內(nèi)容各有側(cè)重，相互滲透。

課程考核是構建課程體系的重要一環(huán)，為進一步完善了公共英語課程體系，在大二年級第四學期期末設置職場英語水平考試，考查學生語言水平和教學效果。職場英語水平考試有兩個顯著的特點：一是重視考查學生的英語口語能力?？谠囉伞拔⑿脱葜v”（Mini-Talk）和“簡短對話”（Short Conversation）兩部分組成。通過現(xiàn)場演講和即興對話，考查學生的口語表達能力；二是注重考查職場英語應用能力。筆試部分的試題不僅涉及基礎英語，還包含了職場英語內(nèi)容（如詞匯、翻譯和應用文寫作），較好體現(xiàn)了職業(yè)教育的特點和就業(yè)崗位對求職者英語能力的需求。

2012級學生在2014年6月參加了上海工商外國語學院首屆職場英語水平考試。本次考試總分150分，分筆試（100分）和口試（50分）兩部分，口試由班級授課老師進行一對一的口試，給出分數(shù)。筆試為2012級學生第四學期的期末統(tǒng)考，考試規(guī)范，成績可信度較高。本文擬采用SPSS.19軟件對1333份筆試成績樣本進行分析，并提出對職場英語水平考試題型設置及分值分配的反思。

一、考試分析及主要指標

考試分析的首要環(huán)節(jié)是試卷質(zhì)量分析。根據(jù)測量學原理，在對考試成績進行正態(tài)擬合檢驗的基礎上，從試卷的信度效度和難度、區(qū)分度三個方面獲取本次考試的相關信息。

1.正態(tài)擬合檢驗。一門課程考試的質(zhì)量首先取決于作為考試工具的試卷是否能夠反映學生學習的實際水平。一項符合學生試卷水平的考試，理論上，其考試成績應該服從或近似服從正態(tài)分布。也就是說，成績中等水平的學生占大多數(shù)，而成績特別好和特別差的學生均為少數(shù)。因此，試卷分析首先必須檢驗其考試結(jié)果的分布情況。采用SPSS.19軟件對1333份筆試樣本進行分析后，本次考試的成績分布頻數(shù)如圖一。

本次職場英語水平考試筆試部分的平均成績?yōu)?1.4，標準差為15.7。通過正態(tài)擬合檢驗發(fā)現(xiàn)本次考試的成績接近負偏態(tài)分布（見圖一），試卷基本上能反映學生的實際情況。

2.信度效度?？荚囆哦戎缚荚嚱Y(jié)果的一致性程度，是表明考試質(zhì)量的穩(wěn)定性和可靠性的一個重要指標。試卷的信度高，意味著考試結(jié)果很少受隨機因素的影響，考試的結(jié)果與其他等價考試的結(jié)果是一致的，考試成績能真實可靠地反映學生的學業(yè)水平。效度是對考試所要測量的內(nèi)容所達到的程度的估計，考試是否準確地測定了要測定的內(nèi)容。

只有信度較高的測試才能有較高的效度，但是，效度較高不能保證信度也一樣高?？梢哉f，信度和效度的關系是單方面的，信度差則效度差，但效度差不一定信度差。只有信度高的考試結(jié)果才能為試卷分析提供有意義的信息。

首先通過SPSS.19軟件計算出試題的均值和標準差，然后通過庫德·理查遜公式計算出本次考試的信度。

根據(jù)計算，本次考試的信度系數(shù)為0.939，可見本次考試信度較好，考試結(jié)果是穩(wěn)定可靠的。

3.難度、區(qū)分度。試題的難度就是試題的難易程度，也是試題質(zhì)量分析的一個數(shù)量指標。試題的難度與考試分數(shù)的分布有著直接的關系。如果試題太難，則考試分數(shù)成負偏態(tài)分布。如果試題太容易，則考試分數(shù)成正偏態(tài)分布。難度可用正確回答試題人數(shù)與參加測驗總?cè)藬?shù)之比值作為指標，也可以采用極端分組法。試卷難度會對試卷多方面的質(zhì)量產(chǎn)生深刻的影響。因此，難度必須適宜。本次考試分析采用極端分組法分析了試卷試題的難度，把全體考生的成績從高分到低分排列，把處于前27%的考生列為高分組，處于后27%的考生列為低分組。

試題的區(qū)分度是用來判斷試題具有多大能力把成績較好和較差的學生檔次區(qū)分開來的指標，也就是試題在用于考試時使水平高的學生得高分，使水平低的學生得低分的傾向。區(qū)分度是鑒定試題的重要依據(jù)。區(qū)分度不高的考試，學業(yè)優(yōu)秀和學業(yè)差的學生在考試成績上差異不大，或沒有規(guī)律性。它可用一組學生的本試題得分與這組學生的本試卷考分之間的相關程度來表示。另一種方法是比較兩個極端組通過一個題項的比例，即從分布的兩端選出高分組和低分組，然后將高分組和低分組通過每個項目的分數(shù)用百分比來表示，這兩個百分數(shù)之差就提供了題目區(qū)分度的指標。其計算公式如下：D= PH-PL

一般要求題項得分與總分的相關達到0.2以上。通過極端分組法計算后，D≥0.3表示區(qū)分度好；0.3>D≥0.15 表示區(qū)分度較好；D<0.15則表示區(qū)分度差。從本次考試的結(jié)果分析來看，試卷整體上具有良好的區(qū)分度（見表一）。

二、對于職場英語水平考試的反思

通過以上對試卷質(zhì)量的分析表明，本次考試的試卷總體上具有良好的信度效度和區(qū)分度，考試成績較真實的反映了學生的學業(yè)水平。對本次考試，筆者有以下幾點思考。

1.職場英語水平考試的定位。語言測試按用途來分類，至少可以分出四類：水平測試、成績測試、潛能測試和診斷測試。水平測試考查學生的語言能力，不管從前學過沒有或?qū)W了多少，或是如何學的，也不考慮學生的文化、教育、年齡等環(huán)境因素。如“托?！焙汀把潘肌睖y試都屬于水平測試。成績測試考查學生對所學知識的掌握，它一般要參考某種教學大綱，甚至考慮到教學方法。如隨堂測試、期中期末測試，以及學校的畢業(yè)考試，都屬于成績測試。潛能測試用來預示學生學習某種語言的潛力和天賦。診斷測試用來發(fā)現(xiàn)教和學兩方面的問題，目的是為了改進教學，調(diào)整教學計劃，進行個別指導。

職場英語水平考試就其性質(zhì)來說應該屬于水平測試，而在本次考試中又把它定位為第四學期期末考試。從本次職場英語水平考試分析結(jié)果來看，二外和商務文法專業(yè)學生成績較好，而機電信息和藝術專業(yè)學生的成績不理想。作為期末考試，對于機電信息和藝術專業(yè)的學生來說，是次難度偏大的考試，直接導致學生的大面積不及格。成績測試的性質(zhì)一般就限定了試題的難易程度，一般在成績測驗中，試題難度應該小一點，因為這類試卷是要考慮讓大多數(shù)學生都能通過，即準予及格這一原則。那么，如何調(diào)整職場英語水平考試和作為成績測試的期末考試之間的矛盾，就成了我們必須解決的問題。

2.題型設置及分值分配。本次考試的題型第一部分為詞匯和語法結(jié)構，考查學生對職場英語基礎詞匯（10%），基本語法結(jié)構（30%）的掌握；第二部分為對話補全，考查學生交際場合的口語得體應答（10%）；第三部分為閱讀理解題共三篇文章，主要考查學生英語閱讀能力（20%）。第四部分和第五部分分別為翻譯（15%）和寫作（15%），考查學生職場英語的翻譯和實用寫作能力。從筆試卷面題型的設置來看，還是以基礎英語知識的考查為重，而反映職場環(huán)境下的交際能力的聽力任務沒有涉及。從考試的內(nèi)容上，也還是以日常英語（60%）為主，涉及職場環(huán)境下的英語內(nèi)容只占（40%）。在以后的試卷編制中，應從全面考查學生在職場環(huán)境下的英語運用能力的視角來進行題型設置和分值分配。

結(jié)語

本文對2012級學生職場英語水平考試的結(jié)果進行了分析，從考試成績的分布、考試的信度效度、試題的難度和區(qū)分度等方面進行了試卷質(zhì)量分析，在此基礎上對試卷各題型的設置及分值分配進行了反思，以期在后續(xù)的職場英語水平考試試卷的編制中加以改進和提高。

參考文獻：

[1]劉潤清，韓定成.語言測試和它的方法[M].北京：外語教學與研究出版社，2010.

[2]蒙詩茜等.高職英語等級測試對“就業(yè)為導向”課程設計的積極反撥[J].職業(yè)時空，2013（7）.

[3]錢朝霞.考試分析及其應用[J].海南大學學報（自然科學版）， 1999（06）.

[4]王孝玲.教育統(tǒng)計學[M].上海：華東師范大學出版社，2009.

[5]吳明隆.SPSS統(tǒng)計應用實務[M].北京：中國鐵道出版社，2003.

[6]徐小麗.淺議基于職場工作視角的英語考試設計[J].中國校外教育，2013（3）.