“綜合商務(wù)英語(yǔ)”課程考試效度實(shí)證研究*

陳　銘　章國(guó)建

(湖北理工學(xué)院 外國(guó)語(yǔ)學(xué)院，湖北 黃石 435003)

“綜合商務(wù)英語(yǔ)”課程考試效度實(shí)證研究*

陳銘章國(guó)建

(湖北理工學(xué)院 外國(guó)語(yǔ)學(xué)院，湖北 黃石 435003)

[摘要]商務(wù)英語(yǔ)專業(yè)作為一種全新的具有外國(guó)語(yǔ)言學(xué)與經(jīng)濟(jì)管理學(xué)交叉性質(zhì)的復(fù)合學(xué)科專業(yè)，它的人才培養(yǎng)模式與測(cè)試模式一直都在探索之中?！陡叩葘W(xué)校商務(wù)英語(yǔ)專業(yè)教學(xué)要求》與《商務(wù)英語(yǔ)專業(yè)考試大綱》對(duì)商務(wù)英語(yǔ)專業(yè)學(xué)生不同階段應(yīng)具備的能力提出了相應(yīng)的要求。文章以湖北理工學(xué)院外國(guó)語(yǔ)學(xué)院首屆商務(wù)英語(yǔ)本科專業(yè)學(xué)生“綜合商務(wù)英語(yǔ)”課程考試成績(jī)作為研究依據(jù)，分析該課程考試效度，整理出該課程能力考查范圍，對(duì)比商務(wù)英語(yǔ)專業(yè)四級(jí)測(cè)試要求，探討提升商務(wù)英語(yǔ)專業(yè)基礎(chǔ)課程考試質(zhì)量的方法，以期為商務(wù)英語(yǔ)專業(yè)課程建設(shè)提供參考。

[關(guān)鍵詞]商務(wù)英語(yǔ)專業(yè)；“綜合商務(wù)英語(yǔ)”課程；考試效度

[收稿日期]2015-09-25

章國(guó)建(1977—)，男，講師，碩士，研究方向：語(yǔ)言學(xué)，測(cè)試學(xué)。

*[基金項(xiàng)目]湖北理工學(xué)院校級(jí)科研項(xiàng)目“基于校本的商務(wù)英語(yǔ)學(xué)業(yè)測(cè)試研究”，項(xiàng)目編號(hào)：14xjr04Q；湖北理工學(xué)院校級(jí)重點(diǎn)學(xué)科“外國(guó)語(yǔ)言文學(xué)”，項(xiàng)目編號(hào)：0502。

[作者簡(jiǎn)介]陳銘(1985—)，男，講師，碩士，研究方向：商務(wù)英語(yǔ)，國(guó)際商務(wù)。

DOI編碼:10.3969/j.ISSN.2095-4662.2015.06.016

[中圖分類號(hào)]G642.0

[文獻(xiàn)標(biāo)識(shí)碼]A

[文章編號(hào)]2095-4662(2015)06-0075-04

[Abstract]Integrating Economics, Management and Foreign Language Studies, Business English BA program is set up as a complement to the traditional English BA program. As a new program, many aspects such as the talent cultivation mode and assessment mode need to be explored. The Teaching Requirements of Business English Program in Colleges and Universities and Test Syllabus for Business English Majors set the requirements of competence for the Business English Majors in different stages. This paper analyzes the validity of Integrated Business English Achievement Test for the first Group of Business English Majors in Hubei Polytechnic University. Based on the data, the scope of ability testing for this course is analyzed. Comparing it with the requirements of Test for Business English Majors Band 4, the approaches for improving the test quality for the basic courses in Business English Program are discussed, aiming to provide some suggestions for further improvement of Business English Program.

An Empirical Study of Validity of "Integrated BusinessEnglish" Achievement Test

CHENMingZHANGGuojian

(School of Foreign Languages, Hubei Polytechnic University, Huangshi Hubei 435003)

[Key words]Business English Program;IntegratedBusinessEnglish;validity

引言

截至2015年，全國(guó)有超過(guò)200所高等院校開辦了商務(wù)英語(yǔ)專業(yè)。商務(wù)英語(yǔ)專業(yè)的發(fā)展目標(biāo)在于滿足市場(chǎng)對(duì)人才的需求，培養(yǎng)具備國(guó)際視野和跨文化商務(wù)溝通技能的外語(yǔ)人才[1]?！陡叩葘W(xué)校商務(wù)英語(yǔ)專業(yè)考試大綱》(試行)四級(jí)考試要求以及《全國(guó)商務(wù)英語(yǔ)專業(yè)英語(yǔ)四級(jí)考試能力量表》的頒布，填補(bǔ)了商務(wù)英語(yǔ)專業(yè)沒有單獨(dú)的標(biāo)準(zhǔn)參照性學(xué)業(yè)測(cè)試的空白，為檢驗(yàn)商務(wù)英語(yǔ)辦學(xué)質(zhì)量提供了一個(gè)標(biāo)準(zhǔn)的尺度[2]。我校商務(wù)英語(yǔ)專業(yè)因?yàn)殚_辦時(shí)間較短，所以很多專業(yè)教師和學(xué)生對(duì)該考試的能力要求不是非常清楚。在商務(wù)英語(yǔ)專業(yè)4年教學(xué)過(guò)程中，開設(shè)“綜合商務(wù)英語(yǔ)”課程，就是為了提高學(xué)生英語(yǔ)基本功，讓學(xué)生具備基本的商務(wù)知識(shí)，為后續(xù)專業(yè)課程的開設(shè)奠定良好的基礎(chǔ)[3]。檢驗(yàn)“綜合商務(wù)英語(yǔ)”考試效度，并將考試內(nèi)容與商務(wù)英語(yǔ)專業(yè)四級(jí)考試大綱進(jìn)行對(duì)比，可以找到綜合商務(wù)英語(yǔ)考試在培養(yǎng)學(xué)生達(dá)到專業(yè)四級(jí)考試要求中存在的問題。語(yǔ)言測(cè)試專家Bachman等人認(rèn)為，測(cè)試的主要效度包括表面效度、內(nèi)容效度和結(jié)構(gòu)效度[4]。因此，本文基于“綜合商務(wù)英語(yǔ)”考試成績(jī)，對(duì)考試的基本情況、難度系數(shù)、表面效度、內(nèi)容效度、結(jié)構(gòu)效度進(jìn)行分析，同時(shí)對(duì)考試能力范圍與商務(wù)英語(yǔ)專業(yè)四級(jí)測(cè)試進(jìn)行對(duì)比研究。

一、“綜合商務(wù)英語(yǔ)”課程考試與商務(wù)英語(yǔ)專業(yè)四級(jí)考試相關(guān)情況

本文選取了湖北理工學(xué)院外國(guó)語(yǔ)學(xué)院2013級(jí)商務(wù)英語(yǔ)本科專業(yè)學(xué)生作為研究對(duì)象，該班共有40人，參加了4個(gè)學(xué)期的“綜合商務(wù)英語(yǔ)”學(xué)習(xí)與考試，最后一個(gè)學(xué)期因?yàn)?名同學(xué)辦理了緩考，所以人數(shù)為37人。每學(xué)期總體樣本數(shù)量大于30，能夠進(jìn)行基本的測(cè)試學(xué)分析。4次考試的題型如表1所示，同時(shí)對(duì)比的還有商務(wù)英語(yǔ)專業(yè)四級(jí)考試相關(guān)題型，如表2所示。

表1　“綜合商務(wù)英語(yǔ)”考試題型

表2　商務(wù)英語(yǔ)專業(yè)四級(jí)部分考試題型

對(duì)比湖北理工學(xué)院外國(guó)語(yǔ)學(xué)院“綜合商務(wù)英語(yǔ)”考試大綱及考試題型與商務(wù)英語(yǔ)專業(yè)四級(jí)考試大綱及題型，可以發(fā)現(xiàn)，通過(guò)“綜合商務(wù)英語(yǔ)”的學(xué)習(xí)，學(xué)生能夠獲得參加商務(wù)英語(yǔ)專業(yè)四級(jí)測(cè)試“閱讀與寫作”、“商務(wù)知識(shí)與翻譯”兩個(gè)部分的基本能力。

二、研究?jī)?nèi)容與方法

本文希望能夠解決以下幾個(gè)問題：1)湖北理工學(xué)院外國(guó)語(yǔ)學(xué)院“綜合商務(wù)英語(yǔ)”考試的成績(jī)總體分布情況、考試的難度系數(shù)如何？考試的效度能否滿足測(cè)試學(xué)基本要求？2)“綜合商務(wù)英語(yǔ)”考試的范圍、題型能否和商務(wù)英語(yǔ)專業(yè)四級(jí)測(cè)試中的“閱讀與寫作”、“商務(wù)知識(shí)與翻譯”兩個(gè)部分對(duì)接？3)根據(jù)分析結(jié)果，如何調(diào)整商務(wù)英語(yǔ)專業(yè)人才培養(yǎng)方案，提高商務(wù)英語(yǔ)專業(yè)基礎(chǔ)課程教學(xué)與考試質(zhì)量。

本文的數(shù)據(jù)分析利用SPSS軟件進(jìn)行，包含以下3種定量分析：1)描述性統(tǒng)計(jì)分析；2)試題難度分析；3)效度分析。難度分析采取的是用每種題型的平均分除以每種題型的權(quán)重分的方法。難度系數(shù)值和試卷實(shí)際難易程度呈反比關(guān)系。效度分析采取的是通過(guò)計(jì)算題目得分與總分的相關(guān)性來(lái)測(cè)量單一維度，進(jìn)行結(jié)構(gòu)效度的一致性分析。

三、研究結(jié)果與討論

(一)描述性統(tǒng)計(jì)分析結(jié)果

“綜合商務(wù)英語(yǔ)”4學(xué)期的平均分、標(biāo)準(zhǔn)差和每套試題不同題型的難度系數(shù)如表3、4所示?？梢钥闯?，從第1學(xué)期到第4學(xué)期，考試的平均分約為70分左右，標(biāo)準(zhǔn)差在6.1~7.6之間，整體測(cè)試的結(jié)果較好，學(xué)生的成績(jī)差異不大，反應(yīng)出較好的整體水平。同時(shí)，通過(guò)計(jì)算每次試卷不同題型平均分與每題權(quán)重分的比值，可以看出試卷的整體難度系數(shù)值較大，反映試卷的難度處于中等偏易的水平，特別是第2學(xué)期和第3學(xué)期的商務(wù)知識(shí)題以及第3學(xué)期和第4學(xué)期的漢譯英題，題目較為容易。

表3　描述統(tǒng)計(jì)量

表4　試題難度系數(shù)

(二)表面效度

統(tǒng)計(jì)分析結(jié)果顯示，“綜合商務(wù)英語(yǔ)”試卷出卷清晰，格式符合湖北理工學(xué)院期末試卷規(guī)范，試題編排從易到難，符合學(xué)生答題規(guī)律。每道題目指令明確，主觀題與客觀題分?jǐn)?shù)分配合理，試卷篇幅合理，試題量較充足，學(xué)生能夠在規(guī)定時(shí)間內(nèi)完成，試卷具備良好的表面效度。

(三)內(nèi)容效度

測(cè)量?jī)?nèi)容效度的目標(biāo)在于判斷試卷是否達(dá)到了考試大綱的考核內(nèi)容要求。統(tǒng)計(jì)分析結(jié)果顯示，“綜合商務(wù)英語(yǔ)”考查了教學(xué)大綱及考試大綱所規(guī)定的內(nèi)容，側(cè)重于在實(shí)際商務(wù)環(huán)境中運(yùn)用語(yǔ)言的能力，包括考查學(xué)生關(guān)注經(jīng)濟(jì)與商務(wù)動(dòng)態(tài)相關(guān)信息，能夠撰寫不同體裁的商務(wù)類文章。因此該考試具備在內(nèi)容上的有效性。

(四)結(jié)構(gòu)效度

為了保證測(cè)試的有效性，需要考試具備較高的結(jié)構(gòu)效度。結(jié)構(gòu)效度分析能夠反映出一場(chǎng)考試的準(zhǔn)確性、有用性。本文采取計(jì)算題目得分與總分的相關(guān)性，使用Pearson簡(jiǎn)單相關(guān)系數(shù)的方法來(lái)檢測(cè)測(cè)試的單維性[5]。同時(shí)檢測(cè)的還有不同題型間的相關(guān)性。表5所示為第1學(xué)期至第4學(xué)期結(jié)構(gòu)效度分析結(jié)果。

如表5所示，除了第2學(xué)期第IV題漢譯英和第V題商務(wù)知識(shí)題與總分的相關(guān)系數(shù)分別僅為0.141和0.293，未能顯著相關(guān)外，其他各個(gè)學(xué)期的題型的效度值都較高，說(shuō)明大部分題型能充分反映學(xué)生在考試中所展現(xiàn)出的綜合能力。同時(shí)，本研究還檢測(cè)了不同題型間的相關(guān)性，發(fā)現(xiàn)詞匯題與漢譯英題的相關(guān)系數(shù)達(dá)到0.813的高水平，說(shuō)明良好詞匯的積累對(duì)于提高綜合商務(wù)英語(yǔ)考試分?jǐn)?shù)有著顯著效果。另外，第2學(xué)期的寫作題僅在0.05水平上呈顯著相關(guān)，說(shuō)明題目的體裁和內(nèi)容還存在改進(jìn)的空間。

表5　結(jié)構(gòu)效度分析結(jié)果

注：**指在0.01 水平(雙側(cè))上顯著相關(guān)；*指在 0.05 水平(雙側(cè))上顯著相關(guān)。

四、結(jié)論與對(duì)策

通過(guò)對(duì)湖北理工學(xué)院外國(guó)語(yǔ)學(xué)院2013級(jí)商務(wù)英語(yǔ)專業(yè)學(xué)生“綜合商務(wù)英語(yǔ)”課程考試進(jìn)行的測(cè)試學(xué)基本分析，可以得出以下結(jié)論：1)外國(guó)語(yǔ)學(xué)院“綜合商務(wù)英語(yǔ)”課程考試是一種成就測(cè)試，需要考查學(xué)生在課堂上所學(xué)的知識(shí)，因此難度不能過(guò)大，否則會(huì)影響學(xué)生的學(xué)習(xí)信心與動(dòng)機(jī)。經(jīng)過(guò)統(tǒng)計(jì)分析，得到難度系數(shù)值在0.7左右，符合成就測(cè)試的難度要求；2)考試效度結(jié)果較好。從4個(gè)學(xué)期試卷不同題型得分與總分之間的關(guān)系可以看出，綜合商務(wù)英語(yǔ)考試有效測(cè)量了考生相關(guān)方面的能力，但是在部分學(xué)期漢譯英、商務(wù)知識(shí)、寫作題的相關(guān)性顯著水平比較低，在查閱相關(guān)學(xué)期的試卷后發(fā)現(xiàn)，試卷考察學(xué)生的翻譯及商務(wù)知識(shí)的內(nèi)容比較單一，不能夠完整反映出學(xué)生的真實(shí)水平，需要對(duì)這些題目進(jìn)行替換或者修改。另外前兩學(xué)期寫作題結(jié)構(gòu)效度水平較低，說(shuō)明了寫作題不能真實(shí)地反映出學(xué)生英語(yǔ)能力，問題來(lái)源于寫作題目比較簡(jiǎn)單，體裁單一，需要進(jìn)行修正或替換；3)外國(guó)語(yǔ)學(xué)院“綜合商務(wù)英語(yǔ)”考試內(nèi)容基本上對(duì)接了商務(wù)英語(yǔ)專業(yè)四級(jí)考試內(nèi)容中的閱讀理解與寫作、商務(wù)知識(shí)與翻譯部分，但是仍然有可以提升的地方。

首先，“綜合商務(wù)英語(yǔ)”考試中的商務(wù)信息解讀類型的題目難度較低，不能夠全面反映出學(xué)生的基礎(chǔ)商務(wù)知識(shí)能力，不利于學(xué)生順利通過(guò)商務(wù)英語(yǔ)專業(yè)四級(jí)考試。在現(xiàn)行人才培養(yǎng)方案中，前4個(gè)學(xué)期大多數(shù)高校都沒有安排商務(wù)專業(yè)課程，而對(duì)于湖北理工學(xué)院這一層次的普通二本院校，“綜合商務(wù)英語(yǔ)”課程的主要目標(biāo)是提升學(xué)生的語(yǔ)言基礎(chǔ)技能，商務(wù)知識(shí)的傳授是輔助性的。因此，在修訂新的人才培養(yǎng)方案中，筆者建議將“工商導(dǎo)論”這一商務(wù)知識(shí)類課程放在前4個(gè)學(xué)期中，可以更好地幫助學(xué)生達(dá)到商務(wù)英語(yǔ)專業(yè)四級(jí)考試要求；其次，因?yàn)檎n程開設(shè)的前后順序和考慮學(xué)生的接受程度，“商務(wù)翻譯”課程只能放在學(xué)生考完專業(yè)四級(jí)后進(jìn)行，因此，在前4個(gè)學(xué)期的教學(xué)過(guò)程中，只有“綜合商務(wù)英語(yǔ)”課程能夠擔(dān)當(dāng)起培養(yǎng)學(xué)生基礎(chǔ)商務(wù)翻譯能力的任務(wù)。而在本次研究數(shù)據(jù)整理過(guò)程中筆者發(fā)現(xiàn)，“綜合商務(wù)英語(yǔ)”課程考試中商務(wù)翻譯內(nèi)容基本上都是短語(yǔ)與句子翻譯，沒有涉及到短文翻譯，與商務(wù)英語(yǔ)專業(yè)四級(jí)考試難度相比，存在著較大的差距，需要在今后的課程中加大短文翻譯的訓(xùn)練力度。最后，與“綜合商務(wù)英語(yǔ)”同期開設(shè)的還有“商務(wù)英語(yǔ)閱讀”、“商務(wù)英語(yǔ)寫作”、“商務(wù)英語(yǔ)聽說(shuō)”等基礎(chǔ)課程，在本研究的基礎(chǔ)上，應(yīng)該進(jìn)一步檢驗(yàn)并提升相關(guān)課程考試的效度，同時(shí)對(duì)照《高等學(xué)校商務(wù)英語(yǔ)專業(yè)考試大綱》(試行)四級(jí)考試要求以及《全國(guó)商務(wù)英語(yǔ)專業(yè)英語(yǔ)四級(jí)考試能力量表》修訂相關(guān)課程考試大綱，期望通過(guò)這些措施，有效提高學(xué)生商務(wù)英語(yǔ)專業(yè)四級(jí)考試通過(guò)率。

隨著越來(lái)越多的高校開辦商務(wù)英語(yǔ)專業(yè)，商務(wù)英語(yǔ)專業(yè)四級(jí)考試將逐漸成為檢驗(yàn)這個(gè)專業(yè)辦學(xué)情況的一個(gè)標(biāo)準(zhǔn)尺度。以“綜合商務(wù)英語(yǔ)”為代表的商務(wù)英語(yǔ)專業(yè)基礎(chǔ)課程，需要逐漸與專業(yè)四級(jí)考試能力要求、范圍對(duì)接，不斷提高課程考試的效度，才能滿足商務(wù)英語(yǔ)人才培養(yǎng)要求。

參 考 文 獻(xiàn)

[1]《高等學(xué)校商務(wù)英語(yǔ)專業(yè)本科教學(xué)要求》編寫組.高等學(xué)校商務(wù)英語(yǔ)專業(yè)本科教學(xué)要求(試行)[S].北京：高等教育出版社,2009.

[2]王立非.全國(guó)商務(wù)英語(yǔ)專業(yè)四級(jí)考試的測(cè)試學(xué)分析[J].廣東外語(yǔ)外貿(mào)大學(xué)學(xué)報(bào)，2015(1):5-11.

[3]王立非.國(guó)家標(biāo)準(zhǔn)指導(dǎo)下的商務(wù)英語(yǔ)專業(yè)建設(shè)的核心問題[J].中國(guó)外語(yǔ)教育，2015(1):3-8.

[4]Bachman L,Palmer A.Language Testing in Practice [M].0xford: Oxford University Press,1996.

[5]陳禮丹.高職英語(yǔ)語(yǔ)言測(cè)試信效度的實(shí)證分析——以廣東青年職業(yè)學(xué)院《外貿(mào)函電》期末考試為例[J].廣東青年職業(yè)學(xué)院學(xué)報(bào)，2014(2):57-60.

(責(zé)任編輯尹春霞)