海上專業(yè)英語平時成績信度與效度實證研究

顧玉蓮,陳 瑩

(青島遠(yuǎn)洋船員學(xué)院,山東青島 266071)

海上專業(yè)英語平時成績信度與效度實證研究

顧玉蓮*,陳 瑩

(青島遠(yuǎn)洋船員學(xué)院,山東青島 266071)

通過實證方法,借助SPSS統(tǒng)計軟件,對青島遠(yuǎn)洋船員學(xué)院海上專業(yè)學(xué)生英語平時成績的信度和效度進(jìn)行分析,進(jìn)而探討保證學(xué)生平時成績信度和效度的方法。

青島遠(yuǎn)洋船員學(xué)院;海上專業(yè);英語;平時成績;信度;效度

平時成績是對學(xué)生學(xué)習(xí)的階段性和過程性評估,側(cè)重考查學(xué)生的學(xué)習(xí)態(tài)度、學(xué)習(xí)能力和學(xué)習(xí)策略。平時成績考核的目的是為了加強(qiáng)對學(xué)生學(xué)習(xí)過程的督促、指導(dǎo)和管理,促進(jìn)學(xué)生自主學(xué)習(xí),也為了更加全面地反映學(xué)生的學(xué)習(xí)情況,對學(xué)生學(xué)習(xí)作出更加合理的評價。

不少教師在教學(xué)實踐中都有這樣的發(fā)現(xiàn):部分學(xué)生平時學(xué)習(xí)認(rèn)真,按要求完成學(xué)習(xí)任務(wù),期末測試成績卻不理想;部分教師在取分依據(jù)、給分標(biāo)準(zhǔn)和操作程序等方面存在隨意性、偶然性和非規(guī)范性。本文通過數(shù)據(jù)分析研究以下問題:不同教師對平時成績的評定是否存在差別?如有差別,在統(tǒng)計學(xué)意義上是否顯著?學(xué)生平時成績與期末測試成績之間的相關(guān)性如何?平時成績的高低對學(xué)生學(xué)習(xí)是否有影響?如何保證平時成績的信度和效度?

一、研究設(shè)計

本文采用實證研究的方法,借助SPSS13.0統(tǒng)計軟件對樣本數(shù)據(jù)進(jìn)行分析。抽取青島遠(yuǎn)洋船員學(xué)院2009級船舶駕駛和船舶機(jī)電專業(yè)共計12個合班,即24個自然班,涉及學(xué)生937人、任課教師12人。各班人數(shù)及各班入學(xué)第一學(xué)期平時成績均數(shù)與第一學(xué)期期末測試成績均數(shù)如表1所示。

表1 研究樣本及相關(guān)數(shù)據(jù)

青島遠(yuǎn)洋船員學(xué)院英語課的成績構(gòu)成及各部 分比例如表2所示。

表2 青島遠(yuǎn)洋船員學(xué)院英語課的成績構(gòu)成

二、分析與討論

1.數(shù)據(jù)分析

(1)對不同教師量分的方差分析。由表1可見,學(xué)生平時成績普遍高于期末測試成績,最大差值17,最小差值2,差值均數(shù)也達(dá)到7.9。這首先說明教師在量分方面標(biāo)準(zhǔn)比較寬松,大都采取鼓勵為主的原則;其次說明不同教師在評定平時成績上存在一定的差別。為調(diào)查這種差別是否顯著,借助SPSS13.0統(tǒng)計軟件對各班平時成績進(jìn)行方差分析。結(jié)果表明,不同教師對于平時成績的評定存在顯著差別(見表3),也就是說,不同教師評價學(xué)生的標(biāo)準(zhǔn)存在顯著差別。從這個層面上講,教師所評平時成績不具有很好的信度[1]。

表3 各班平時成績方差分析(ANOVA)

對比學(xué)生平時成績與學(xué)生評教分?jǐn)?shù)(見表4)發(fā)現(xiàn),學(xué)生平時成績均值明顯高于其他班級的教師3所得,學(xué)生評分也高于大多數(shù)教師。平時成績與學(xué)生評教之間的關(guān)系如何?師生之間在打分方面是否存在相互“取悅”的現(xiàn)象?取班級平時成績均數(shù)與學(xué)生給教師打分的值,做Spearman相關(guān)性分析。結(jié)果顯示相關(guān)系數(shù) r為0.021,顯著值p為0.948,p值遠(yuǎn)遠(yuǎn)大于0.05,故推翻原假設(shè),即證明教師給學(xué)生的平時成績與學(xué)生評教打分之間沒有顯著的聯(lián)系。

表4 教師任課班級平時成績均值與學(xué)生評教分值

(2)平時成績與期末測試成績的相關(guān)性。平時成績主要考核學(xué)生學(xué)習(xí)態(tài)度與學(xué)習(xí)任務(wù)的完成情況,而期末測試主要考核學(xué)生知識水平的提高,兩者各有側(cè)重,所以本研究中不期望平時成績與期末測試成績呈現(xiàn)完全正相關(guān),但不相關(guān)甚至負(fù)相關(guān)的情況同樣是不能接受的。取各班學(xué)生的平時成績與期末測試成績做兩個變量Pearson相關(guān)分析,得Pearson相關(guān)系數(shù)和相關(guān)顯著性如表5所示。

表5 各班平時成績與期末成績的相關(guān)性

結(jié)果顯示,所有班級學(xué)生的平時成績與期末測試成績均呈現(xiàn)出正相關(guān),其中1個班為一般正相關(guān),2個班為顯著正相關(guān),9個班為非常顯著正相關(guān)。這首先說明學(xué)生學(xué)習(xí)過程中的表現(xiàn)是決定測試成績的重要因素,通過前者能在一定程度上對后者進(jìn)行預(yù)測。其次,則說明教師所計平時成績具有較好的效度,具有一定的區(qū)分度。再次,也證明提高平時成績比例具有一定的可行性和有效性,對于考查學(xué)生的學(xué)習(xí)態(tài)度和評估學(xué)生的學(xué)習(xí)過程具有實用的意義。

(3)平時成績與進(jìn)步成績的相關(guān)性。取各班入學(xué)英語摸底成績平均值與各班第一學(xué)期英語期末考試成績均數(shù),得各班平均成績的進(jìn)步分?jǐn)?shù)值,將其與各班平時成績的均數(shù)作Spearman相關(guān)性分析,試求平時成績對學(xué)生學(xué)習(xí)能力和學(xué)習(xí)效果的影響(見表6)。

表6 平時成績與進(jìn)步分?jǐn)?shù)的相關(guān)性

表6顯示,學(xué)生平時成績與進(jìn)步分?jǐn)?shù)之間的正相關(guān)程度相當(dāng)高。形成此結(jié)果可能有兩點原因:其一,相對高的平時成績是學(xué)生學(xué)習(xí)態(tài)度端正、班級學(xué)風(fēng)良好的結(jié)果,這樣的學(xué)生和班級進(jìn)步幅度相對較大也在意料之中;其二,教師平時成績給分標(biāo)準(zhǔn)相對寬松,經(jīng)常鼓勵學(xué)生、肯定學(xué)生的學(xué)業(yè)表現(xiàn)對學(xué)生的學(xué)習(xí)會產(chǎn)生激勵和促進(jìn)作用,帶來學(xué)生知識水平的較大提高。

2.如何保證平時成績的信度與效度

(1)合理安排總評成績的組成及權(quán)重。近年來,高校呈現(xiàn)加大公共課程平時成績權(quán)重的趨勢,甚至有學(xué)者建議平時成績應(yīng)當(dāng)占到總評成績的60%。[2]筆者通過訪談了解到多數(shù)教師及學(xué)生認(rèn)為平時成績的比例應(yīng)不低于30%,在30%～50%為宜。這也順應(yīng)了2007年教育部頒布的《大學(xué)英語課程教學(xué)要求》中所倡導(dǎo)的以形成性評估與終結(jié)性評估相結(jié)合的模式評價學(xué)習(xí)。以加大平時成績比例為基本特征的形成性評估模式,有利于降低傳統(tǒng)考試的偶然性和單一性等不足,培養(yǎng)學(xué)生良好的學(xué)習(xí)習(xí)慣,使其重視學(xué)習(xí)過程,把學(xué)習(xí)能力的提高放到首位。

(2)制定平時成績記錄單和打分標(biāo)準(zhǔn),并要求教師嚴(yán)格執(zhí)行。制訂平時成績記錄單,作為學(xué)生學(xué)習(xí)檔案的一部分。記錄單上分列課堂表現(xiàn)、作業(yè)、自主學(xué)習(xí)和平時測驗等部分,要求每一部分記錄至少兩次成績,取其均值作為該部分得分,最終按照比例算得平時成績。同時,基于教學(xué)目標(biāo)選擇合適的依據(jù),對平時成績各構(gòu)成項目的考核盡可能量化。對于不易量化的依據(jù),比如筆記,也設(shè)定一個參考的標(biāo)準(zhǔn),可按照框架的完整性和內(nèi)容的充實性評分。[3]明晰的取分依據(jù)是保證平時成績信度與效度的前提。

制定統(tǒng)一的評分標(biāo)準(zhǔn)只是第一步,還必須要求教師嚴(yán)格執(zhí)行標(biāo)準(zhǔn),盡量縮小打分差距。表1中所顯示的輪管3班和駕駛3班的平時成績均值比期末測試均值分別高出了17分和16.1分。誠然,如前所述平時成績考核當(dāng)中對學(xué)生的平時表現(xiàn)多加肯定能有效促進(jìn)學(xué)習(xí),但是過高的平時成績很難保證評價的效度,也勢必會影響區(qū)分度,所以要求教師評分時拉開檔次。

要降低不同教師平時成績量分差別對學(xué)生成績的影響,還需采取其他一些做法。比如,在評定獎學(xué)金的時候,應(yīng)以班級為單位配以一定比例,而不采取各專業(yè)年級統(tǒng)排的方法。這樣,只要班級內(nèi)部的平時成績有信度、效度和區(qū)分度,獎學(xué)金的分配就會相對合理。

(3)對學(xué)生自主學(xué)習(xí)情況的考查需要網(wǎng)絡(luò)平臺的支持。平時成績的設(shè)計要以“學(xué)”為中心,即以學(xué)生的自主學(xué)習(xí)為中心。這就要求平時成績要對學(xué)生的學(xué)習(xí)具有激勵和督查的雙重作用。[4]評價學(xué)生的自主學(xué)習(xí)活動除檢查學(xué)生的學(xué)習(xí)筆記、讀書筆記之外,更需要有網(wǎng)絡(luò)平臺的支撐。當(dāng)前,一些院校開設(shè)了師生交流的網(wǎng)站或者引進(jìn)了多媒體自主學(xué)習(xí)系統(tǒng),無論是網(wǎng)站還是自主學(xué)習(xí)系統(tǒng)中,都需要有能夠記錄學(xué)生學(xué)習(xí)行為的功能或軟件,以方便教師掌握學(xué)生的自主學(xué)習(xí)開展情況,也為平時成績量分提供有效依據(jù)。

(4)確保平時成績公開、公正,重視平時成績的反饋作用。要做到公開、公正,有三點要求:其一,教師在首次上課時就公布取分依據(jù),讓學(xué)生清楚平時成績的構(gòu)成和考核標(biāo)準(zhǔn);其二,將學(xué)生每次的得分及時、明晰地錄入平時成績記錄單,允許學(xué)生查看,并認(rèn)真對待學(xué)生對自己的成績提出的異議,如有偏誤及時糾正;其三,學(xué)?？梢笕握n教師在考試之前將平時成績錄入并提交教務(wù)系統(tǒng),以防止任課教師參照卷面成績對平時成績作出隨意的調(diào)整。此外,還可以通過其他途徑確保平時成績的公開、公正,比如引入學(xué)生自評和同學(xué)互評的評價方式作為師評的有力補(bǔ)充。

三、結(jié) 語

本研究以實證的方法,對平時成績的信度與效度進(jìn)行初步的研究和探討。結(jié)果表明,青島遠(yuǎn)洋船員學(xué)院英語教師所評平時成績有較好的效度和區(qū)分度,但不同教師評定平時成績的標(biāo)準(zhǔn)存在顯著差別。進(jìn)而從學(xué)校制度、硬件支持和課堂實施等層面探討了保證平時成績信度與效度的方法。

目前平時成績考核面臨著巨大的難題:多數(shù)院校的英語課程是按照大班制開設(shè)的,課堂人數(shù)多達(dá)七、八十甚至上百人,準(zhǔn)確評價如此眾多學(xué)生的課堂表現(xiàn)、作業(yè)完成情況、自主學(xué)習(xí)開展情況和平時測驗無論在時間上還是精力上對任課教師都是極大的挑戰(zhàn)。如何能高效地考核學(xué)生平時學(xué)業(yè)表現(xiàn)值得進(jìn)一步探究。

[1]HEATON J B.Writing English language tests[M].北京:外語教學(xué)與研究出版社,2000:159-168.

[2]劉壽堂.大學(xué)公共課程平時成績考評手段質(zhì)疑及商榷[J].黑龍江高教研究,2009(2):174-176.

[3]陳冰杰,邵青山,范文芹.大學(xué)生平時成績與期末考試關(guān)系研究[J].運城學(xué)院學(xué)報,2006(6):69-71.

[4]張 卓.模糊綜合評判法在學(xué)生平時成績考核中的應(yīng)用[J].廣州大學(xué)學(xué)報:社會科學(xué)版,2009(5):62-64.

U676.2

A

1006-8724(2010)03-0088-03

2010-05-23

青島遠(yuǎn)洋船員學(xué)院教改課題“大學(xué)英語基礎(chǔ)課程形成性評估實踐與研究”

顧玉蓮(1979-),女,講師,主要從事應(yīng)用語言學(xué)與英語教學(xué)研究。