徐培全等
[摘要]現(xiàn)代大學(xué)制度的建設(shè)需要多方面的內(nèi)涵提升,全英文課程建設(shè)是推行國際化教學(xué)的主要手段之一。圍繞全英文課程建設(shè),開展教學(xué)研究和經(jīng)驗累積,試卷分析和相應(yīng)的考試檢測與反饋功能是教育目標管理的主要手段。分析和評價了全英文課程建設(shè)2年來2009和2010級四年制“Welding and Joining of Materials”的試卷質(zhì)量。為課程進化、題庫內(nèi)容更新、提升課程服務(wù)內(nèi)涵奠定基礎(chǔ)。應(yīng)用excel2010對試卷進行了統(tǒng)計分析,兩次考試成績均呈負偏態(tài)分布,信度0.68以上,效度0.76以上,難度0.71和0.62。試卷成績分布基本合理,信度、效度高,區(qū)分度良好。本課程試題庫質(zhì)量良好,但有部分試題需要進一步修改或刪除,降低2010級試題難度。
[關(guān)鍵詞]內(nèi)涵建設(shè) 全英文教學(xué) 題庫質(zhì)量 新專業(yè)建設(shè)
我校自2014年9月起被市教委確立為上海市實施現(xiàn)代大學(xué)制度建設(shè)首批試點高校,與2014滬浙教育綜合改革相結(jié)合,推出了很多重要舉措。全英文課程建設(shè)是推進國際化教學(xué)的主要手段之一,Welding and Joining of Materials是一門新專業(yè)的專業(yè)基礎(chǔ)課程,我校課程建設(shè)的在建課程,試卷建設(shè)是課程建設(shè)的基礎(chǔ)內(nèi)容之一,包括期中考試、期末考試,課堂測試等[1~3]??荚囀墙虒W(xué)過程中很重要的環(huán)節(jié),考試的檢測與反饋功能是教育目標管理的主要手段,考試結(jié)束之后,通常要對試卷進行科學(xué)合理的分析,不但可以對試卷和考試做出恰當?shù)脑u價,有助于獲得充分的教學(xué)反饋信息,了解學(xué)生掌握知識的情況,找出學(xué)生學(xué)習(xí)中存在的問題,為改進教學(xué)、指導(dǎo)教學(xué)提供重要依據(jù)[4]。
試卷分析有如下優(yōu)點[5]:(1)有利于確定每次考試的有效程度,試卷質(zhì)量不符合要求的試卷不能測出考生的真實水平,如果試卷的難易程度不同,不同班級的考試結(jié)果不同,那么我們要對這樣的班級進行評價,就是不可信的。(2)對試卷質(zhì)量分析有利于在以后的同類考試中有針對性地選擇命題,很好地把握重點和難點。通過不斷地修正、改進,才能使一份試卷不斷趨于合理,成為一份有效的試卷、可信的試卷。(3)有利于今后考試水平的提高。(4)有利于改進教學(xué)工作,通過全面的考試過程能反映出教師和學(xué)生的教與學(xué)的狀況,通過對試卷的質(zhì)量分析,可以找出師生雙方的不足,在教學(xué)中加以改進。
為了及時反饋課程建設(shè)兩年來的建設(shè)成果的有效性,不斷更新課程內(nèi)容,于2014年12月對我校0511111等四個班級138份期末試卷進行了分析。
一、材料與方法
選取2009級、2010級四年制本科學(xué)生Welding and Joining of Materials期末試卷138份(2009級67份、2010級71份)進行分析,題型、題量、分值相同,由于本課程的考核采用多項目評估手段,即總成績包括Homework,Lab,Mid-Term Examination和Final Examination四部分,因此,分析主要針對Final Examination部分進行。試卷題型分值構(gòu)成如表1所示。
具體題型如表2所示:在各個題型中,也提供多項選擇。
二、結(jié)果與分析
(一)成績分布
一般認為,高校課程合格性考試的學(xué)生成績在75-80分,標準差10左右比較理想。由各年級成績分布統(tǒng)計表3可見:2009級、2010級平均成績和標準差基本符合這一要求。如表4所示,根據(jù)分數(shù)段頻率分布統(tǒng)計結(jié)果,2009級成績主要集中在60~70分、90~100分,其中,60分段最多占34.33%,90分占15.05%;2010級主要集中在60-80分,其中60分段的比例與2009級相差不大,說明該段需要提高,70分段~100分段的都有所增長,比例趨于均勻化。2009級0511104班標準差偏大,達到了16.12,2010級標準差為11,全距用來表示分值的變異量數(shù),分值最大值與最小值之間的差距,即最大值減最小值后的分值,可用于等距變量、比率變量。結(jié)果表明,2009級0511103班級的全距為46,而2009級0511104班級的全距為64,2010級的全距減小為32。偏度系數(shù)是描述分布偏離對稱性程度的一個特征數(shù)。當分布左右對稱時,偏度系數(shù)為0。當偏度系數(shù)大于0時,即重尾在右側(cè)時,該分布為右偏。當偏度系數(shù)小于0時,即重尾在左側(cè)時,該分布左偏。偏度系數(shù)分別為0.56、-0.39和0.01,表明兩個班級的考試成績分別呈正偏態(tài)分布與負偏態(tài)分布,2010級為正偏態(tài)分布。如果以試卷為對象,2010級的全距為67,偏高,標準差為12.96,偏度系數(shù)為-0.1。
(二)信度
信度指試卷的穩(wěn)定性和可靠性程度,是衡量考試成績與考生真實水平一致性如何的指標。目前,試卷分析多位計算內(nèi)部一致性信度,常采用內(nèi)在信度Cronbachα系數(shù)法,
其中:s2為總分方差,si2為第i題分數(shù)的方差,n為試題數(shù)。二份試卷的信度系數(shù)見表5所示。
一般認為,信度大于0.9可靠性較好,但對高校課程的合格性考試0.5以上即可,計算2010級中,n=5,總分方差為12.96。兩份試卷的信度系數(shù)均在0.65以上,表明兩次考試成績均是可靠的,考試成績能夠比較真實地反映考生的實際水平。
(三)效度
效度指試卷的準確性和有效性程度,反映了考試成績與預(yù)期目標之間相關(guān)的程度。效度分為內(nèi)容效度、效應(yīng)關(guān)聯(lián)效度和構(gòu)想效度,學(xué)科測驗主要考慮內(nèi)容效度。內(nèi)容效度主要是在試卷中,試題對預(yù)測教學(xué)內(nèi)容的代表性程度,即教學(xué)目標是否通過考試實現(xiàn)了預(yù)期的考察。一般用個章節(jié)考題分數(shù)與教學(xué)學(xué)時數(shù)兩列數(shù)據(jù)的積差相關(guān)系數(shù)反映考試與教學(xué)的一致性。本研究主要通過幾大部分考察效度,執(zhí)行力、實驗?zāi)芰?、背誦、朗讀、英文讀說、想象力等幾個方面,相關(guān)系數(shù)介于0.4~0.6認為考試與教學(xué)要求基本一致;相關(guān)系數(shù)介于0.6~0.8認為考試與教學(xué)要求一致;當相關(guān)系數(shù)大于0.8時,考試則與教學(xué)要求高度一致。計算結(jié)果表明,兩次考試內(nèi)容效度分別為0.76,0.82,說明兩次考試與教學(xué)要求有較高的一致性。
(四)難度
難度是評估試卷難易程度的指標,可以用難度系數(shù)表示,難度系數(shù)越大,難度越低。表6和表7是本次調(diào)查試卷的難度分布,分析結(jié)果表明,難度系數(shù)在0.5~1之間,名詞解釋偏容易,選擇題、填空題、讀圖題偏難,2009和2010級難度系數(shù)分別為0.71和0.62。試卷整體的難度系數(shù)可以由各題的難度指數(shù)加權(quán)平均求出,對于高校課程合格性的水平考試,通常試卷整體難度以0.7~0.8為好,表6顯示,2010級試卷整體有一定難度,可以選擇降低難度。
題型結(jié)構(gòu)是試卷內(nèi)容的主要表現(xiàn)形式。考試的題型一般可以分為兩類:主觀題和客觀題。主觀題主要考察學(xué)生對知識的理解、掌握深度和表述能力,答題相對自由,題型有問答題(簡答題、論述題)、分析題等,對于這類題型,學(xué)生可以靈活運用所掌握的知識充分表述個人的見解。此類題型了解學(xué)生綜合分析問題、解決問題的能力,檢測學(xué)生對知識點的理解及綜合運用等方面具有優(yōu)勢,但此類題型題目大,分值高,涉及課程內(nèi)容的題量相對較少,內(nèi)容涵蓋面相對較窄,有一定的局限性??陀^題題型較固定,主要考察課程中學(xué)生必須掌握和記憶的基本概念、基本原理等。題型有選擇題、名詞解釋、填空題、改錯題等,此類題目小,題量多,內(nèi)容覆蓋面廣,題目和答案較為固定,用于檢測學(xué)生對課程基本知識掌握、理解的程度。這類題型還與學(xué)生復(fù)習(xí)的仔細程度和對知識點的記憶能力有關(guān),在檢測考生知識的綜合應(yīng)用能力和整體思維能力等方面有所欠缺。
三、結(jié)論
綜上所述,兩份試卷分析充分顯示全英文課程試卷Welding and Joining of Materials總體質(zhì)量良好,題庫試題組成基本合理、科學(xué),符合教學(xué)大綱要求,能較全面反映教學(xué)內(nèi)容,考核學(xué)生的真實水平,使考試有較高的效度和信度,但同時發(fā)現(xiàn)題庫還存在一些不夠完善的地方,部分試題有一定難度,而有些題型較為容易,因此在這些試卷分析的基礎(chǔ)上,我們對已有試卷進行了拓展,提出了18套優(yōu)異試卷,建立了Welding and Joining of Materials基礎(chǔ)題庫,根據(jù)需要及時刪減或修改過于簡單的試題,增加具有深度和廣度的試題,逐步完善試題庫,使題庫質(zhì)量得以真正提升。
未來教改方向,1.課程綜合改革,逐步達到國際平均水平;2.逐漸降低課堂人數(shù),完善平時成績的考察,增加學(xué)生參與課堂的意愿,使平時成績成為真正提高學(xué)生綜合素質(zhì)的平臺;3.進一步提高試卷質(zhì)量,使題目難易程度均勻化,更合理、更有效地考察學(xué)生的理論水平和解決問題分析問題的能力。
[參考文獻]
[1]李文娟.專業(yè)課全英文教學(xué)面臨的問題與建議.佳木斯教育學(xué)院學(xué)報,2013,130(8):349+359
[2]胡水清,張玫,王榮欣,顧維萍.本校“雙語教學(xué)”的調(diào)查報告及分析.重慶醫(yī)學(xué),2009,38(19):2514~2515
[3]徐培全,馬春偉,任江偉,劉傳根,曹曉蓮.“050180: Welding and Joining of Materials”課程期末評估及問題初探.教育理論與教學(xué)研究,2013,205(12):41~42
[4]馮修猛,李凱軍,閆實,劉星,王莞.試卷分析及其對教學(xué)工作指導(dǎo)作用的研究.西北醫(yī)學(xué)教育,2009,17(4):698~700
[5]王天義.試論統(tǒng)計分析方法在試卷分析中的應(yīng)用.蘭州工業(yè)高等??茖W(xué)校學(xué)報,2004,11(1):62~65
(作者單位:上海工程技術(shù)大學(xué) 材料工程學(xué)院 上海)