基于不同主體的課程質(zhì)量綜合評(píng)價(jià)
——以“交通運(yùn)輸規(guī)劃”課程為例

陳沿伊，董升平，柯姜岑

(武漢理工大學(xué) 交通學(xué)院，武漢 430063)

一、引言

2020年10月國務(wù)院印發(fā)《深化新時(shí)代教育評(píng)價(jià)改革總體方案》，指出應(yīng)遵循教育規(guī)律針對(duì)不同主體，建立科學(xué)的符合時(shí)代要求的教育評(píng)價(jià)制度和機(jī)制。教育質(zhì)量評(píng)價(jià)本質(zhì)上是不同評(píng)價(jià)主體對(duì)課程質(zhì)量的多維度、全方位評(píng)價(jià)，是不同利益相關(guān)者如教師、學(xué)生、學(xué)生家長(zhǎng)、政府、用人單位、行業(yè)專家等，從不同的角度根據(jù)不同的價(jià)值取向參照相應(yīng)的評(píng)價(jià)標(biāo)準(zhǔn)對(duì)人才培養(yǎng)各個(gè)環(huán)節(jié)及效果的評(píng)價(jià)[1]。課程質(zhì)量評(píng)價(jià)是高等教育質(zhì)量的重點(diǎn)考查環(huán)節(jié)，也是畢業(yè)要求達(dá)成度和培養(yǎng)目標(biāo)達(dá)成度評(píng)價(jià)的基礎(chǔ)。但同時(shí)課程質(zhì)量評(píng)價(jià)只是人才培養(yǎng)過程中的中間環(huán)節(jié)，在OBE理念指導(dǎo)下不是作為最后的產(chǎn)出直接面向政府和社會(huì)受到價(jià)值判斷，只是針對(duì)課程目標(biāo)的達(dá)成情況進(jìn)行評(píng)價(jià)，所以評(píng)價(jià)參與者很難包括大量的利益相關(guān)者，但傳統(tǒng)的課程考核方式又很難科學(xué)反映課程目標(biāo)的達(dá)成情況，同時(shí)單一主體也難以保證評(píng)價(jià)的客觀性和有效性[2],故課程質(zhì)量評(píng)價(jià)應(yīng)考慮采用包括教師、學(xué)生、教學(xué)督導(dǎo)等多個(gè)主體在內(nèi)的綜合評(píng)價(jià)。

基于以上分析，在課程質(zhì)量評(píng)價(jià)實(shí)踐中，一般有三種思路：一種為成績(jī)分析法，即根據(jù)課程考核方式如考勤、平時(shí)作業(yè)、大作業(yè)、結(jié)業(yè)考試等考核環(huán)節(jié)與課程目標(biāo)的對(duì)應(yīng)關(guān)系來量化計(jì)算課程目標(biāo)的達(dá)成度，重點(diǎn)關(guān)注達(dá)成度較低的課程目標(biāo)并予以改進(jìn)[3]；第二種為調(diào)查問卷法，即通過對(duì)課程授課對(duì)象的調(diào)查，獲得針對(duì)課程目標(biāo)和教學(xué)方法的主觀評(píng)價(jià)，以此作為持續(xù)改進(jìn)的基礎(chǔ)[4]；第三種為督導(dǎo)評(píng)價(jià)法，即教學(xué)督導(dǎo)通過課程聽課、資料查閱等對(duì)課程質(zhì)量進(jìn)行評(píng)價(jià)。第一種易受考核方式、考核的難易程度、評(píng)分標(biāo)準(zhǔn)的科學(xué)性等影響；第二種可能出現(xiàn)學(xué)生對(duì)教學(xué)成效評(píng)價(jià)過于主觀等問題；第三種則往往只能評(píng)價(jià)課程的整體情況，但很難對(duì)課程目標(biāo)的達(dá)成度進(jìn)行詳細(xì)評(píng)價(jià)，且督導(dǎo)檢查在實(shí)踐中也很難覆蓋到所有課程，故本文評(píng)價(jià)中暫不考慮。實(shí)踐中將前兩種主體的評(píng)價(jià)進(jìn)行結(jié)合，發(fā)揮各自優(yōu)點(diǎn)并相互補(bǔ)充的做法并不多見。

“交通運(yùn)輸規(guī)劃”是武漢理工大學(xué)交通運(yùn)輸專業(yè)必修課，也是專業(yè)核心課程之一，總學(xué)時(shí)為32個(gè)，其中理論學(xué)時(shí)為24個(gè)，實(shí)驗(yàn)學(xué)時(shí)為8個(gè)，實(shí)驗(yàn)是Transcad交通規(guī)劃綜合實(shí)驗(yàn)。在經(jīng)歷多輪工程教育專業(yè)認(rèn)證之后，課程一直持續(xù)改進(jìn)課程考核與評(píng)價(jià)方式，使之與課程目標(biāo)對(duì)應(yīng)關(guān)系更加明確，對(duì)課程目標(biāo)達(dá)成度的計(jì)算更加科學(xué)。在2020—2021上半學(xué)年，課程評(píng)價(jià)中更是新加入以學(xué)生為對(duì)象的學(xué)習(xí)過程效果調(diào)查。本文希望將課程成績(jī)分析和學(xué)生問卷調(diào)查相結(jié)合，從教師和學(xué)生兩個(gè)視角綜合評(píng)價(jià)課程目標(biāo)的達(dá)成度并分析兩者間的差異；統(tǒng)計(jì)學(xué)生對(duì)教學(xué)內(nèi)容和方法的意見，并與課程目標(biāo)達(dá)成情況進(jìn)行比較，分析研究教學(xué)方法和內(nèi)容對(duì)目標(biāo)達(dá)成的影響；最后根據(jù)以上分析，提出下階段教學(xué)改進(jìn)的建議。

二、基于課程考核成績(jī)的課程目標(biāo)達(dá)成度分析

1.課程考核方式與課程目標(biāo)的對(duì)應(yīng)關(guān)系

“交通運(yùn)輸規(guī)劃”課程最新大綱中一共有4個(gè)課程目標(biāo)：課程目標(biāo)1主要是要求掌握交通四階段模型，課程目標(biāo)2主要是掌握交通規(guī)劃評(píng)價(jià)指標(biāo)和方法，課程目標(biāo)3是了解主流的交通規(guī)劃軟件的特點(diǎn)，課程目標(biāo)4是能夠應(yīng)用Transcad軟件到具體交通規(guī)劃案例中。

根據(jù)以上4個(gè)課程目標(biāo)各自的特點(diǎn)，考慮課程總學(xué)時(shí)的限制：課程目標(biāo)1、2考核方式為筆試和平時(shí)成績(jī)，分別占達(dá)成度的80%和20%；課程目標(biāo)3考核方式為大作業(yè)；課程目標(biāo)4的考核方式為實(shí)驗(yàn)報(bào)告成績(jī)[5]?？己朔绞脚c課程目標(biāo)對(duì)應(yīng)關(guān)系具體見表1。

表1 考核方式與課程目標(biāo)對(duì)應(yīng)關(guān)系

2.基于課程考核結(jié)果的課程目標(biāo)達(dá)成度總體分析

根據(jù)對(duì)上述方法記錄平時(shí)考勤和作業(yè)，批改對(duì)應(yīng)的期末考試試卷、交通規(guī)劃軟件課程論文、Transcad交通綜合實(shí)驗(yàn)報(bào)告后，分別計(jì)算每個(gè)學(xué)生各個(gè)課程目標(biāo)的達(dá)成度情況并取平均值，結(jié)果為課程目標(biāo)1平均達(dá)成度為0.73，課程目標(biāo)2平均達(dá)成度為0.75，課程目標(biāo)3、課程目標(biāo)4平均達(dá)成度均為0.85。結(jié)果表明，各個(gè)課程目標(biāo)達(dá)成度間有一定差異，相關(guān)理論教學(xué)的效果相對(duì)較差，軟件的操作和應(yīng)用層面教學(xué)效果相對(duì)較好。

3.基于課程考核結(jié)果的課程目標(biāo)達(dá)成度個(gè)體差異分析

(1)各課程目標(biāo)達(dá)成度個(gè)體差異比較分析

課程選課人數(shù)為64人，根據(jù)每名學(xué)生在各個(gè)目標(biāo)上的達(dá)成度繪制散點(diǎn)圖，如圖1。由圖1可知，課程目標(biāo)1和課程目標(biāo)2達(dá)成度離散程度相對(duì)較大，并分別有2、3個(gè)離群值；課程目標(biāo)3、4達(dá)成度相對(duì)較為集中；計(jì)算各個(gè)目標(biāo)達(dá)成度標(biāo)準(zhǔn)差也驗(yàn)證了此結(jié)論，課程目標(biāo)1、2的標(biāo)準(zhǔn)差為0.148和0.194，課程目標(biāo)3、4的標(biāo)準(zhǔn)差為0.063和0.078。

圖1 基于課程考核結(jié)果的課程目標(biāo)達(dá)成度個(gè)體差異

(2)個(gè)體課程目標(biāo)達(dá)成度影響因素分析

此分析主要是研究每名學(xué)生在各個(gè)課程目標(biāo)達(dá)成度上差異的影響來源，分析此種差異是由學(xué)生本身的學(xué)習(xí)態(tài)度、智力等個(gè)體差異引起的還是由各個(gè)課程目標(biāo)的學(xué)習(xí)難度引起的。通過計(jì)算，在各目標(biāo)方差中，個(gè)體差異解釋了總方差的78%，各目標(biāo)間差異解釋了總方差的22%，由此可以得到，課程目標(biāo)的達(dá)成情況主要還是受到學(xué)生學(xué)習(xí)態(tài)度、學(xué)習(xí)能力等影響較大。

三、基于學(xué)生問卷調(diào)查的課程目標(biāo)達(dá)成度分析

1.課程目標(biāo)達(dá)成度學(xué)生主觀感受問卷

為了全面評(píng)價(jià)課程質(zhì)量，不僅從成績(jī)等相關(guān)客觀指標(biāo)出發(fā)由任課教師計(jì)算課程目標(biāo)達(dá)成度，還應(yīng)調(diào)查學(xué)生對(duì)于學(xué)習(xí)效果的主觀感受。故設(shè)計(jì)了調(diào)查問卷進(jìn)行網(wǎng)上匿名調(diào)查[6]，其中問題涉及課程目標(biāo)達(dá)成度主觀感受及達(dá)成度低的原因、課程學(xué)時(shí)和內(nèi)容安排的合理性、課程資料的豐富性、線上線下教學(xué)的有效性、教學(xué)方法的科學(xué)性等多個(gè)方面，共發(fā)放問卷64份，收回問卷51份，剔除無效問卷1份，可供統(tǒng)計(jì)的有效問卷為50份。問卷中涉及課程目標(biāo)達(dá)成度主觀感受問題見表2。

表2 課程目標(biāo)達(dá)成度主觀感受相關(guān)問題及評(píng)價(jià)標(biāo)準(zhǔn)

2.基于學(xué)生問卷調(diào)查的課程目標(biāo)達(dá)成度總體分析

根據(jù)調(diào)查結(jié)果，課程目標(biāo)1、課程目標(biāo)2、課程目標(biāo)3、課程目標(biāo)4選擇人數(shù)較多的達(dá)成度等級(jí)均為0.8，分別占74%、62%、60%和56%。

計(jì)算各課程目標(biāo)達(dá)成的主觀平均得分,課程目標(biāo)1平均達(dá)成度為0.81，課程目標(biāo)2平均達(dá)成度為0.79，課程目標(biāo)3平均達(dá)成度為0.78，課程目標(biāo)4平均達(dá)成度為0.80。由結(jié)果可知，各課程目標(biāo)達(dá)成情況的平均值差異不大，均在0.8上下波動(dòng)。

3.基于學(xué)生問卷調(diào)查的課程目標(biāo)達(dá)成度個(gè)體差異分析

根據(jù)每名學(xué)生在各個(gè)目標(biāo)上的達(dá)成度繪制散點(diǎn)圖，計(jì)算各課程目標(biāo)達(dá)成度方差，課程目標(biāo)1的標(biāo)準(zhǔn)方差為0.102，課程目標(biāo)2的標(biāo)準(zhǔn)方差為0.124，課程目標(biāo)3的標(biāo)準(zhǔn)方差為0.127，課程目標(biāo)4的標(biāo)準(zhǔn)方差為0.143?？砂l(fā)現(xiàn)各課程目標(biāo)方差整體差異較小，個(gè)體差異相對(duì)較大，個(gè)體差異可解釋總方差的99%，如圖2所示。

圖2 基于問卷調(diào)查的課程目標(biāo)達(dá)成度個(gè)體差異

4.基于問卷調(diào)查的目標(biāo)達(dá)成滿意度調(diào)查分析

(1)課程目標(biāo)1、2目標(biāo)達(dá)成滿意度調(diào)查

根據(jù)問卷調(diào)查結(jié)果，76%的同學(xué)對(duì)課程目標(biāo)1的掌握程度感到滿意。而不滿意的原因主要集中在自學(xué)能力不足和平時(shí)作業(yè)講解過少，今后應(yīng)適當(dāng)加強(qiáng)習(xí)題講解和對(duì)學(xué)生自學(xué)情況的引導(dǎo)及考核。

79%的同學(xué)對(duì)課程目標(biāo)2的掌握程度感到滿意，而不滿意的原因主要集中在對(duì)習(xí)題講解不夠以及自學(xué)能力不足，與課程目標(biāo)1一致。

(2)課程目標(biāo)3達(dá)成度不滿意原因調(diào)查

根據(jù)問卷調(diào)查結(jié)果，盡管有30%的同學(xué)認(rèn)為大作業(yè)的考核方式不合理，但82%的同學(xué)對(duì)課程目標(biāo)3的達(dá)成度感到滿意。達(dá)成度不滿意的主要原因在于網(wǎng)上查不到相關(guān)資料以及大作業(yè)任務(wù)不具體，缺乏可操作性。

(3)課程目標(biāo)4達(dá)成度不滿意原因調(diào)查

根據(jù)問卷調(diào)查結(jié)果，有94%的同學(xué)認(rèn)為實(shí)驗(yàn)報(bào)告的考核方式是合理的，且有84%的同學(xué)對(duì)課題目標(biāo)4的達(dá)成度感到滿意。達(dá)成度不滿意的主要原因在于實(shí)驗(yàn)課時(shí)不夠、自學(xué)材料不能滿足自學(xué)以及實(shí)驗(yàn)課程講解時(shí)間不足。

四、基于不同主體的課程目標(biāo)達(dá)成度比較分析

1.總體比較

如圖3所示，以筆試為考核方式課程目標(biāo)1和課程目標(biāo)2學(xué)生的主觀達(dá)成度要高于基于成績(jī)的客觀達(dá)成度，而以大作業(yè)、實(shí)驗(yàn)等為考核方式的課程目標(biāo)3和課程目標(biāo)4，學(xué)生的主觀達(dá)成度又略低于教師批改的實(shí)驗(yàn)成績(jī)。

圖3 基于不同主體的課程目標(biāo)達(dá)成度總體比較

2.個(gè)體差異比較

如圖4所示，以筆試為考核方式課程目標(biāo)1和課程目標(biāo)2成績(jī)方差要大于學(xué)生的主觀感受，而以大作業(yè)、實(shí)驗(yàn)等考核方式的課程目標(biāo)3和課程目標(biāo)4，學(xué)生的主觀達(dá)成度方差又高于教師批改成績(jī)方差。

圖4 基于不同主體的課程目標(biāo)達(dá)成度個(gè)體差異比較

筆試方式對(duì)課程目標(biāo)1和課程目標(biāo)2進(jìn)行考核，很好地檢驗(yàn)了學(xué)生個(gè)體的課程目標(biāo)達(dá)成度，使個(gè)體差異明確的顯現(xiàn)，有利于對(duì)學(xué)生進(jìn)行針對(duì)性教學(xué)。大作業(yè)和實(shí)驗(yàn)形式對(duì)課程目標(biāo)3、課程目標(biāo)4的檢驗(yàn)，可能由于考核標(biāo)準(zhǔn)設(shè)定比較模糊，個(gè)體差異不明顯，對(duì)學(xué)生學(xué)習(xí)成果的檢驗(yàn)區(qū)分度不高。

五、課程教學(xué)內(nèi)容和方法合理性分析

除課程目標(biāo)達(dá)成度評(píng)價(jià)外，問卷還對(duì)教學(xué)內(nèi)容和方法進(jìn)行了調(diào)查，具體如下。

1.課時(shí)設(shè)置合理性分析

根據(jù)問卷調(diào)查結(jié)果，對(duì)于本課程的24個(gè)理論課時(shí)設(shè)置，有30人認(rèn)為課時(shí)設(shè)置合理，有19人認(rèn)為課時(shí)偏少，有2人認(rèn)為課時(shí)偏多。對(duì)于本課程8個(gè)實(shí)驗(yàn)課時(shí)設(shè)置，有39人認(rèn)為課時(shí)設(shè)置合理，有6人認(rèn)為課時(shí)偏少，5人認(rèn)為課時(shí)偏多。

2.教學(xué)資料合理性分析

問卷調(diào)查結(jié)果顯示，有66%的學(xué)生認(rèn)為線上自學(xué)材料不足，大部分學(xué)生認(rèn)為需要增加課程視頻、閱讀材料、課后習(xí)題等內(nèi)容。

3.教學(xué)方式合理性分析

該學(xué)期課程采用線上線下的混合教學(xué)形式，線上學(xué)習(xí)時(shí)間調(diào)查結(jié)果顯示[7]，86%的學(xué)生每周學(xué)習(xí)半小時(shí)以上，少數(shù)學(xué)生考前臨時(shí)復(fù)習(xí)或基本沒有進(jìn)行線上學(xué)習(xí)。

對(duì)于線上學(xué)習(xí)時(shí)間較少的原因，調(diào)查結(jié)果顯示，有39%的學(xué)生認(rèn)為是自學(xué)能力不足，有23%的學(xué)生認(rèn)為是自學(xué)材料缺乏，另外其他原因中學(xué)生主要是由于要考研復(fù)習(xí)、其他課程作業(yè)等原因，沒有很多精力用來線上學(xué)習(xí)。

對(duì)于線下課堂上最有效的互動(dòng)交流方式，有26人認(rèn)為是回答問題，有21人認(rèn)為是分組討論，有3人認(rèn)為是學(xué)生講解。

對(duì)于平時(shí)作業(yè)是否需要單獨(dú)進(jìn)行講解，有35人認(rèn)為需要教師講解，14人認(rèn)為僅需提供答案，1人認(rèn)為可由學(xué)生在課堂上講解。

六、課程教學(xué)持續(xù)改進(jìn)建議

1.強(qiáng)化課程目標(biāo)1、2的學(xué)習(xí)過程管理

從達(dá)成度評(píng)價(jià)結(jié)果看，課程目標(biāo)1、2的達(dá)成度相對(duì)較低，且課程考核結(jié)果和學(xué)生主觀感受存在一定差異。下一階段教學(xué)應(yīng)加強(qiáng)課程目標(biāo)1、2的學(xué)習(xí)過程管理，將課程目標(biāo)達(dá)成過程進(jìn)行拆解，讓學(xué)生帶著問題上課，每章節(jié)結(jié)束后進(jìn)行線上自測(cè)并給出詳細(xì)答案，分階段設(shè)置專門線上答疑時(shí)間，全過程跟蹤學(xué)生的學(xué)習(xí)情況，根據(jù)測(cè)試結(jié)果改進(jìn)教學(xué)內(nèi)容和方式，一切服務(wù)于學(xué)生的學(xué)習(xí)效果[8]。

2.細(xì)化課程目標(biāo)3、4的考核方式和標(biāo)準(zhǔn)

從達(dá)成度評(píng)價(jià)結(jié)果看，課程目標(biāo)3、課程目標(biāo)4達(dá)成度個(gè)體差異較小，有可能是由于評(píng)分標(biāo)準(zhǔn)不明確導(dǎo)致；且有30%的學(xué)生認(rèn)為以大作業(yè)的形式對(duì)課程目標(biāo)3進(jìn)行考核不合適，課程考核環(huán)節(jié)過多，學(xué)生負(fù)擔(dān)較大。故建議采用分組論文形式對(duì)課程目標(biāo)3進(jìn)行考核，進(jìn)一步明確課程目標(biāo)3和課程目標(biāo)4的評(píng)分標(biāo)準(zhǔn)中各等級(jí)要求的差異。

3.進(jìn)一步引導(dǎo)學(xué)生線上自學(xué)，彌補(bǔ)線下課時(shí)不足

調(diào)查顯示，有38%的學(xué)生認(rèn)為理論課時(shí)偏少，部分學(xué)生課程目標(biāo)1和課程目標(biāo)2的達(dá)成度未達(dá)到0.6。在培養(yǎng)方案縮減總學(xué)分和學(xué)時(shí)的大背景下理論學(xué)時(shí)增加難度較高，在下一步教學(xué)中應(yīng)加強(qiáng)對(duì)學(xué)生線上自學(xué)的管理，對(duì)課上課下學(xué)習(xí)內(nèi)容進(jìn)行詳細(xì)設(shè)計(jì)[9]，明確每周線上自學(xué)時(shí)長(zhǎng)和內(nèi)容的要求，彌補(bǔ)線下課時(shí)不足的問題。

4.豐富課程線上學(xué)習(xí)資料和形式，拓展課程學(xué)習(xí)廣度

調(diào)查結(jié)果顯示，有66%的學(xué)生認(rèn)為線上自學(xué)材料不足，這也是學(xué)生線上學(xué)習(xí)時(shí)間較少的原因之一，故考慮增加與本課程內(nèi)容相關(guān)的期刊論文、新聞網(wǎng)站、公眾號(hào)、電子書籍等學(xué)習(xí)材料。

5.改進(jìn)線下課堂互動(dòng)方式，提高學(xué)生學(xué)習(xí)參與度和積極性

調(diào)查結(jié)果表明，學(xué)生認(rèn)為線下課堂教師提問和分組討論是較好的互動(dòng)方式，目前線下教學(xué)主要以教師講授為主，存在學(xué)生課上注意力不集中、學(xué)習(xí)效率低等問題，下一階段應(yīng)從思想上首先改變教師在網(wǎng)絡(luò)時(shí)代的角色認(rèn)知[10]，采用以問題為導(dǎo)向的翻轉(zhuǎn)式教學(xué)，體現(xiàn)學(xué)生在學(xué)習(xí)中的主體地位，引導(dǎo)學(xué)生深入思考，培育良好的線下課堂氛圍。