研究生在線教學(xué)質(zhì)量評價體系的構(gòu)建與應(yīng)用

鐘亮

(重慶交通大學(xué) 河海學(xué)院，重慶 400074)

自2015年3月李克強總理在政府工作報告中首次提出“互聯(lián)網(wǎng)+”行動計劃以來，各行業(yè)圍繞“互聯(lián)網(wǎng)+”的新業(yè)態(tài)發(fā)展迅速，教育行業(yè)也正朝著數(shù)字化、網(wǎng)絡(luò)化和智能化的方向發(fā)展[1]?！督逃筷P(guān)于加強高等學(xué)校在線開放課程建設(shè)應(yīng)用與管理的意見》(教高〔2015〕3號)指出：“鼓勵高校結(jié)合本校人才培養(yǎng)目標(biāo)和需求，通過在線學(xué)習(xí)、在線學(xué)習(xí)與課堂教學(xué)相結(jié)合等多種方式應(yīng)用在線開放課程，不斷創(chuàng)新校內(nèi)、校際課程共享與應(yīng)用模式。鼓勵高校制訂在線開放課程教學(xué)質(zhì)量認(rèn)定標(biāo)準(zhǔn)，將通過本校認(rèn)定的在線課程納入培養(yǎng)方案和教學(xué)計劃，并制訂在線課程的教學(xué)效果評價辦法和學(xué)生修讀在線課程的學(xué)分認(rèn)定辦法?！痹诰€教學(xué)一般指80%以上的課程內(nèi)容是在線完成的教學(xué)[2]，具有學(xué)習(xí)靈活、資源豐富、知識更新快等優(yōu)點，是移動互聯(lián)網(wǎng)時代高等教育教學(xué)發(fā)展的必然趨勢。研究生教育位居高等教育金字塔的上端，課程學(xué)習(xí)是研究生特別是碩士研究生培養(yǎng)的重要環(huán)節(jié)，在研究生教育中開展在線教學(xué)，充分應(yīng)用網(wǎng)絡(luò)優(yōu)勢教學(xué)資源，對提高研究生培養(yǎng)質(zhì)量具有重要作用。

在線課程建設(shè)的目的在于應(yīng)用[3]，研究生在線教學(xué)應(yīng)用質(zhì)量需要采用一個科學(xué)合理的評價體系進行評判。目前，在本科生在線課程的設(shè)計建設(shè)[4]、教學(xué)模式[5]、教學(xué)方法[6]、學(xué)分認(rèn)定[7]和評價體系[8-10]等方面已有一些研究，這些研究成果為進一步構(gòu)建研究生在線教學(xué)質(zhì)量評價體系提供了有益參考。然而，由于本科生階段課程教學(xué)注重寬泛性，研究生階段課程教學(xué)偏向窄深性，兩者在知識廣度、深度和專業(yè)能力等方面的要求存在明顯差異，研究生在線教學(xué)質(zhì)量評價不能完全沿用本科生在線教學(xué)質(zhì)量的評價體系，而應(yīng)該采用適合研究生教育培養(yǎng)特點的評價體系，但目前這方面的研究還非常薄弱。因此，本文將圍繞研究生在線教學(xué)要求，結(jié)合重慶交通大學(xué)水利工程碩士研究生培養(yǎng)實際，探討如何構(gòu)建課前、課中和課后全覆蓋的研究生在線教學(xué)質(zhì)量評價體系，為研究生在線課程質(zhì)量評價提供依據(jù)。

1 研究生在線教學(xué)要求

在線教學(xué)是研究生教學(xué)方式的重要組成部分，研究生在線課程教學(xué)應(yīng)滿足以下要求。一是聚焦學(xué)生能力的培養(yǎng)。研究生教育承擔(dān)著為國家培養(yǎng)高層次創(chuàng)新人才的重任[11]，研究生在線教育應(yīng)利用優(yōu)質(zhì)網(wǎng)絡(luò)教學(xué)資源，改革教學(xué)模式，加強教學(xué)設(shè)計，引領(lǐng)學(xué)生開展深度學(xué)習(xí)，強化學(xué)生的問題意識和學(xué)術(shù)探究意識，培養(yǎng)學(xué)生的創(chuàng)新能力和解決問題能力。二是堅持以學(xué)生為中心的教學(xué)理念。研究生在線教育應(yīng)改變傳統(tǒng)的灌輸式教學(xué)模式，創(chuàng)設(shè)“以學(xué)生為中心”的課程教學(xué)組織新模式，教師通過安排學(xué)生課前網(wǎng)絡(luò)資源學(xué)習(xí)、課中交流討論和課后課程實踐，加強師生互動，讓學(xué)生變被動學(xué)習(xí)為主動學(xué)習(xí)，提升在線學(xué)習(xí)的自主性和積極性。三是加強學(xué)習(xí)效果評價。在線教學(xué)課程考核應(yīng)覆蓋課前、課中和課后，采用多元化考核評價學(xué)生全程學(xué)習(xí)成效，精準(zhǔn)獲得學(xué)生的學(xué)習(xí)狀態(tài)數(shù)據(jù)，實時監(jiān)測評估學(xué)習(xí)效果和反饋存在問題，實現(xiàn)教學(xué)質(zhì)量的全程有效監(jiān)控和持續(xù)針對改進。

2 教學(xué)過程全覆蓋的研究生在線教學(xué)質(zhì)量評價體系

重慶交通大學(xué)水利工程學(xué)科是省級“一流學(xué)科”建設(shè)點，涵蓋了水文學(xué)及水資源、水力學(xué)及河流動力學(xué)、水工結(jié)構(gòu)工程、水利水電工程、港口海岸與近海工程5個二級學(xué)科。根據(jù)培養(yǎng)方案，水利工程學(xué)科研究生課程包括公共學(xué)位課、基礎(chǔ)學(xué)位課、專業(yè)學(xué)位課、公共非學(xué)位課、專業(yè)非學(xué)位課和實踐教學(xué)環(huán)節(jié)課程，并在課程設(shè)置時引入了一些學(xué)科前沿和行業(yè)新技術(shù)課程。盡管目前我校水利工程碩士研究生大多采用線下教學(xué)方式，但在研究生教育中融入線上教學(xué)，充分發(fā)揮在線教學(xué)學(xué)習(xí)靈活、資源豐富、知識更新快等優(yōu)勢，是現(xiàn)代研究生教育的大勢所趨。為保障我校水利工程研究生在線教學(xué)的順利開展和研究生在線教學(xué)質(zhì)量，結(jié)合研究生在線教學(xué)要求和我校實際，本文提出基于“資源建設(shè)+教學(xué)設(shè)計+教師教學(xué)+學(xué)生學(xué)習(xí)+效果評價”一級評價指標(biāo)的多維度評價體系，根據(jù)各維度指標(biāo)內(nèi)涵，給出了各一級評價指標(biāo)的二級指標(biāo)、觀測點及描述和分值，見表1。

表1 在線教學(xué)質(zhì)量評價指標(biāo)及觀測點

本文“5維度14指標(biāo)”的研究生在線教學(xué)質(zhì)量評價體系響應(yīng)了研究生在線教學(xué)要求，秉持“學(xué)生中心、產(chǎn)出導(dǎo)向和持續(xù)改進”的OBE教育理念，充分利用在線教學(xué)的優(yōu)勢，激發(fā)學(xué)習(xí)熱情，培養(yǎng)研究生的創(chuàng)新能力和解決問題能力。

3 研究生在線教學(xué)質(zhì)量綜合評級方法及應(yīng)用

3.1 指標(biāo)點權(quán)重確定方法

各指標(biāo)在同級所有指標(biāo)中所占的比重稱為權(quán)重，一般采用數(shù)據(jù)形式進行量化。目前確定權(quán)重的方法包括專家意見平均法、德爾菲法、層次分析法和模糊綜合評價法等[12]。其中，層次分析法(Analytic Hierarchy Process，簡稱AHP法)是一種定量、定性分析相結(jié)合的多維分析決策方法，應(yīng)用廣泛，本文將采用AHP法確定評價體系指標(biāo)點的權(quán)重。

AHP法將復(fù)雜的評價模型分解成若干相關(guān)層，征詢專家意見后確定每一層指標(biāo)的相對重要性并構(gòu)建判斷矩陣，通過計算判斷矩陣和檢驗一致性獲得當(dāng)前層各個指標(biāo)的相對權(quán)重[13]，具體步驟如下。

(1)對同一層的各指標(biāo)ui兩兩比較，結(jié)合專家咨詢意見確定各指標(biāo)的相對重要性，根據(jù)判斷矩陣標(biāo)度[13]賦予重要性標(biāo)度值xij，構(gòu)建判斷矩陣。

(5)根據(jù)AW=λmaxW計算判斷矩陣A的最大特征根λmax。

(6)計算一致性比例CR=CI/RI，其中，判斷矩陣的一致性指標(biāo)CI=(λmax-n)/(n-1)，平均一致性指標(biāo)RI與矩陣的階數(shù)有關(guān)，可查表2確定[14]。若CR< 0.1，則判斷矩陣A通過一致性檢驗，特征向量W即為各指標(biāo)權(quán)重值。

表2 平均一致性指標(biāo)RI值

3.2 綜合評級閾值確定方法

本文綜合評級閾值采用模糊綜合評價法確定，該法基于模糊數(shù)學(xué)的隸屬度理論，將定性評價轉(zhuǎn)為定量評價，分析步驟如下[14]。

(1)構(gòu)建評價因素集。設(shè)某一層級的指標(biāo)有m個，則評價因素集可記為V={v1,v2,…,vm}。

(2)建立評語集。按5級劃分，記為D={d1,d2,d3,d4,d5}={很差，較差，一般，良好，優(yōu)秀}。

(3)確定各個指標(biāo)的隸屬度r。r代表各個指標(biāo)在評語集中的隸屬程度，假設(shè)共有t名專家對某一指標(biāo)進行評價，其中有s名專家認(rèn)定了該指標(biāo)的評語等級，則該指標(biāo)對于該評語集的隸屬度r=s/t。

(4)確定模糊關(guān)系矩陣。根據(jù)專家意見確定隸屬度后，確認(rèn)模糊關(guān)系矩陣

(5)計算綜合評定向量。

(6)對指標(biāo)進行量化評估。在評語集當(dāng)中對指標(biāo)劃分了5個等級，由此可以得到賦值矩陣P，將綜合評定向量B與P相乘，獲得該指標(biāo)體系的量化評估值

3.3 研究生在線教學(xué)質(zhì)量評價體系的應(yīng)用

這里以某研究生在線課程為例，說明前文所構(gòu)建的研究生在線教學(xué)質(zhì)量評價體系的具體應(yīng)用過程。應(yīng)用AHP法確定在線教學(xué)質(zhì)量評價體系各指標(biāo)權(quán)重，以一級指標(biāo)為例，通過兩兩比較各指標(biāo)的重要程度并采用1～9標(biāo)度法量化，得到判斷矩陣。一級指標(biāo)相對重要性程度直接采用矩陣A表示。

對判斷矩陣A各列進行歸一化處理(見表3)，得到特征向量W=(0.325，0.298，0.151，0.162，0.065)。根據(jù)最大特征根公式求出λmax=5.060，對該判斷矩陣的計算結(jié)果進行一致性檢驗，由于該判斷矩陣為5階矩陣，查表2可知，RI=1.12，并計算出一致性指標(biāo)CI=0.015，從而一致性比例CR=0.013 < 0.1，判斷矩陣的一致性檢驗通過，該特征向量W即為各一級指標(biāo)的權(quán)重值。各二級指標(biāo)的權(quán)重值采用類似方法獲得，計算結(jié)果見表4。

表3 判斷矩陣A歸一化處理結(jié)果

表4 各級指標(biāo)權(quán)重確認(rèn)

為獲得在線教學(xué)質(zhì)量綜合評級閾值，構(gòu)建了在線教學(xué)質(zhì)量評價體系評語集，在教學(xué)質(zhì)量綜合評級判定中引入“優(yōu)秀、良好、一般、較差、很差”等模糊概念進行評判，每個評價等級賦分見表5。根據(jù)專家意見對各指標(biāo)評級進行打分，可求出指標(biāo)隸屬度，表6以二級指標(biāo)為例，給出了專家對在線教學(xué)質(zhì)量綜合能力的隸屬度打分。

表5 在線教學(xué)質(zhì)量評價體系評級標(biāo)準(zhǔn)

表6 在線教學(xué)體系各指標(biāo)隸屬度

基于各二級指標(biāo)的隸屬度和權(quán)重值，利用公式B=W·R可算出各二級指標(biāo)相對于一級指標(biāo)的綜合評定向量B，其中B1，B2，B3，B4，B5分別代表相對于資源建設(shè)、教學(xué)設(shè)計、教師教學(xué)、學(xué)生學(xué)習(xí)、效果評價的綜合評定向量。

B1=(0.355，0.265，0.301，0.080，0)

B2=(0.272，0.293，0.160，0.252，0.023)

B3=(0.100，0.199，0.565，0.100，0.033)

B4=(0.200，0.300，0.350，0.050，0.100)

B5=(0.267，0.200，0.366，0.166，0)

二級指標(biāo)的隸屬度矩陣

R=

綜合評定向量B=W·R=(0.260，0.265，0.311，0.135，0.028)。

由此，該在線課程的教學(xué)質(zhì)量綜合評級為良好。

評級結(jié)果表明，該在線課程的教學(xué)質(zhì)量還存在進一步提升的空間。根據(jù)專家打分隸屬度和權(quán)重，該課程在“教學(xué)目標(biāo)”“教學(xué)方法”“學(xué)生調(diào)動”和“教學(xué)考核”等方面隸屬度評級為“優(yōu)秀”的占比較低，均為0.1，且存在“較差”的評級；“教學(xué)組織”“學(xué)生調(diào)動”“學(xué)習(xí)成果”和“教學(xué)互動”等方面隸屬度評級還出現(xiàn)了“很差”的評級，后續(xù)可圍繞上述二級指標(biāo)進行有針對性的改進。一是結(jié)合辦學(xué)定位和人才培養(yǎng)要求，完善課程教學(xué)目標(biāo)，堅持知識、能力和素質(zhì)的有機融合，培養(yǎng)學(xué)生的創(chuàng)新意識，提升學(xué)生的創(chuàng)新能力和實踐能力；二是采用多式協(xié)同的教學(xué)方法，加強教學(xué)互動，實現(xiàn)從以教為中心向以學(xué)為中心的轉(zhuǎn)變，激發(fā)學(xué)生的學(xué)習(xí)熱情，充分調(diào)動學(xué)生的學(xué)習(xí)積極性；三是采用多元化考核方式，豐富探究式、論文式和報告答辯式等作業(yè)評價方式，加強非標(biāo)準(zhǔn)化和綜合性等評價；四是堅持以學(xué)生為中心的課程教學(xué)組織，深度融合現(xiàn)代水利信息技術(shù)；五是加強學(xué)習(xí)成果的展示、分享與交流。

4 結(jié)語

研究生教育是我國國民高等教育的最高層次，在研究生教育中開展在線教學(xué)，對充分利用優(yōu)勢學(xué)習(xí)資源、了解學(xué)科前沿和擴大學(xué)生知識面等具有重要作用。然而，目前我國研究生在線教學(xué)尚屬起步階段，還存在在線教學(xué)課程建設(shè)滯后、在線教學(xué)質(zhì)量評價體系尚未形成、在線教學(xué)質(zhì)量保障機制仍未建立等突出問題，本文結(jié)合研究生在線教學(xué)要求和我校實際，重點針對研究生在線教學(xué)質(zhì)量評價體系構(gòu)建問題開展了研究。通過研究，構(gòu)建了課前、課中和課后全覆蓋的在線教學(xué)質(zhì)量評價體系，提出了“資源建設(shè)+教學(xué)設(shè)計+教師教學(xué)+學(xué)生學(xué)習(xí)+效果評價”的一級評價指標(biāo)，闡明了各評價指標(biāo)的二級指標(biāo)和觀測點，探討了指標(biāo)點權(quán)重和綜合評級閾值的確定方法，應(yīng)用所建立的評價體系進行了在線課程教學(xué)質(zhì)量評價，并根據(jù)評價結(jié)果給出了課程教學(xué)質(zhì)量的改進措施。

本文所建立的研究生在線教學(xué)質(zhì)量評價體系可從教學(xué)資源多樣性、教學(xué)設(shè)計合理性、教學(xué)組織有效性和教學(xué)改進針對性等方面對研究生在線教學(xué)質(zhì)量進行定量評價和全面診斷，并找出其中的薄弱環(huán)節(jié)。同時，該評價體系可推廣應(yīng)用于相近學(xué)科研究生在線教學(xué)質(zhì)量評價，具有較為廣泛的應(yīng)用前景，對有效促進研究生在線教學(xué)發(fā)展具有積極作用。