精品課程智能評(píng)價(jià)系統(tǒng)設(shè)計(jì)*

楊 藝， 余 魯

(重慶工商大學(xué) a.計(jì)算機(jī)科學(xué)與信息工程學(xué)院，重慶400067；b.數(shù)學(xué)與統(tǒng)計(jì)學(xué)院，重慶 400067)

精品課程智能評(píng)價(jià)系統(tǒng)設(shè)計(jì)*

楊 藝a， 余 魯b

(重慶工商大學(xué) a.計(jì)算機(jī)科學(xué)與信息工程學(xué)院，重慶400067；b.數(shù)學(xué)與統(tǒng)計(jì)學(xué)院，重慶 400067)

精品課程建設(shè)是高等學(xué)校教學(xué)質(zhì)量與教學(xué)改革工程的重要組成部分，各個(gè)學(xué)校在這些年相繼建設(shè)積累了一定數(shù)量的精品課程和建設(shè)經(jīng)驗(yàn)，但是在如何評(píng)價(jià)精品課程方面作的工作卻相對(duì)較少；依據(jù)課程與評(píng)價(jià)的相關(guān)理論，對(duì)精品課程體系的評(píng)價(jià)主體、綜合評(píng)價(jià)指標(biāo)、評(píng)價(jià)方式、評(píng)價(jià)模型等進(jìn)行了梳理歸納和分析，結(jié)合《國(guó)家精品課程評(píng)估指標(biāo)體系》和學(xué)校具體情況構(gòu)建了公正、客觀、有效的綜合評(píng)價(jià)指標(biāo)體系，進(jìn)而對(duì)各種指標(biāo)賦予權(quán)重，運(yùn)用模糊綜合評(píng)價(jià)與評(píng)價(jià)主體打分相結(jié)合的方法構(gòu)建了綜合評(píng)價(jià)的評(píng)價(jià)模型，并討論了評(píng)價(jià)系統(tǒng)的智能功能設(shè)計(jì)，最后用具體實(shí)例對(duì)評(píng)價(jià)系統(tǒng)的工作過(guò)程進(jìn)行解析說(shuō)明；旨在利用信息技術(shù)提高評(píng)價(jià)工作的效率和可信度。

精品課程；設(shè)計(jì)；智能化；評(píng)價(jià)系統(tǒng)；評(píng)價(jià)指標(biāo)體系

自2003年4月我國(guó)開(kāi)始啟動(dòng)實(shí)施國(guó)家精品課程建設(shè)項(xiàng)目以來(lái)，初步形成了“校級(jí)-省級(jí)-國(guó)家級(jí)”三級(jí)精品課程共享體系，旨在提高精品課程的示范帶頭作用。同時(shí)教育部從2003-2010年并行地發(fā)布了7個(gè)《精品課程評(píng)估指標(biāo)體系》，盡管歷年來(lái)《國(guó)家精品課程評(píng)估指標(biāo)體系》經(jīng)過(guò)了數(shù)次修訂，但都體現(xiàn)出“總體穩(wěn)定，適當(dāng)調(diào)整”的特點(diǎn)[1]。目前，各省市都在教育部的引導(dǎo)下開(kāi)展了省市級(jí)精品課程的評(píng)估和遴選工作，其評(píng)估指標(biāo)體系大都直接以《國(guó)家精品課程評(píng)估指標(biāo)體系》為準(zhǔn)繩，也有部分省市以其為主要參考，根據(jù)自身狀況進(jìn)行局部調(diào)整。針對(duì)高校精品課程評(píng)價(jià)，已經(jīng)有一些學(xué)者開(kāi)展了有關(guān)的研究，內(nèi)容主要集中在評(píng)價(jià)指標(biāo)體系的確定、評(píng)價(jià)工具應(yīng)用、評(píng)價(jià)方法及評(píng)價(jià)模型的設(shè)計(jì)等幾個(gè)方面[2-4]。這些研究都強(qiáng)調(diào)評(píng)價(jià)指標(biāo)的動(dòng)態(tài)合理調(diào)整，評(píng)價(jià)主體多元化，評(píng)價(jià)實(shí)施的過(guò)程及多種評(píng)價(jià)方法的結(jié)合，但是對(duì)評(píng)價(jià)系統(tǒng)的系統(tǒng)研究還很匱乏。即從評(píng)價(jià)指標(biāo)入手，分析評(píng)價(jià)主體、設(shè)計(jì)評(píng)價(jià)模型，到選擇評(píng)價(jià)方法和評(píng)價(jià)系統(tǒng)的開(kāi)發(fā)，這樣的研究文獻(xiàn)相對(duì)較少，并且從實(shí)際調(diào)研結(jié)果中也可看出高校精品課程評(píng)價(jià)工作還處于自動(dòng)化程度相對(duì)較低的狀況，更談不上智能化的評(píng)價(jià)。

實(shí)踐中存在的問(wèn)題以及相關(guān)研究的不足使得對(duì)精品課程評(píng)價(jià)功能進(jìn)行系統(tǒng)設(shè)計(jì)顯得尤為重要。為了以評(píng)價(jià)促建設(shè)，促進(jìn)教學(xué)水平普遍提高和優(yōu)質(zhì)教學(xué)資源的開(kāi)放與共享，設(shè)計(jì)一個(gè)具有一定的科學(xué)性，可操作性，以及可推廣的在線精品課程評(píng)價(jià)系統(tǒng)，能大大提高評(píng)價(jià)工作的效度和信度，對(duì)高校開(kāi)展同類(lèi)課程評(píng)價(jià)具有借鑒和參考價(jià)值。將在國(guó)內(nèi)外已有研究的基礎(chǔ)上，結(jié)合信息技術(shù)研究精品課程評(píng)價(jià)系統(tǒng)的具體設(shè)計(jì)方案。

1 評(píng)價(jià)因素的選擇及分析

(1) 評(píng)價(jià)主體的界定。以往對(duì)評(píng)價(jià)主體的研究都將焦點(diǎn)集中在教育專(zhuān)家或教師上，而少有考慮學(xué)生、管理人員以及社會(huì)領(lǐng)域?qū)＜摇姆治稣n程體系評(píng)價(jià)價(jià)值鏈中所存在的價(jià)值主體來(lái)看，課程體系評(píng)價(jià)涉及的利益相關(guān)者主要包括課程的使用者：學(xué)生和教師，課程的建設(shè)者：專(zhuān)家教師、一般教師和教育管理者以及課程評(píng)價(jià)者：專(zhuān)家、教師和學(xué)生，在這個(gè)完整的價(jià)值鏈中，三者參與了課程體系評(píng)價(jià)的價(jià)值創(chuàng)造，這種價(jià)值最終通過(guò)教育評(píng)價(jià)者的評(píng)價(jià)活動(dòng)得以實(shí)現(xiàn)。其中使用者，建設(shè)者，評(píng)價(jià)者三者的身份相互交叉、重疊，作用相互滲透、融合。

由于參評(píng)人員的身份和資歷不同，對(duì)精品課程了解程度和經(jīng)驗(yàn)也不同，個(gè)人的表決權(quán)重也應(yīng)有所不同，在設(shè)計(jì)評(píng)價(jià)系統(tǒng)時(shí)應(yīng)針對(duì)不同參評(píng)人員設(shè)計(jì)對(duì)應(yīng)的表決權(quán)重。這點(diǎn)可在參評(píng)者在線打分前的注冊(cè)環(huán)節(jié)，并在本人不知情的情況下自動(dòng)賦給。

(2) 評(píng)價(jià)指標(biāo)體系分析。2003-2010年，雖然教育部發(fā)布的7個(gè)指標(biāo)體系各有不同，但是體系的框架變化不大，第一部分綜合評(píng)估，總體上由“教學(xué)隊(duì)伍”、“教學(xué)內(nèi)容”、“教學(xué)條件”、“教學(xué)方法與手段”、“教學(xué)效果”五個(gè)一級(jí)指標(biāo)組成，合計(jì)100分。另外包含一個(gè)內(nèi)涵不斷豐富的附加特色項(xiàng)目，分值也是100分。在7個(gè)評(píng)估指標(biāo)體系的前100分指標(biāo)項(xiàng)中，各一級(jí)指標(biāo)的權(quán)重有一定的調(diào)整，從2009年開(kāi)始，所有上述5個(gè)一級(jí)指標(biāo)的權(quán)重均為20%，顯得更為均衡，但是在二級(jí)指標(biāo)上存在變化。后100分的附加特色項(xiàng)目從2003年的“課程特色”到“特色、政策支持及輻射共享”，反映出該項(xiàng)指標(biāo)內(nèi)容由簡(jiǎn)單到豐富的演進(jìn)過(guò)程。

指標(biāo)層次結(jié)構(gòu)內(nèi)第一層次的各條指標(biāo)即一級(jí)指標(biāo)，它反映了國(guó)家精品課程的主要屬性和特征，它既是課程的評(píng)價(jià)指標(biāo)，又是二級(jí)指標(biāo)的評(píng)價(jià)對(duì)象。第二層次的各條指標(biāo)即二級(jí)指標(biāo)，是一級(jí)指標(biāo)的主要屬性的反映。其中前一部分綜合評(píng)估共設(shè)了5個(gè)一級(jí)指標(biāo)，15個(gè)二級(jí)指標(biāo)和主要觀測(cè)點(diǎn)，基本上涵蓋了課程計(jì)劃的全部過(guò)程，后一部分特色及政策支持部分又彌補(bǔ)了綜合評(píng)估部分。在評(píng)價(jià)實(shí)施過(guò)程中，將某些評(píng)價(jià)觀測(cè)點(diǎn)細(xì)化，形成符合自己省市特色和課程建設(shè)目標(biāo)的評(píng)估指標(biāo)體系。

(3) 評(píng)價(jià)方式選擇。為了保證評(píng)價(jià)的客觀，精品課程評(píng)價(jià)方式可以綜合問(wèn)卷調(diào)查，小組討論，過(guò)程參與等幾種形式來(lái)考慮，要結(jié)合量化評(píng)價(jià)與質(zhì)性評(píng)價(jià)來(lái)實(shí)施。事實(shí)上，任何一種評(píng)價(jià)方式都不能解決評(píng)價(jià)中的所有問(wèn)題，它們都有自己的優(yōu)點(diǎn)與缺點(diǎn)。因此，從實(shí)踐出發(fā)的精品課程評(píng)價(jià)，應(yīng)該把幾者有效地結(jié)合起來(lái)，形成取長(zhǎng)補(bǔ)短、相互融合的態(tài)勢(shì)，按照評(píng)價(jià)目的和評(píng)價(jià)對(duì)象的不同特點(diǎn)，選擇適當(dāng)?shù)脑u(píng)價(jià)方式，以獲得全面準(zhǔn)確的評(píng)價(jià)結(jié)果。

(4) 指標(biāo)權(quán)重設(shè)定。2010年國(guó)家精品課程評(píng)審標(biāo)準(zhǔn)中沒(méi)有給出各個(gè)觀測(cè)點(diǎn)的權(quán)重，但是權(quán)重的變化會(huì)引起評(píng)價(jià)結(jié)果的變化。因此，為了提升精品課程整體的評(píng)價(jià)質(zhì)量，有必要設(shè)定各個(gè)指標(biāo)的權(quán)重。有關(guān)文獻(xiàn)中比較認(rèn)同集中專(zhuān)家力量利用層次分析法審定指標(biāo)權(quán)重[6]，同時(shí)還要注意專(zhuān)家的專(zhuān)業(yè)組成應(yīng)包括精品課程所在學(xué)科、信息技術(shù)、教育管理學(xué)等領(lǐng)域，并配合使用座談、訪談、觀察等輔助手段慎重設(shè)定權(quán)限。

2 評(píng)價(jià)模型設(shè)計(jì)

一個(gè)好的評(píng)價(jià)系統(tǒng)需要建立在一個(gè)客觀科學(xué)的評(píng)價(jià)模型上。在進(jìn)行評(píng)價(jià)模型設(shè)計(jì)時(shí)，既考慮國(guó)家精品課程評(píng)審方案，又結(jié)合學(xué)校自身特點(diǎn)細(xì)化指標(biāo)項(xiàng)，設(shè)定權(quán)重，確定計(jì)算方法，其目的是使評(píng)價(jià)工作更易于執(zhí)行，評(píng)價(jià)結(jié)果更客觀準(zhǔn)確[7]。

在評(píng)價(jià)系統(tǒng)中，評(píng)價(jià)模型處于核心位置，它將決定選擇那些評(píng)價(jià)主體對(duì)哪些指標(biāo)進(jìn)行評(píng)價(jià)以及采用哪種算法計(jì)算評(píng)價(jià)結(jié)果，系統(tǒng)評(píng)價(jià)模型中各要素及其時(shí)序關(guān)系如圖1所示。

圖1 評(píng)價(jià)模型及時(shí)序圖

2.1 開(kāi)列評(píng)價(jià)指標(biāo)集

評(píng)價(jià)指標(biāo)分為綜合評(píng)審與特色、政策支持及輻射共享兩部分，各100分。評(píng)價(jià)指標(biāo)體系中前一部分計(jì)26項(xiàng)和后一部分3項(xiàng)評(píng)價(jià)觀測(cè)點(diǎn)集，列于表2中。表2的指標(biāo)體系框架主要參考2010年國(guó)家精品課程評(píng)審標(biāo)準(zhǔn)[8]，對(duì)具體評(píng)價(jià)觀測(cè)點(diǎn)做了適當(dāng)調(diào)整，在這套指標(biāo)體系的基礎(chǔ)上做評(píng)價(jià)模型的設(shè)計(jì)工作，具有一定的代表性和應(yīng)用價(jià)值。

2.2 設(shè)定評(píng)價(jià)觀測(cè)點(diǎn)權(quán)重

為了保證精品課程整體質(zhì)量評(píng)價(jià)效果，應(yīng)該組織專(zhuān)家組審定各個(gè)觀測(cè)點(diǎn)的權(quán)重。按照每個(gè)二級(jí)指標(biāo)來(lái)設(shè)定權(quán)重。對(duì)應(yīng)表2中第i個(gè)評(píng)價(jià)觀測(cè)點(diǎn)ai的權(quán)重值ci，可以理解為每一個(gè)評(píng)價(jià)觀測(cè)點(diǎn)在該二級(jí)指標(biāo)下n個(gè)評(píng)價(jià)觀測(cè)點(diǎn)中的重要性體現(xiàn)，則每個(gè)二級(jí)指標(biāo)下的n個(gè)評(píng)價(jià)觀測(cè)點(diǎn)權(quán)重組成權(quán)重向量：

Cj=(ci)1×n

(1)

式(1)中，Cj表示第j個(gè)二級(jí)指標(biāo)的權(quán)重向量；ci表示第j個(gè)二級(jí)指標(biāo)下的第i個(gè)評(píng)價(jià)觀測(cè)點(diǎn)地權(quán)重；n表示第j個(gè)二級(jí)指標(biāo)下評(píng)價(jià)觀測(cè)點(diǎn)的個(gè)數(shù)。

評(píng)價(jià)觀測(cè)點(diǎn)權(quán)重是專(zhuān)家組意志和傾向性的集中體現(xiàn)，它們的設(shè)定是否合理，直接影響精品課程的評(píng)價(jià)結(jié)論。某些二級(jí)指標(biāo)下只有1個(gè)評(píng)價(jià)觀測(cè)點(diǎn)，則權(quán)重為1。

2.3 確定評(píng)分等級(jí)和建立評(píng)價(jià)矩陣

參考國(guó)家《精品課程評(píng)估指標(biāo)體系》中A-E5個(gè)評(píng)分等級(jí)，再設(shè)置評(píng)分等級(jí)對(duì)應(yīng)分值表{A，>=90；B，90～80；C，80～70，D，70～60，E，<60}確定評(píng)分等級(jí)。接下來(lái)選擇各類(lèi)評(píng)價(jià)主體根據(jù)評(píng)估指標(biāo)體系進(jìn)行評(píng)分，建立評(píng)價(jià)矩陣：

Wj=(wi/m)n×5

(2)

式(2)中，Wj表示評(píng)價(jià)主體對(duì)第j個(gè)二級(jí)指標(biāo)的評(píng)價(jià)矩陣，矩陣的一行表示對(duì)某一評(píng)價(jià)觀測(cè)點(diǎn)ai，判定對(duì)應(yīng)評(píng)價(jià)等級(jí)的主體人數(shù)比例[3]；wi表示對(duì)某一評(píng)價(jià)觀測(cè)點(diǎn)ai，評(píng)價(jià)主體分別判定對(duì)應(yīng)5個(gè)評(píng)分等級(jí)的人數(shù)；m表示評(píng)價(jià)主體總數(shù)；i表示評(píng)價(jià)觀測(cè)點(diǎn)序號(hào)；j表示二級(jí)指標(biāo)序號(hào)；n表示二級(jí)指標(biāo)下的評(píng)價(jià)觀測(cè)點(diǎn)個(gè)數(shù)。

2.4 計(jì)算某類(lèi)評(píng)價(jià)主體評(píng)價(jià)分值

(1) 計(jì)算評(píng)價(jià)矩陣W與權(quán)重向量C的積U。計(jì)算矩陣如下：

Uj=Cj×Wj=(ci)1×n×(wi/m)n×5=(uj)1×5

(3)

式(3)中：Uj表示某類(lèi)評(píng)價(jià)主體對(duì)第j個(gè)二級(jí)指標(biāo)的5個(gè)評(píng)分等級(jí)的評(píng)價(jià)向量，即在5個(gè)評(píng)分等級(jí)中，評(píng)價(jià)主體的看法更集中于哪一個(gè)等級(jí)；uj表示評(píng)價(jià)向量Uj的元素，即評(píng)價(jià)主體對(duì)5個(gè)評(píng)分等級(jí)的評(píng)分傾向比例。如法炮制，其他二級(jí)指標(biāo)的評(píng)價(jià)向量也同樣計(jì)算。

(2) 計(jì)算綜合評(píng)價(jià)值S。分別計(jì)算綜合評(píng)審評(píng)價(jià)值S′和政策支持及輻射共享評(píng)價(jià)值S″。

(4)

式(4)中，Mj是第j個(gè)二級(jí)指標(biāo)的分值，如表2所示；K是A、B、C、D、E五個(gè)等級(jí)的系數(shù)，分別為1.0、0.8、0.6、0.4、0.2；根據(jù)國(guó)家《精品課程評(píng)估指標(biāo)體系》設(shè)置的綜合評(píng)審占80%，特色、政策支持及輻射共享占20%的比例，計(jì)算綜合評(píng)價(jià)值S，為精品課程的最后評(píng)分。

S=S′×80%+S″×20%

(3) 計(jì)算精品課程最終評(píng)價(jià)等級(jí)。通過(guò)第1、2步的計(jì)算可以得到各類(lèi)評(píng)價(jià)主體評(píng)價(jià)精品課程的最后評(píng)分，再根據(jù)各類(lèi)評(píng)價(jià)主體的表決權(quán)重計(jì)算精品課程最終評(píng)分，表1所示是本校針對(duì)精品課程評(píng)估由專(zhuān)家討論制定的評(píng)價(jià)主體表決權(quán)重表。

表1 評(píng)價(jià)主體的表決權(quán)重表

再根據(jù)上述評(píng)分等級(jí)和對(duì)應(yīng)分值表將量化的評(píng)分結(jié)果轉(zhuǎn)化成定性的評(píng)價(jià)等級(jí)。

表2 精品課程評(píng)價(jià)指標(biāo)及等級(jí)記錄表

續(xù)表2

一級(jí)指標(biāo)二級(jí)指標(biāo)評(píng)價(jià)觀測(cè)點(diǎn)三級(jí)指標(biāo)及其權(quán)重(ai,ci)i=1,2,…,29分值(Mj)j=1,2,…,15評(píng)價(jià)等級(jí)ABCDE1.00.80.60.40.2教學(xué)方法與手段20分教學(xué)設(shè)計(jì)教學(xué)理念(a18,c18=0.55)教學(xué)設(shè)計(jì)(a19,c19=0.45)8分1031241351254733151800教學(xué)方法與教學(xué)手段多種教學(xué)方法的使用(a20,c20=0.35)使用效果(a21,c21=0.35)信息技術(shù)的應(yīng)用(a22,c22=0.30)12分1031291381351461263716292597000教學(xué)效果20分同行及校內(nèi)督導(dǎo)組評(píng)價(jià)校外專(zhuān)家評(píng)價(jià)與聲譽(yù)(a23,c23=0.50)校內(nèi)督導(dǎo)組評(píng)價(jià)與聲譽(yù)(a24,c24=0.50)4分921101281126368171000學(xué)生評(píng)教學(xué)生評(píng)價(jià)意見(jiàn)(a25,c25=1)8分12911636190錄像資料評(píng)價(jià)課堂實(shí)錄(a26,c26=1)8分10515032130特色、政策支持及輻射共享專(zhuān)家依據(jù)《2010年度“國(guó)家精品課程”申報(bào)表》所報(bào)特色及創(chuàng)新點(diǎn)打分(a27,c27=1)40分12712135170所在學(xué)校支持鼓勵(lì)精品課程建設(shè)的政策措施得力(a28,c28=1)30分13011842100輻射共享措施有力,未來(lái)建設(shè)計(jì)劃可行(a29,c29=1)30分10014542130

3 評(píng)價(jià)系統(tǒng)智能功能評(píng)析

高校精品課程評(píng)價(jià)系統(tǒng)的主要功能是進(jìn)行評(píng)價(jià)主體的信息注冊(cè)、評(píng)價(jià)主體表決權(quán)重設(shè)定、評(píng)價(jià)主體評(píng)分?jǐn)?shù)據(jù)采集、評(píng)價(jià)指標(biāo)及評(píng)價(jià)觀測(cè)點(diǎn)分值和權(quán)重設(shè)定以及評(píng)價(jià)結(jié)果計(jì)算、查詢(xún)、統(tǒng)計(jì)。要實(shí)現(xiàn)評(píng)價(jià)系統(tǒng)的智能化，則其功能應(yīng)該隨評(píng)價(jià)需求的動(dòng)態(tài)變化而自動(dòng)調(diào)整，這就要求在分析設(shè)計(jì)時(shí)采用基礎(chǔ)數(shù)據(jù)項(xiàng)活動(dòng)設(shè)置的思路，并在設(shè)計(jì)時(shí)對(duì)一些主要因子預(yù)留擴(kuò)展空間[9]。

(1) 靈活設(shè)置基礎(chǔ)數(shù)據(jù)項(xiàng)。對(duì)一些和評(píng)價(jià)計(jì)算相關(guān)的基礎(chǔ)數(shù)據(jù)，如不同評(píng)價(jià)主體類(lèi)別對(duì)應(yīng)的表決權(quán)重不相同，其值直接影響評(píng)價(jià)主體類(lèi)別對(duì)整個(gè)評(píng)價(jià)分值的貢獻(xiàn)度，就不能將分值在計(jì)算公式中做“死”。在進(jìn)行數(shù)據(jù)庫(kù)結(jié)構(gòu)設(shè)計(jì)時(shí)，應(yīng)該設(shè)計(jì)評(píng)價(jià)主體類(lèi)別、評(píng)價(jià)主體類(lèi)別表決權(quán)重兩個(gè)數(shù)據(jù)項(xiàng)并關(guān)聯(lián)之，便于以后評(píng)價(jià)政策發(fā)生變化時(shí)可以通過(guò)微調(diào)表決權(quán)重或增加評(píng)價(jià)主體類(lèi)別及對(duì)應(yīng)權(quán)重來(lái)應(yīng)對(duì)變化。同理，五個(gè)評(píng)分等級(jí)A、B、C、D、E所對(duì)應(yīng)的百分制分?jǐn)?shù)段也應(yīng)該活動(dòng)設(shè)置?？傊性u(píng)價(jià)計(jì)算需要用到的基本數(shù)據(jù)，都要做“活”，而不能因?yàn)橐恍┚植啃枨笞兓瘜?duì)系統(tǒng)“大動(dòng)干戈”而無(wú)法使用。

(2) 人性化的容錯(cuò)設(shè)計(jì)。評(píng)價(jià)工具的基礎(chǔ)數(shù)據(jù)大部分來(lái)自人工錄入，難免不發(fā)生一些有意無(wú)意的錯(cuò)誤。在進(jìn)行設(shè)計(jì)時(shí)，要盡可能考慮到未來(lái)可能發(fā)生的錯(cuò)誤，在一些關(guān)鍵環(huán)節(jié)給予出錯(cuò)提示，再次確認(rèn)，自動(dòng)中斷等形式的警示。比如設(shè)定評(píng)價(jià)觀測(cè)點(diǎn)權(quán)重值時(shí)，一個(gè)二級(jí)指標(biāo)下的n個(gè)評(píng)價(jià)觀測(cè)點(diǎn)權(quán)重之和為1，當(dāng)不等于1時(shí)，系統(tǒng)就應(yīng)該給出出錯(cuò)提示，以幫助識(shí)別并改正錯(cuò)誤。

(3) 智能判斷非法評(píng)價(jià)結(jié)果。評(píng)價(jià)工作中雖然制定了嚴(yán)格的紀(jì)律規(guī)章，但終究是以評(píng)價(jià)主體對(duì)客體的主觀評(píng)價(jià)為主，難免在評(píng)價(jià)過(guò)程中出現(xiàn)虛假和舞弊數(shù)據(jù)，那么這種靠制度不能完全約束的弊端可以通過(guò)技術(shù)手段加以彌補(bǔ)。通過(guò)有針對(duì)性地生成非法數(shù)據(jù)特征庫(kù)，對(duì)一些選項(xiàng)類(lèi)同或具有某種規(guī)律性的評(píng)價(jià)數(shù)據(jù)進(jìn)行智能篩查和分析，區(qū)別處理，提高評(píng)價(jià)結(jié)果的可信度。

(4) 智能處理統(tǒng)計(jì)評(píng)價(jià)結(jié)果。系統(tǒng)根據(jù)評(píng)價(jià)主體的評(píng)分記錄，設(shè)計(jì)算法自動(dòng)計(jì)算評(píng)價(jià)分值給出評(píng)價(jià)結(jié)果。并針對(duì)不同層次，不同類(lèi)別的使用者設(shè)計(jì)不同內(nèi)容選項(xiàng)的查詢(xún)、統(tǒng)計(jì)和匯總輸出。這種靈活的查詢(xún)統(tǒng)計(jì)既能實(shí)現(xiàn)個(gè)性化的查詢(xún)需求又能實(shí)現(xiàn)數(shù)據(jù)的分級(jí)保密。

4 在線評(píng)價(jià)實(shí)例解析

評(píng)價(jià)系統(tǒng)可以實(shí)現(xiàn)各類(lèi)評(píng)價(jià)主體在線評(píng)價(jià)精品課程，評(píng)價(jià)的過(guò)程趨于透明，評(píng)價(jià)結(jié)果趨于公開(kāi)，可供精品課程的使用者和建設(shè)者參考。下面以本?！敖y(tǒng)計(jì)學(xué)”精品課程評(píng)價(jià)為例對(duì)系統(tǒng)的評(píng)價(jià)過(guò)程進(jìn)行解析。

(1) 基礎(chǔ)數(shù)據(jù)設(shè)置。在評(píng)價(jià)前，系統(tǒng)根據(jù)表1設(shè)置“統(tǒng)計(jì)學(xué)”精品課程評(píng)價(jià)主體類(lèi)別、評(píng)價(jià)主體類(lèi)別表決權(quán)重和最少評(píng)價(jià)人數(shù)；根據(jù)表2設(shè)置各級(jí)評(píng)價(jià)指標(biāo)及其權(quán)重以及A、B、C、D、E5個(gè)等級(jí)。

(2) 評(píng)價(jià)人員登錄系統(tǒng)在線評(píng)分。為簡(jiǎn)單起見(jiàn)，此例只選擇了一類(lèi)評(píng)價(jià)主體——300名學(xué)生參與精品課程評(píng)價(jià)。學(xué)生在登錄系統(tǒng)時(shí)，系統(tǒng)自動(dòng)識(shí)別評(píng)價(jià)者的類(lèi)別并自動(dòng)賦給表決權(quán)重。每個(gè)學(xué)生根據(jù)對(duì)精品課程的判斷，在線填寫(xiě)評(píng)價(jià)等級(jí)記錄表(表2)，即選定表中每個(gè)評(píng)價(jià)觀測(cè)點(diǎn)對(duì)應(yīng)的評(píng)價(jià)等級(jí)，表2中每個(gè)評(píng)價(jià)觀測(cè)點(diǎn)對(duì)應(yīng)5個(gè)等級(jí)下的數(shù)字表示選定對(duì)應(yīng)等級(jí)的學(xué)生人數(shù)。

(3) 異常評(píng)分處理。各類(lèi)評(píng)價(jià)主體在在線評(píng)分時(shí)，有可能帶有主觀傾向，評(píng)分表現(xiàn)異常。比如學(xué)生在評(píng)分時(shí)，可能由于對(duì)任課教師不滿或?qū)υ撻T(mén)課程不感興趣，對(duì)表2中的二十幾個(gè)評(píng)價(jià)指標(biāo)項(xiàng)全評(píng)最差，反之，全評(píng)最優(yōu)，系統(tǒng)需要預(yù)先考慮到這些異常情況，設(shè)計(jì)評(píng)分異常篩查程序，自動(dòng)過(guò)濾，根據(jù)約定規(guī)則選擇重評(píng)、丟棄、忽略等措施進(jìn)行修正。經(jīng)過(guò)異常評(píng)分處理后的數(shù)據(jù)才進(jìn)入到自動(dòng)計(jì)算環(huán)節(jié)。

(4) 系統(tǒng)自動(dòng)計(jì)算得分。系統(tǒng)根據(jù)前述評(píng)價(jià)模型中的計(jì)算算法對(duì)在線評(píng)分表中獲得的數(shù)據(jù)和已經(jīng)設(shè)置的基礎(chǔ)數(shù)據(jù)進(jìn)行自動(dòng)計(jì)算。以“課程負(fù)責(zé)人與主講教師”這個(gè)二級(jí)指標(biāo)為例進(jìn)行說(shuō)明。

根據(jù)學(xué)生對(duì)該二級(jí)指標(biāo)下3個(gè)評(píng)價(jià)觀測(cè)點(diǎn)的評(píng)分情況建立一個(gè)3行5列的評(píng)價(jià)矩陣

(5)

式(1)中第一行數(shù)值(0.467 0.39 0.137 0.006 0)，即是300學(xué)生中對(duì)“教師風(fēng)范”a1評(píng)價(jià)觀測(cè)點(diǎn)選定五個(gè)等級(jí)的人數(shù)比例，同理得到剩下2行的數(shù)值，分別表示300學(xué)生中對(duì)“學(xué)術(shù)水平”a2和“教學(xué)水平”a3評(píng)價(jià)觀測(cè)點(diǎn)選定五個(gè)等級(jí)的人數(shù)比例。評(píng)價(jià)觀測(cè)點(diǎn)a1-a3的權(quán)重向量為：

(C1)1×3=(0.3 0.35 0.35)

則評(píng)價(jià)向量

(U1)1×5=(C1)1×3×(W1)3×5=(0.393 5 0.364 45 0.206 65 0.035 4 0)

由此可得綜合評(píng)價(jià)分值

如法炮制，可以分別求得前100分其余11項(xiàng)二級(jí)指標(biāo)和后100分3項(xiàng)二級(jí)指標(biāo)的綜合評(píng)價(jià)分值，分別逐項(xiàng)相加得到綜合評(píng)審評(píng)價(jià)值S′和政策支持及輻射共享評(píng)價(jià)值S″，并最終得到該門(mén)精品課程的最后評(píng)分。

5 結(jié)束語(yǔ)

作為一種依據(jù)相對(duì)權(quán)威的指標(biāo)體系，相對(duì)合理而便捷的開(kāi)放式的在線精品課程智能評(píng)價(jià)系統(tǒng)不局限于某一門(mén)精品課程，還可以延展到其他一些課程評(píng)價(jià)上。對(duì)于精品課程評(píng)價(jià)的實(shí)施過(guò)程完全可以利用計(jì)算機(jī)編程，借助互聯(lián)網(wǎng)實(shí)現(xiàn)，并且對(duì)在互聯(lián)網(wǎng)上收集到的評(píng)價(jià)數(shù)據(jù)隨時(shí)保存和有效管理，根據(jù)精品課程評(píng)價(jià)的發(fā)展趨勢(shì)，適時(shí)地修改軟件評(píng)價(jià)模型參數(shù)，也就會(huì)產(chǎn)生不同的評(píng)價(jià)結(jié)果。系統(tǒng)作為一種非單純唯數(shù)據(jù)的評(píng)價(jià)系統(tǒng)，對(duì)于持續(xù)地研究精品課程的評(píng)價(jià)，積累不同時(shí)期的評(píng)價(jià)結(jié)果而用于精品課程研究的分析預(yù)測(cè)，繼而真正發(fā)揮其示范帶頭作用，也具有一定的現(xiàn)實(shí)意義。

[1] 周光禮，張文靜.國(guó)家精品課程建設(shè)七年回望—一個(gè)政策評(píng)價(jià)框架的初步運(yùn)用[J].高等工程教育研究，2010(1)：36-45

[2] 趙小虎.精品課程評(píng)估指標(biāo)體系的比較研究[D].北京：北京中醫(yī)藥大學(xué)碩士學(xué)位論文，2009

[3] 李興敏. 網(wǎng)絡(luò)課程評(píng)價(jià)工具設(shè)計(jì)[J].中國(guó)電化教育，2009，268(5)：72-75

[4] 葛斌，吳志華.課程質(zhì)量評(píng)價(jià)的選擇策略之一：課程效能評(píng)價(jià)[J].教育科學(xué)，2012，28(1)：27-31

[5] 朱捷. 高校課程體系的評(píng)價(jià)指標(biāo)體系的研究[D].上海：華東師范大學(xué)，2007

[6] 郭向勇.基于層次分析法的網(wǎng)絡(luò)課程學(xué)習(xí)評(píng)價(jià)模型[J].電化教育研究，2008，179(3)：72-75

[7] 毛居華，覃文圣，許建華，等.數(shù)字資源評(píng)估體系及其應(yīng)用研究[J].中國(guó)電化教育，2012，304(5)：71-77

[8] 2010年度國(guó)家精品課程評(píng)審指標(biāo)(本科)[DB/OL]. http：∥www.cmu.edu.cn/course2006/jpkc/upl_files/20103211322909.doc，2012-10-25

[9] 李火光.國(guó)家級(jí)精品課程網(wǎng)站網(wǎng)絡(luò)資源評(píng)價(jià)指標(biāo)體系研究及輔助評(píng)價(jià)系統(tǒng)設(shè)計(jì)[DB/OL]. http：∥www.doc88.com/p-40713402359.html

Keywords：quality course；design；intelligence；evaluation system；evaluation index system

Design of Intelligent Evaluation System for Quality Courses

YANGYi1,YULu2

(1.School of Computer Science and Information Engineering, Chongqing Technology and Business University, Chongqing 400067, China；2. School of Mathematics and Statistics, Chongqing Technology and Business University, Chongqing 400067, China)

Quality course construction is an important part in teaching quality and teaching reform project of colleges and universities, each college and university accumulates a certain amount of quality courses and construction experience in these years, however, there is relatively short of results on how to evaluate quality courses.According to the related theory on courses and evaluation, this paper summarizes and analyzes evaluation subject, comprehensive evaluation index, evaluation method, evaluation models and so on of quality course system, constructs fair, objective and effective comprehensive evaluation indicator system based on National Excellent Course Assessment Index System and the real situation of colleges and universities, further gives weight to each indicator, sets up the evaluation model of comprehensive evaluation by the combination of fuzzy comprehensive evaluation and evaluation subject scoring, discusses intelligent function design of the evaluation system, and finally uses real example to illustrate the working process of the evaluation system in order to use information technology to improve the efficiency and credibility of the evaluation work.

1672-058X(2013)10-0096-07

2013-03-13；

2013-04-15.

重慶市教育委員會(huì)項(xiàng)目資助(113063).

楊藝(1971-)，女，副教授，從事數(shù)據(jù)處理、電子商務(wù)技術(shù)研究.

G443

A

責(zé)任編輯：代小紅

校對(duì)田靜