大學(xué)生學(xué)習(xí)成效評(píng)價(jià)模型及實(shí)證研究
——以《網(wǎng)站開發(fā)》課程為例

張 琴

(福州職業(yè)技術(shù)學(xué)院 信息技術(shù)工程系 福建 福州：350108)

關(guān)注高等教育人才培養(yǎng)質(zhì)量，其中一個(gè)重要的環(huán)節(jié)就是關(guān)注學(xué)生的學(xué)習(xí)成效[1]。目前關(guān)于高職學(xué)生學(xué)習(xí)成效評(píng)價(jià)的研究大多數(shù)都沒有單獨(dú)構(gòu)建一個(gè)學(xué)習(xí)成效評(píng)價(jià)的體系進(jìn)行專題研究，而是從教學(xué)效果或質(zhì)量評(píng)價(jià)的角度來談學(xué)習(xí)成效評(píng)價(jià)，這種評(píng)價(jià)方式導(dǎo)致學(xué)習(xí)成效評(píng)價(jià)模式重教師輕學(xué)生、重定量輕定性、重結(jié)果輕過程。這樣做的不良影響是：可能模糊學(xué)生對(duì)學(xué)習(xí)成效評(píng)價(jià)本質(zhì)的認(rèn)識(shí)。誤以為學(xué)習(xí)評(píng)價(jià)是為了證明教育結(jié)果是否與教育目標(biāo)一致，是對(duì)教育結(jié)果進(jìn)行客觀描述，從而不能為教師改進(jìn)教學(xué)方式和學(xué)生改進(jìn)學(xué)習(xí)實(shí)踐提供真實(shí)可靠的信息，甚至有可能提供歪曲的教育信息。建立科學(xué)合理、行之有效的學(xué)習(xí)成效評(píng)價(jià)體系意義重大：一是可以為教師的教學(xué)效果反饋準(zhǔn)確有效的信息，為教師了解自己的教學(xué)效果、改進(jìn)教學(xué)方法提供可靠依據(jù)。二是可以使學(xué)生及時(shí)了解自己學(xué)習(xí)情況和學(xué)習(xí)目標(biāo)之間的差距，以便調(diào)整自己的學(xué)習(xí)方法和努力方向[2]。

1 學(xué)習(xí)成效評(píng)價(jià)體系

1.1 指標(biāo)體系構(gòu)建原則

學(xué)習(xí)成效評(píng)價(jià)是一項(xiàng)復(fù)雜的系統(tǒng)工程，涉及學(xué)習(xí)者的學(xué)習(xí)方法、學(xué)習(xí)習(xí)慣、學(xué)習(xí)策略及教師、學(xué)習(xí)客體等多個(gè)方面[3]。構(gòu)建大學(xué)生學(xué)習(xí)成效評(píng)價(jià)指標(biāo)體系應(yīng)遵守如下原則：第一，可操作性。選取的指標(biāo)必須能收集到相對(duì)準(zhǔn)確的指標(biāo)值；第二，獨(dú)立性。學(xué)習(xí)成效評(píng)價(jià)涉及多個(gè)相互交叉影響的因素，指標(biāo)選取必須相互獨(dú)立；第三、過程性與結(jié)果性評(píng)價(jià)相結(jié)合。大學(xué)生學(xué)習(xí)成效評(píng)價(jià)應(yīng)不僅能反映大學(xué)生學(xué)習(xí)成果，而且能對(duì)大學(xué)生學(xué)習(xí)行為和學(xué)習(xí)過程進(jìn)行綜合評(píng)價(jià)。

1.2 學(xué)習(xí)成效評(píng)價(jià)指標(biāo)體系的確定

大學(xué)生學(xué)習(xí)的出發(fā)點(diǎn)與歸宿是其學(xué)習(xí)成效[4]。為了科學(xué)、合理地評(píng)價(jià)大學(xué)生的學(xué)習(xí)成效，根據(jù)大學(xué)生學(xué)習(xí)成效評(píng)價(jià)指標(biāo)建構(gòu)原則并結(jié)合大學(xué)生學(xué)習(xí)過程特征，提出以知識(shí)學(xué)習(xí)、素質(zhì)提升、實(shí)踐能力為準(zhǔn)則層的大學(xué)生學(xué)習(xí)成效評(píng)價(jià)模型。本文使用三步流程法進(jìn)行指標(biāo)得選取，具體過程如下：首先，大量的文獻(xiàn)調(diào)研。對(duì)CSSCI和SSCI等重要學(xué)術(shù)期刊上有關(guān)學(xué)習(xí)成效研究成果進(jìn)行整理，初步選出40個(gè)指標(biāo)。其次，聘請(qǐng)高等教育學(xué)、管理學(xué)、心理學(xué)、網(wǎng)絡(luò)技術(shù)各專業(yè)的專家，每一專業(yè)3名，合計(jì)12位專家對(duì)指標(biāo)的科學(xué)性、合理性和有效性進(jìn)行評(píng)價(jià)，刪除不合理的指標(biāo)，提出新的合理指標(biāo)，最終保留11個(gè)有效指標(biāo)。最后，利用主成分分析對(duì)指標(biāo)進(jìn)行處理，形成最終的學(xué)習(xí)成效綜合評(píng)價(jià)指標(biāo)，如圖1所示。

圖1 大學(xué)生學(xué)習(xí)成效綜合評(píng)價(jià)指標(biāo)體系

1.3 使用層次分析法確定權(quán)重

根據(jù)圖1的評(píng)價(jià)指標(biāo)設(shè)計(jì)調(diào)查表，請(qǐng)專家對(duì)各層次指標(biāo)間的相對(duì)重要性進(jìn)行評(píng)價(jià)，并采用1～9的比例標(biāo)度構(gòu)造判斷矩陣B

判斷矩陣B的最大特征值對(duì)應(yīng)的特征向量W，經(jīng)過歸一化處理后即為同一層次指標(biāo)對(duì)于上一層次某指標(biāo)相對(duì)重要性的排序權(quán)值[5]。如果B的不一致性不嚴(yán)重，則取B的歸一化后的列向量的平均值作為近似特征向量是合理的。當(dāng)B的不一致性很嚴(yán)重時(shí)所對(duì)應(yīng)的特征向量就不能真實(shí)地反映出各指標(biāo)在評(píng)價(jià)過程中所占的比重，因此，需要對(duì)判斷矩陣進(jìn)行一致性檢驗(yàn)。

通過上面的計(jì)算我們可以得到一組元素相對(duì)其上一層某元素的權(quán)重向量。為了得到最底層中各指標(biāo)對(duì)于目標(biāo)層的權(quán)重，我們需要自上而下將單準(zhǔn)則下的權(quán)重進(jìn)行合成。

設(shè)上層包含A1,A2,…,Am總共m個(gè)元素，它們層次總排序的權(quán)重分別為a1,a2,…,an，其后一層包含n個(gè)元素B1,B2,…,Bn，它們關(guān)于Ai(0≤i≤m)的層次單排序權(quán)重分別為b1i,b2i,…,bni，求B1,B2,…,Bn的層次總排序權(quán)重b1,b2,…,bn的權(quán)重合成的方法為

層次總排序也需要進(jìn)行一致性檢驗(yàn)且檢驗(yàn)方法與單排序一致性檢驗(yàn)大致相同，在這里不作詳細(xì)敘述。

2 學(xué)習(xí)成效的模糊綜合評(píng)價(jià)

糊綜合評(píng)價(jià)能盡可能地對(duì)評(píng)價(jià)對(duì)象的所有影響因素進(jìn)行綜合考慮，從而能從評(píng)價(jià)集合中獲得一個(gè)最佳的評(píng)價(jià)結(jié)果[6]。本研究應(yīng)用多層次模糊綜合評(píng)價(jià)模型對(duì)學(xué)生學(xué)習(xí)成效進(jìn)行評(píng)價(jià)，采用四個(gè)等級(jí)的評(píng)語集，建立評(píng)價(jià)集如下：

V={v1,v2,v3,v4}={優(yōu)，良，中等，差}

由層次分析法運(yùn)算得到各因素集的權(quán)重向量，應(yīng)用Fuzzy合成運(yùn)算進(jìn)行模糊綜合評(píng)價(jià)的過程如下：

其中r1ij表示ui的第i個(gè)元素對(duì)評(píng)價(jià)集第j個(gè)元素的隸屬度，則指標(biāo)集ui的模糊綜合評(píng)價(jià)為：

A1=B1⊕R1

=(b11,b12,…,b15)⊕

=(a11,a12,…,a14)

(1)

A1=(a11,a12,…,a14)即為U=(u1,u2,u3)中指標(biāo)集u1在評(píng)價(jià)集上的模糊子集。同理對(duì)u2,u3，進(jìn)行模糊綜合評(píng)價(jià)，得到所有的二級(jí)模糊綜合評(píng)價(jià)集。

二級(jí)模糊綜合評(píng)價(jià)完成后，進(jìn)行學(xué)習(xí)成效總評(píng)價(jià)，設(shè)指標(biāo)集U=(u1,u2,u3)對(duì)應(yīng)的權(quán)重為：A=(a1,a2,a3)，已求出各指標(biāo)對(duì)應(yīng)的二級(jí)模糊評(píng)價(jià)集為Ai=(ai1,ai2,…,ai4)，i=1,2,3,指標(biāo)集模糊關(guān)系矩陣為：

一級(jí)模糊綜合評(píng)價(jià)：

B=A⊕R

=(a1,a2,a3) ⊕

=(b1,b2,b3,b4)

(2)

即為學(xué)習(xí)成效評(píng)價(jià)結(jié)果在V={v1,v2,v3,v4}={優(yōu)秀，良好，中等，差}上的模糊子集。

3 實(shí)證研究

3.1 調(diào)查意義及過程

《網(wǎng)站開發(fā)》課程集理論性、實(shí)踐性、創(chuàng)新性于一身，授課知識(shí)涵蓋了動(dòng)畫制作、圖像處理、程序設(shè)計(jì)與數(shù)據(jù)庫等內(nèi)容，在傳統(tǒng)的教學(xué)和考核模式下，學(xué)生的實(shí)踐動(dòng)手能力往往達(dá)不到語預(yù)期的效果。某學(xué)?！毒W(wǎng)站開發(fā)》課程采用“以學(xué)生為中心的信息化教學(xué)模式”實(shí)施課堂教學(xué)。應(yīng)用具有“完整性工作流程”的任務(wù)引領(lǐng)式教學(xué)法，任務(wù)設(shè)置由淺入深，每一任務(wù)包含的知識(shí)與技能也分層次，達(dá)到每生有事做，生生能做事的效果。對(duì)該門課程進(jìn)行學(xué)生學(xué)習(xí)成效評(píng)價(jià)，借助項(xiàng)目的開展和實(shí)施，可以提高信息化教學(xué)模式的課堂應(yīng)用率，從而提升教學(xué)質(zhì)量和教學(xué)效果。

本研究對(duì)計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)專業(yè)86名學(xué)生《網(wǎng)站開發(fā)》課程學(xué)習(xí)成效開展了相關(guān)調(diào)查。調(diào)查的方式有相關(guān)授課教師、班主任、輔導(dǎo)員對(duì)學(xué)生學(xué)習(xí)成效相關(guān)指標(biāo)進(jìn)行打分、學(xué)生互評(píng)、學(xué)生自評(píng)及滿意度調(diào)查等。針對(duì)不同的評(píng)價(jià)項(xiàng)對(duì)應(yīng)的評(píng)價(jià)人發(fā)放不同的調(diào)查問卷。通過上述調(diào)查得到該學(xué)校計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)專業(yè)86名學(xué)生學(xué)習(xí)成效基礎(chǔ)數(shù)據(jù)。選擇一大二學(xué)生學(xué)習(xí)成效數(shù)據(jù)作為算例，用來說明大學(xué)生學(xué)習(xí)成效評(píng)價(jià)過程。表2為統(tǒng)計(jì)后計(jì)算出的模糊關(guān)系矩陣。

3.2 評(píng)價(jià)體系權(quán)重確定

表1 二級(jí)指標(biāo)模糊關(guān)系矩陣

為了科學(xué)合理確定學(xué)習(xí)成效評(píng)價(jià)體系權(quán)重，聘請(qǐng)高等教育學(xué)、管理學(xué)、心理學(xué)、網(wǎng)絡(luò)技術(shù)各行專家，每個(gè)專業(yè)各3名，合計(jì)12名專家根據(jù)學(xué)校辦學(xué)理念、發(fā)展定位、計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)專業(yè)人才培養(yǎng)目標(biāo)與課程教學(xué)目標(biāo)對(duì)學(xué)習(xí)成效評(píng)價(jià)體系各級(jí)指標(biāo)的相對(duì)重要性進(jìn)行打分。通過對(duì)打分結(jié)果進(jìn)行整理可以得到判斷矩陣。通過計(jì)算一致性指標(biāo)CR對(duì)判斷矩陣進(jìn)行一致性檢驗(yàn)，最終計(jì)算結(jié)果如表2。

表2 評(píng)價(jià)指標(biāo)綜合權(quán)重及一致性檢驗(yàn)

3.3 學(xué)習(xí)成效綜合評(píng)價(jià)

由表1、表2的數(shù)據(jù)及公式(1)可以求得第一個(gè)一級(jí)評(píng)價(jià)指標(biāo)的評(píng)價(jià)結(jié)果

B1=(0.2120 0.1577 0.2013 0.1689 0.2601)⊕

=(0.2601 0.2601 0.18 0.02)

進(jìn)行歸一化處理得

B1=(0.3611 0.3611 0.25 0.0278)

同理可得

B2=(0.2694 0.2976 0.2756 0.1574)

B3=(0.4276 0.3455 0.2094 0.0175)

利用公式(2)可以求得一級(jí)模糊綜合評(píng)價(jià)為

U=W⊕[B1B2B3]T=

(0.2976 0.3574 0.2756 0.1574)

歸一化處理后為：

U=(0.2735 0.3285 0.2533 0.1447)

由此可知評(píng)價(jià)等級(jí)“良”對(duì)應(yīng)的隸屬度0.3285最大，根據(jù)最大隸屬度原則，該生的學(xué)習(xí)成效綜合評(píng)價(jià)處于良好等級(jí)，該生知識(shí)學(xué)習(xí)情況較為科學(xué)合理，具有較強(qiáng)的自主學(xué)習(xí)能力、溝通交流能力和實(shí)踐應(yīng)用能力。利用調(diào)查數(shù)據(jù)及上述方法對(duì)另外85名學(xué)生的學(xué)習(xí)成效情況進(jìn)行分析，評(píng)價(jià)結(jié)果見表3。

表3 總評(píng)價(jià)結(jié)果及各維度評(píng)價(jià)結(jié)果

從總的評(píng)價(jià)結(jié)果可以得到，學(xué)習(xí)成效達(dá)到優(yōu)秀的學(xué)生占比約7%，良好及以上的學(xué)生占比約27.9%，中等及以上的學(xué)生占比約77.9%。綜合評(píng)價(jià)結(jié)果說明該專業(yè)的學(xué)生基本掌握了網(wǎng)站開發(fā)的基本理論知識(shí)，具備較強(qiáng)的實(shí)踐動(dòng)手能力，自主學(xué)習(xí)能力和溝通交流能力也得到了提高。

實(shí)踐能力方面綜合評(píng)價(jià)結(jié)果顯示良好及以上的占比33.7%，中等及以上的占比89.5%，這與該課程近幾年的教學(xué)方法改革有密切的關(guān)系。網(wǎng)站開發(fā)是一門應(yīng)用性廣、實(shí)踐性強(qiáng)的專業(yè)課程，傳統(tǒng)的“老實(shí)講，學(xué)生聽，學(xué)生做”的被動(dòng)教學(xué)方式教學(xué)效果欠佳。該門課程應(yīng)用任務(wù)驅(qū)動(dòng)下項(xiàng)目化教學(xué)模式，提高了學(xué)生的理論知識(shí)應(yīng)用能力及實(shí)際動(dòng)手操作能力，同時(shí)也激發(fā)學(xué)生的學(xué)習(xí)積極性及對(duì)網(wǎng)站開發(fā)的興趣。素質(zhì)提升方面綜合評(píng)價(jià)結(jié)果顯示良好及以上的占比19.8%，中等及以上的占比65.1%，素質(zhì)提升方面學(xué)習(xí)成效與實(shí)踐能力方面學(xué)習(xí)成效有較大差距，從調(diào)查數(shù)據(jù)分析可知，團(tuán)隊(duì)意識(shí)和敬業(yè)精神達(dá)到中等以上的超過70%，而溝通交流能力達(dá)到中等以上的為62.2%，自主學(xué)習(xí)能力達(dá)到中等以上的僅為33.7%。相比進(jìn)入本科院校的學(xué)生，高職學(xué)生綜合素質(zhì)相對(duì)較低，尤其表現(xiàn)在學(xué)習(xí)主動(dòng)性、學(xué)習(xí)策略、學(xué)習(xí)習(xí)慣等方面。教師可以從重視專業(yè)思想教育、培養(yǎng)職業(yè)認(rèn)同感及專業(yè)興趣入手，以教師引導(dǎo)為主，注重對(duì)學(xué)生學(xué)習(xí)方法和學(xué)習(xí)習(xí)慣的訓(xùn)練和培養(yǎng)，提高學(xué)生的自主學(xué)習(xí)能力。

4 結(jié)論

科學(xué)合理評(píng)價(jià)大學(xué)生學(xué)習(xí)成效是高等職業(yè)教育實(shí)現(xiàn)從規(guī)模擴(kuò)張轉(zhuǎn)向內(nèi)涵式發(fā)展的關(guān)鍵理論和實(shí)踐問題。本文摒棄了傳統(tǒng)的從教學(xué)質(zhì)量評(píng)價(jià)的角度來研究學(xué)習(xí)效果的方法，構(gòu)建了以知識(shí)學(xué)習(xí)、素質(zhì)提升、實(shí)踐能力為評(píng)價(jià)維度的大學(xué)生學(xué)習(xí)成效評(píng)價(jià)指標(biāo)體系，并結(jié)合使用模糊綜合評(píng)價(jià)的方法對(duì)大學(xué)生學(xué)習(xí)成效進(jìn)行綜合評(píng)價(jià)。利用某個(gè)大學(xué)網(wǎng)站開發(fā)課程學(xué)習(xí)成效調(diào)查的基礎(chǔ)數(shù)據(jù)進(jìn)行實(shí)證研究，研究結(jié)果顯示學(xué)生的學(xué)習(xí)成效基本達(dá)到了預(yù)期效果，同時(shí)也發(fā)現(xiàn)了一些需要加強(qiáng)的方面。實(shí)證研究表明，本文中的評(píng)價(jià)模型對(duì)大學(xué)生學(xué)習(xí)成效的系統(tǒng)分析具有科學(xué)性、靈敏性和診斷性，可以為大學(xué)生學(xué)習(xí)成效評(píng)價(jià)實(shí)踐提供合理的計(jì)量和考核標(biāo)準(zhǔn)。

[1] 徐明慧,李漢邦.美國大學(xué)學(xué)習(xí)效果評(píng)估的演化與新發(fā)展[J].中國高等教育,2011，(Z1):57-59.

[2] Muhammad Asif, Muhammad Usman Awan.A model for total quality management in higher education[J]. Quality & Quantity, 2013,(4):1883-1904.

[3] Assessment of Higher Education Learning Outcomes[AHELO].Organization for Economic Co-operation and Development. http:∥www.oecd.org/dataoecd/37/49/45755875.pdf.2011.

[4] 孫睿君,沈若萌,管瀏斯.大學(xué)生學(xué)習(xí)成效的影響因素研究[J].國家教育行政學(xué)院學(xué)報(bào),2012，(9):65-71.

[5] 張炳江.層次分析法及其應(yīng)用案例[M].北京：電子工業(yè)出版社,2014.

[6] 陳正偉.綜合評(píng)價(jià)技術(shù)及應(yīng)用[M].成都：西南財(cái)經(jīng)大學(xué)出版社,2013.