基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系研究

季秀霞 李立早

摘要：教學(xué)質(zhì)量評(píng)價(jià)是高職院校教學(xué)質(zhì)量監(jiān)控體系的重要組成部分。信息時(shí)代，借助大數(shù)據(jù)的支持構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系是必然趨勢(shì)?；诖?，從“搜集數(shù)據(jù)、分析數(shù)據(jù)、利用數(shù)據(jù)”的角度展開研究，提出一種基于大數(shù)據(jù)的教學(xué)質(zhì)量評(píng)價(jià)PSRS模型，指出影響教學(xué)質(zhì)量的關(guān)鍵數(shù)據(jù)來源于過程分析、主體屬性、角色認(rèn)知和環(huán)境因素，并在此基礎(chǔ)上構(gòu)建了基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。該評(píng)價(jià)體系可以對(duì)大數(shù)據(jù)進(jìn)行深度挖掘和分析，全面合理地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)價(jià)。

關(guān)鍵詞：高職院校;教學(xué)質(zhì)量評(píng)價(jià);PSRS模型;大數(shù)據(jù)

基金項(xiàng)目：江蘇省高等教育學(xué)會(huì)評(píng)估委員會(huì)重點(diǎn)資助課題“大數(shù)據(jù)在高校教學(xué)質(zhì)量評(píng)價(jià)體系中的運(yùn)用研究”（項(xiàng)目編號(hào)：2018-206）;江蘇省高校哲學(xué)社會(huì)科學(xué)研究項(xiàng)目“基于能力目標(biāo)矩陣的高職電子信息類綜合課程改革的研究”（項(xiàng)目編號(hào)：2016SJB880051）

作者簡(jiǎn)介：季秀霞，女，南京信息職業(yè)技術(shù)學(xué)院電子信息學(xué)院副教授，博士，主要研究方向?yàn)閿?shù)據(jù)挖掘和職業(yè)教育;李立早，男，南京信息職業(yè)技術(shù)學(xué)院電子信息學(xué)院副教授，主要研究方向?yàn)楦叩嚷殬I(yè)教育。

中圖分類號(hào)：G712

文獻(xiàn)標(biāo)識(shí)碼：A

文章編號(hào)：1674-7747（ 2020） 01-0087-06

教學(xué)質(zhì)量評(píng)價(jià)是高職院校教學(xué)質(zhì)量監(jiān)控體系的重要組成部分，客觀公正合理的教學(xué)質(zhì)量評(píng)價(jià)體系可以促使教師關(guān)注學(xué)生，更新教學(xué)觀念，改進(jìn)教學(xué)方法，提高教學(xué)水平。同時(shí)，教學(xué)質(zhì)量評(píng)價(jià)也是學(xué)校全面了解教學(xué)的運(yùn)行狀態(tài)和優(yōu)化學(xué)校教務(wù)管理的重要依據(jù)。

一、高職院校教學(xué)質(zhì)量評(píng)價(jià)的現(xiàn)狀

目前，高職院校主要從學(xué)生、同行、督導(dǎo)和領(lǐng)導(dǎo)對(duì)教師的課堂教學(xué)質(zhì)量進(jìn)行評(píng)價(jià)，將四個(gè)評(píng)價(jià)分?jǐn)?shù)加權(quán)平均后作為教師的教學(xué)質(zhì)量評(píng)價(jià)結(jié)果。盡管這種教學(xué)質(zhì)量評(píng)價(jià)系統(tǒng)是信息時(shí)代的產(chǎn)物，可以提高教學(xué)管理的效率，但是在實(shí)際應(yīng)用中卻存在一定的問題。由于學(xué)生全程參與教學(xué)過程，所以學(xué)生評(píng)價(jià)較全面，但學(xué)生的主觀性較強(qiáng)，尤其當(dāng)教師要求較嚴(yán)、課程較難、學(xué)生成績(jī)不理想的時(shí)候，可能會(huì)出現(xiàn)不客觀、不公正的評(píng)價(jià)。有研究發(fā)現(xiàn)：教師給學(xué)生的評(píng)分是影響學(xué)生評(píng)教的重要因素，教師評(píng)分的松緊對(duì)學(xué)生評(píng)教有中等或中等以上的影響[1]。由于同行對(duì)課程知識(shí)點(diǎn)和概念的理解更加準(zhǔn)確透徹，評(píng)價(jià)分?jǐn)?shù)應(yīng)該更加合理，但是礙于情面，目前同行評(píng)價(jià)幾乎流于形式。督導(dǎo)評(píng)價(jià)和領(lǐng)導(dǎo)評(píng)價(jià)關(guān)注更多的是教師的上課準(zhǔn)備情況和課堂狀態(tài)等，但由于聽課次數(shù)有限，無法全程跟蹤教學(xué)課程，用有限的幾節(jié)課認(rèn)定教師的教學(xué)素質(zhì)顯然不夠客觀全面。同時(shí)，由于大多數(shù)課堂教學(xué)質(zhì)量評(píng)價(jià)結(jié)果是在期末課程結(jié)束時(shí)公布，沒有辦法對(duì)評(píng)價(jià)結(jié)果進(jìn)行及時(shí)總結(jié)和利用，無法根據(jù)評(píng)價(jià)結(jié)果對(duì)課堂教學(xué)進(jìn)行改進(jìn)，所以教學(xué)質(zhì)量評(píng)價(jià)也沒有發(fā)揮“以評(píng)促教”作用。

從上述分析可以看出，高職院校的傳統(tǒng)教學(xué)質(zhì)量評(píng)價(jià)體系存在一定的主觀性與片面性。例如：評(píng)價(jià)主體相對(duì)單一、評(píng)價(jià)指標(biāo)缺乏層次、評(píng)價(jià)實(shí)施過程缺乏客觀性、評(píng)價(jià)結(jié)果缺乏有效利用等。這些問題容易使評(píng)價(jià)流于形式，脫離評(píng)價(jià)初衷。針對(duì)上述普遍存在的教學(xué)質(zhì)量評(píng)價(jià)體系的現(xiàn)狀，許多高職院校進(jìn)行了積極的、有益的改革。例如：曹潔提出一種基于AHP層次分析法的教學(xué)質(zhì)量模糊評(píng)價(jià)方式閉，從教師課前準(zhǔn)備、課堂教學(xué)規(guī)范和課后學(xué)生反饋三個(gè)環(huán)節(jié)，通過數(shù)據(jù)分析來構(gòu)建教學(xué)質(zhì)量評(píng)價(jià)體系，具有一定的合理性和科學(xué)性。但是，這種評(píng)價(jià)方式僅僅是一種簡(jiǎn)單的量化行為，根據(jù)制定的評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行簡(jiǎn)單的打分和匯總，并不能準(zhǔn)確反應(yīng)教師的個(gè)人教學(xué)水平。陳以藏提出一種教考分離、以成績(jī)作為評(píng)教依據(jù)的課堂教學(xué)質(zhì)量評(píng)價(jià)體系[3]。因?yàn)橐詷?biāo)準(zhǔn)化考試成績(jī)作為教學(xué)質(zhì)量評(píng)價(jià)的標(biāo)準(zhǔn)，可以有效避免傳統(tǒng)評(píng)教中因個(gè)人主觀因素出現(xiàn)的不公正現(xiàn)象，但是這種評(píng)價(jià)體系的弊端也顯而易見。其一，由于成績(jī)是唯一的評(píng)價(jià)標(biāo)準(zhǔn)，所以可能導(dǎo)致應(yīng)試教育的盛行，并不利于學(xué)生其他能力的培養(yǎng)和思想道德教育;其二，由于標(biāo)準(zhǔn)化考試是在課程結(jié)束后進(jìn)行，所以評(píng)價(jià)的結(jié)果并不能發(fā)揮導(dǎo)向和激勵(lì)的作用，教與學(xué)不能形成一個(gè)良好的閉環(huán)系統(tǒng)，對(duì)教學(xué)質(zhì)量的提高和學(xué)生學(xué)習(xí)能力的培養(yǎng)起不到積極作用。牛津大學(xué)認(rèn)為，討論評(píng)價(jià)結(jié)果可能是整個(gè)評(píng)價(jià)過程中最重要的一步[4]，所以對(duì)教學(xué)質(zhì)量評(píng)價(jià)的結(jié)果進(jìn)行討論并及時(shí)反饋給教師和學(xué)生，教師才能根據(jù)評(píng)價(jià)的結(jié)果反思教學(xué)行為，發(fā)現(xiàn)不足，提高教學(xué)能力，學(xué)生才能根據(jù)評(píng)價(jià)的結(jié)果反思學(xué)習(xí)行為，發(fā)現(xiàn)薄弱環(huán)節(jié)，改進(jìn)學(xué)習(xí)方法。

隨著大數(shù)據(jù)時(shí)代的到來，各高職院校經(jīng)過多年的信息化建設(shè)，已經(jīng)形成了較好的信息技術(shù)基礎(chǔ)設(shè)施，積累了大量與教學(xué)質(zhì)量相關(guān)的數(shù)據(jù)。利用大數(shù)據(jù)可以評(píng)估教學(xué)質(zhì)量，進(jìn)行關(guān)系分析、診斷問題、預(yù)測(cè)趨勢(shì)等，同樣，利用大數(shù)據(jù)可以對(duì)已經(jīng)出現(xiàn)的問題或即將出現(xiàn)的問題進(jìn)行評(píng)判和解決[5]。通過對(duì)大數(shù)據(jù)的挖掘與分析，能夠全面、合理地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)價(jià)，對(duì)影響教學(xué)質(zhì)量的關(guān)鍵因素挖掘分析，才能更好地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)估和預(yù)測(cè)，從而有效提高高職院校的教學(xué)質(zhì)量。借助大數(shù)據(jù)的支持構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系是必然趨勢(shì)。

二、基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量體系構(gòu)建思路

本文提出的基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系按照“搜集數(shù)據(jù)、分析數(shù)據(jù)、利用數(shù)據(jù)”的基本思路展開研究。首先，按照數(shù)據(jù)產(chǎn)生的主體及場(chǎng)所搜集相關(guān)的數(shù)據(jù)。其次，用聚類、數(shù)據(jù)挖掘等方法及工具，挖掘與教學(xué)質(zhì)量評(píng)價(jià)相關(guān)的數(shù)據(jù)，并研究各類數(shù)據(jù)的類型及其之間的關(guān)系，運(yùn)用統(tǒng)計(jì)分析法、內(nèi)容分析法、話語分析法將碎片化的數(shù)據(jù)加以分析、整理和篩選，獲得關(guān)于教學(xué)質(zhì)量的多種規(guī)律性數(shù)據(jù)和特征。最后，構(gòu)建基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。

基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系的具體構(gòu)建思路如圖1所示。

（一）搜集數(shù)據(jù)

建立基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系的前提是獲取有效的關(guān)于教學(xué)質(zhì)量的大數(shù)據(jù)信息。高等教育質(zhì)量評(píng)價(jià)體系的數(shù)據(jù)來源呈現(xiàn)多元化，既包括按照數(shù)據(jù)產(chǎn)生的主體生成的相關(guān)數(shù)據(jù)，如學(xué)生家庭數(shù)據(jù)、師資隊(duì)伍資源、科學(xué)研究水平、人才培養(yǎng)目標(biāo)、課程設(shè)置等信息，也包括按照數(shù)據(jù)產(chǎn)生的場(chǎng)所生成的數(shù)據(jù)，如課堂教學(xué)視頻、課堂討論記錄、學(xué)生圖書館打卡記錄、借閱圖書記錄、圖書館監(jiān)控視頻等信息。這里面既有以文字信息為主的結(jié)構(gòu)化數(shù)據(jù)，也有以圖片信息為主的半結(jié)構(gòu)化數(shù)據(jù)，更有以視頻、音頻為主的非結(jié)構(gòu)化數(shù)據(jù)。數(shù)據(jù)量大，更新速度快，每時(shí)每刻都在產(chǎn)生，數(shù)據(jù)呈現(xiàn)出大數(shù)據(jù)特有的4V特性，即海量性（Volume）、多樣性（Varietv）、高速性（Velocity）、價(jià)值性（Value），因此可以基于大數(shù)據(jù)構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系[6]。

在搜集數(shù)據(jù)時(shí)，必須深入了解高職院校教學(xué)管理的規(guī)章制度和教學(xué)活動(dòng)的各個(gè)環(huán)節(jié)和所有的場(chǎng)所，將學(xué)校的教務(wù)管理系統(tǒng)、學(xué)生管理系統(tǒng)、師資管理系統(tǒng)、科研管理系統(tǒng)、人事管理系統(tǒng)等相關(guān)數(shù)據(jù)庫有機(jī)結(jié)合在一起，建立教學(xué)質(zhì)量評(píng)價(jià)的數(shù)據(jù)采集與獲取的平臺(tái)。

（二）分析數(shù)據(jù)

對(duì)大數(shù)據(jù)進(jìn)行多維度、深層次的挖掘與科學(xué)分析.發(fā)現(xiàn)大數(shù)據(jù)背后隱含的關(guān)系與價(jià)值，有助于將高職院校教學(xué)質(zhì)量評(píng)價(jià)體系從基于小樣本數(shù)據(jù)或片段化信息的推測(cè)，轉(zhuǎn)向基于全方位、全過程數(shù)據(jù)的證據(jù)性決策。將數(shù)據(jù)挖掘技術(shù)應(yīng)用在教學(xué)質(zhì)量評(píng)價(jià)系統(tǒng)中，從采集到的海量數(shù)據(jù)中提取或挖掘出對(duì)教學(xué)質(zhì)量評(píng)價(jià)有用的知識(shí)，對(duì)提高管理者的決策能力和管理水平都具有深遠(yuǎn)的意義。

在分析數(shù)據(jù)時(shí)，首先，采用可視化分析技術(shù)將大數(shù)據(jù)的特點(diǎn)直觀地呈現(xiàn)出來，將單一表格變?yōu)樨S富多彩的圖形模式。其次，用聚類、數(shù)據(jù)挖掘的方法，挖掘與教學(xué)質(zhì)量評(píng)價(jià)相關(guān)的數(shù)據(jù)，并研究各類數(shù)據(jù)的類型及其之間的關(guān)系。最后，運(yùn)用統(tǒng)計(jì)分析法、內(nèi)容分析法、話語分析法將碎片化的數(shù)據(jù)加以分析、整理和篩選，獲得關(guān)于教學(xué)質(zhì)量的多種規(guī)律性數(shù)據(jù)和特征。

（三）利用數(shù)據(jù)

本部分以學(xué)生為中心，即以學(xué)生的學(xué)習(xí)和發(fā)展為中心，實(shí)現(xiàn)從“以教為中心”向“以學(xué)為中心”轉(zhuǎn)變，構(gòu)建基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。在建立評(píng)價(jià)體系時(shí)需要設(shè)計(jì)評(píng)價(jià)指標(biāo)，設(shè)計(jì)的指標(biāo)應(yīng)該簡(jiǎn)單明了、便于收集、并且具有一定的代表性，各個(gè)指標(biāo)之間應(yīng)該有一定的邏輯關(guān)系，指標(biāo)選取時(shí)的計(jì)算量度和計(jì)算方法必須統(tǒng)一，要有很強(qiáng)的現(xiàn)實(shí)可操作性和可比較性。

在利用數(shù)據(jù)時(shí)，可以采用層次分析法（Analytical Hierarchv Process，AHP），將與決策相關(guān)的元素分解成目標(biāo)、準(zhǔn)則、方案等層次，在此基礎(chǔ)之上進(jìn)行定性和定量分析。

三、基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)PSRS模型

管理學(xué)中的“MARS模型”認(rèn)為，動(dòng)機(jī)（Motivation）、能力（Ability）、角色認(rèn)知（Role Perception）和環(huán)境因素（Situational Factor）是直接影響公司員工的自發(fā)行為和最終績(jī)效的四個(gè)因素。其中，動(dòng)機(jī)是影響個(gè)人自發(fā)行為方向、強(qiáng)度和持久性的內(nèi)在力量;能力是完成某項(xiàng)任務(wù)所需要的自然天賦和后天知識(shí);角色認(rèn)知是個(gè)人要有清晰的角色認(rèn)知，同時(shí)能得到關(guān)于職位工作的描述和相關(guān)培訓(xùn);環(huán)境因素是超出員工的控制，制約或促進(jìn)員工行為和績(jī)效的條件?！癕ARS模型”認(rèn)為：擁有較高的動(dòng)機(jī)和能力，又明晰角色認(rèn)知，只要環(huán)境支持他們的任務(wù)目標(biāo)，員工就可以取得良好的績(jī)效。

員工行為和結(jié)果的“MARS模型”，如圖2所示。

對(duì)應(yīng)到教學(xué)質(zhì)量評(píng)價(jià)體系，教學(xué)質(zhì)量的好壞同樣取決于上述四個(gè)要素。其中，動(dòng)機(jī)和能力是決定教學(xué)質(zhì)量的主要內(nèi)部因素，動(dòng)機(jī)可以體現(xiàn)在學(xué)生的日常生活規(guī)律和教師的教研狀態(tài)數(shù)據(jù)中，即過程分析。能力可以體現(xiàn)在教師和學(xué)生的自身素質(zhì)中，即主體屬性。角色認(rèn)知和環(huán)境因素是影響教學(xué)質(zhì)量的外部因素。為此，本文建立了一個(gè)基于大數(shù)據(jù)的教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”，即影響教學(xué)質(zhì)量評(píng)價(jià)的數(shù)據(jù)主要來源于過程分析（Process Analvsis）、主體屬性（Subject properties）、角色認(rèn)知（Role Perception）和環(huán)境因素（SituationalFactor），它們共同影響著教學(xué)質(zhì)量的產(chǎn)出，即學(xué)生的績(jī)效評(píng)價(jià)。教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”如圖3所示。

（一）過程分析

“PSRS模型”中的過程分析對(duì)應(yīng)于“MARS模型”中的動(dòng)機(jī)（即努力的方向、強(qiáng)度、持續(xù)性）。作為教與學(xué)的主體，教師與學(xué)生的努力方向、工作與學(xué)習(xí)的強(qiáng)度、投入的精力以及持續(xù)性對(duì)教學(xué)質(zhì)量的績(jī)效產(chǎn)出起著決定性的因素，這些可以通過分析學(xué)生的日常生活規(guī)律和教師的授課狀態(tài)數(shù)據(jù)得到結(jié)論。學(xué)生的日常生活規(guī)律主要包括學(xué)生的課堂出勤情況、操場(chǎng)鍛煉情況、作業(yè)提交情況、圖書館打卡記錄情況等等，教師的授課狀態(tài)包括教學(xué)準(zhǔn)備、教學(xué)內(nèi)容、教學(xué)方法、教學(xué)管理等等。

（二）主體屬性

“PSRS模型”中的主體屬性對(duì)應(yīng)于“MARS模型”中的能力。由于教學(xué)質(zhì)量評(píng)價(jià)最終的主體是教師和學(xué)生，所以教師和學(xué)生的能力對(duì)最終的績(jī)效產(chǎn)出至關(guān)重要。能力包括完成某項(xiàng)任務(wù)所需要的自然天賦和后天知識(shí)，這些可以從學(xué)生的性別、家庭、愛好、高考成績(jī)、專業(yè)成績(jī)等屬性，教師的性別、年齡、職稱、學(xué)歷、學(xué)位、教齡、科研業(yè)績(jī)等屬性中一窺全豹。在教與學(xué)的過程中，能力是一項(xiàng)重要的考慮因素，教師應(yīng)該根據(jù)學(xué)生的能力因材施教，增強(qiáng)其績(jī)效表現(xiàn)。

（三）角色認(rèn)知

“PSRS模型”中的角色認(rèn)知對(duì)應(yīng)于“MARS模型”中的角色認(rèn)知。提高教學(xué)質(zhì)量不僅僅包括必須的動(dòng)機(jī)和能力，還包括教師和學(xué)生對(duì)各自“教”與“學(xué)”任務(wù)重要性的了解，以及自身需要付出怎樣的努力才能完成任務(wù)，即教師和學(xué)生必須要有清晰的角色認(rèn)知。增強(qiáng)角色認(rèn)知最基本的方式就是讓教師和學(xué)生得到提高教學(xué)質(zhì)量和學(xué)習(xí)質(zhì)量的相關(guān)培訓(xùn)。

（四）環(huán)境因素

“PSRS模型”中的環(huán)境因素對(duì)應(yīng)于“MARS模型”中的環(huán)境因素。影響教學(xué)質(zhì)量的環(huán)境因素包括超出教師和學(xué)生的控制，制約或促進(jìn)教學(xué)質(zhì)量績(jī)效的條件，如學(xué)校的辦學(xué)經(jīng)費(fèi)投入、實(shí)驗(yàn)室硬件設(shè)施、實(shí)訓(xùn)基地建設(shè)、圖書館圖書資源和課堂教學(xué)條件等等。

（五）績(jī)效評(píng)價(jià)

從“PSRS模型”可知：教師和學(xué)生作為“教”與“學(xué)”的主體，若有較高的學(xué)習(xí)（教學(xué)）動(dòng)機(jī)和學(xué)習(xí)（教學(xué)）能力，對(duì)自身有明確的角色認(rèn)知，并能得到關(guān)于角色的必要培訓(xùn)，學(xué)校提供相應(yīng)的環(huán)境支持，教學(xué)質(zhì)量就可以取得良好的績(jī)效。教學(xué)質(zhì)量評(píng)價(jià)最終的目標(biāo)是學(xué)生獲得學(xué)習(xí)的能力、創(chuàng)新的能力、可持續(xù)發(fā)展的能力等等，具體可以體現(xiàn)在學(xué)生的課程成績(jī)、技能競(jìng)賽表現(xiàn)、畢業(yè)設(shè)計(jì)、創(chuàng)新創(chuàng)業(yè)項(xiàng)目、實(shí)驗(yàn)實(shí)踐能力等方面。

四、基于大數(shù)據(jù)的課堂教學(xué)質(zhì)量評(píng)價(jià)

與管理學(xué)中的“MARS模型”一樣，基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”也是一個(gè)有效的診斷工具，既可以考評(píng)教師的課堂教學(xué)質(zhì)量情況，也可以通過學(xué)生的日常生活規(guī)律、績(jī)效產(chǎn)出等信息預(yù)測(cè)學(xué)生未來的發(fā)展?fàn)顩r。下面以教師的課堂教學(xué)質(zhì)量評(píng)價(jià)為例進(jìn)行簡(jiǎn)單介紹。