淺談高職學(xué)生教育質(zhì)量綜合評(píng)價(jià)量表的編制

葉汝軍

摘 要：本文參考教育部提出的教育質(zhì)量綜合評(píng)價(jià)的理論框架，結(jié)合地區(qū)高職學(xué)校的實(shí)際情況及學(xué)生的心理特點(diǎn)，開(kāi)發(fā)出具有科學(xué)性和實(shí)操性的中國(guó)高職學(xué)生的教育質(zhì)量綜合評(píng)價(jià)的測(cè)量工具，為更好地了解高職學(xué)生的發(fā)展情況，促進(jìn)學(xué)生健康成長(zhǎng)，全面提高教育質(zhì)量提供依據(jù)。

關(guān)鍵詞：高職學(xué)生 教育質(zhì)量綜合評(píng)價(jià) 量表 信度

課 題：本文系課題《職業(yè)教育質(zhì)量監(jiān)測(cè)與綜合評(píng)價(jià)平臺(tái)關(guān)鍵技術(shù)研究》（編號(hào)2015C33070）的研究成果。

目前，我國(guó)高職教育學(xué)習(xí)評(píng)價(jià)現(xiàn)狀不容樂(lè)觀。在評(píng)價(jià)理念上注重學(xué)生對(duì)系統(tǒng)知識(shí)的積累和掌握，忽視學(xué)生實(shí)踐和動(dòng)手能力的訓(xùn)練;在評(píng)價(jià)方式上，閉卷考試居多，開(kāi)卷考試少，筆試方式多，口試、答辯形式少;在評(píng)價(jià)內(nèi)容上，理論考試居多，技能、操作實(shí)踐能力考察少;在評(píng)價(jià)組織上，統(tǒng)一考試多，因材施考少。

一、我國(guó)高職教育評(píng)價(jià)背景

實(shí)踐證明，諸如此類的評(píng)價(jià)方式不僅無(wú)法有效、科學(xué)地評(píng)價(jià)學(xué)生所學(xué)知識(shí)和所獲得的技能，還歪曲了學(xué)習(xí)評(píng)價(jià)引領(lǐng)教學(xué)改革的作用，抑制了學(xué)生的個(gè)性化發(fā)展。當(dāng)今教育改革過(guò)程中離不開(kāi)教育質(zhì)量的監(jiān)測(cè)，這個(gè)環(huán)節(jié)是學(xué)校發(fā)展的生命線。開(kāi)展教育質(zhì)量監(jiān)測(cè)是建設(shè)教育質(zhì)量管控體系與提高教育治理能力的重要內(nèi)容。因此，教師應(yīng)該從關(guān)注學(xué)業(yè)成績(jī)轉(zhuǎn)變到關(guān)注教育質(zhì)量綜合評(píng)價(jià)。

二、研究方法及過(guò)程

1.文獻(xiàn)研究

主要用于對(duì)教育部發(fā)布的《中小學(xué)教育質(zhì)量綜合評(píng)價(jià)指標(biāo)框架（試行）》進(jìn)行深入解讀，對(duì)國(guó)家相關(guān)教育政策或制度（如《國(guó)家基礎(chǔ)教育質(zhì)量監(jiān)測(cè)實(shí)施方案》等）及已有文獻(xiàn)和實(shí)踐案例進(jìn)行梳理和分析，為構(gòu)建本地高職教育質(zhì)量綜合評(píng)價(jià)指標(biāo)體系提供了理論基礎(chǔ)。

2.訪談法

以半結(jié)構(gòu)化訪談的形式，面向相關(guān)利益群體（學(xué)校、教師、學(xué)生、家長(zhǎng)等）就某區(qū)高職教育質(zhì)量現(xiàn)狀以及特點(diǎn)等進(jìn)行深入討論交流，據(jù)此來(lái)細(xì)化評(píng)價(jià)指標(biāo)，確保構(gòu)建的評(píng)價(jià)指標(biāo)體系全面系統(tǒng)且符合實(shí)際。

3.調(diào)查法

以抽樣調(diào)查的形式獲取區(qū)域高職教育質(zhì)量綜合評(píng)價(jià)數(shù)據(jù)，用于對(duì)初步設(shè)計(jì)開(kāi)發(fā)的評(píng)價(jià)工具的有效性和可靠性進(jìn)行檢驗(yàn)和修正。

4.數(shù)據(jù)分析方法

數(shù)據(jù)分析方法主要用于對(duì)隱沒(méi)在一大批看來(lái)雜亂無(wú)章的數(shù)據(jù)中的信息，集中、萃取和提煉出來(lái)，并形成定量結(jié)論。

1.文獻(xiàn)研究初步構(gòu)建指標(biāo)

教育部發(fā)布的《指標(biāo)框架（試行）》給出了五大評(píng)價(jià)內(nèi)容、20個(gè)關(guān)鍵指標(biāo)等主要監(jiān)測(cè)依據(jù)。根據(jù)高職學(xué)生的年齡特點(diǎn)，其包含和對(duì)應(yīng)不同的指標(biāo)內(nèi)容。如身心發(fā)展，包括情緒行為調(diào)控、人際溝通、健康生活方式、對(duì)行為的自我約束情況等;品德發(fā)展，包括行為習(xí)慣、公民素養(yǎng)、在文明交往、遵紀(jì)守法方面的認(rèn)知和表現(xiàn)等;學(xué)業(yè)發(fā)展，包括學(xué)習(xí)品質(zhì)、實(shí)踐能力、關(guān)注現(xiàn)實(shí)生活、解決實(shí)際問(wèn)題等方面的情況;興趣潛能，包括創(chuàng)新能力、求知欲、愛(ài)好特獨(dú)立思考與鉆研探究，對(duì)某些知識(shí)和現(xiàn)象的專注、思考等情況;學(xué)業(yè)負(fù)擔(dān)，包括潛能發(fā)展、在某些方面表現(xiàn)出的突出素質(zhì)和進(jìn)一步發(fā)展的能力等。

2.基于實(shí)際調(diào)研結(jié)果修訂指標(biāo)

為完善教育質(zhì)量綜合評(píng)價(jià)結(jié)構(gòu)設(shè)計(jì)，為題項(xiàng)編制收集豐富的素材，本次研究針對(duì)理論構(gòu)建的教育質(zhì)量綜合評(píng)價(jià)的框架，編制學(xué)生版和教師版的《教育質(zhì)量綜合評(píng)價(jià)指標(biāo)重要性調(diào)查問(wèn)卷》。

3.題項(xiàng)編制

本研究編制的量表題項(xiàng)的來(lái)源主要包括：已有的國(guó)內(nèi)外的相關(guān)量表;修改前人量表的相關(guān)試題;基于前期訪談的資料，結(jié)合與學(xué)生學(xué)習(xí)、生活和社會(huì)工作相聯(lián)系的情景和事件自編題目。

4.施測(cè)過(guò)程

采取隨機(jī)抽樣的方法，將某地區(qū)四所高職學(xué)校的高職一年級(jí)學(xué)生作為施測(cè)對(duì)象，第一階段隨機(jī)抽取兩所高職學(xué)校的800名學(xué)生作為試測(cè)對(duì)象，用于探索性因素分析;第二階段選取了四所學(xué)校的1500名學(xué)生作為被試發(fā)放正式問(wèn)卷，用于驗(yàn)證性因素分析。兩次測(cè)試對(duì)象的具體情況如下。

預(yù)測(cè)對(duì)象（n=644）：學(xué)校一，男47，女41，總?cè)藬?shù)88，占比13.66%;學(xué)校二，男185，女371，總?cè)藬?shù)556，占比人數(shù)86.43%;

正式測(cè)試對(duì)象（n=1292）：學(xué)校一，男，480人，女，366人，總?cè)藬?shù)，846人，占比65.48%;學(xué)校二，男19人，女15人，總?cè)藬?shù)34人，占比2.63%;學(xué)校三，男126人，女67人，總?cè)藬?shù)193人，占比14.94%

5.數(shù)據(jù)分析

本研究首先對(duì)收集的數(shù)據(jù)按照一定的規(guī)則和篩選數(shù)據(jù)的原則進(jìn)行整理，刪除具有規(guī)律性作答問(wèn)卷和具有缺失值的數(shù)據(jù)，然后將有效數(shù)據(jù)的等級(jí)計(jì)分方式選項(xiàng)A、B、C、D、E分別編碼為1、2、3、4、5，同時(shí)將所有反向計(jì)分題目轉(zhuǎn)換。隨后基于整理后的數(shù)據(jù)進(jìn)行項(xiàng)目分析、信度檢驗(yàn)和效度檢驗(yàn)。

三、因素分析與結(jié)果

1.項(xiàng)目分析

將題總相關(guān)以及臨界比率（critical ration，CR）作為項(xiàng)目區(qū)分度的分析指標(biāo)。CR值的計(jì)算方法為將所有被試按照因子得分由高到低排列，因子得分前27%的被試（644×27%=173名）為高分組，因子得分后27%的被試（173名）為低分組，對(duì)高低兩組被試在因子上的每一個(gè)項(xiàng)目得分進(jìn)行獨(dú)立樣本t檢驗(yàn)。

2.探索性因素分析

本次研究主要采用主成分分析法，利用方差極大斜交旋轉(zhuǎn)法進(jìn)行結(jié)構(gòu)分析。

（1）身心發(fā)展——人與自身的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.954，Bartlett球形檢驗(yàn)p<0.001，說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明，在身心發(fā)展分量表中，有9個(gè)項(xiàng)目具有雙重負(fù)荷，10個(gè)項(xiàng)目的載荷低于0.4，6個(gè)項(xiàng)目分屬于一個(gè)因子，

（2）品德發(fā)展——人與自身的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.944，Bartlett球形檢驗(yàn)p<0.001，說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明，在品德發(fā)展分量表中，有3個(gè)項(xiàng)目具有雙重負(fù)荷，3個(gè)項(xiàng)目的載荷低于0.4，兩個(gè)項(xiàng)目分別屬于一個(gè)因子。

（3）學(xué)業(yè)負(fù)擔(dān)——人與工具的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.914，Bartlett球形檢驗(yàn)p<0.001，說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明，在學(xué)業(yè)負(fù)擔(dān)分量表中，有10個(gè)項(xiàng)目具有雙重負(fù)荷，9個(gè)項(xiàng)目的載荷低于0.4，5個(gè)項(xiàng)目分別屬于一個(gè)因子。

（4）學(xué)業(yè)發(fā)展——人與社會(huì)互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.946，Bartlett球形檢驗(yàn)p<0.001，說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明，在學(xué)業(yè)發(fā)展分量表中，有5個(gè)項(xiàng)目具有雙重負(fù)荷，4個(gè)項(xiàng)目的載荷低于0.4，5個(gè)項(xiàng)目分別屬于一個(gè)因子。

（5）興趣潛能——人與社會(huì)的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.949，Bartlett球形檢驗(yàn)p<0.001，說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明，在興趣潛能分量表中，有6個(gè)項(xiàng)目具有雙重負(fù)荷，8個(gè)項(xiàng)目的載荷低于0.4，3個(gè)項(xiàng)目分別屬于一個(gè)因子。

3.驗(yàn)證性因素分析

驗(yàn)證性因素分析結(jié)構(gòu)，即潛變量與觀測(cè)變量的對(duì)應(yīng)關(guān)系參照探索性因素分析的結(jié)果，模型擬合采用最大似然法（ML），參考各題項(xiàng)的因子載荷與各統(tǒng)計(jì)指標(biāo)，確定模型的擬合程度情況，各維度的驗(yàn)證性因素分析結(jié)果見(jiàn)表1。

根據(jù)驗(yàn)證性因素分析的結(jié)果發(fā)現(xiàn)，各分量表的CFI和TLI指標(biāo)均在0.9以上，RMSEA指標(biāo)均小于0.08，符合心理測(cè)量學(xué)要求，說(shuō)明各分量表的模型擬合良好。

4.信度檢驗(yàn)

各分量表及因子的信度系數(shù)的具體結(jié)果見(jiàn)表2。

由上表可知，本研究量表的信度良好。

四、結(jié)論

本研究最終形成的問(wèn)卷結(jié)構(gòu)與教育部提出的內(nèi)容框架基本相同，仍包括“身心發(fā)展、品德發(fā)展、學(xué)業(yè)負(fù)擔(dān)、學(xué)業(yè)發(fā)展、興趣潛能”五個(gè)模塊，量表的信度和效度各項(xiàng)指標(biāo)良好。本研究為深刻揭示當(dāng)代教育質(zhì)量的本質(zhì)提供參考，為學(xué)生的全面發(fā)展提供了指導(dǎo)，為轉(zhuǎn)變教育管理者、教師和家長(zhǎng)的觀念提供了依據(jù)。

參考文獻(xiàn)：

[1]代其平.學(xué)校監(jiān)測(cè)中應(yīng)注意的幾個(gè)問(wèn)題[J].現(xiàn)代中小學(xué)教育，1990（3）.

[2]傅永春，楊伊生.家長(zhǎng)教育方式的現(xiàn)狀及思考[J].內(nèi)蒙古教育學(xué)院學(xué)報(bào)，1995（2）.

[3]胡月琴，甘怡群.青少年心理韌性量表的編制和效度驗(yàn)證[J].心理學(xué)報(bào)，2008（8）.

（作者單位：浙江商業(yè)職業(yè)技術(shù)學(xué)院）