基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系構(gòu)建

董 菡

(1.湖北大學(xué) 圖書館；2.湖北省教育信息化工程技術(shù)研究中心，湖北 武漢430062)

0 引言

教育信息化是我國教育改革和發(fā)展的重要組成部分，是實(shí)現(xiàn)教育現(xiàn)代化的必由之路?？疾旖逃畔⒒陌l(fā)展，績效評價(jià)是一個行之有效的方式。我國對于教育信息化績效評價(jià)的研究范圍主要包括：研究綜述、不同區(qū)域教育信息化(如農(nóng)村鄉(xiāng)鎮(zhèn)、少數(shù)民族地區(qū)、某省市縣等)、不同學(xué)校類型教育信息化(如基礎(chǔ)教育、高等教育、職業(yè)教育等)、教育信息化某一方面(如教師績效、課堂教學(xué)、信息化領(lǐng)導(dǎo)力、教育資源庫、技術(shù)裝備、經(jīng)濟(jì)投入等)。國內(nèi)教育信息化績效評價(jià)方法主要有水平評價(jià)、效益評價(jià)和產(chǎn)出評價(jià)三類。

1 基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系構(gòu)建原則與方法

1.1 構(gòu)建原則

(1)投入產(chǎn)出效益評價(jià)原則。績效評價(jià)的關(guān)鍵在于投入與產(chǎn)出的收益率，因此，在指標(biāo)構(gòu)建時(shí)，既要體現(xiàn)投入情況，又要體現(xiàn)產(chǎn)出情況。這是重要的評價(jià)原則，也是構(gòu)建指標(biāo)體系的基礎(chǔ)。

(2)政府政策文件導(dǎo)向原則。針對湖北省基礎(chǔ)教育信息化的評價(jià)，其評價(jià)指標(biāo)是否能夠反映省基礎(chǔ)教育信息化發(fā)展方向尤其重要，因此，相關(guān)政策文件所涉及到的指標(biāo)或標(biāo)準(zhǔn)是最為重要的參考指標(biāo)，同時(shí)以國家相關(guān)政策為參考。

(3)文獻(xiàn)高頻次指標(biāo)參考原則。對于歷年來相關(guān)相關(guān)研究文獻(xiàn)中出現(xiàn)頻次較高的指標(biāo)可以結(jié)合政策指標(biāo)綜合采用，根據(jù)實(shí)際構(gòu)建情況選用；同時(shí)，考慮到反映時(shí)代發(fā)展趨勢的需要，還應(yīng)當(dāng)參考新出現(xiàn)的指標(biāo)。

1.2 構(gòu)建方法

1.2.1 指標(biāo)選取方法

吳砥指出，目前教育信息化的指標(biāo)選擇主要有兩種方法：一是定量分析。通過運(yùn)用一些數(shù)學(xué)方法對指標(biāo)間的相似性和關(guān)聯(lián)性進(jìn)行判斷，進(jìn)而來篩選評估的指標(biāo)體系。二是定性選擇。如訪談法、專家咨詢法，主要通過主觀經(jīng)驗(yàn)對指標(biāo)進(jìn)行篩選。在評估指標(biāo)的構(gòu)建上，首先基于年鑒指標(biāo)、規(guī)劃指標(biāo)和全國教育事業(yè)統(tǒng)計(jì)指標(biāo)形成基礎(chǔ)指標(biāo)，同時(shí)根據(jù)地區(qū)差異、新的政策要求對基礎(chǔ)指標(biāo)進(jìn)行補(bǔ)充，然后邀請行業(yè)內(nèi)知名專家對指標(biāo)進(jìn)行進(jìn)一步的挑選和評判，最后，采用聚類分析法構(gòu)建教育信息化領(lǐng)域的評估指標(biāo)體系[1]。此次指標(biāo)體系構(gòu)建亦采取定量與定性相結(jié)合的方法，先用定量分析方式，以湖北省政策文件和文獻(xiàn)分析中的高頻次指標(biāo)和新興指標(biāo)作為基礎(chǔ)指標(biāo)，同時(shí)輔以定性方式，通過專家團(tuán)隊(duì)對定量方式構(gòu)建的指標(biāo)分級賦值，進(jìn)行重要性評判，取平均值，對于均值過低的指標(biāo)予以刪除，對于原指標(biāo)集中未出現(xiàn)而由專家共同提出的指標(biāo)予以考量。

1.2.2 指標(biāo)構(gòu)建方法

(1)層次分析法：是將與決策總是有關(guān)的元素分解成各種層次，在此基礎(chǔ)之上進(jìn)行定性和定量分析的決策方法。本文主要用于指標(biāo)體系層次分解。

(2)Delphi法：是專家咨詢法的一種，它依據(jù)系統(tǒng)的程序，采用專家匿名發(fā)表意見的方式，通過多輪次調(diào)查專家對問卷所提問題的看法，經(jīng)過反復(fù)征詢、歸納、修改，最后匯總成專家基本一致的看法，作為預(yù)測的結(jié)果。本文在二級指標(biāo)和三級指標(biāo)或觀測點(diǎn)的選取以及相應(yīng)指標(biāo)的權(quán)重設(shè)置方面運(yùn)用該方法。

2 湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)與體系構(gòu)建

2.1 文獻(xiàn)指標(biāo)頻次分析

以CNKI為刊源，以“(‘教育信息化’or‘信息技術(shù)教育’or‘農(nóng)村遠(yuǎn)程教育工程’or‘農(nóng)遠(yuǎn)工程’)and(‘績效’or‘成本效益’or‘成本’or‘效益’)and(‘評價(jià)’or‘評估’)”分別為主題詞和關(guān)鍵詞，進(jìn)行精確匹配檢索。結(jié)果顯示，去除重復(fù)論文，截至2019年12月31日，與教育信息化緊密相關(guān)的有效文獻(xiàn)331篇，其中，研究基礎(chǔ)教育信息化績效評價(jià)的文獻(xiàn)約有116篇，未分類型總體研究教育信息化績效評價(jià)的文獻(xiàn)約有137篇。

在論述基礎(chǔ)教育信息化和總論性教育信息化指標(biāo)體系中統(tǒng)計(jì)高頻次指標(biāo)，選取指標(biāo)核心詞為統(tǒng)計(jì)點(diǎn)，類似含義指標(biāo)合并處理。歷年研究文獻(xiàn)中高頻次一級指標(biāo)核心詞主要有：信息化應(yīng)用(88次)、信息化基礎(chǔ)設(shè)施(74次)、信息資源建設(shè)(64次)、信息化人才(45次)、信息化組織與管理(45次)、經(jīng)費(fèi)投入(43次)、教育信息化效果或效益(30次)、信息素養(yǎng)(30次)、信息化主體發(fā)展(28次)、信息網(wǎng)絡(luò)(28次)等。高頻次的二級指標(biāo)核心詞如表1所示。

表1 基礎(chǔ)教育信息化績效評價(jià)二級指標(biāo)核心詞出現(xiàn)頻次

從表1可知，信息化教學(xué)相關(guān)二級指標(biāo)一直是多年來的評估重點(diǎn)所在，主要包括信息技術(shù)和信息資源在教學(xué)上的應(yīng)用、應(yīng)用學(xué)科覆蓋率等；信息素養(yǎng)(包括教師與學(xué)生)、信息化培訓(xùn)(主要指教師)、信息化教學(xué)資源建設(shè)相關(guān)二級指標(biāo)緊隨其后。其次是經(jīng)費(fèi)投入和基礎(chǔ)建設(shè)，基礎(chǔ)建設(shè)中又以網(wǎng)絡(luò)建設(shè)(如學(xué)校入網(wǎng)率、校園網(wǎng)建設(shè)等)和信息化終端(生機(jī)比、師機(jī)比等)的研究最為常見。信息化管理和信息化管理者、信息化人力資源或信息化隊(duì)伍、信息化規(guī)劃與標(biāo)準(zhǔn)、學(xué)生信息化學(xué)習(xí)(包括學(xué)習(xí)方法、學(xué)習(xí)效果和學(xué)習(xí)認(rèn)知)、教師對信息化教學(xué)的認(rèn)知和教研科研、信息化組織等相關(guān)二級指標(biāo)也較為重要。這些高頻次指標(biāo)核心都可作為構(gòu)建二級或三級指標(biāo)(主要觀測點(diǎn))的參考。

2.2 政策分析

自我國提出教育信息化目標(biāo)以來，國家和各級政府陸續(xù)出臺了一系列政策文件作為指導(dǎo)，選取最為適宜湖北省實(shí)際情況和最為貼近時(shí)代的政策是構(gòu)建適時(shí)合理的評價(jià)指標(biāo)體系的關(guān)鍵，尤其是一級指標(biāo)的選取不應(yīng)偏離相關(guān)政策?；诖?，我們以《湖北省教育信息化發(fā)展規(guī)劃(2014—2020年)》為主要參考政策，同時(shí)，考慮時(shí)代性的要求，以新時(shí)代的新發(fā)展方向——教育部《教育信息化2.0行動計(jì)劃》和《湖北省教育信息化2.0行動計(jì)劃》為補(bǔ)充。

《湖北省教育信息化發(fā)展規(guī)劃(2014—2020年)》階段性目標(biāo)和發(fā)展任務(wù)相輔相成，綜合起來可概括為基礎(chǔ)設(shè)施建設(shè)、信息資源開發(fā)、信息化應(yīng)用、信息化人才隊(duì)伍、信息化管理與保障體系幾大方面，這與文獻(xiàn)研究中的高頻次核心指標(biāo)趨于一致，可作為一級指標(biāo)的主體內(nèi)容?！督逃畔⒒?.0行動計(jì)劃》和《湖北省教育信息化2.0行動計(jì)劃》的具體內(nèi)容可作為二三級指標(biāo)或主要觀測點(diǎn)、以及權(quán)重分配的參考。

2.3 發(fā)展趨勢與區(qū)域性影響

由于不同時(shí)期有不同趨勢導(dǎo)向，因此，在指標(biāo)體系研究中，也應(yīng)根據(jù)近年不同情況增加新興指標(biāo)。尤其是2018年“教育信息化2.0”的提出，促使指標(biāo)構(gòu)建時(shí)應(yīng)當(dāng)對2018年以后的研究指標(biāo)單獨(dú)考量，例如：以“滿意度”為基礎(chǔ)的評估指標(biāo)，關(guān)于“特色功能室”的研究(如：錄播教室、智慧教室等)，“信息化交互”“教育公平”等指標(biāo)的研究。這些新興指標(biāo)與“教育信息化2.0”提出的“數(shù)字資源服務(wù)普及行動”“網(wǎng)絡(luò)扶智工程攻堅(jiān)行動”“教育治理能力優(yōu)化行動”“智慧教育創(chuàng)新發(fā)展行動”[2]等實(shí)施行動密切相關(guān)，也是構(gòu)建指標(biāo)體系時(shí)的重要參考。

綜上所述，構(gòu)建湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系時(shí)，應(yīng)當(dāng)既參考長期以來作為評估標(biāo)準(zhǔn)存在的指標(biāo)，又兼顧發(fā)展趨向。同時(shí)要考慮區(qū)域評價(jià)的特點(diǎn)，“區(qū)域基礎(chǔ)教育信息化超越了單個學(xué)校、班級、教師和學(xué)生的評價(jià)范圍，它有利于從更廣闊的視角評價(jià)基礎(chǔ)教育信息化發(fā)展和建設(shè)的效益。區(qū)域基礎(chǔ)教育信息化是從區(qū)域的層面出發(fā)，更全面的視角對基礎(chǔ)教育信息化展開研究，這樣會對所要研究的問題有一個更深入、更宏觀的認(rèn)識[3]”,例如：教育的公平性與均衡性、地方政府和地方環(huán)境都是區(qū)域評價(jià)的重要方面。

3 湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系構(gòu)建

教育信息化績效評價(jià)總體目標(biāo)在于優(yōu)化教育投入產(chǎn)出效益、引領(lǐng)教育改革與發(fā)展。結(jié)合具體的區(qū)域教育信息化實(shí)際水平，可以將教育信息化效益理解為“教育信息化目標(biāo)實(shí)現(xiàn)的程度”[4]。其內(nèi)涵是“教育信息化實(shí)踐活動所產(chǎn)生的、與信息化投入有對比關(guān)系的對人們有益的結(jié)果”[5]。因此，此次指標(biāo)構(gòu)建還依據(jù)產(chǎn)出效益原則分別從投入與產(chǎn)出角度體現(xiàn)績效。

結(jié)合專家團(tuán)隊(duì)賦值，形成最終指標(biāo)體系如表2所示，共有6個一級指標(biāo)、28個二級指標(biāo)，下設(shè)若干三級指標(biāo)或觀測點(diǎn)(注：某些指標(biāo)既是經(jīng)費(fèi)投入的產(chǎn)出結(jié)果，又是信息化應(yīng)用的投入基礎(chǔ))。

表2 湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系

4 評價(jià)方式

4.1 權(quán)重設(shè)置

指標(biāo)體系的權(quán)重設(shè)置主要采用Delphi法，由專家團(tuán)隊(duì)分別對每一個三級指標(biāo)的重要性進(jìn)行評判后，賦予1-9級不同重要程度等級，再通過兩兩比較，構(gòu)造指標(biāo)重要程度矩陣，并基于該矩陣計(jì)算出各指標(biāo)的權(quán)重值，在此基礎(chǔ)上，再結(jié)合文獻(xiàn)調(diào)研和其他省份的評價(jià)經(jīng)驗(yàn)，對照本省實(shí)際，對各指標(biāo)權(quán)重的精度進(jìn)行適當(dāng)取舍。

4.2 計(jì)算方式

績效評價(jià)的計(jì)算方式擬采取絕對值與相對值并行的方式。對于國家或湖北省政策文件中有具體考核值的指標(biāo)或者是否型指標(biāo)，均采取絕對評價(jià)方式，有考核值的直接以文件中指定水平進(jìn)行達(dá)標(biāo)賦值，達(dá)到水平的其效益均認(rèn)為已最大化，是否型則采取“是”得滿分、“否”不得分；對于國家或湖北省政策文件中沒有具體考核值的指標(biāo)，采取相對評價(jià)的方式，利用平均值與標(biāo)準(zhǔn)偏差，從統(tǒng)計(jì)學(xué)角度評價(jià)。對于一個包含多個評估子項(xiàng)的指標(biāo)，先對不同評估子項(xiàng)分配對應(yīng)權(quán)重系數(shù)，再按以上方法評價(jià)。在此基礎(chǔ)上，還應(yīng)考慮投入與產(chǎn)出的比例計(jì)算。

5 結(jié)語

本文通過文獻(xiàn)分析和政策分析，結(jié)合專家團(tuán)隊(duì)意見，遵循投入產(chǎn)出的效益原則，構(gòu)建了湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系。值得注意的是，該指標(biāo)體系的構(gòu)建主要基于理論基礎(chǔ)，在實(shí)地調(diào)研中，可能會發(fā)現(xiàn)有指標(biāo)不符合實(shí)際情況或數(shù)據(jù)采集難以實(shí)現(xiàn)的現(xiàn)象、或是無法量化的情況，需要根據(jù)實(shí)際情況對指標(biāo)體系進(jìn)一步優(yōu)化。