大數(shù)據(jù)背景下高水平專業(yè)群建設(shè)成效評(píng)價(jià)體系構(gòu)建

宋楚平 陳正東 路雅淇 朱永君 邵世智

摘 要 中國(guó)特色高水平高職專業(yè)群建設(shè)呈現(xiàn)數(shù)據(jù)多源化、數(shù)據(jù)海量化、數(shù)據(jù)多維化特征，在此背景下帶來高水平專業(yè)群建設(shè)成效評(píng)價(jià)的困境，即高水平專業(yè)群建設(shè)成效評(píng)價(jià)標(biāo)準(zhǔn)的缺失、群內(nèi)信息的共建共享和溝通不暢問題突出、大數(shù)據(jù)支持下的評(píng)價(jià)指標(biāo)體系尚未形成。基于科學(xué)性、可操作性和定量性三大原則，運(yùn)用層次分析法對(duì)專業(yè)群實(shí)踐工作進(jìn)行分析，構(gòu)建出高水平專業(yè)群建設(shè)成效評(píng)價(jià)指標(biāo)體系，并提出評(píng)估分值計(jì)算方法，為當(dāng)下中國(guó)特色高水平高職專業(yè)群建設(shè)提供一種新的評(píng)價(jià)工作思路和操作方法。

關(guān)鍵詞 高水平專業(yè)群;高職院校;建設(shè)成效;評(píng)價(jià)體系;大數(shù)據(jù)

中圖分類號(hào) G719.2 文獻(xiàn)標(biāo)識(shí)碼 A 文章編號(hào) 1008-3219（2021）29-0071-05

自2006年11月16日教育部在《關(guān)于全面提高高等職業(yè)教育教學(xué)質(zhì)量的若干意見》（教高[2006]16號(hào)）中提出“高職院校要建立專業(yè)群，以提高服務(wù)面向，增強(qiáng)學(xué)生就業(yè)能力”的要求以來，專業(yè)群建設(shè)逐漸成為高職院校開展人才培養(yǎng)改革的重要載體。2019年隨著中國(guó)特色高水平高職學(xué)校和專業(yè)建設(shè)計(jì)劃（簡(jiǎn)稱“雙高計(jì)劃”）的實(shí)施，高水平專業(yè)群建設(shè)正式納入國(guó)家頂層設(shè)計(jì)的范疇，成為高職院校革新人才培養(yǎng)模式、促進(jìn)地方區(qū)域性產(chǎn)業(yè)發(fā)展、提升人才培養(yǎng)質(zhì)量的關(guān)鍵抓手。隨后，各省市為響應(yīng)“雙高計(jì)劃”，啟動(dòng)了以“引領(lǐng)改革、支撐發(fā)展、特色鮮明、融合發(fā)展”為主要目標(biāo)的高水平專業(yè)群建設(shè)工程。各地高職院校紛紛啟動(dòng)了面向區(qū)域產(chǎn)業(yè)、圍繞職業(yè)崗位、依托共享資源等不同模式的高水平專業(yè)群建設(shè)工作。但專業(yè)群建設(shè)得怎么樣、建設(shè)成效如何評(píng)估，目前相關(guān)研究還十分缺乏，國(guó)家層面也尚未出臺(tái)統(tǒng)一的評(píng)價(jià)標(biāo)準(zhǔn)和評(píng)價(jià)辦法。因此，為明確專業(yè)群建設(shè)依據(jù)、落實(shí)建設(shè)計(jì)劃、監(jiān)督實(shí)施過程、評(píng)估建設(shè)成效，基于大數(shù)據(jù)開展專業(yè)群建設(shè)評(píng)價(jià)體系研究顯得尤為重要。

一、專業(yè)群建設(shè)的大數(shù)據(jù)特征

作為教育信息化、網(wǎng)絡(luò)化、智能化的一種教育教學(xué)組織形式，專業(yè)群涵蓋行業(yè)企業(yè)、師生隊(duì)伍、課程教材、儀器設(shè)備、財(cái)務(wù)資金等各個(gè)方面的內(nèi)容，隨著專業(yè)群建設(shè)的不斷深入，任何一個(gè)教學(xué)對(duì)象和資源要素都可以在信息技術(shù)的支持下產(chǎn)生數(shù)據(jù)，專業(yè)之間的跨界融合會(huì)越來越強(qiáng)烈，多元化、多樣化和復(fù)雜化將是專業(yè)群建設(shè)數(shù)據(jù)發(fā)展的必然趨勢(shì)，這也就決定了專業(yè)群建設(shè)的“大數(shù)據(jù)”形態(tài)。

（一）專業(yè)組群重構(gòu)數(shù)據(jù)的多源化

“雙高計(jì)劃”中專業(yè)群所含專業(yè)數(shù)以3～5個(gè)較為普遍，其中跨2個(gè)及以上專業(yè)類組群的占比高達(dá)85.4%[1]。由此可見，專業(yè)群的出現(xiàn)打破了原有專業(yè)之間的邊界，重組了不同專業(yè)的師資、課程、設(shè)備、實(shí)習(xí)實(shí)訓(xùn)等資源。以南京科技職業(yè)學(xué)院省級(jí)高水平專業(yè)群“化工裝備技術(shù)”為例，該專業(yè)群以化工裝備技術(shù)專業(yè)為龍頭，包含數(shù)控技術(shù)、電氣自動(dòng)化技術(shù)、工業(yè)過程自動(dòng)化技術(shù)、云計(jì)算技術(shù)與應(yīng)用4個(gè)專業(yè)，所有專業(yè)合力對(duì)接新一代化工裝備智能制造產(chǎn)業(yè)鏈，進(jìn)而形成一個(gè)全新的“政—?！蟆怠獙！n”教學(xué)組織共同體。這種多元主體構(gòu)成的專業(yè)群在建設(shè)中產(chǎn)生的數(shù)據(jù)必然表現(xiàn)為一種新的數(shù)據(jù)樣態(tài)，即多源化，這種多源化的數(shù)據(jù)形態(tài)勢(shì)必會(huì)給專業(yè)群的評(píng)估決策帶來困難。

（二）專業(yè)群教育教學(xué)數(shù)據(jù)的海量化

專業(yè)群建設(shè)的初衷就是要發(fā)揮專業(yè)集群優(yōu)勢(shì)，加快專業(yè)間的融合與創(chuàng)新，增強(qiáng)專業(yè)群服務(wù)區(qū)域產(chǎn)業(yè)和經(jīng)濟(jì)發(fā)展的能力，這種協(xié)同性的專業(yè)群建設(shè)所開展的教育教學(xué)活動(dòng)，產(chǎn)生了大量各種各樣的數(shù)據(jù)。如南京科技職業(yè)學(xué)院“化工裝備技術(shù)”專業(yè)群內(nèi)有學(xué)生231人，專兼職教師23人，課程總數(shù)92門（含共享課程11門），群共享合作企業(yè)8家，在高水平專業(yè)群建設(shè)計(jì)劃推進(jìn)過程中，存儲(chǔ)了人才培養(yǎng)模式創(chuàng)新、課程體系與教學(xué)資源、教材建設(shè)與教法改革、教師教學(xué)創(chuàng)新團(tuán)隊(duì)建設(shè)、產(chǎn)教融合平臺(tái)建設(shè)、服務(wù)發(fā)展能力提升、管理體制和運(yùn)行機(jī)制等方面的大量數(shù)據(jù)，這些數(shù)據(jù)每日都在快速增長(zhǎng)，積累起來的海量數(shù)據(jù)為評(píng)估專業(yè)群建設(shè)成效奠定了數(shù)據(jù)基礎(chǔ)。

（三）專業(yè)群建設(shè)數(shù)據(jù)的多維化

根據(jù)教育部、財(cái)政部2020年12月21日發(fā)布的《中國(guó)特色高水平高職學(xué)校和專業(yè)建設(shè)計(jì)劃績(jī)效管理暫行辦法》（教職成[2020]8號(hào)）[2]，專業(yè)群建設(shè)數(shù)據(jù)采集指標(biāo)含產(chǎn)出、效益、滿意度3個(gè)一級(jí)指標(biāo)、6個(gè)二級(jí)指標(biāo)、26個(gè)三級(jí)指標(biāo)，這里既包含學(xué)校自評(píng)指標(biāo)，又包含用人單位、學(xué)生家長(zhǎng)等第三方評(píng)價(jià)指標(biāo);既有人才培養(yǎng)模式創(chuàng)新、課程教學(xué)資源建設(shè)等相對(duì)靜態(tài)的指標(biāo)，又有任務(wù)完成進(jìn)度、引領(lǐng)職業(yè)教育改革發(fā)展和人才培養(yǎng)的貢獻(xiàn)度等時(shí)效動(dòng)態(tài)指標(biāo)，這些繁多的指標(biāo)體系直接導(dǎo)致專業(yè)群建設(shè)數(shù)據(jù)的多維化和微觀性。為了窺視多維數(shù)據(jù)中隱藏的專業(yè)群建設(shè)缺陷，科學(xué)評(píng)價(jià)建設(shè)成效，必須將大數(shù)據(jù)技術(shù)賦能專業(yè)群建設(shè)，設(shè)計(jì)合理有效的評(píng)價(jià)體系，以信息化手段持續(xù)驅(qū)動(dòng)專業(yè)群建設(shè)質(zhì)量的提升。

二、高水平專業(yè)群建設(shè)成效評(píng)價(jià)存在的困境

目前，高水平專業(yè)群處在建設(shè)的初級(jí)階段，還沒有經(jīng)歷一個(gè)完整的建設(shè)周期，對(duì)專業(yè)群的建設(shè)成效如何評(píng)價(jià)，如何達(dá)到以評(píng)促建的目的，仍存在諸多問題，總體來說，開展專業(yè)群建設(shè)的成效評(píng)價(jià)遇到以下挑戰(zhàn)。

（一）高水平專業(yè)群建設(shè)成效評(píng)價(jià)標(biāo)準(zhǔn)缺失

對(duì)于建設(shè)效果及目標(biāo)達(dá)成的評(píng)價(jià)，《中國(guó)特色高水平高職學(xué)校和專業(yè)建設(shè)計(jì)劃績(jī)效管理暫行辦法》（教職成[2020]8號(hào)）中明確指出：評(píng)價(jià)工作主要包括學(xué)校自評(píng)、省級(jí)評(píng)價(jià)、兩部復(fù)核與綜合評(píng)議，評(píng)價(jià)工作應(yīng)當(dāng)做到職責(zé)明確、相互銜接、科學(xué)公正、公開透明。但暫行辦法并沒有給出一個(gè)規(guī)范性的建設(shè)評(píng)價(jià)文件標(biāo)準(zhǔn)，各省級(jí)教育主管部門也沒有制定一個(gè)指導(dǎo)專業(yè)群建設(shè)的指標(biāo)體系。因此，高職院校在進(jìn)行高水平專業(yè)群建設(shè)時(shí)就很容易出現(xiàn)建設(shè)效果與建設(shè)目標(biāo)不匹配，以及建設(shè)方向缺失“航標(biāo)”等問題。

（二）群內(nèi)信息的共建共享和溝通不暢問題突出

專業(yè)群建設(shè)不是群內(nèi)各專業(yè)“單打獨(dú)斗”，更不是各部門各院系“單兵作戰(zhàn)”，專業(yè)組群的主要目的之一就是打破專業(yè)界限、破解院系組織壁壘，整合資源與共享信息，提高辦學(xué)效益。相關(guān)研究表明，專業(yè)群建設(shè)過程中“信息孤島”現(xiàn)象普遍存在，部門院系之間、政校企之間在建設(shè)層面的信息溝通和數(shù)據(jù)共享未能實(shí)現(xiàn)，具體表現(xiàn)就是建設(shè)數(shù)據(jù)缺乏系統(tǒng)設(shè)計(jì)，政府、學(xué)校、師生、企業(yè)及家長(zhǎng)等相關(guān)利益者在建設(shè)期間的信息溝通與反饋不及時(shí)，建設(shè)任務(wù)涉及多個(gè)部門或院系時(shí)執(zhí)行難度較大[3]。

（三）大數(shù)據(jù)支持下的評(píng)價(jià)指標(biāo)體系尚未形成

基于大數(shù)據(jù)開展高水平專業(yè)群協(xié)同建設(shè)是教育信息化、教學(xué)數(shù)字化的必然產(chǎn)物，也是國(guó)家戰(zhàn)略層面職業(yè)教育創(chuàng)新發(fā)展的內(nèi)在需求。因此，高水平專業(yè)群建設(shè)是以專業(yè)交叉融合為切入點(diǎn)，基于專業(yè)群建設(shè)全要素，采用大數(shù)據(jù)技術(shù)手段對(duì)建設(shè)內(nèi)容和預(yù)期成效作出實(shí)時(shí)診斷和評(píng)價(jià)的過程。令人遺憾的是，目前全國(guó)范圍內(nèi)還沒有建立一套數(shù)據(jù)支撐的建設(shè)成效評(píng)價(jià)體系，直接導(dǎo)致多數(shù)高職院校在專業(yè)群建設(shè)方面只有群的外在形式，缺乏統(tǒng)一的數(shù)據(jù)支持，違背了專業(yè)組群的初衷。

三、高水平專業(yè)群建設(shè)成效評(píng)價(jià)體系的構(gòu)建原則

只有建立了科學(xué)、規(guī)范的專業(yè)群建設(shè)成效評(píng)價(jià)體系，才能更好地引導(dǎo)專業(yè)群建設(shè)方向，客觀評(píng)價(jià)建設(shè)成效，正確診斷建設(shè)中存在的問題，真正實(shí)現(xiàn)以評(píng)促建，保證專業(yè)群建設(shè)質(zhì)量。在構(gòu)建評(píng)價(jià)體系過程中，要遵循以下基本原則。

（一）科學(xué)性原則

評(píng)價(jià)體系的制定工作必須要在科學(xué)理論的指導(dǎo)下，靈活運(yùn)用對(duì)標(biāo)法、層次分析法、數(shù)據(jù)包絡(luò)分析法、公眾評(píng)判法等開展評(píng)價(jià)體系設(shè)計(jì)，如對(duì)建設(shè)指標(biāo)進(jìn)行全面梳理，抓住關(guān)鍵環(huán)節(jié)，掌握全面的信息，聚焦評(píng)價(jià)的核心要素，明確評(píng)價(jià)目標(biāo)，合理甄別各評(píng)價(jià)指標(biāo)的權(quán)重，分階段有序開展論證工作。評(píng)價(jià)工作的科學(xué)性還表現(xiàn)為評(píng)價(jià)指標(biāo)能適用于反饋專業(yè)群建設(shè)中多變量、大系統(tǒng)的各種新問題，以實(shí)際建設(shè)數(shù)據(jù)為依據(jù)，方便開展獨(dú)立評(píng)價(jià)活動(dòng)。

（二）可操作性原則

評(píng)價(jià)體系要適用于內(nèi)部評(píng)價(jià)、同業(yè)互評(píng)、外部評(píng)價(jià)等多種評(píng)價(jià)方式，既要涵蓋與預(yù)設(shè)的目標(biāo)、成果的橫向?qū)Ρ葍?nèi)容，又要包含與上一時(shí)段預(yù)期建設(shè)效果縱向?qū)Ρ鹊膬?nèi)容。根據(jù)專業(yè)群建設(shè)方案和上級(jí)主管部門評(píng)價(jià)要求，將建設(shè)任務(wù)轉(zhuǎn)換成可觀測(cè)、可檢測(cè)的評(píng)價(jià)指標(biāo)，做到有據(jù)可評(píng)、評(píng)價(jià)有序。如對(duì)教學(xué)團(tuán)隊(duì)建設(shè)的評(píng)價(jià)可以分級(jí)設(shè)計(jì)，既有“雙師”數(shù)量、專兼職教師結(jié)構(gòu)等通用指標(biāo)，又有領(lǐng)軍人物、能工巧匠等特色指標(biāo)，盡量避免主觀評(píng)價(jià)，增強(qiáng)評(píng)價(jià)的可操作性。

（三）定量性原則

在對(duì)專業(yè)群績(jī)效目標(biāo)定性分析的基礎(chǔ)上，將表征考核項(xiàng)目的數(shù)量指標(biāo)、質(zhì)量指標(biāo)、時(shí)效指標(biāo)和效益指標(biāo)等描述清楚，即便是一些定性考核的項(xiàng)目，也要以定量考核結(jié)果為依據(jù)，充分發(fā)揮大數(shù)據(jù)在評(píng)價(jià)中的賦能作用，確保評(píng)價(jià)結(jié)果客觀可信。以“人才培養(yǎng)模式創(chuàng)新”評(píng)價(jià)項(xiàng)為例，數(shù)量指標(biāo)反映的是學(xué)校在立德樹人文化體系、校企合作培養(yǎng)人才等方面完成的改革數(shù)量及學(xué)生受益人數(shù)等;質(zhì)量指標(biāo)反映的是人才模式創(chuàng)新效果和達(dá)到的水平，如教學(xué)成果獎(jiǎng)和學(xué)生獲獎(jiǎng)等級(jí)等;時(shí)效指標(biāo)反映的是建設(shè)完成度和效率情況;效益指標(biāo)反映的是此項(xiàng)改革所產(chǎn)生的成本效益和對(duì)社會(huì)、行業(yè)帶來的數(shù)量影響和對(duì)比效果。上述定量指標(biāo)為后期的可視化評(píng)估活動(dòng)奠定了數(shù)據(jù)基礎(chǔ)。

四、高水平專業(yè)群建設(shè)成效評(píng)價(jià)體系構(gòu)建

基于上述基本原則，本研究依據(jù)國(guó)家“雙高計(jì)劃”建設(shè)內(nèi)容和績(jī)效管理要求，借鑒中國(guó)特色高水平專業(yè)群建設(shè)經(jīng)驗(yàn)，結(jié)合南京科技職業(yè)學(xué)院省級(jí)高水平專業(yè)群建設(shè)成果，利用層次分析法[4]將高水平專業(yè)群建設(shè)成效評(píng)價(jià)問題分解為不同的評(píng)價(jià)組成因素，確定專業(yè)群建設(shè)產(chǎn)出數(shù)量、產(chǎn)出質(zhì)量、效益和滿意度等4個(gè)一級(jí)指標(biāo)，然后根據(jù)專業(yè)群建設(shè)的目標(biāo)鏈和標(biāo)準(zhǔn)鏈，從學(xué)校層面、專業(yè)群層面、課程層面、教師層面、學(xué)生層面、校企合作層面以及國(guó)際交流層面科學(xué)設(shè)計(jì)二級(jí)評(píng)價(jià)指標(biāo)及權(quán)重，以專家組專題會(huì)議的形式推敲各指標(biāo)項(xiàng)和權(quán)重值。具體做法是，若80%以上的專家勾選該指標(biāo)，則選用該指標(biāo)，否則舍棄該指標(biāo)項(xiàng)，三級(jí)指標(biāo)的設(shè)計(jì)也采用相同的做法進(jìn)行篩選，最后形成形成1～3級(jí)指標(biāo)矩陣。從1級(jí)指標(biāo)矩陣開始，由專家組按重要性或影響大小對(duì)其中的指標(biāo)進(jìn)行5級(jí)排序（排序過程中相同重要性的指標(biāo)可以賦予相同的權(quán)重分），按排序大小分別用數(shù)字5、4、3、2、1填充矩陣，然后按下列公式計(jì)算第i項(xiàng)指標(biāo)的權(quán)重值wi。

上式中fi是矩陣中第i項(xiàng)指標(biāo)的權(quán)重得分，其他2級(jí)和3級(jí)指標(biāo)矩陣也采用上述方法計(jì)算各指標(biāo)的權(quán)重，隨后逐項(xiàng)檢查并結(jié)合大家的意見，最終形成如表1所示的包含105個(gè)觀測(cè)點(diǎn)在內(nèi)的高水平專業(yè)群建設(shè)成效評(píng)價(jià)指標(biāo)體系。

基于上述評(píng)價(jià)指標(biāo)體系，利用下面式來計(jì)算高水平專業(yè)群建設(shè)成效的評(píng)價(jià)分值S。

公式中pk是第k個(gè)一級(jí)指標(biāo)的權(quán)重值，pki是第k個(gè)一級(jí)指標(biāo)下第i個(gè)二級(jí)指標(biāo)的權(quán)重，pkij是編號(hào)為ki的二級(jí)指標(biāo)下第j個(gè)三級(jí)指標(biāo)的權(quán)重，函數(shù) 的取值= ，

其中xkij是編號(hào)為kij的三級(jí)指標(biāo)的實(shí)際值，tkij是此項(xiàng)三級(jí)指標(biāo)的學(xué)校預(yù)設(shè)目標(biāo)值。經(jīng)過迭代計(jì)算，就能計(jì)算出建設(shè)成效的總體評(píng)估分值S。當(dāng)S<60時(shí)，評(píng)價(jià)結(jié)果為不合格，若60≤S<90，評(píng)價(jià)結(jié)果為合格，如S≥90，評(píng)價(jià)結(jié)果為優(yōu)秀。此外，利用上述公式還能逐項(xiàng)計(jì)算出目標(biāo)值與實(shí)際值之間的偏差，繪制出動(dòng)態(tài)的時(shí)效進(jìn)度曲線，體現(xiàn)“對(duì)比度”。另外，公式還可以分級(jí)統(tǒng)計(jì)出各一級(jí)或二級(jí)指標(biāo)的評(píng)價(jià)值，突出各評(píng)價(jià)值的結(jié)果導(dǎo)向作用。例如，產(chǎn)出質(zhì)量指標(biāo)中“人才培養(yǎng)模式創(chuàng)新”的評(píng)價(jià)值如果明顯偏低，則建設(shè)院校要加強(qiáng)教學(xué)改革力度，以教學(xué)要素體系改革為切入點(diǎn)，必要時(shí)需重新調(diào)整人才模式創(chuàng)新思路，以提高育人模式創(chuàng)新效果。

高水平專業(yè)群評(píng)價(jià)體系的構(gòu)建，為建設(shè)方、評(píng)價(jià)方及相關(guān)利益者之間建立共建共享數(shù)據(jù)鏈奠定了底層數(shù)據(jù)結(jié)構(gòu)和評(píng)價(jià)框架。運(yùn)用評(píng)價(jià)分值計(jì)算方法，不僅能分級(jí)統(tǒng)計(jì)建設(shè)成效和工作進(jìn)度，還能多維度分析專業(yè)群建設(shè)的質(zhì)量和效益，實(shí)現(xiàn)對(duì)高水平專業(yè)群的建設(shè)績(jī)效進(jìn)行客觀公正的評(píng)價(jià)，保證評(píng)價(jià)結(jié)果的可信度。同時(shí)，量化的評(píng)價(jià)結(jié)果可供院校參考決策，及時(shí)發(fā)現(xiàn)建設(shè)中存在的問題和不足，以便適時(shí)調(diào)整建設(shè)方向和力度，最終達(dá)到以評(píng)促建的目的。然而，評(píng)價(jià)活動(dòng)本身就是一個(gè)不斷動(dòng)態(tài)變化的過程，涉及的評(píng)價(jià)對(duì)象和狀態(tài)數(shù)據(jù)都因時(shí)而動(dòng)，本文的評(píng)價(jià)體系只是在南京科技職業(yè)學(xué)院實(shí)踐中得到應(yīng)用和檢驗(yàn)，其中的指標(biāo)和權(quán)重仍需在后續(xù)研究中進(jìn)一步優(yōu)化和完善。

參 考 文 獻(xiàn)

[1]王亞南，成軍，王斌.高職教育專業(yè)組群的邏輯依歸、形態(tài)表征與實(shí)踐方略——基于253個(gè)高水平專業(yè)群申報(bào)資料的質(zhì)性文本分析[J].高等教育研究，2021（4）：84-93.

[2]教育部，財(cái)政部.關(guān)于印發(fā)《中國(guó)特色高水平高職學(xué)校和專業(yè)建設(shè)計(jì)劃績(jī)效管理暫行辦法》的通知[EB/OL].（2020-12-23）[2021-07-09].http：//www.moe.gov.cn/srcsite/A07/moe_737/s3876_qt/202012/t20201225_507515.html.

[3]徐潔.“雙高”建設(shè)背景下高職院校內(nèi)部質(zhì)量保證體系診斷與改進(jìn)路徑[J].中國(guó)職業(yè)技術(shù)教育，2021（1）：81-87.

[4]馬燕，汪愛珠，郭惠芬，等.基于AHP的教師教育學(xué)科群評(píng)價(jià)指標(biāo)體系研究[J].現(xiàn)代教育管理，2021（7）：81-88.