高職院校構(gòu)建教師培訓(xùn)效果評估體系的實(shí)踐探索

夏 軍

(江海職業(yè)技術(shù)學(xué)院，江蘇 揚(yáng)州 225101)

0 引言

高職院校作為專業(yè)技術(shù)技能型人才培養(yǎng)的重要主體，是國家教育行業(yè)中不可或缺的一部分，擔(dān)負(fù)著為國家培育人才的重任。在高職院校日常發(fā)展中培訓(xùn)工作是重要部分，需要通過持續(xù)不斷地對教育者開展培訓(xùn)，使之緊跟時(shí)代步伐和大學(xué)生心理動(dòng)態(tài)，提升育人的精準(zhǔn)性和科學(xué)性。一項(xiàng)培訓(xùn)活動(dòng)是否能取得理想效果、培訓(xùn)投入是否值得，是培訓(xùn)工作需要考慮的重點(diǎn)問題。因此，為達(dá)到培訓(xùn)目的，選擇合理的評估方式去衡量培訓(xùn)過程就顯得十分有必要。構(gòu)建科學(xué)的評估體系對院校了解培訓(xùn)效果、界定培訓(xùn)對組織的貢獻(xiàn)、證明培訓(xùn)活動(dòng)的存在價(jià)值都具有重要意義，也正是如此需要在培訓(xùn)效果評估上“狠”下功夫。

1 高職院校構(gòu)建培訓(xùn)效果評估體系的內(nèi)涵價(jià)值

1.1 以評促“優(yōu)”，裁定培訓(xùn)價(jià)值

高職院校通過構(gòu)建培訓(xùn)效果評估體系，在培訓(xùn)活動(dòng)結(jié)束以后，按照體系標(biāo)準(zhǔn)和規(guī)范要求全面性評估教師參與培訓(xùn)的成效，能全方位了解其專業(yè)知識掌握情況、能力提升狀況，并明確培訓(xùn)管理服務(wù)的水平和質(zhì)量，從而幫助培訓(xùn)負(fù)責(zé)人及管理者及時(shí)發(fā)現(xiàn)培訓(xùn)活動(dòng)給組織帶來的影響，做出繼續(xù)開展培訓(xùn)活動(dòng)或終止培訓(xùn)活動(dòng)的決定。

1.2 以評促“學(xué)”，激發(fā)參訓(xùn)熱情

在高職院校培訓(xùn)效果評估中，評估數(shù)據(jù)最直接的來源就是參訓(xùn)人員，通過全面搜集參訓(xùn)人員的各類信息，并將其繪制成數(shù)據(jù)曲線，能充分了解參訓(xùn)人員在培訓(xùn)活動(dòng)中最真實(shí)的感受，明確培訓(xùn)的優(yōu)缺利弊[1]。具體而言，一方面可以準(zhǔn)確客觀反映評估結(jié)果，更深入地體現(xiàn)參訓(xùn)人員的價(jià)值和意愿；另一方面可以幫助教師深刻了解培訓(xùn)目標(biāo)和實(shí)施情況，明確后期發(fā)展方向，激發(fā)參訓(xùn)熱情。

1.3 以評促“改”，明確培訓(xùn)重點(diǎn)

培訓(xùn)師可以從評估結(jié)果中汲取經(jīng)驗(yàn)和教訓(xùn)，發(fā)現(xiàn)培訓(xùn)中存在的問題，找到培訓(xùn)活動(dòng)設(shè)置與學(xué)員需求之間的偏差，并及時(shí)采取合理措施糾正偏差，為后續(xù)更準(zhǔn)確有效地操作培訓(xùn)環(huán)節(jié)，及時(shí)改革調(diào)整培訓(xùn)技巧、培訓(xùn)方案、培訓(xùn)環(huán)境提供有利作用，從而促進(jìn)培訓(xùn)效果的提升，形成良性閉環(huán)。此外，學(xué)校還可以通過評估數(shù)據(jù)發(fā)現(xiàn)培訓(xùn)短板，綜合教師的意見，及時(shí)對培訓(xùn)方案進(jìn)行改進(jìn)。并在深度分析和探索下，對培訓(xùn)思路進(jìn)行開拓創(chuàng)新，發(fā)現(xiàn)新的培訓(xùn)需求，為新一輪培訓(xùn)工作的開展做好鋪墊。

2 高職院校構(gòu)建培訓(xùn)效果評估體系的主要內(nèi)容及實(shí)施原則

高職院校構(gòu)建培訓(xùn)效果評估體系，需要選擇合理的評估模型和評估流程。Kirkpatrick 在1959 年提出的培訓(xùn)效果評估模型——柯氏四級培訓(xùn)評估模式，能夠全方位反映培訓(xùn)結(jié)果，推動(dòng)每一個(gè)培訓(xùn)環(huán)節(jié)的高質(zhì)量開展。

2.1 柯氏四級培訓(xùn)評估模式的主要內(nèi)容

柯氏四級培訓(xùn)評估模式將受訓(xùn)者作為研究對象，從其對培訓(xùn)知識的理解和應(yīng)用層面出發(fā)，將總體培訓(xùn)劃分為四個(gè)層次，分別為反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層，每一個(gè)層次與下一個(gè)層次之間是逐步遞進(jìn)的關(guān)系，各層次評估目標(biāo)和評估內(nèi)容明確，能夠詳細(xì)診斷評估過程[2]。

2.1.1 反應(yīng)層

反應(yīng)層作為柯氏四層培訓(xùn)效果評估模式的第一層，其目的在于通過評估明確學(xué)員對評估方案、評估目標(biāo)、培訓(xùn)課程、作息時(shí)間安排及評估內(nèi)容等的反應(yīng)。

2.1.2 學(xué)習(xí)層

學(xué)習(xí)層的目的在于了解學(xué)員對培訓(xùn)知識的理解與掌握程度，如通過評估分析學(xué)員是否對培訓(xùn)知識有了深刻了解，培訓(xùn)活動(dòng)是否對學(xué)員起到了一定的“增益”作用。只有學(xué)員掌握知識，才能在后續(xù)工作中發(fā)揮知識的作用。

2.1.3 行為層

行為層屬于實(shí)踐活動(dòng)層面的評估，目的是通過評估明確培訓(xùn)前后學(xué)員的工作表現(xiàn)是否發(fā)生了變化，崗位活動(dòng)是否出現(xiàn)了創(chuàng)新等。即借助評估了解學(xué)員有沒有將培訓(xùn)知識運(yùn)用于工作實(shí)踐中，分析培訓(xùn)是否對學(xué)員工作起到了真正的指導(dǎo)作用。

2.1.4 結(jié)果層

作為四級評估體系的最后一層，結(jié)果層的目的在于衡量組織業(yè)績變化，分析學(xué)員參與培訓(xùn)之后，行為變化有沒有為組織發(fā)展帶來積極作用。結(jié)果層是四級培訓(xùn)體系中最關(guān)鍵的一層，只有組織整體運(yùn)行結(jié)果向好的方向變化，才說明培訓(xùn)活動(dòng)發(fā)揮出了其真正作用。

2.2 柯氏四級培訓(xùn)評估模式的實(shí)施原則

2.2.1 完整性原則

柯氏四級培訓(xùn)評估模式從四個(gè)不同的層面開展評估活動(dòng)，注重評估的全面性和完整性，所以無論在設(shè)定評估指標(biāo)的過程中，還是在構(gòu)建評估體系的過程中，都應(yīng)當(dāng)注重完整性，結(jié)合培訓(xùn)活動(dòng)的內(nèi)外部影響因素，關(guān)注每一個(gè)層面的內(nèi)容。還應(yīng)充分考慮定性指標(biāo)和定量指標(biāo)、財(cái)務(wù)指標(biāo)和非財(cái)務(wù)指標(biāo)、靜態(tài)指標(biāo)與動(dòng)態(tài)指標(biāo)內(nèi)容，在綜合分析與全面探索的基礎(chǔ)上構(gòu)建動(dòng)態(tài)化、完整性、可視化、“可編輯”的評估體系。

2.2.2 可操作原則

任何評估活動(dòng)都是有目的的，高職院校構(gòu)建培訓(xùn)效果評估體系也一樣，目的是通過評估活動(dòng)檢驗(yàn)培訓(xùn)成效，提升培訓(xùn)質(zhì)量。因此在構(gòu)建評估體系的過程中，要注重各項(xiàng)指標(biāo)的選擇，盡量對指標(biāo)進(jìn)行量化，并遵循可獲取原則，能夠真正通過各類指標(biāo)反映培訓(xùn)情況，最終在可量化的指標(biāo)下構(gòu)建操作性強(qiáng)的評估體系[3]。

2.2.3 最小性原則

要確保各項(xiàng)指標(biāo)具有較高的完善性，所選擇的指標(biāo)應(yīng)當(dāng)能夠準(zhǔn)確衡量培訓(xùn)效果各指標(biāo)的最小集合，如此可以避免指標(biāo)冗繁或重復(fù)。這就要求相關(guān)人員在選擇指標(biāo)過程中要盡量選擇信息量大、代表性強(qiáng)的關(guān)鍵指標(biāo)，確保每一個(gè)指標(biāo)都可以發(fā)揮出最大化作用。

3 高職院校培訓(xùn)效果評估體系的具體構(gòu)建

3.1 篩選評估指標(biāo)

評估指標(biāo)篩選是評估活動(dòng)開展的首要步驟，應(yīng)確保評估指標(biāo)的合理性，做到謹(jǐn)慎性選擇和精細(xì)化篩選。學(xué)校通過問卷調(diào)查、專家訪談、層次分析等方法全方位搜集數(shù)據(jù)信息，篩選出最終的評估指標(biāo)。首先，針對準(zhǔn)受訓(xùn)教師開展問卷調(diào)查，借助問卷了解評估指標(biāo)的具體選擇方向；其次，以院系領(lǐng)導(dǎo)、專業(yè)教師、院質(zhì)量管理人員、培訓(xùn)督導(dǎo)評估專家、培訓(xùn)業(yè)務(wù)管理專家等為主要對象開展訪談活動(dòng)，通過深度訪談進(jìn)一步完善優(yōu)化評估指標(biāo)的初步構(gòu)想；最后通過層次分析對指標(biāo)進(jìn)行修改補(bǔ)充，確定最終指標(biāo)。在此基礎(chǔ)上，文章根據(jù)江海職業(yè)技術(shù)學(xué)院培訓(xùn)活動(dòng)實(shí)際需求選出符合目標(biāo)要求的2 個(gè)一級指標(biāo)、6 個(gè)二級指標(biāo)和12 個(gè)三級指標(biāo)。分別如下:

2 個(gè)一級指標(biāo):個(gè)人學(xué)習(xí)效果評估、組織績效效果評估。

6 個(gè)二級指標(biāo):知識掌握狀況、行為變化狀況、個(gè)人績效變化狀況、組織滿意度、組織內(nèi)部流程與成長、組織財(cái)務(wù)變化。

12 個(gè)三級指標(biāo):12 個(gè)三級指標(biāo)分別對應(yīng)6 個(gè)二級指標(biāo)，每1 個(gè)二級指標(biāo)對應(yīng)2 個(gè)三級指標(biāo)，即知識掌握狀況對應(yīng)的三級指標(biāo)為知識理解情況、知識應(yīng)用狀況；行為變化狀況對應(yīng)的三級指標(biāo)為工作態(tài)度、工作能力；個(gè)人績效變化狀況對應(yīng)的三級指標(biāo)為工作質(zhì)量變化狀況、工作效率提升狀況；組織滿意度對應(yīng)的三級指標(biāo)為教師忠誠度、學(xué)生投訴率；組織內(nèi)部流程與成長對應(yīng)的三級指標(biāo)為教學(xué)流程合理率、教學(xué)效果好轉(zhuǎn)率；組織財(cái)務(wù)變化對應(yīng)的三級指標(biāo)為人才培育與市場需求聚焦率、人才培養(yǎng)質(zhì)量。

3.2 設(shè)置指標(biāo)權(quán)重

在高職院校培訓(xùn)效果評估中，依據(jù)各組成要素在整體中所發(fā)揮的作用大小和所處重要程度，賦予不同的數(shù)值。以此能明確考核重點(diǎn)，使培訓(xùn)評估更為客觀準(zhǔn)確。在具體權(quán)重設(shè)置中采用了層次分析法，基于不同評估指標(biāo)構(gòu)建階梯形層次結(jié)構(gòu)，形成兩兩判斷矩陣。并運(yùn)用問卷調(diào)查的途徑由相關(guān)專家依據(jù)1～9 比例標(biāo)度法，將位于同一個(gè)子集中的指標(biāo)相較于上一級指標(biāo)的重要性進(jìn)行兩兩比較，最終得出判斷矩陣。在此基礎(chǔ)上，將本子集不同指標(biāo)對應(yīng)的重要性次序權(quán)值，歸結(jié)為計(jì)算判斷矩陣的特征向量問題，從而確定單層權(quán)重子集。在開展一次性檢驗(yàn)之后，借助同樣途徑確定總層權(quán)重子集，并開展一致性檢驗(yàn)。檢驗(yàn)通過后，對不同指標(biāo)的權(quán)重進(jìn)行最終確定，得出院校培訓(xùn)效果評估指標(biāo)體系。具體權(quán)重計(jì)算如下:

一級指標(biāo):個(gè)人學(xué)習(xí)效果評估、組織績效效果評估對應(yīng)權(quán)重分別為0.6、0.4。

二級指標(biāo):知識掌握狀況0.24、行為變化狀況0.18、個(gè)人績效變化狀況0.18、組織滿意度0.2、組織內(nèi)部流程與成長0.12、組織財(cái)務(wù)變化0.08。

三級指標(biāo):知識理解情況0.138、知識應(yīng)用狀況0.136、工作態(tài)度0.087、工作能力0.068、工作質(zhì)量變化狀況0.048、工作效率提升狀況0.047、教師忠誠度0.109、學(xué)生投訴率0.108、教學(xué)流程合理率0.049、教學(xué)效果好轉(zhuǎn)率0.035、人才培育與市場需求聚焦率0.022、人才培養(yǎng)質(zhì)量0.045。

3.3 確定評估方法

選擇評估方法是評估活動(dòng)開展的基礎(chǔ)，根據(jù)柯氏四級培訓(xùn)評估模式，針對每一層的評估需求，選擇如下評估方法:

3.3.1 反應(yīng)層:訪談法

在院校內(nèi)部選擇20 位受訓(xùn)者，通過電話或面對面方式開展深度訪談，了解其對培訓(xùn)活動(dòng)的感受，包括對培訓(xùn)時(shí)間的設(shè)置是否滿意、對培訓(xùn)活動(dòng)的內(nèi)容是否贊同、對培訓(xùn)師及培訓(xùn)環(huán)境是否滿意等，通過聽取其意見或建議，積累培訓(xùn)經(jīng)驗(yàn)，彌補(bǔ)培訓(xùn)工作中的不足，為改進(jìn)培訓(xùn)基礎(chǔ)環(huán)境做好保障。通過匯總訪談結(jié)果發(fā)現(xiàn)，20 位受訓(xùn)者對培訓(xùn)活動(dòng)整體較為滿意，但仍然有一些人員認(rèn)為培訓(xùn)活動(dòng)存在不足，尤其是對培訓(xùn)時(shí)間的意見較大。說明在后續(xù)培訓(xùn)中應(yīng)盡量合理安排培訓(xùn)時(shí)間，避免安排在節(jié)假日，并對培訓(xùn)環(huán)境進(jìn)行改善，盡量不激發(fā)參訓(xùn)者的抵觸情緒，最大限度提升培訓(xùn)效果。

3.3.2 學(xué)習(xí)層:測試法

通過筆試的方式考核參訓(xùn)者所學(xué)理論知識的掌握程度，即培訓(xùn)部門負(fù)責(zé)人根據(jù)受訓(xùn)者崗位工作狀況及培訓(xùn)內(nèi)容制作一張?jiān)嚲恚髤⒂?xùn)者在規(guī)定時(shí)間內(nèi)完成試卷作答，并上交。后續(xù)由培訓(xùn)工作者對試卷作答狀況進(jìn)行批改，并將結(jié)果匯總成表格。根據(jù)對表格的分析發(fā)現(xiàn)，大部分參訓(xùn)者對理論知識掌握程度較好，總體得分都超過及格線，不過也發(fā)現(xiàn)培訓(xùn)中存在一些小問題，如課程重點(diǎn)內(nèi)容的安排不夠突出，導(dǎo)致二級評估中的重點(diǎn)偏離課程目標(biāo)。

3.3.3 行為層:360 度績效考核法

對參訓(xùn)者參訓(xùn)后的工作表現(xiàn)進(jìn)行觀察和統(tǒng)計(jì)，首先安排相關(guān)專業(yè)人員負(fù)責(zé)對參訓(xùn)者工作過程進(jìn)行觀察，明確參訓(xùn)前后工作行為是否出現(xiàn)變化，分析培訓(xùn)活動(dòng)是否對參訓(xùn)者工作產(chǎn)生了實(shí)際影響。通過觀察發(fā)現(xiàn)，大部分受訓(xùn)者在工作中都對培訓(xùn)內(nèi)容進(jìn)行了運(yùn)用，部分參訓(xùn)者還積極借助培訓(xùn)知識對工作方法進(jìn)行創(chuàng)新，取得了一定的成效。然后采用360 度績效考核法對參訓(xùn)者進(jìn)行考核，發(fā)動(dòng)同事、上級、下屬、學(xué)生等多層面多主體的作用，通過對參訓(xùn)者近三個(gè)月的工作績效與受訓(xùn)之前比較，及各主體的反饋發(fā)現(xiàn)，大部分參訓(xùn)者工作績效都有所提升，但總體提升效果不是十分顯著?？紤]到培訓(xùn)活動(dòng)屬于一項(xiàng)潛在效益活動(dòng)，對參訓(xùn)者的反應(yīng)很多時(shí)候不會(huì)在近期直接表現(xiàn)出來，所以該結(jié)果在預(yù)料之中。與此同時(shí)，為深度挖掘和掌握參訓(xùn)者對知識的理解深度，又組織參訓(xùn)者開展了“分享行動(dòng)計(jì)劃”，要求參訓(xùn)者將自己在培訓(xùn)中學(xué)到的知識分享給其他教師，在單位內(nèi)部集中開展一次交流活動(dòng)，旨在借助該項(xiàng)活動(dòng)進(jìn)一步檢驗(yàn)參訓(xùn)者對培訓(xùn)內(nèi)容的掌握狀況，并通過分享和交流開闊視野，深化對知識的吸收。

3.3.4 結(jié)果層:統(tǒng)計(jì)分析法

對參訓(xùn)者個(gè)人、專業(yè)及院系近六個(gè)月的“業(yè)績”變化狀況進(jìn)行統(tǒng)計(jì)，明確參訓(xùn)之后工作質(zhì)量、個(gè)人業(yè)績是否得到提升，專業(yè)人才培養(yǎng)業(yè)績有無顯著上升，院校人才培養(yǎng)整體業(yè)績是否相較于以前有所增加，明確培訓(xùn)活動(dòng)最終是否發(fā)揮出預(yù)期效益。通過對參訓(xùn)者個(gè)人、專業(yè)及院系人才培養(yǎng)工作進(jìn)行6 個(gè)月的跟蹤統(tǒng)計(jì)分析發(fā)現(xiàn)，這三者都呈現(xiàn)上升態(tài)勢，說明本次培訓(xùn)對院校人才培育工作起到了好的作用，初步實(shí)現(xiàn)預(yù)期目標(biāo)。

3.4 匯總評估結(jié)果

匯總評估結(jié)果是評估活動(dòng)開展的最后一項(xiàng)工作，其目的在于對整個(gè)評估過程進(jìn)行系統(tǒng)分析，通過有效分析，明確評估活動(dòng)的開展情況。在上述評估方法中，已針對每一層評估做出了梳理與分析，明確了具體培訓(xùn)成效，但培訓(xùn)成效明確的目的在于檢驗(yàn)培訓(xùn)活動(dòng)是否對院校發(fā)展起到有益作用，其作用在于院校層面，且重點(diǎn)在于完善和優(yōu)化培訓(xùn)活動(dòng)。而匯總評估結(jié)果則是為了對評估活動(dòng)開展的全過程進(jìn)行總結(jié)與反思，其作用在于評估層面，目的在于推進(jìn)下次評估活動(dòng)的更完善開展。因此，上述培訓(xùn)成果梳理不能等同于評估結(jié)果匯總。在這一步，院校應(yīng)當(dāng)安排專業(yè)參評人員充分開展討論分析，整理每一個(gè)評估環(huán)節(jié)的數(shù)據(jù)信息，并基于各種數(shù)據(jù)信息探索評估活動(dòng)開展得是否合理、有沒有需要改進(jìn)的地方，最終制作匯總評估表，明確注意事項(xiàng)，為下次評估做好鋪墊。

基于高職院校特殊的性質(zhì)，構(gòu)建培訓(xùn)效果評估體系對院校發(fā)展至關(guān)重要，既是推動(dòng)院校高質(zhì)量發(fā)展的有效路徑，也是提升院校人才培養(yǎng)水準(zhǔn)、實(shí)現(xiàn)院校與企業(yè)緊密對接的有力武器。將柯氏四級培訓(xùn)評估模式應(yīng)用于高職院校培訓(xùn)效果評估中，能從更精細(xì)、更全面的層面開展評估活動(dòng)，將有助于評估工作的創(chuàng)新。