KirkPatrick四層次評(píng)估模型在新疆少數(shù)民族科技骨干特殊培養(yǎng)效果評(píng)估中的應(yīng)用

劉瑩　肖靜

摘要：新疆少數(shù)民族科技骨干特殊培養(yǎng)是經(jīng)國(guó)務(wù)院批準(zhǔn)，針對(duì)新疆少數(shù)民族專業(yè)技術(shù)人員的特殊培養(yǎng)工作。本研究運(yùn)用Kirkpatrick四層次評(píng)估模型，通過實(shí)地訪談和問卷調(diào)查的方式，對(duì)特培工作實(shí)施效果進(jìn)行評(píng)價(jià)，了解特培工作實(shí)施現(xiàn)狀，對(duì)特培工作改善提出建議，并對(duì)培訓(xùn)效果評(píng)估有效實(shí)施提出改進(jìn)措施。

關(guān)鍵詞：少數(shù)民族 特殊培養(yǎng) 效果評(píng)價(jià) 新疆

一、問題提出

新疆是多民族聚居區(qū)，少數(shù)民族占全區(qū)人口的61.5%。截止2014年底，全區(qū)少數(shù)民族專業(yè)技術(shù)人員29.44萬人，占全區(qū)專業(yè)技術(shù)人員總數(shù)的58.37%。南疆四地州少數(shù)民族專業(yè)技術(shù)人員15.21萬人，占南疆專業(yè)技術(shù)人員總數(shù)的80.43%。在各類人才隊(duì)伍中，少數(shù)民族科技人才隊(duì)伍占有很大的比重。少數(shù)民族人才隊(duì)伍是推動(dòng)新疆社會(huì)發(fā)展、經(jīng)濟(jì)繁榮以及維護(hù)民族團(tuán)結(jié)、社會(huì)穩(wěn)定的重要力量，加強(qiáng)少數(shù)民族人才隊(duì)伍建設(shè)事關(guān)新疆社會(huì)穩(wěn)定和長(zhǎng)治久安的全局。

黨中央、國(guó)務(wù)院和自治區(qū)黨委、自治區(qū)人民政府歷來高度重視新疆少數(shù)民族人才隊(duì)伍建設(shè)，特別是1992年以來，國(guó)家根據(jù)新疆的特殊戰(zhàn)略地位和人才發(fā)展現(xiàn)狀，實(shí)施了專門針對(duì)新疆少數(shù)民族科技骨干的特殊培養(yǎng)工作（以下簡(jiǎn)稱“特培”），從自治區(qū)科研、教育、衛(wèi)生、工業(yè)、農(nóng)業(yè)、信息產(chǎn)業(yè)、經(jīng)濟(jì)管理等系統(tǒng)，選拔具有較大培養(yǎng)潛力的少數(shù)民族中青年科技骨干，安排到有關(guān)部委、省市和新疆所屬科研院所、大專院校、醫(yī)療衛(wèi)生系統(tǒng)和高新技術(shù)企業(yè)，進(jìn)行為期數(shù)月至兩年的特殊培養(yǎng)。

本研究在分析第四批特培工作實(shí)施現(xiàn)狀的基礎(chǔ)上，運(yùn)用Kirkpatrick四層次評(píng)估模型對(duì)特培效果進(jìn)行評(píng)價(jià)，并對(duì)培訓(xùn)效果評(píng)估有效實(shí)施提出改進(jìn)措施，使少數(shù)民族特培工作最大限度地發(fā)揮其應(yīng)有的作用，加快新疆少數(shù)民族高層次專業(yè)技術(shù)人才培養(yǎng)，推動(dòng)少數(shù)民族地區(qū)社會(huì)經(jīng)濟(jì)的可持續(xù)發(fā)展。

二、調(diào)查對(duì)象與數(shù)據(jù)收集

截止2014年，全疆共派出第四批特培學(xué)員1378人，分別來自科教文衛(wèi)等多個(gè)行業(yè)，本次調(diào)研，調(diào)研組深入烏魯木齊、昌吉以及阿克蘇地區(qū)，走訪了11個(gè)調(diào)研單位，組織了各種類型的訪談42次，收回有效調(diào)查問卷共計(jì)122份。

三、調(diào)查結(jié)果

Kirkpatrick評(píng)估模型主要以受訓(xùn)學(xué)員作為評(píng)估效果的對(duì)象，根據(jù)評(píng)估對(duì)象的活動(dòng)狀況，分別從反應(yīng)層、學(xué)習(xí)層、行為層和結(jié)果層四個(gè)層級(jí)對(duì)培訓(xùn)效果進(jìn)行評(píng)估。

1.反應(yīng)層評(píng)估

反應(yīng)層評(píng)估，主要評(píng)估學(xué)員對(duì)培訓(xùn)的滿意程度，具體指受訓(xùn)者對(duì)培訓(xùn)內(nèi)容、授課教師、培訓(xùn)方式方法以及培訓(xùn)管理和保障等的反應(yīng)，是受訓(xùn)者在接受培訓(xùn)后對(duì)培訓(xùn)活動(dòng)的各種主觀感受，結(jié)合所有人的總體反應(yīng)得出對(duì)培訓(xùn)效果的基本評(píng)價(jià)。反應(yīng)層評(píng)估指標(biāo)主要有培訓(xùn)滿意度指標(biāo)、培訓(xùn)組織指標(biāo)、課程內(nèi)容指標(biāo)、培訓(xùn)導(dǎo)師指標(biāo)、培訓(xùn)保障指標(biāo)等。

學(xué)員們根據(jù)自己對(duì)所接受培訓(xùn)的實(shí)際感受，采用李克特五點(diǎn)量表，分別從以上幾項(xiàng)反應(yīng)層評(píng)估指標(biāo)報(bào)告自己的滿意程度。將學(xué)員對(duì)各方面的滿意度評(píng)定分?jǐn)?shù)進(jìn)行加權(quán)平均，得出學(xué)員對(duì)反應(yīng)層各項(xiàng)指標(biāo)的分值。

由表1可以看出，學(xué)員對(duì)特培的總體滿意率為76.2%，特培項(xiàng)目達(dá)到了預(yù)期的目的。84%的學(xué)員認(rèn)為特培的組織管理較好，可見，特培的組織管理情況得到了大部分學(xué)員的認(rèn)可。63.1%的受訓(xùn)學(xué)員認(rèn)為課程內(nèi)容設(shè)計(jì)合理，說明特培課程在設(shè)計(jì)上較完善的考慮了受訓(xùn)學(xué)員的培訓(xùn)需求。學(xué)員不滿意的原因反映在部分課程理論性過強(qiáng)，與實(shí)踐工作結(jié)合不緊密。以課堂講授為主的授課形式缺乏與導(dǎo)師之間的互動(dòng)。學(xué)員建議采用多樣化的授課方式，如討論、參觀、實(shí)習(xí)等，將理論與實(shí)踐相結(jié)合，增強(qiáng)學(xué)員的參與度。89.4%的學(xué)員對(duì)特培導(dǎo)師的教學(xué)水平表示認(rèn)可，學(xué)員認(rèn)為大部分導(dǎo)師專業(yè)水平高、研究能力強(qiáng)，并且樂于分享資源，在導(dǎo)師的指導(dǎo)下自己的專業(yè)能力得到了提高。對(duì)導(dǎo)師教學(xué)水平表示不滿意的學(xué)員反映少數(shù)導(dǎo)師對(duì)特培學(xué)員不重視，加之自身工作繁忙，對(duì)于學(xué)員的指導(dǎo)和關(guān)心不夠。調(diào)查當(dāng)中發(fā)現(xiàn)，絕大部分少數(shù)民族科技骨干有著強(qiáng)烈的更新知識(shí)結(jié)構(gòu)和提高自身素質(zhì)的訴求，因此84.4%的學(xué)員表示如果有機(jī)會(huì)愿意再次參加特培項(xiàng)目，并希望自己反饋的問題和提出的建議能夠幫助特培工作的改進(jìn)。

得分相對(duì)較低的項(xiàng)目是生活條件以及經(jīng)費(fèi)保障，通過訪談了解部分培養(yǎng)單位提供的住宿條件較差，有些是設(shè)施簡(jiǎn)陋，有些是交通不便。另外，部分學(xué)員對(duì)培養(yǎng)經(jīng)費(fèi)的使用及保障情況不是很了解。

2.學(xué)習(xí)層面評(píng)估

學(xué)習(xí)層面評(píng)估，主要測(cè)評(píng)受訓(xùn)學(xué)員通過培訓(xùn)學(xué)到了什么，即評(píng)估學(xué)員學(xué)到了哪些知識(shí)、學(xué)員掌握或提升了哪些技能、學(xué)員在哪些態(tài)度上發(fā)生了轉(zhuǎn)變。它是從受訓(xùn)者的角度通過對(duì)培訓(xùn)內(nèi)容（包括原理、知識(shí)、技能、態(tài)度等）的掌握水平來反映培訓(xùn)績(jī)效情況的。學(xué)習(xí)層評(píng)估指標(biāo)主要有學(xué)員對(duì)知識(shí)的掌握情況指標(biāo)和學(xué)員對(duì)技能的掌握情況指標(biāo)。

特培學(xué)員在知識(shí)和技能方面的提升如表2所示，受訪的學(xué)員中106人次認(rèn)為專業(yè)技術(shù)水平有提升，比重達(dá)86.9%；89人次認(rèn)為自己的業(yè)務(wù)能力有提升，比重達(dá)73.6%；81人次認(rèn)為特培有助于轉(zhuǎn)變觀念、開拓視野，比重達(dá)66.4%。從調(diào)查結(jié)果看，特培學(xué)員在專業(yè)知識(shí)與技能方面不同程度的得到了提高。

另外，從學(xué)員提交的特培學(xué)習(xí)心得中了解到，大部分學(xué)員認(rèn)為此次培訓(xùn)滿足了自己的工作和學(xué)習(xí)需要，較大程度地幫助了自己開展本職工作。部分學(xué)員認(rèn)為此次培訓(xùn)開拓了視野，部分學(xué)員認(rèn)為此次培訓(xùn)對(duì)自己與國(guó)內(nèi)先進(jìn)技術(shù)水平以及學(xué)術(shù)前沿接軌起了較大的作用，同時(shí)對(duì)今后特培組織管理的諸多環(huán)節(jié)提出了建設(shè)性意見。

3.行為層評(píng)估

行為層評(píng)估，反映受訓(xùn)學(xué)員將知識(shí)、技能運(yùn)用和發(fā)揮在工作崗位上并提高工作績(jī)效的程度，用以判斷所學(xué)知識(shí)、技能對(duì)實(shí)際工作的影響。

對(duì)于行為層評(píng)估，采用抽樣訪談的形式。隨機(jī)抽取各單位特培學(xué)員作為評(píng)估對(duì)象，對(duì)受訓(xùn)學(xué)員的直接上級(jí)以及人事部領(lǐng)導(dǎo)進(jìn)行了訪談。訪談的主要內(nèi)容包括學(xué)員參加特培后，其工作態(tài)度、漢語水平、團(tuán)隊(duì)合作意識(shí)、科技論文寫作、科研項(xiàng)目申報(bào)等幾方面的改變情況。訪談中了解到，一些學(xué)員的工作態(tài)度發(fā)生了變化，比以前更加刻苦敬業(yè)，思想政治水平有了顯著提高；一些學(xué)員的漢語水平明顯提高，使用漢語進(jìn)行日常溝通和工作交流都更加得心應(yīng)手；一些學(xué)員管理水平得到提升，團(tuán)隊(duì)合作意識(shí)明顯增強(qiáng)；有些學(xué)員的科技論文寫作以及科研能力得到提升，積極申請(qǐng)科研項(xiàng)目并且中標(biāo)率較高。

4.結(jié)果層評(píng)估

結(jié)果層評(píng)估，將評(píng)估上升到組織的高度，即判斷培訓(xùn)對(duì)受訓(xùn)者所在組織的改善是否起到一定的作用。

在走訪的地區(qū)和單位中，特培學(xué)員在所在單位和當(dāng)?shù)禺a(chǎn)生了良好的示范帶頭作用。被調(diào)查的122名第四批特培學(xué)員學(xué)成后，共承擔(dān)課題44項(xiàng)，其中國(guó)家級(jí)9項(xiàng)、省部級(jí)15項(xiàng)、地廳級(jí)20項(xiàng)；發(fā)表論文234篇，其中核心期刊132篇，非核心期刊102篇；科研成果獲國(guó)家級(jí)獎(jiǎng)項(xiàng)2人、省部級(jí)獎(jiǎng)項(xiàng)4人、市縣級(jí)獎(jiǎng)1人（見表3）。

四、培訓(xùn)效果評(píng)估有效實(shí)施的改進(jìn)措施

1.加大組織支持力度

特培項(xiàng)目的有效實(shí)施以及實(shí)施效果的評(píng)估有賴于各部門主管的支持，組織支持是一個(gè)持續(xù)的過程，貫穿于培訓(xùn)的各個(gè)環(huán)節(jié)，組織支持可以說是培訓(xùn)活動(dòng)成功的關(guān)鍵因素。為獲得組織的支持和領(lǐng)導(dǎo)的重視，應(yīng)及時(shí)將培訓(xùn)的顯著成效反映給各部門領(lǐng)導(dǎo)，需要用有說服力的量化數(shù)據(jù)來增加組織對(duì)項(xiàng)目的信心并給予持續(xù)的支持，這將進(jìn)一步提高培訓(xùn)效果評(píng)估的準(zhǔn)確性，為評(píng)估爭(zhēng)取所需資源。

2.選擇合適的評(píng)估者

作為特培評(píng)估的主體，如何選擇合適的評(píng)估者是開始培訓(xùn)效果評(píng)估之前需要慎重考慮的問題。通?？梢詫⒃u(píng)估者分為內(nèi)部評(píng)估者和外部評(píng)估者，內(nèi)部評(píng)估者隸屬于組織內(nèi)部，可以由選送單位領(lǐng)導(dǎo)、培養(yǎng)單位主管人員、人社廳負(fù)責(zé)人組成。外部評(píng)估者主要來自組織之外，如科研機(jī)構(gòu)、大學(xué)和咨詢公司等。內(nèi)外部評(píng)估者具有各自的優(yōu)缺點(diǎn)，內(nèi)部評(píng)估者相對(duì)更了解項(xiàng)目特點(diǎn)和實(shí)施情況，但是容易在評(píng)估過程中加入個(gè)人感情，影響評(píng)估結(jié)果客觀性；外部評(píng)估者掌握較為專業(yè)的評(píng)估技術(shù)和方法，立場(chǎng)中立，但是需要一定時(shí)間了解項(xiàng)目?jī)?nèi)容。在選擇評(píng)估者時(shí)應(yīng)考慮特培項(xiàng)目本身的特點(diǎn)、評(píng)估目的等諸多因素，必要時(shí)可采用內(nèi)外部評(píng)估相結(jié)合的方式。

3.合理反饋培訓(xùn)效果評(píng)估結(jié)果

對(duì)培訓(xùn)效果評(píng)估結(jié)果進(jìn)行反饋是推進(jìn)評(píng)估結(jié)果實(shí)施的重要環(huán)節(jié)，通過向不同參與主體及時(shí)合理反饋評(píng)估結(jié)果，達(dá)到改進(jìn)和調(diào)整項(xiàng)目實(shí)施的目的。

反饋給培養(yǎng)單位，培養(yǎng)單位可以根據(jù)學(xué)員的意見反饋，對(duì)課程內(nèi)容和培養(yǎng)方式進(jìn)行調(diào)整，以便更好地滿足學(xué)員需要，以此不斷改進(jìn)培養(yǎng)工作質(zhì)量。反饋給特培學(xué)員，使他們了解培訓(xùn)的效果，體會(huì)培訓(xùn)前后自己各方面的變化和業(yè)績(jī)表現(xiàn)，有助于充分發(fā)揮培訓(xùn)所學(xué)，進(jìn)一步提升自我，同時(shí)也為下一批特培學(xué)員做出示范。反饋給特培學(xué)員的單位領(lǐng)導(dǎo)，他們是培訓(xùn)效果體現(xiàn)的直接觀察者，有切身的感受，能夠比學(xué)員更加客觀的評(píng)價(jià)培訓(xùn)項(xiàng)目的價(jià)值，因此他們對(duì)評(píng)估結(jié)果的跟蹤反饋是非常重要的。反饋給人社廳，人社廳負(fù)責(zé)人主要通過培訓(xùn)效果評(píng)估結(jié)果了解培訓(xùn)投資回報(bào)情況，培訓(xùn)效果評(píng)估結(jié)果也是調(diào)整培訓(xùn)相關(guān)政策的重要依據(jù)。及時(shí)的信息反饋，能夠促進(jìn)管理部門和選送單位對(duì)特培項(xiàng)目的了解和重視，能夠調(diào)動(dòng)特培學(xué)員的積極性，不斷提高自身素質(zhì)和工作水平。

4.完善培訓(xùn)評(píng)估制度

（1）建立正式有效的溝通機(jī)制。由于特培項(xiàng)目涉及到多個(gè)部門，因此培訓(xùn)效果評(píng)估過程要得到各部門的一致認(rèn)同和堅(jiān)強(qiáng)的執(zhí)行力還需要加強(qiáng)合作與交流。自治區(qū)人社廳、選送單位、培養(yǎng)單位以及學(xué)員之間應(yīng)保持密切聯(lián)系，及時(shí)交流培訓(xùn)情況。人社廳應(yīng)積極了解不同工作領(lǐng)域?qū)W員的具體培訓(xùn)需求，尊重學(xué)員對(duì)于培養(yǎng)單位的選擇；選送單位應(yīng)與學(xué)員和培養(yǎng)單位定期交流，及時(shí)發(fā)現(xiàn)問題，提出建議；培養(yǎng)單位應(yīng)充分了解選送單位的工作需要以及學(xué)員的自身訴求，有針對(duì)性地設(shè)計(jì)和調(diào)整培養(yǎng)計(jì)劃。各部門間的定期溝通交流可通過多樣化的渠道提高溝通效率和有效性，如電視電話會(huì)議、電子郵件、內(nèi)部網(wǎng)絡(luò)平臺(tái)等。

（2）建立并完善績(jī)效考評(píng)制度?？?jī)效考評(píng)不但可以發(fā)現(xiàn)和找出培訓(xùn)需求，據(jù)此制訂培訓(xùn)措施與計(jì)劃，還可以檢查培訓(xùn)效果，有助于提高培訓(xùn)效果評(píng)估工作效率和質(zhì)量。不僅要對(duì)特培學(xué)員進(jìn)行績(jī)效考核，還應(yīng)將特培工作與選送單位和培養(yǎng)單位的績(jī)效考核掛鉤。對(duì)工作突出的選送單位和培養(yǎng)單位進(jìn)行嘉獎(jiǎng)，并作為典型進(jìn)行經(jīng)驗(yàn)分享，對(duì)存在問題的相關(guān)單位提出整改意見。

（3）建立科學(xué)、有效的數(shù)據(jù)收集系統(tǒng)。數(shù)據(jù)收集系統(tǒng)的建立是開展培訓(xùn)效果評(píng)估必不可少的工作之一，是項(xiàng)目基礎(chǔ)管理的重要組成部分。特培項(xiàng)目的反饋結(jié)果應(yīng)及時(shí)歸檔整理，完整記錄和保存評(píng)估過程中收集的原始數(shù)據(jù)資料以及分析結(jié)果等，并建立一個(gè)信息系統(tǒng)，以便于今后的查找分析，為以后的培訓(xùn)工作提供支持。