柯氏模型在安全培訓(xùn)效果評(píng)估中的應(yīng)用探索

嚴(yán)向宏

摘 要 培訓(xùn)效果評(píng)估是考察是否達(dá)到培訓(xùn)目標(biāo)、分析培訓(xùn)體系是否有效的重要途徑。基于柯氏四層級(jí)評(píng)估理論構(gòu)建了企業(yè)安全培訓(xùn)效果評(píng)估模型，同時(shí)結(jié)合模糊綜合評(píng)價(jià)的數(shù)學(xué)方法進(jìn)行了應(yīng)用分析。模型的輸出定量描述了企業(yè)實(shí)施安全培訓(xùn)的總體效果，并分層次識(shí)別了企業(yè)安全培訓(xùn)中的潛在改進(jìn)機(jī)會(huì)。

關(guān)鍵詞 安全培訓(xùn) 培訓(xùn)評(píng)估 柯氏評(píng)估模型

中圖分類號(hào)：C961 文獻(xiàn)標(biāo)識(shí)碼：A DOI：10.16400/j.cnki.kjdks.2016.07.075

Abstract Training evaluation is a primary way of tracking the training performance and understanding the effectiveness of training system. The research initiated a safety training evaluation model which based on Kirkpatrick four-level method and fuzzy comprehensive assessment tool. As a result， the evaluation model outlined overall training performance with quantitative description， and identified improvement opportunities on the safety training for enterprise as well.

Key words Safety training； training evaluation； Kirkpatrick evaluation model

美國(guó)的事故統(tǒng)計(jì)表明僅有15%的事故是由不安全的環(huán)境和設(shè)備造成的，大約有85%的事故是由人的不安全行為所致。①然而人的大多數(shù)不安全的行為主要是由于自身的安全意識(shí)淡漠或欠缺安全知識(shí)技能所致，通過(guò)實(shí)施有效的安全培訓(xùn)可以增強(qiáng)從業(yè)人員的安全意識(shí)，提升安全知識(shí)、技能；進(jìn)而杜絕由人的不安全行為引發(fā)的安全生產(chǎn)事故。②因此在企業(yè)安全管理過(guò)程中策劃合理的安全培訓(xùn)并不斷提升培訓(xùn)的效果顯得尤為重要。

1 安全培訓(xùn)效果評(píng)估現(xiàn)狀

1.1 國(guó)外培訓(xùn)評(píng)估的研究情況

國(guó)外常用的培訓(xùn)效果評(píng)估模型有柯氏四級(jí)評(píng)估模型，考夫曼的五級(jí)評(píng)估模型、CIRO評(píng)估方法、CIPP模型等。③這些評(píng)估理論或模型在基礎(chǔ)數(shù)據(jù)的確定、評(píng)估方法的選擇、指標(biāo)體系的建立等方面并沒有結(jié)合特定的領(lǐng)域，大多聚焦于培訓(xùn)對(duì)企業(yè)人力資源管理的影響。④在近20年的研究過(guò)程中很多學(xué)者引入了統(tǒng)計(jì)學(xué)和會(huì)計(jì)學(xué)的理論，側(cè)重于對(duì)培訓(xùn)效益的定量分析。例如菲利普斯五級(jí)投資回報(bào)率模型（Five-Level ROI）。

1.2 國(guó)內(nèi)安全培訓(xùn)效果評(píng)估進(jìn)展

國(guó)內(nèi)學(xué)者在引進(jìn)國(guó)外評(píng)估模型的基礎(chǔ)上對(duì)培訓(xùn)目標(biāo)的實(shí)現(xiàn)程度以及培訓(xùn)給企業(yè)帶來(lái)的效益等進(jìn)行了研究。例如2015年賀龍，彭恩澤等基于柯氏理論對(duì)安全培訓(xùn)效果評(píng)估模型進(jìn)行了研究。在國(guó)家相關(guān)部委也陸續(xù)發(fā)布了安全生產(chǎn)領(lǐng)域的很多培訓(xùn)大綱及考核標(biāo)準(zhǔn)，如《安全生產(chǎn)監(jiān)察員培訓(xùn)大綱》，《危險(xiǎn)化學(xué)品經(jīng)營(yíng)單位主要負(fù)責(zé)人和安全管理人員的培訓(xùn)大綱及考核標(biāo)準(zhǔn)》，《特種作業(yè)人員安全技術(shù)培訓(xùn)大綱及考核標(biāo)準(zhǔn)》等等； 這些標(biāo)準(zhǔn)在一定程度上提升了我國(guó)安全生產(chǎn)培訓(xùn)標(biāo)準(zhǔn)化的程度，也為高危行業(yè)的主要負(fù)責(zé)人、企業(yè)安全管理人員、特種作業(yè)從業(yè)人員等群體提供了安全培訓(xùn)及效果評(píng)估的基本依據(jù)。⑤

2 評(píng)估模型的建立及應(yīng)用

2.1 安全培訓(xùn)評(píng)估模型

柯氏培訓(xùn)評(píng)估模型在各類培訓(xùn)中已得到廣泛應(yīng)用，根據(jù)美國(guó)行政管理部門對(duì)300多家企業(yè)和行政管理部門的統(tǒng)計(jì)表明有67%的機(jī)構(gòu)使用了柯氏模型來(lái)對(duì)組織的培訓(xùn)效果進(jìn)行評(píng)估。⑥柯氏模型包含了四個(gè)評(píng)估層次，即從反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層四個(gè)層次對(duì)評(píng)估的效果進(jìn)行評(píng)估，各評(píng)估層的主要要素如表1所示。⑦

反應(yīng)層評(píng)估主要是了解學(xué)員在培訓(xùn)結(jié)束后對(duì)培訓(xùn)課程的總體反應(yīng)，包括學(xué)員對(duì)培訓(xùn)內(nèi)容興趣程度，對(duì)講師的授課方法以及課程策劃的滿意程度，對(duì)培訓(xùn)項(xiàng)目在今后的工作產(chǎn)生影響的預(yù)期等。在反應(yīng)評(píng)估層中應(yīng)用較多的是問(wèn)卷調(diào)查法，問(wèn)卷調(diào)查法最大的優(yōu)點(diǎn)是易于實(shí)施，講師可以在培訓(xùn)結(jié)束后通過(guò)收集學(xué)員的反饋問(wèn)卷直接掌握學(xué)員對(duì)培訓(xùn)課程的反應(yīng)；但問(wèn)卷調(diào)查法也存在過(guò)于依賴學(xué)員主觀判斷的局限性，甚至?xí)艿綄W(xué)員情感因素的影響。因而在設(shè)計(jì)問(wèn)卷及實(shí)施調(diào)查時(shí)應(yīng)該充分考慮這些潛在的影響因素，例如設(shè)計(jì)更多層次的客觀選項(xiàng)，保留被調(diào)查人可以發(fā)表自由評(píng)論的欄目，明確調(diào)查的真實(shí)目的是為了不斷完善培訓(xùn)項(xiàng)目等。

學(xué)習(xí)層評(píng)估主要是評(píng)估學(xué)員學(xué)習(xí)的獲得程度，包括評(píng)估學(xué)員對(duì)培訓(xùn)項(xiàng)目中相關(guān)知識(shí)技能、態(tài)度等內(nèi)容的理解和掌握程度。學(xué)習(xí)層評(píng)估通常采用現(xiàn)場(chǎng)考試、情景模擬等方式來(lái)實(shí)現(xiàn)?？荚囎畲蟮膬?yōu)勢(shì)在于可以直接獲得量化的結(jié)果，但也存在刻板、靈活性不足的缺點(diǎn)。為避免學(xué)習(xí)評(píng)估完全依賴于考試的不足可以在培訓(xùn)過(guò)程中穿插一些小組討論、成果展示的環(huán)節(jié)，并把學(xué)員在這些環(huán)節(jié)的表現(xiàn)作為評(píng)估結(jié)果的一部分。

行為層評(píng)估是指考察學(xué)員對(duì)所學(xué)知識(shí)技能、態(tài)度的運(yùn)用程度，通常是來(lái)自學(xué)員周圍的同事，特別是上級(jí)主管對(duì)學(xué)員在培訓(xùn)結(jié)束后行為發(fā)生變化的反應(yīng)。例如學(xué)員是否在工作中運(yùn)用了培訓(xùn)所學(xué)的內(nèi)容，培訓(xùn)后學(xué)員的態(tài)度是否發(fā)生了變化等。行為層評(píng)估一個(gè)顯著的特點(diǎn)是一般基于第三方反饋或行為觀察的結(jié)果，結(jié)果相對(duì)客觀真實(shí)，但卻要在培訓(xùn)結(jié)束一段時(shí)間后才能實(shí)施，不利于收集收據(jù)。

結(jié)果層評(píng)估是判斷所實(shí)施的培訓(xùn)是否為組織創(chuàng)造出價(jià)值，既包括經(jīng)濟(jì)價(jià)值也包括社會(huì)價(jià)值。通?？梢酝ㄟ^(guò)一系列指標(biāo)來(lái)度量，如客戶滿意度、產(chǎn)品合格率、設(shè)備停機(jī)時(shí)間、傷害事故頻率等等。結(jié)果層評(píng)估要考察的不再是受訓(xùn)者的情況，而擴(kuò)展到整個(gè)大范圍的組織，對(duì)企業(yè)而言具有非常重要的意義。然而這些度量指標(biāo)的績(jī)效水平通常都應(yīng)歸因于企業(yè)實(shí)施綜合管理手段的結(jié)果，因而這個(gè)階段的評(píng)估難度也是最大的。

在應(yīng)用柯氏四級(jí)模型的過(guò)程中結(jié)合了某企業(yè)安全生產(chǎn)的實(shí)際情況，按照適用性、導(dǎo)向性、多樣性、定量與定性相結(jié)合的原則構(gòu)建了企業(yè)安全生產(chǎn)培訓(xùn)效果評(píng)估的模型。如表2所示。

評(píng)價(jià)模型的一部分?jǐn)?shù)據(jù)來(lái)源于滿意度問(wèn)卷調(diào)查，為更精確反映調(diào)查結(jié)果的特征，在問(wèn)卷調(diào)查中共設(shè)計(jì)五個(gè)結(jié)果區(qū)間，如表3所示。選取反饋?zhàn)疃嗟慕Y(jié)果作為評(píng)估模型的輸入。

評(píng)估模型輸出的安全培訓(xùn)量化效果將按照如表4進(jìn)行評(píng)定，并根據(jù)不同的評(píng)價(jià)等級(jí)采取相應(yīng)的措施。

2.2 培訓(xùn)效果評(píng)估因子集

在研究過(guò)程中將柯氏模型的四個(gè)評(píng)價(jià)層次分別定義為綜合評(píng)價(jià)的四個(gè)一級(jí)評(píng)價(jià)因子，即 = {，，，}。在每個(gè)一級(jí)評(píng)價(jià)因子集中結(jié)合被評(píng)價(jià)組織的具體情況分別設(shè)置了若干二級(jí)評(píng)價(jià)因子。

2.3 因子權(quán)重

評(píng)估過(guò)程中要確定一級(jí)因子集和二級(jí)因子集各因子的權(quán)重，通?？梢酝ㄟ^(guò)專家經(jīng)驗(yàn)與AHP層次分析法結(jié)合的方式構(gòu)建因子權(quán)重系數(shù)。依據(jù)專家對(duì)各級(jí)因子的重要性進(jìn)行定量評(píng)分描述，再采用加權(quán)平均的手段進(jìn)行量化分析，最終可以得到因子集或評(píng)價(jià)因子的權(quán)重。

一級(jí)因子權(quán)重集：

= {，，，}

二級(jí)因子權(quán)重集合：

2.4 模糊綜合評(píng)價(jià)

模糊綜合評(píng)價(jià)即按每類因子集對(duì)培訓(xùn)效果影響的貢獻(xiàn)程度進(jìn)行綜合評(píng)價(jià)， 則對(duì)培訓(xùn)效果（F）的綜合評(píng)級(jí)可以表示為：

以反應(yīng)層評(píng)估因子為例，在輸入因子權(quán)重和量化得分后可以得到該因子集合的量化得分：

再以學(xué)習(xí)層評(píng)價(jià)因子U2 為例，在輸入的各因素權(quán)重與量化得分后，可得到結(jié)果：

最后，對(duì)整個(gè)培訓(xùn)的效果的計(jì)算如下：

由評(píng)估結(jié)果可以看出，各評(píng)估層次的得分從反應(yīng)層、學(xué)習(xí)層、行為層到結(jié)果層總體上呈現(xiàn)遞減的態(tài)勢(shì)。企業(yè)實(shí)施的安全培訓(xùn)總體有效，但仍需進(jìn)一步改善。

3 結(jié)論

將柯氏模型的四個(gè)層次作為綜合評(píng)價(jià)的四個(gè)子集；并運(yùn)用模糊綜合評(píng)價(jià)法進(jìn)行量化計(jì)算，最終根據(jù)量化的結(jié)果分析各培訓(xùn)因素的有效性。該評(píng)估方法有幾個(gè)顯著的特點(diǎn)：（1）在反應(yīng)層、學(xué)習(xí)層、以及行為層的評(píng)估過(guò)程中采取了雙向評(píng)估模式，如學(xué)員對(duì)培訓(xùn)的反饋、講師對(duì)學(xué)員的反饋；學(xué)員在車間研討會(huì)的表現(xiàn)、主管對(duì)學(xué)員安全表現(xiàn)的反饋等。雙向評(píng)估模式可以在一定程度上消除單向信息輸入在數(shù)據(jù)準(zhǔn)確性方面的不足。（2）在行為表現(xiàn)層評(píng)估中引入了學(xué)員對(duì)組織安全管理的參與程度方面的指標(biāo)作為定量評(píng)估指標(biāo)，如現(xiàn)場(chǎng)標(biāo)準(zhǔn)化作業(yè)審核的結(jié)果、員工對(duì)安全合理化建議的數(shù)量等。（3）評(píng)估模型既可以對(duì)所實(shí)施安全培訓(xùn)在反應(yīng)層、學(xué)習(xí)層、行為層以及結(jié)果層產(chǎn)生的影響分別進(jìn)行量化評(píng)估，又可以對(duì)培訓(xùn)效果進(jìn)行綜合量化評(píng)價(jià)。根據(jù)各子項(xiàng)及綜合評(píng)價(jià)的結(jié)果分析安全培訓(xùn)系統(tǒng)各因素的進(jìn)一步改進(jìn)機(jī)會(huì)。（4）在實(shí)施評(píng)價(jià)過(guò)程中，組織可以結(jié)合已有的管理手段靈活設(shè)計(jì)各評(píng)估子集的評(píng)估因子。根據(jù)每個(gè)因子的評(píng)價(jià)結(jié)果采取有針對(duì)性的管理措施。

4 模型應(yīng)用的注意事項(xiàng)

（1）安全培訓(xùn)是一種間接的安全管理手段，而學(xué)員的主管或經(jīng)理卻往往要直接對(duì)學(xué)員的安全表現(xiàn)負(fù)責(zé)。評(píng)估后應(yīng)讓學(xué)員的主管或經(jīng)理充分了解安全培訓(xùn)的效果，使他們能在日常管理過(guò)程中采取措施強(qiáng)化培訓(xùn)效果。（2）組織不可能通過(guò)一兩次安全培訓(xùn)或考核就能完全改善學(xué)員的安全意識(shí)，無(wú)論是安全培訓(xùn)的策劃實(shí)施，還是對(duì)培訓(xùn)效果的評(píng)估都應(yīng)該是長(zhǎng)期連續(xù)的過(guò)程。（3）在應(yīng)用柯氏模型四個(gè)評(píng)估層次對(duì)安全培訓(xùn)的效果進(jìn)行評(píng)估時(shí)，獲得數(shù)據(jù)的過(guò)程從第一層次到第四層次由易到難。評(píng)估到第幾個(gè)層次，應(yīng)根據(jù)企業(yè)的實(shí)際需求而定。

注釋

① 彭城，徐志剛.世界發(fā)達(dá)國(guó)家安全培訓(xùn)情況[J].當(dāng)代礦工，2004（8）：14.

② 傅貴，李志偉，扈天保等.改善企業(yè)安全文化技術(shù)手段的應(yīng)用研究[J].中國(guó)安全生產(chǎn)科學(xué)技術(shù)，2009.5（2）：121-124

③ 李燕萍.培訓(xùn)與發(fā)展 [M].北京：北京大學(xué)出版社，2007.

④ 賀龍，彭恩澤，陳本偉等.基于柯氏理論的安全培訓(xùn)效果評(píng)估模型研究[J].中國(guó)安全生產(chǎn)科學(xué)技術(shù)，2015.3（11）：186-187.

⑤ 黎艷珍.安全培訓(xùn)效果評(píng)估體系研究 [D].長(zhǎng)沙：中南大學(xué)，2009：5.

⑥ 張莉娜.S-E電力公司的培訓(xùn)評(píng)估現(xiàn)狀與對(duì)策研究[D].天津：天津大學(xué)，2008：14.

⑦ （美）唐納德 · L ·柯克帕特里克，詹姆斯· D ·柯克帕特里克著.如何做好評(píng)估培訓(xùn)：柯氏四級(jí)評(píng)估法（第3版）[M].奚衛(wèi)華，林祝君等譯.北京：機(jī)械工業(yè)出版社，2007.