構(gòu)建科學(xué)合理的環(huán)境監(jiān)測培訓(xùn)效果評估體系

李林楠，牛航宇，馬莉娟，徐 琳

中國環(huán)境監(jiān)測總站國家環(huán)境保護(hù)環(huán)境監(jiān)測質(zhì)量控制重點實驗室，北京100012

人員培訓(xùn)作為提高環(huán)境監(jiān)測“軟能力”的重要手段，越來越受到環(huán)境監(jiān)測管理部門的重視，培訓(xùn)工作進(jìn)入了發(fā)展的“快車道”。2008年以來，環(huán)境保護(hù)部組織開展了多種形式的培訓(xùn)工作，僅中國環(huán)境監(jiān)測總站就舉辦了培訓(xùn)班150余期，培訓(xùn)人數(shù)1.6萬人次。各級環(huán)境監(jiān)測機(jī)構(gòu)也根據(jù)實際需要，利用儀器廠商、科研院所等機(jī)構(gòu)組織了不少的專門培訓(xùn)。然而，在培訓(xùn)規(guī)模不斷擴(kuò)大的同時，也出現(xiàn)了一些培訓(xùn)班課程設(shè)置不合理、教師授課水平低、針對性實用性不強(qiáng)、培訓(xùn)質(zhì)量不高等問題，阻礙了培訓(xùn)工作更進(jìn)一步的發(fā)展。因此，為更好的檢驗和提高培訓(xùn)工作的實際效果，必須構(gòu)建科學(xué)合理的培訓(xùn)效果評估體系。

1 培訓(xùn)效果評估介紹

培訓(xùn)效果評估是利用多種測量手段，檢驗培訓(xùn)是否達(dá)到預(yù)期目標(biāo)，找出培訓(xùn)活動中存在的不足，并最終改進(jìn)培訓(xùn)活動的過程?！顿|(zhì)量管理培訓(xùn)指南》(GB/T 19025—2001)中明確指出“培訓(xùn)效果評估是培訓(xùn)活動的重要環(huán)節(jié)”［1］;美國環(huán)境保護(hù)署(US EPA)規(guī)定培訓(xùn)評估(Training Program Evaluation)是質(zhì)量體系培訓(xùn)項目的必要步驟，并給出了具體的操作方法［2］。

國外對企業(yè)培訓(xùn)效果評估的研究相對成熟，創(chuàng)立了許多評估模型，最為經(jīng)典的是Kirkpatrick于1959年提出的4層次評估模型(即“反應(yīng)－學(xué)習(xí)－行為－結(jié)果”模型，見表1)，該模型在培訓(xùn)效果評估的針對性、層次性、全面性和有效性等方面都得到了很好的實踐驗證［3-4］。其他使用較多的有Warr等人的CIRO評估模型、Hamblin5層次評估模型、Kaufman5層次模型和Phillips投資回報率模型等，但這些模型從本質(zhì)上都是對Kirkpatrick4層次評估模型的改良和細(xì)化［4-5］。國內(nèi)的相關(guān)文獻(xiàn)較少，一些學(xué)者對實驗室分析技術(shù)人員或單獨的環(huán)境監(jiān)測機(jī)構(gòu)的培訓(xùn)效果評估進(jìn)行了探討，但對環(huán)境監(jiān)測系統(tǒng)整體的培訓(xùn)效果評估體系尚未開展專門的研究［5］。

目前國內(nèi)環(huán)境監(jiān)測培訓(xùn)效果評估工作開展較少，其中一個重要原因是培訓(xùn)的管理者和組織者對培訓(xùn)工作的認(rèn)識仍停留在“舉辦了多少期培訓(xùn)班”、“培訓(xùn)了多少人”等反映“數(shù)量”的指標(biāo)，而對培訓(xùn)的“質(zhì)量”重視程度不夠、認(rèn)識水平不高。此外，國內(nèi)外在環(huán)境監(jiān)測培訓(xùn)領(lǐng)域方面的相關(guān)文獻(xiàn)較少，對環(huán)境監(jiān)測培訓(xùn)效果評估的理論基礎(chǔ)、指標(biāo)體系、評估方法和評估結(jié)果應(yīng)用等方面研究不足。該文以Kirkpatrick4層評估模型為基礎(chǔ)，嘗試建立一個符合環(huán)境監(jiān)測工作特點、可行性和操作性較強(qiáng)的培訓(xùn)效果評估體系。

表1 Kirkpatrick4層次培訓(xùn)效果評估模型

2 構(gòu)建環(huán)境監(jiān)測培訓(xùn)效果評估體系

各級環(huán)境監(jiān)測機(jī)構(gòu)目前參加的培訓(xùn)主要有2類：一是環(huán)境監(jiān)測系統(tǒng)內(nèi)部的培訓(xùn)，由各級環(huán)境監(jiān)測管理部門組織舉辦，是目前培訓(xùn)活動的主要類型;二是監(jiān)測機(jī)構(gòu)出于實際需要(如新購置儀器的操作培訓(xùn))，利用儀器廠商、科研院所等資源開展的外部培訓(xùn)。兩類培訓(xùn)盡管組織者有所不同，但培訓(xùn)目標(biāo)、組織形式和教學(xué)方式都較為相近，培訓(xùn)效果評估過程也大致相同。構(gòu)建科學(xué)、有效、持續(xù)的環(huán)境監(jiān)測培訓(xùn)效果評估體系，必須解決3個關(guān)鍵問題，即評估對象是什么、評估主體是誰，以及評估方案如何設(shè)計。如果對照筆者熟悉的環(huán)境監(jiān)測工作，將培訓(xùn)效果評估看做一種“人力資源監(jiān)測”活動，那么以上三者可以分別類比為“需要監(jiān)測哪些評估所需的項目”、“在哪些點位對評估所需的項目進(jìn)行監(jiān)測”，以及“采用什么樣的監(jiān)測方法獲取評估所需的信息”。

2.1 明確評估對象，構(gòu)建評估指標(biāo)體系

評估對象是指能夠反映培訓(xùn)實際效果的某些特定方面。應(yīng)該明確，環(huán)境監(jiān)測培訓(xùn)效果評估的對象是“實際效果”這個最終的“狀態(tài)量”，而不是培訓(xùn)的“全過程”?！叭^程”評估是對整個培訓(xùn)活動，即包括培訓(xùn)需求、投入資源、項目設(shè)計、組織實施和培訓(xùn)效果等多個方面進(jìn)行的綜合性評估。由于環(huán)境監(jiān)測涉及內(nèi)容廣泛，工作任務(wù)繁重，能用于開展培訓(xùn)工作的人力物力資源非常有限，因此不可能開展過于全面、細(xì)致、在理論上“完美”的培訓(xùn)評估(企業(yè)通常也難以做到)。因此，必須以“培訓(xùn)效果”做為研究對象，優(yōu)化選取評估指標(biāo)，才能在最大限度地減少對日常監(jiān)測工作干擾的前提下，獲取評估所需的信息。以Kirkpatrick4層次評估模型為基礎(chǔ)，結(jié)合環(huán)境監(jiān)測培訓(xùn)工作實際，提出了環(huán)境監(jiān)測培訓(xùn)效果評估的主要對象、評估指標(biāo)體系(框架)、信息獲取的方法和進(jìn)行評估的時間，見表2。

表2 環(huán)境監(jiān)測培訓(xùn)效果評估對象和指標(biāo)體系框架

在設(shè)計評估指標(biāo)體系時，對Kirkpatrick評估模型的4個層次進(jìn)行了改進(jìn)，使指標(biāo)體系更簡明易行。如在“反應(yīng)”層面，根據(jù)培訓(xùn)學(xué)員在填寫調(diào)查問卷的主觀心態(tài)和理解程度，將評估對象劃分為培訓(xùn)教師和培訓(xùn)班，使學(xué)員能夠更輕松直接地將真實感受表達(dá)出來，增強(qiáng)了問卷調(diào)查的可信度;在“學(xué)習(xí)”層面，將學(xué)習(xí)成果細(xì)化分類，便于培訓(xùn)組織者建立種類全面、針對性強(qiáng)的試題庫;在“行為”和“結(jié)果”層面，盡可能地利用各單位已有的考核或考察內(nèi)容，使評估過程不必枉費資源地獲取重復(fù)的數(shù)據(jù)，節(jié)約了大量行政成本。

2.2 確定評估主體，分化評估工作任務(wù)

評估主體是指在培訓(xùn)活動中具有主體資格，為培訓(xùn)活動承擔(dān)一定的義務(wù)與責(zé)任，并可獲得一定收益的人員或組織。確定評估主體的過程就是明確對哪些機(jī)構(gòu)、哪些人員以及從哪些方面獲取評估所需的信息。具體來說，環(huán)境監(jiān)測培訓(xùn)效果評估的主體應(yīng)該是各級環(huán)境監(jiān)測主管部門(培訓(xùn)活動的決策者)、各級環(huán)境監(jiān)測機(jī)構(gòu)(培訓(xùn)活動的組織和間接參與者)，以及參加培訓(xùn)的學(xué)員(培訓(xùn)活動的直接參與者)。由于三者在培訓(xùn)活動中的立足點不同，受益方面也不一致，因此以這三者作為“監(jiān)測點位”獲取評估所需的信息，既能全面地反映培訓(xùn)活動對不同主體產(chǎn)生的實際效果，又能體現(xiàn)不同評估主體之間的相互關(guān)系，使評估過程“分工明確”，提高了評估工作的效率。結(jié)合環(huán)境監(jiān)測管理體制實際，提出了環(huán)境監(jiān)測培訓(xùn)效果評估的3類評估主體及其承擔(dān)的主要工作，見圖1。針對外部培訓(xùn)開展的效果評估，則需要根據(jù)實際情況調(diào)整效果評估的主體。

圖1 環(huán)境監(jiān)測培訓(xùn)效果評估主體及其主要工作

需要說明的是，一個組織機(jī)構(gòu)在培訓(xùn)效果評估中的主體地位可能是一個或兩個，比如省級、地市級環(huán)境監(jiān)測機(jī)構(gòu)既是培訓(xùn)的主要參與者，又承擔(dān)著開展本轄區(qū)、本單位的培訓(xùn)工作;既要真實、細(xì)致、持續(xù)地記錄并反饋人員參加培訓(xùn)后的信息，又要按照培訓(xùn)效果評估的整體框架和要求，開展符合本轄區(qū)、本單位實際情況的評估工作。而每個參加培訓(xùn)的學(xué)員作為培訓(xùn)效果評估信息最重要的渠道和最直接的來源，對培訓(xùn)效果評估活動起著關(guān)鍵的作用。

2.3 設(shè)計評估方案，優(yōu)化評估組織流程

設(shè)計科學(xué)的評估方案和流程，就是從制度上保障評估工作在可控的行政成本(即政策、時間、人力、物力等資源)下能夠順暢、持續(xù)地開展。設(shè)計培訓(xùn)效果評估方案通常采用簡單評估法(在培訓(xùn)后進(jìn)行一次評估)、前后評估法(在培訓(xùn)前后各進(jìn)行一次評估)、多次評估法(在培訓(xùn)前后進(jìn)行多次評估)、時間序列法(在培訓(xùn)后進(jìn)行多次評估)和對照測定法(選取未參加培訓(xùn)人員進(jìn)行對比評估)等，每種方法都有其優(yōu)缺點，也會獲得不同的信息量［4，7］。越是信息量大的方案，在開展評估中所需的時間、人力、物力成本就越高。因此，對于環(huán)境監(jiān)測培訓(xùn)效果評估，必須采用行政成本可控、信息量充足且可行性較強(qiáng)的評估方案。為此，提出了一種評估方案的設(shè)計思路，見圖2。

前期評估的目的是考察參訓(xùn)學(xué)員的知識和能力現(xiàn)狀，通常采用測試的手段。環(huán)境監(jiān)測培訓(xùn)的學(xué)員大多來自不同地區(qū)、不同級別的監(jiān)測機(jī)構(gòu)，基本素質(zhì)參差不齊，如果要為每一次培訓(xùn)都設(shè)計出“內(nèi)容全面、結(jié)構(gòu)合理、難度適宜”的前期評估測試題，需要花費相當(dāng)大的行政成本。因此，該方案中將前期評估所慣用的形式改為“自主評估”，既節(jié)約了設(shè)計前期評估試題、組織測試和閱卷評分等行政成本，又充分發(fā)揮了本單位對學(xué)員基本情況深度掌握的優(yōu)勢，增強(qiáng)了前期評估結(jié)果的準(zhǔn)確性，同時還能起到規(guī)范參訓(xùn)學(xué)員選派工作的作用。中長期評估是對學(xué)員參訓(xùn)后的行為和態(tài)度改善(“行為”層)，以及所在崗位、所在單位的實際收益(“結(jié)果”層)的考察，是培訓(xùn)效果評估的重要環(huán)節(jié)。需要指出，中長期評估盡量不要采用明顯的考核或考試的形式(避免使被評估學(xué)員置于一種“被考核”的特殊氛圍中)，而要采用行為觀察、情況記錄等較為“隱蔽”的形式，從而加強(qiáng)對在正常工作狀態(tài)下的學(xué)員實際工作能力考察的客觀真實性。針對外部培訓(xùn)開展的效果評估，應(yīng)根據(jù)培訓(xùn)活動的實際需要，充分利用培訓(xùn)單位(如儀器廠商、科研院所)的儀器設(shè)備、教學(xué)資源等，更多采用實際考核和跟班觀察的方法，深入細(xì)致地開展前期和后期的評估。

圖2 環(huán)境監(jiān)測培訓(xùn)效果評估方案設(shè)計思路

3 結(jié)語

構(gòu)建科學(xué)、有效、持續(xù)的環(huán)境監(jiān)測培訓(xùn)效果評估體系，不僅要在理論上對評估的各個方面和主要環(huán)節(jié)有所認(rèn)識，更要求各級環(huán)境監(jiān)測管理部門、環(huán)境監(jiān)測機(jī)構(gòu)和環(huán)境監(jiān)測人員在評估工作實踐中的緊密配合。無論是內(nèi)部培訓(xùn)還是外部培訓(xùn)，都要增強(qiáng)開展評估的主動性，不能認(rèn)為評估工作只是組織者或外部培訓(xùn)單位的事情。

在實際開展培訓(xùn)效果評估的工作中，要特別注意3個方面的問題：①應(yīng)該認(rèn)識到開展培訓(xùn)效果的根本目的是改善培訓(xùn)工作，而非單純地增加一項“考核”工作，參與評估工作的單位和人員應(yīng)客觀公正地提供或獲取相關(guān)信息，盡量避免主觀意愿或者客觀環(huán)境對評估結(jié)果的干擾;②培訓(xùn)效果的顯現(xiàn)期通常較長，各單位應(yīng)做好長期持續(xù)開展培訓(xùn)效果評估工作的準(zhǔn)備，建立相應(yīng)的評估信息管理制度，配備專門的人員和資源;③培訓(xùn)效果評估的發(fā)展很大程度上依賴于實施評估和使用評估結(jié)果的能力，各單位應(yīng)在不斷探索培訓(xùn)效果評估理論研究的同時，廣泛深入地交流評估實踐經(jīng)驗，不斷豐富完善評估工作，增強(qiáng)評估的針對性、實用性和有效性。

［1］GB/T 19025—2001 質(zhì)量管理培訓(xùn)指南［S］．

［2］USEPA QA/G-10， GuidanceforDevelopinga Training Program for Quality Systems［R］．Washington D C：Office of Environmental Information，2000：21－22，29-30．

［3］愛爾文·戈爾茨坦，凱文·伏特．組織中的培訓(xùn)［M］．常玉軒，譯．4版．北京：清華大學(xué)出版社，2002：210-227．

［4］周文霞．培訓(xùn)者的培訓(xùn)［M］．北京：中國人事出版社，2011：116-132．

［5］徐芳．組織中培訓(xùn)與開發(fā)項目的效果評估：面臨的問題與應(yīng)采取的方法［J］．北京行政學(xué)院學(xué)報，2003(4)：30-33．

［6］馬月珠，陳銘．環(huán)境監(jiān)測人員培訓(xùn)效果評價的研究［J］．環(huán)境保護(hù)科學(xué)，2011(6)：78-80．

［7］苗青．培訓(xùn)效果評價方案設(shè)計［J］．中國人才，2002(12)：32-36．