(人社廳函〔2024〕160號(hào)2024年10月31日)
各省、自治區(qū)、直轄市及新疆生產(chǎn)建設(shè)兵團(tuán)人力資源社會(huì)保障廳(局):
根據(jù)《中共中央辦公廳、國(guó)務(wù)院辦公廳關(guān)于加強(qiáng)新時(shí)代高技能人才隊(duì)伍建設(shè)的意見(jiàn)》和《人力資源社會(huì)保障部辦公廳、公安部辦公廳、市場(chǎng)監(jiān)管總局辦公廳關(guān)于加強(qiáng)職業(yè)技能評(píng)價(jià)規(guī)范管理工作的通知》(人社廳發(fā)〔2024〕27號(hào))有關(guān)要求,為進(jìn)一步加強(qiáng)技能人才評(píng)價(jià)命題指導(dǎo),規(guī)范技能人才評(píng)價(jià)命題工作,特制定《技能人才評(píng)價(jià)命題技術(shù)規(guī)程(試行)》(以下簡(jiǎn)稱《規(guī)程》),現(xiàn)印發(fā)給你們,請(qǐng)遵照?qǐng)?zhí)行。各地可結(jié)合工作實(shí)際,制定相應(yīng)實(shí)施細(xì)則。
本《規(guī)程》自印發(fā)之日起施行。
一、前言
命題工作是開(kāi)展技能人才評(píng)價(jià)的重要基礎(chǔ)性工作,命題質(zhì)量直接關(guān)系到評(píng)價(jià)結(jié)果的可靠性、有效性和公平性,是評(píng)價(jià)質(zhì)量的核心。為進(jìn)一步規(guī)范技能人才評(píng)價(jià)命題工作,提升技能人才評(píng)價(jià)機(jī)構(gòu)(以下簡(jiǎn)稱評(píng)價(jià)機(jī)構(gòu))命題能力,特編制《技能人才評(píng)價(jià)命題技術(shù)規(guī)程》(以下簡(jiǎn)稱《規(guī)程》)。
(一)適用范圍
本《規(guī)程》適用于技能人才評(píng)價(jià)試題命制、考評(píng)內(nèi)容與方式設(shè)計(jì)以及相關(guān)的實(shí)施工作,是各評(píng)價(jià)機(jī)構(gòu)開(kāi)展命題工作應(yīng)遵循的基本要求,也可作為各級(jí)人社部門(mén)職業(yè)技能鑒定(指導(dǎo))中心加強(qiáng)命題指導(dǎo)服務(wù)和監(jiān)管的主要參考。
需要說(shuō)明的是,本《規(guī)程》著眼于技能人才評(píng)價(jià)命題工作的通用要求和流程,關(guān)于具體的試題命制技術(shù)及題庫(kù)開(kāi)發(fā)步驟,請(qǐng)參考理論知識(shí)題庫(kù)和操作技能題庫(kù)開(kāi)發(fā)指南等相關(guān)資料。
(二)術(shù)語(yǔ)和定義
1.職業(yè)
從業(yè)人員為獲取主要生活來(lái)源所從事的社會(huì)工作類別。
2.國(guó)家職業(yè)標(biāo)準(zhǔn)(技能類)
在職業(yè)分類的基礎(chǔ)上,根據(jù)職業(yè)活動(dòng)內(nèi)容,對(duì)從事本職業(yè)應(yīng)具備的知識(shí)和技能要求提出的綜合性水平規(guī)定。它是開(kāi)展職業(yè)教育培訓(xùn)和技能人才評(píng)價(jià)的基本依據(jù)。
符合條件的企業(yè),可參照現(xiàn)行《國(guó)家職業(yè)標(biāo)準(zhǔn)編制技術(shù)規(guī)程》開(kāi)發(fā)制定評(píng)價(jià)規(guī)范,依據(jù)國(guó)家職業(yè)標(biāo)準(zhǔn)和評(píng)價(jià)規(guī)范開(kāi)展自主評(píng)價(jià)。開(kāi)展專項(xiàng)職業(yè)能力考核應(yīng)以專項(xiàng)職業(yè)能力考核規(guī)范為依據(jù)。
國(guó)家職業(yè)標(biāo)準(zhǔn)、評(píng)價(jià)規(guī)范和專項(xiàng)職業(yè)能力考核規(guī)范共同構(gòu)成多層次、相互銜接的職業(yè)標(biāo)準(zhǔn)體系,以下統(tǒng)稱職業(yè)標(biāo)準(zhǔn)。
3.技能人才
在生產(chǎn)或服務(wù)等領(lǐng)域崗位一線,掌握專門(mén)知識(shí)和技術(shù),具備一定的操作技能,并在工作實(shí)踐中能夠運(yùn)用自己的技術(shù)和能力進(jìn)行實(shí)際操作的人員。
4.技能人才評(píng)價(jià)
根據(jù)職業(yè)標(biāo)準(zhǔn),結(jié)合工作實(shí)際,綜合運(yùn)用理論知識(shí)考試、操作技能考核和綜合評(píng)審等評(píng)價(jià)方式,對(duì)勞動(dòng)者的職業(yè)素養(yǎng)、理論知識(shí)、操作技能和工作業(yè)績(jī)等方面進(jìn)行客觀公正、科學(xué)規(guī)范地評(píng)價(jià)的活動(dòng)。符合條件的企業(yè),可根據(jù)職業(yè)標(biāo)準(zhǔn),靈活運(yùn)用過(guò)程化考核、模塊化考核、崗位練兵、技術(shù)比武、技能競(jìng)賽、業(yè)績(jī)?cè)u(píng)審、直接認(rèn)定等多種方式進(jìn)行評(píng)價(jià)。
5.技能人才評(píng)價(jià)命題
以職業(yè)標(biāo)準(zhǔn)為內(nèi)容依據(jù),以現(xiàn)代測(cè)評(píng)理論和方法為技術(shù)要求,以統(tǒng)一的工作流程為方法遵循,科學(xué)設(shè)計(jì)考評(píng)內(nèi)容和方式的系列活動(dòng)的總稱,主要包括組建專家團(tuán)隊(duì)、編制考評(píng)藍(lán)圖、編寫(xiě)試題試卷、開(kāi)展命題和評(píng)分培訓(xùn)、分析完善試題試卷等。
二、總則
(一)指導(dǎo)思想
以習(xí)近平新時(shí)代中國(guó)特色社會(huì)主義思想為指導(dǎo),依據(jù)《中華人民共和國(guó)勞動(dòng)法》和《中華人民共和國(guó)職業(yè)教育法》,落實(shí)《關(guān)于分類推進(jìn)人才評(píng)價(jià)機(jī)制改革的指導(dǎo)意見(jiàn)》和《關(guān)于加強(qiáng)新時(shí)代高技能人才隊(duì)伍建設(shè)的意見(jiàn)》有關(guān)要求,圍繞經(jīng)濟(jì)社會(huì)發(fā)展和人才發(fā)展需求,遵循人才成長(zhǎng)規(guī)律,堅(jiān)持注重職業(yè)道德、體現(xiàn)工匠精神、突出職業(yè)技能、強(qiáng)化工作業(yè)績(jī)的基本原則,以職業(yè)標(biāo)準(zhǔn)為依據(jù),以現(xiàn)代測(cè)評(píng)理論和方法為技術(shù)要求,不斷規(guī)范技能人才評(píng)價(jià)命題活動(dòng),提升命題工作科學(xué)性和評(píng)價(jià)工作質(zhì)量,促進(jìn)提高勞動(dòng)者素質(zhì),引導(dǎo)激勵(lì)技能人才成長(zhǎng)成才,為實(shí)現(xiàn)中國(guó)式現(xiàn)代化提供堅(jiān)實(shí)的技能人才支撐。
(二)工作目標(biāo)
在技能人才評(píng)價(jià)工作中明確命題工作要求,規(guī)范命題工作流程,設(shè)立命題質(zhì)量標(biāo)準(zhǔn),以有效提升技能人才評(píng)價(jià)命題工作質(zhì)量,確保評(píng)價(jià)結(jié)果的可靠性、有效性和公平性。
三、基本要求
(一)規(guī)范性
命題工作應(yīng)以職業(yè)標(biāo)準(zhǔn)為依據(jù),實(shí)施過(guò)程應(yīng)遵循本規(guī)程有關(guān)技術(shù)要求和流程規(guī)范,試題和試卷內(nèi)容正確、格式規(guī)范,所用術(shù)語(yǔ)、符號(hào)符合本行業(yè)現(xiàn)行有關(guān)規(guī)定。閱卷評(píng)分記錄保存完整,存檔規(guī)范。
(二)可靠性
依據(jù)試題試卷開(kāi)展的考評(píng)工作應(yīng)具有較高的信度,確保考評(píng)要點(diǎn)數(shù)量充足、考評(píng)方式合規(guī)恰當(dāng)、試卷題量時(shí)長(zhǎng)適宜、反饋修訂機(jī)制健全,考評(píng)結(jié)果穩(wěn)定、可靠和可信,不受任何與考評(píng)目的無(wú)關(guān)的隨機(jī)誤差的影響,如考評(píng)的時(shí)間地點(diǎn)環(huán)境、考評(píng)的組織實(shí)施過(guò)程、考評(píng)員對(duì)評(píng)分標(biāo)準(zhǔn)的理解把握等。
(三)有效性
試題試卷內(nèi)容應(yīng)與考評(píng)藍(lán)圖所確定的考評(píng)內(nèi)容保持一致,能夠完整體現(xiàn)職業(yè)標(biāo)準(zhǔn)要求;考評(píng)結(jié)果應(yīng)與考生的技能水平或日常的工作表現(xiàn)等基本一致;考評(píng)結(jié)果只與所要考查的職業(yè)素養(yǎng)、理論知識(shí)、操作技能和工作業(yè)績(jī)等因素有關(guān),不涉及其他與考評(píng)目的無(wú)關(guān)的能力因素;依據(jù)考評(píng)結(jié)果所做的人才使用決策和反饋建議應(yīng)有多個(gè)方面的獨(dú)立證據(jù)驗(yàn)證,客觀、恰當(dāng)且有效。
(四)公平性
考評(píng)內(nèi)容和方式設(shè)計(jì)應(yīng)體現(xiàn)技能人才評(píng)價(jià)目的,符合考評(píng)對(duì)象特點(diǎn),無(wú)歧視特定群體(民族、地域、性別、年齡等)的內(nèi)容;考評(píng)的程序和規(guī)則應(yīng)統(tǒng)一,機(jī)會(huì)應(yīng)均等。
四、命題流程
根據(jù)現(xiàn)代測(cè)評(píng)理論,結(jié)合技能人才評(píng)價(jià)工作實(shí)際,命題工作一般包括以下步驟:組建專家團(tuán)隊(duì)、撰寫(xiě)命題說(shuō)明、編制考評(píng)藍(lán)圖、命制考評(píng)試題、審核修訂試題、編輯制作試卷、試測(cè)完善試卷。
(一)組建專家團(tuán)隊(duì)
開(kāi)展命題工作前,應(yīng)組建命題專家團(tuán)隊(duì)。命題專家主要包括試題內(nèi)容專家和命題方法專家。試題內(nèi)容專家通常由來(lái)自院校和企業(yè)生產(chǎn)一線的專家共同組成,命題方法專家一般來(lái)自技能人才評(píng)價(jià)管理部門(mén)、評(píng)價(jià)機(jī)構(gòu)和教科研單位等。
命題和題庫(kù)運(yùn)行管理工作中,還需要信息技術(shù)專家提供技術(shù)支持。信息技術(shù)專家通常由既熟練掌握信息技術(shù)又了解技能人才評(píng)價(jià)命題方法的專家組成。
在初步完成命題任務(wù)或形成階段性成果后,應(yīng)及時(shí)組織審核。審核專家也可由試題內(nèi)容專家和命題方法專家共同組成,其資質(zhì)條件可參照命題專家有關(guān)要求執(zhí)行。
1.專家職責(zé)
命題專家應(yīng)自覺(jué)接受邀請(qǐng)單位管理,簽署相關(guān)保密協(xié)議或保密承諾書(shū),嚴(yán)格遵守保密等相關(guān)制度規(guī)定。
(1)試題內(nèi)容專家負(fù)責(zé)試題素材的收集、整理和改編,試題的編寫(xiě)、修改和審核等工作。具體包括:認(rèn)真解讀職業(yè)標(biāo)準(zhǔn)、設(shè)計(jì)編制考評(píng)藍(lán)圖,確??荚u(píng)內(nèi)容及權(quán)重、考評(píng)方式及時(shí)長(zhǎng)符合職業(yè)標(biāo)準(zhǔn)要求;科學(xué)命制試題,確保試題試卷符合考評(píng)藍(lán)圖、內(nèi)容正確無(wú)爭(zhēng)議、表述規(guī)范無(wú)歧義、無(wú)歧視特定群體的內(nèi)容或作答方式;操作技能試題與考核場(chǎng)所設(shè)施設(shè)備技術(shù)指標(biāo)相匹配等。
(2)命題方法專家負(fù)責(zé)進(jìn)行命題技術(shù)方法指導(dǎo)培訓(xùn),對(duì)試題試卷質(zhì)量進(jìn)行統(tǒng)計(jì)分析等工作。具體包括:通過(guò)培訓(xùn)、研討等方式,向試題內(nèi)容專家講解命題技術(shù)方法、注意事項(xiàng)等;根據(jù)命題工作進(jìn)度,審查考評(píng)藍(lán)圖、試題試卷及評(píng)分標(biāo)準(zhǔn)等;設(shè)計(jì)數(shù)據(jù)收集和分析方案,對(duì)試題試卷質(zhì)量進(jìn)行統(tǒng)計(jì)分析,并根據(jù)分析結(jié)果提出試題試卷修改建議等。
(3)信息技術(shù)專家主要負(fù)責(zé)協(xié)助命題專家開(kāi)展試題試卷錄入、編輯、存儲(chǔ)和組卷、施測(cè)、數(shù)據(jù)采集與統(tǒng)計(jì)分析等工作,并對(duì)題庫(kù)運(yùn)行管理和安全保密等工作提供技術(shù)支持和服務(wù)。
2.專家資質(zhì)
(1)基本資格條件。命題專家應(yīng)政治立場(chǎng)堅(jiān)定,擁護(hù)中國(guó)共產(chǎn)黨的領(lǐng)導(dǎo),自覺(jué)踐行社會(huì)主義核心價(jià)值觀,具有良好的政治素質(zhì)、較高的職業(yè)素養(yǎng)和較強(qiáng)的敬業(yè)精神;熱愛(ài)技能人才工作,熟悉技能人才評(píng)價(jià)有關(guān)政策規(guī)定,理論水平高、專業(yè)能力強(qiáng),具有較好的語(yǔ)言表達(dá)能力和溝通協(xié)調(diào)能力;遵紀(jì)守法、廉潔奉公,堅(jiān)持原則、作風(fēng)正派,具有較強(qiáng)的工作責(zé)任感、組織紀(jì)律性和安全保密意識(shí),無(wú)違法違紀(jì)、犯罪和不良行為記錄;身心健康,年齡通常不超過(guò)65周歲(對(duì)專家儲(chǔ)備較少的急需緊缺職業(yè)或新職業(yè),條件可適當(dāng)放寬),能勝任技能人才評(píng)價(jià)工作需要。
命題專家需具有5年及以上的相關(guān)工作經(jīng)歷。命制五級(jí)、四級(jí)、三級(jí)試題的專家,應(yīng)具有本職業(yè)或相關(guān)職業(yè)領(lǐng)域二級(jí)/技師及以上職業(yè)技能等級(jí)(職業(yè)資格)或相關(guān)專業(yè)中級(jí)及以上專業(yè)技術(shù)職稱;命制二級(jí)及以上等級(jí)試題的專家,應(yīng)具有本職業(yè)或相關(guān)職業(yè)領(lǐng)域一級(jí)/高級(jí)技師及以上職業(yè)技能等級(jí)(職業(yè)資格)或相關(guān)專業(yè)高級(jí)專業(yè)技術(shù)職稱。
對(duì)于暫無(wú)符合上述職業(yè)技能等級(jí)(職業(yè)資格)或?qū)I(yè)技術(shù)職稱要求的專家人選的職業(yè)(如部分新職業(yè)、專項(xiàng)職業(yè)能力),命題專家應(yīng)具有本職業(yè)或相關(guān)職業(yè)大學(xué)本科及以上學(xué)歷、從事相關(guān)工作8年及以上,或從非物質(zhì)文化遺產(chǎn)傳承人等人員中選取。
(2)業(yè)務(wù)水平要求。試題內(nèi)容專家應(yīng)具有較高的專業(yè)水平、較強(qiáng)的理論功底和豐富的操作技能經(jīng)驗(yàn),理解并掌握職業(yè)標(biāo)準(zhǔn)要求,有一定的命題工作經(jīng)驗(yàn),有較強(qiáng)的語(yǔ)言文字表達(dá)能力,開(kāi)展命題前應(yīng)自覺(jué)接受一定的命題技術(shù)培訓(xùn)和試命題訓(xùn)練,能根據(jù)任務(wù)安排保質(zhì)保量完成命題任務(wù)。
命題方法專家應(yīng)熟悉技能人才評(píng)價(jià)工作,熟練運(yùn)用技能人才評(píng)價(jià)命題技術(shù)和題庫(kù)開(kāi)發(fā)方法,了解現(xiàn)代測(cè)評(píng)理論和方法,懂得基本的數(shù)據(jù)統(tǒng)計(jì)分析方法,能根據(jù)職責(zé)要求進(jìn)行命題方法指導(dǎo)、考評(píng)藍(lán)圖和試題審核、試題試卷質(zhì)量分析等。
信息技術(shù)專家應(yīng)具備一定的計(jì)算機(jī)應(yīng)用和管理水平,具有一定的編程和數(shù)據(jù)處理能力,熟悉相關(guān)操作系統(tǒng),熟練使用相關(guān)應(yīng)用軟件等,能協(xié)助試題內(nèi)容專家和命題方法專家完成相關(guān)技術(shù)支持和服務(wù)工作。
(二)撰寫(xiě)命題說(shuō)明
命題說(shuō)明主要用于明確命題時(shí)應(yīng)考慮的主要因素、命題依據(jù)與內(nèi)容、考評(píng)方式與題型、試題實(shí)施對(duì)場(chǎng)地設(shè)備及閱卷評(píng)分等方面的要求、考評(píng)結(jié)果表達(dá)的要求等內(nèi)容,也可對(duì)命題專家及工作人員分工、進(jìn)度安排等進(jìn)行說(shuō)明。
命題說(shuō)明通常包括以下方面:考評(píng)目的與對(duì)象、命題依據(jù)與內(nèi)容、考評(píng)方式與題型、考評(píng)時(shí)間與題量、場(chǎng)地設(shè)備要求、閱卷評(píng)分要求、考評(píng)結(jié)果組成、監(jiān)考與考評(píng)人員配備等。
1.考評(píng)目的
應(yīng)說(shuō)明本職業(yè)(工種)開(kāi)展考評(píng)的主要目的,不同的考評(píng)目的對(duì)命題工作的要求有所不同??荚u(píng)目的主要有人才選拔、資格準(zhǔn)入、水平評(píng)價(jià)等。人才選拔側(cè)重于區(qū)分考生的知識(shí)和技能水平,資格準(zhǔn)入側(cè)重于考查考生的知識(shí)和技能水平是否達(dá)到相關(guān)職業(yè)的準(zhǔn)入標(biāo)準(zhǔn),水平評(píng)價(jià)側(cè)重于考查考生的知識(shí)和技能水平是否達(dá)到相應(yīng)的職業(yè)技能等級(jí)。
對(duì)于職業(yè)技能等級(jí)認(rèn)定,通常以水平評(píng)價(jià)為目的,側(cè)重于考查考生的知識(shí)和技能水平是否達(dá)到相應(yīng)職業(yè)標(biāo)準(zhǔn)的要求。
2.考評(píng)對(duì)象
主要說(shuō)明本職業(yè)(工種)考生群體的總體特點(diǎn),通常包括考生身份特征(企業(yè)職工、院校學(xué)生、社會(huì)人員等)、年齡特征、受教育程度等。命題時(shí)應(yīng)綜合考慮考生群體特點(diǎn),為合理確定考評(píng)方式和題量時(shí)長(zhǎng)等提供基礎(chǔ)。
3.命題依據(jù)與內(nèi)容
命題依據(jù)主要說(shuō)明開(kāi)展命題時(shí)所依據(jù)的職業(yè)標(biāo)準(zhǔn)及其版本,有關(guān)參考教材、行業(yè)標(biāo)準(zhǔn)等。命題內(nèi)容主要包括:從事本職業(yè)(工種)應(yīng)具備的職業(yè)素養(yǎng)、理論知識(shí)、操作技能和工作業(yè)績(jī)等。
(1)職業(yè)素養(yǎng)主要包括職業(yè)認(rèn)知、情感態(tài)度、行為習(xí)慣、職業(yè)操守和發(fā)展?jié)摿Φ确矫?,突出職業(yè)道德和工匠精神。
(2)理論知識(shí)是指與本職業(yè)(工種)操作技能相關(guān)的、完成特定工作任務(wù)所必備的知識(shí),主要包括職業(yè)標(biāo)準(zhǔn)中規(guī)定的基本要求和工作要求中的相關(guān)知識(shí)要求。
(3)操作技能是指從事本職業(yè)(工種)應(yīng)具備的技能水平,重點(diǎn)考核在特定工作情境中執(zhí)行操作規(guī)范、解決實(shí)際問(wèn)題和完成工作任務(wù)的范圍和程度,以職業(yè)標(biāo)準(zhǔn)中規(guī)定的技能要求為依據(jù)。
(4)工作業(yè)績(jī)包括所完成工作任務(wù)的數(shù)量、質(zhì)量和效率,發(fā)現(xiàn)和解決工作中難題的數(shù)量和質(zhì)量,為本單位及社會(huì)所創(chuàng)造的新產(chǎn)品、新技術(shù)、新工藝以及所節(jié)省的時(shí)間、場(chǎng)所、設(shè)備等資源成本,傳授技藝、培養(yǎng)指導(dǎo)學(xué)徒等方面的業(yè)績(jī)和獲得的各種榮譽(yù)等。
4.考評(píng)方式與題型
應(yīng)對(duì)本職業(yè)(工種)所采取的考評(píng)方式和題型進(jìn)行詳細(xì)說(shuō)明。考評(píng)方式主要包括理論知識(shí)考試、操作技能考核、工作業(yè)績(jī)?cè)u(píng)審、職業(yè)素養(yǎng)評(píng)價(jià)、綜合評(píng)審、工作過(guò)程考核、教學(xué)過(guò)程中的技能評(píng)價(jià)和競(jìng)賽結(jié)果認(rèn)定等。每種考評(píng)方式都應(yīng)制定相應(yīng)的技術(shù)方案,特別是評(píng)審評(píng)價(jià)和過(guò)程考核等方式,應(yīng)制定詳細(xì)的評(píng)審或評(píng)價(jià)方案,明確考評(píng)內(nèi)容、權(quán)重和評(píng)分標(biāo)準(zhǔn)等。
(1)理論知識(shí)考試主要采用筆試或計(jì)算機(jī)化考試的形式。對(duì)于五級(jí)、四級(jí)、三級(jí)理論知識(shí)考試,通常以客觀題為主(單選題、多選題、判斷題);對(duì)于二級(jí)、一級(jí)理論知識(shí)考試,通常采取客觀題和主觀題(簡(jiǎn)答題、計(jì)算題、繪圖題、論述題等)相結(jié)合的方式,且主觀題分值占比以40%~60%為宜。
(2)操作技能考核通常采用實(shí)際操作、模擬操作、筆試或口試等方式。實(shí)際操作是操作技能考核的主要方式。對(duì)于無(wú)法采用實(shí)際操作的職業(yè)或者現(xiàn)實(shí)工作場(chǎng)景已實(shí)現(xiàn)數(shù)字化操作的職業(yè),可采用模擬操作或仿真操作的方式進(jìn)行考核。采用仿真操作時(shí),應(yīng)編制必要的仿真模擬系統(tǒng)操作指南。
筆試主要適用于知識(shí)技能型職業(yè)或?qū)嶋H工作任務(wù)需要通過(guò)紙筆完成的技能要素,常用的題型有案例分析、方案策劃、情景模擬、計(jì)算、簡(jiǎn)答、論述等??谠囃ǔEc實(shí)際操作或模擬操作結(jié)合使用。
對(duì)職業(yè)標(biāo)準(zhǔn)規(guī)定采取實(shí)際操作或模擬操作方式進(jìn)行考核的職業(yè)(工種),其操作技能考核不得以紙筆作答代替。
(3)工作業(yè)績(jī)?cè)u(píng)審可綜合采用材料評(píng)審、工作項(xiàng)目評(píng)定、主管部門(mén)評(píng)價(jià)、專家評(píng)定等方式。
(4)職業(yè)素養(yǎng)評(píng)價(jià)可綜合采用個(gè)人自評(píng)、民意測(cè)評(píng)、班組或主管部門(mén)評(píng)價(jià)、專家評(píng)定等方式。
(5)綜合評(píng)審主要用于二級(jí)及以上等級(jí)的技能人才評(píng)價(jià)。通常采取審閱申報(bào)材料(含論文或成果報(bào)告)、答辯等方式進(jìn)行全面評(píng)議和審查,也可結(jié)合職業(yè)特點(diǎn)采取文件筐測(cè)試或現(xiàn)場(chǎng)撰寫(xiě)技術(shù)總結(jié)、報(bào)告、方案等方式。
(6)工作過(guò)程考核主要依托工作現(xiàn)場(chǎng)、結(jié)合工作過(guò)程開(kāi)展。可通過(guò)日??己嘶蚨ㄆ诳己?,結(jié)合工作日志、工作成果、工作表現(xiàn)、業(yè)績(jī)貢獻(xiàn)等方面,采用班組評(píng)價(jià)、主管評(píng)價(jià)、專家評(píng)定等方式,對(duì)工作過(guò)程中體現(xiàn)出的職業(yè)素養(yǎng)、操作水平、理論知識(shí)和業(yè)績(jī)貢獻(xiàn)綜合評(píng)價(jià)。
工作過(guò)程考核應(yīng)做好工作分析??蛇\(yùn)用職業(yè)功能分析法,將工作崗位按功能劃分出工作領(lǐng)域、工作過(guò)程和工作任務(wù),形成結(jié)構(gòu)化表格,并明確完成各項(xiàng)工作任務(wù)所需的知識(shí)、技能和經(jīng)驗(yàn),并與職業(yè)標(biāo)準(zhǔn)中相關(guān)知識(shí)和技能要求相對(duì)應(yīng),據(jù)此確定相應(yīng)的職業(yè)技能等級(jí)。
(7)教學(xué)過(guò)程中的技能評(píng)價(jià)主要通過(guò)觀察和評(píng)估學(xué)生的學(xué)習(xí)過(guò)程,實(shí)現(xiàn)對(duì)其職業(yè)技能的評(píng)價(jià)??删C合采用學(xué)生日常表現(xiàn)的自我評(píng)價(jià)、課題式的小組評(píng)價(jià)、模塊化的綜合評(píng)價(jià)、實(shí)習(xí)實(shí)訓(xùn)中的表現(xiàn)評(píng)價(jià)等方式。
開(kāi)展教學(xué)過(guò)程中的技能評(píng)價(jià),要做到課程領(lǐng)域和工作領(lǐng)域相對(duì)應(yīng),教學(xué)目標(biāo)和評(píng)價(jià)目標(biāo)相一致??赏ㄟ^(guò)開(kāi)展單元式教學(xué)、模塊化考核和學(xué)分制管理來(lái)實(shí)現(xiàn)。單元式教學(xué)即按學(xué)習(xí)領(lǐng)域安排學(xué)習(xí)進(jìn)度,模塊化考核強(qiáng)調(diào)基于學(xué)習(xí)領(lǐng)域的成果檢驗(yàn),學(xué)分制管理強(qiáng)調(diào)按職業(yè)標(biāo)準(zhǔn)的工作領(lǐng)域建立學(xué)分并通過(guò)學(xué)習(xí)領(lǐng)域的模塊化考核來(lái)積累學(xué)分。
(8)競(jìng)賽結(jié)果認(rèn)定是指對(duì)于在符合要求的職業(yè)技能競(jìng)賽中取得優(yōu)異成績(jī)的,可按相關(guān)規(guī)定直接認(rèn)定相應(yīng)職業(yè)技能等級(jí)。
上述考評(píng)方式中,理論知識(shí)考試、操作技能考核、綜合評(píng)審(二級(jí)及以上)是職業(yè)標(biāo)準(zhǔn)規(guī)定的考評(píng)方式。工作業(yè)績(jī)?cè)u(píng)審、工作過(guò)程考核等方式主要用于用人單位面向本單位職工的職業(yè)技能評(píng)價(jià),教學(xué)過(guò)程中的技能評(píng)價(jià)主要用于職業(yè)院校面向?qū)W生的職業(yè)技能評(píng)價(jià),這3種考評(píng)方式可作為操作技能考核的補(bǔ)充。職業(yè)素養(yǎng)評(píng)價(jià)可用于各類評(píng)價(jià)機(jī)構(gòu)開(kāi)展的職業(yè)技能評(píng)價(jià),評(píng)價(jià)結(jié)果可作為理論知識(shí)考試中職業(yè)道德相關(guān)內(nèi)容的補(bǔ)充,也可作為實(shí)施其他考評(píng)方式的先決條件。
在開(kāi)展評(píng)價(jià)工作中,評(píng)價(jià)機(jī)構(gòu)可結(jié)合實(shí)際,綜合運(yùn)用多種考評(píng)方式,研究設(shè)計(jì)各考評(píng)方式的組成及權(quán)重,確??荚u(píng)質(zhì)量。
5.考評(píng)時(shí)間與題量
應(yīng)說(shuō)明本職業(yè)(工種)各種考評(píng)方式相應(yīng)的題量和時(shí)長(zhǎng)。
理論知識(shí)考試、操作技能考核和綜合評(píng)審的時(shí)長(zhǎng),應(yīng)依據(jù)職業(yè)標(biāo)準(zhǔn)、結(jié)合考試方式和考生群體特點(diǎn)確定,確保大部分考生能在規(guī)定時(shí)間內(nèi)完成。
理論知識(shí)試卷題量要結(jié)合職業(yè)技能等級(jí)、考試時(shí)長(zhǎng)確定,同時(shí)要滿足信度要求。對(duì)于五級(jí)、四級(jí)、三級(jí)理論知識(shí)試卷,全部采用客觀題的,試卷題量應(yīng)不低于100題,且與考試時(shí)長(zhǎng)相匹配。操作技能試卷題量以全面體現(xiàn)職業(yè)標(biāo)準(zhǔn)要求和考評(píng)內(nèi)容為原則,并與考核時(shí)長(zhǎng)相匹配。
關(guān)于理論知識(shí)題庫(kù)和操作技能題庫(kù)的試題量,應(yīng)結(jié)合組卷的規(guī)則和頻次綜合確定。原則上,理論知識(shí)題庫(kù)(五級(jí)、四級(jí)、三級(jí))每個(gè)等級(jí)應(yīng)不少于1000道題,操作技能題庫(kù)每個(gè)等級(jí)應(yīng)不少于30道題。原則上,理論知識(shí)題庫(kù)各等級(jí)“基本要求”部分的試題可以相同或部分相同,“工作要求”部分的試題應(yīng)根據(jù)相關(guān)知識(shí)要求命制,各等級(jí)之間不應(yīng)重復(fù);操作技能題庫(kù)應(yīng)根據(jù)技能要求命制,各等級(jí)之間試題不應(yīng)重復(fù)。
采用試卷庫(kù)的,每個(gè)等級(jí)理論知識(shí)和操作技能試卷庫(kù)應(yīng)分別不少于10套試卷。原則上,同一等級(jí)各套試卷之間試題重復(fù)率不得高于10%(10分),不同等級(jí)操作技能試卷之間試題不應(yīng)重復(fù)。
開(kāi)展評(píng)價(jià)時(shí),不應(yīng)多次重復(fù)使用同一套試卷。
6.場(chǎng)地設(shè)備要求
應(yīng)說(shuō)明實(shí)施理論知識(shí)考試和操作技能考核應(yīng)滿足的場(chǎng)地條件、實(shí)施操作技能考核需具備的設(shè)備設(shè)施條件等。如采用計(jì)算機(jī)化考試、仿真模擬軟件等方式呈現(xiàn)試題,應(yīng)說(shuō)明需具備的軟件、硬件和網(wǎng)絡(luò)等方面的條件,仿真模擬軟件需具備的主要功能等。
7.閱卷評(píng)分要求
應(yīng)對(duì)閱卷評(píng)分方式、評(píng)分要求、工作紀(jì)律、異常情況處理等方面進(jìn)行說(shuō)明。
客觀題通常采用計(jì)算機(jī)自動(dòng)評(píng)分。對(duì)于操作技能考核試題和主觀題,應(yīng)成立考評(píng)(評(píng)分)小組,人數(shù)一般為奇數(shù)且不少于3人。
開(kāi)展評(píng)分前,考評(píng)人員應(yīng)經(jīng)過(guò)必要的培訓(xùn),認(rèn)真研究試題、答案及評(píng)分標(biāo)準(zhǔn),并選取有代表性的答卷進(jìn)行試評(píng),在試評(píng)中進(jìn)一步理解和把握評(píng)分標(biāo)準(zhǔn),完善評(píng)分細(xì)則。
評(píng)分過(guò)程中,每名考評(píng)人員應(yīng)做到獨(dú)立評(píng)分。嚴(yán)格按評(píng)分要點(diǎn)給分,盡可能提高每個(gè)題目的區(qū)分效度,避免出現(xiàn)趨中趨勢(shì);不能根據(jù)個(gè)人偏好隨意評(píng)分,不得故意拉高或壓低特定考生的成績(jī)。如遇異常情況,應(yīng)提交考評(píng)(評(píng)分)小組作出裁決。
評(píng)分過(guò)程應(yīng)做好記錄,不得隨意涂改。評(píng)分結(jié)果應(yīng)真實(shí)有效,每名考評(píng)人員應(yīng)按要求對(duì)評(píng)分過(guò)程和結(jié)果簽字確認(rèn)。
8.考評(píng)結(jié)果組成
主要說(shuō)明本職業(yè)(工種)考評(píng)結(jié)果的組成及分?jǐn)?shù)構(gòu)成,包括各種考評(píng)方式所對(duì)應(yīng)的考評(píng)結(jié)果的呈現(xiàn)形式、所占權(quán)重及合格標(biāo)準(zhǔn),整體考評(píng)結(jié)果的組成與合格標(biāo)準(zhǔn)等。有條件的,應(yīng)對(duì)同職業(yè)(工種)同等級(jí)不同次考試進(jìn)行等值處理后再報(bào)告分?jǐn)?shù)。
9.監(jiān)考和考評(píng)人員配備
監(jiān)考人員和考評(píng)人員配備應(yīng)符合職業(yè)標(biāo)準(zhǔn)要求,如本職業(yè)(工種)有特別要求的,也應(yīng)在此明確。通常,理論知識(shí)考試每個(gè)考場(chǎng)應(yīng)不少于2名監(jiān)考人員。采用紙筆作答的,監(jiān)考人員與考生配比應(yīng)不低于1∶15;采用計(jì)算機(jī)化考試的,監(jiān)考人員與考生配比應(yīng)不低于1∶30。
操作技能考核中的考評(píng)人員與考生配比應(yīng)根據(jù)職業(yè)特點(diǎn)、考核方式等因素確定,一般不低于1∶10,且應(yīng)保證考生之間不互相干擾、考評(píng)人員能夠?qū)忌娜坎僮鬟^(guò)程進(jìn)行獨(dú)立考評(píng)。考評(píng)人員應(yīng)為3人(含)以上單數(shù),每位考生每道操作技能考核試題應(yīng)由不少于3位(含)考評(píng)人員獨(dú)立評(píng)分。綜合評(píng)審委員為3人(含)以上單數(shù)。
(三)編制考評(píng)藍(lán)圖
考評(píng)藍(lán)圖指的是考評(píng)內(nèi)容的具體說(shuō)明,通常以考評(píng)內(nèi)容結(jié)構(gòu)表(或試卷結(jié)構(gòu)表)、考評(píng)要素細(xì)目表(或組卷計(jì)劃書(shū))等方式體現(xiàn),也可體現(xiàn)為考評(píng)要素和能力層次的雙向細(xì)目表(即明確應(yīng)掌握的知識(shí)技能和應(yīng)達(dá)到的能力層次兩個(gè)方面)。
編制考評(píng)藍(lán)圖時(shí),應(yīng)依據(jù)職業(yè)標(biāo)準(zhǔn)和命題說(shuō)明,結(jié)合本職業(yè)(工種)生產(chǎn)活動(dòng)實(shí)際,合理確定理論知識(shí)考試、操作技能考核、職業(yè)素養(yǎng)評(píng)定、工作業(yè)績(jī)?cè)u(píng)審以及綜合評(píng)審的考評(píng)要素(要點(diǎn)),明確相應(yīng)考評(píng)方式、題型題量、作答時(shí)間、權(quán)重比例等。理論知識(shí)試卷結(jié)構(gòu)表和考評(píng)要素細(xì)目表、操作技能考評(píng)內(nèi)容結(jié)構(gòu)表和考評(píng)要素細(xì)目表、職業(yè)素養(yǎng)評(píng)定量表、工作業(yè)績(jī)?cè)u(píng)審量表、綜合評(píng)審內(nèi)容結(jié)構(gòu)表的相應(yīng)示例分別見(jiàn)附件1、2、3、4、5。
組卷計(jì)劃書(shū)主要用于試卷庫(kù)開(kāi)發(fā),體現(xiàn)各套試卷中每道試題與職業(yè)標(biāo)準(zhǔn)中有關(guān)知識(shí)和技能要求及其下屬考評(píng)點(diǎn)的對(duì)應(yīng)關(guān)系。組卷計(jì)劃書(shū)示例見(jiàn)附件6。
如編制雙向細(xì)目表,可參考表1。表中內(nèi)容應(yīng)根據(jù)本職業(yè)(工種)有關(guān)要求編制和調(diào)整,題型題量、分值等要求應(yīng)添加文字說(shuō)明。
考評(píng)藍(lán)圖編制完成后,應(yīng)組織專家進(jìn)行審核,確??荚u(píng)藍(lán)圖符合職業(yè)標(biāo)準(zhǔn)要求和生產(chǎn)活動(dòng)實(shí)際,具有可操作性。
(四)命制考評(píng)試題
試題命制可以采取專家“入闈集中命制”或“在保密條件下分散命制”等方式。命制的試題要符合考評(píng)藍(lán)圖、考評(píng)方式和題型特點(diǎn),確保內(nèi)容正確、表述準(zhǔn)確、評(píng)分標(biāo)準(zhǔn)明晰、參數(shù)標(biāo)注規(guī)范等。
1.符合考評(píng)藍(lán)圖
試題的題型題量、考核方式、考核時(shí)長(zhǎng)、分值權(quán)重、所考知識(shí)或技能要素(要點(diǎn)),試卷的結(jié)構(gòu)與編排等與考評(píng)藍(lán)圖相一致。
2.題型方式恰當(dāng)
理論知識(shí)題型主要包括客觀題和主觀題兩種。客觀題主要有選擇題(含單選和多選)、判斷題等,多用于考查基本知識(shí)的識(shí)記、理解和應(yīng)用等;主觀題主要有簡(jiǎn)答題、論述題、案例分析題等,多用于考查綜合理解和分析問(wèn)題能力、運(yùn)用有關(guān)知識(shí)創(chuàng)造性解決實(shí)際問(wèn)題的能力等。
操作技能考核方式應(yīng)符合職業(yè)標(biāo)準(zhǔn)和生產(chǎn)實(shí)際、結(jié)合考場(chǎng)設(shè)備條件綜合確定,主要有實(shí)際操作、模擬操作、筆答或口試等。操作技能考核項(xiàng)目應(yīng)為典型的工作任務(wù),考核試題完整,要求明確,否定項(xiàng)設(shè)置合理,具有實(shí)施的可行性。
3.內(nèi)容正確完整
試題應(yīng)堅(jiān)持正確的政治方向,踐行社會(huì)主義核心價(jià)值觀,體現(xiàn)職業(yè)活動(dòng)導(dǎo)向原則,內(nèi)容正確、無(wú)爭(zhēng)議,能有效實(shí)現(xiàn)考評(píng)目的、體現(xiàn)考評(píng)內(nèi)容及職業(yè)標(biāo)準(zhǔn)要求,無(wú)偏題怪題。
每道試題內(nèi)容應(yīng)是相對(duì)完整的知識(shí)或技能模塊,包含作答所需的全部信息。同時(shí),試題間應(yīng)保持相互獨(dú)立性,避免出現(xiàn)一道試題的題干成為另一道試題答案的情形。
試題中不能含有歧視某個(gè)特殊群體的內(nèi)容。除了消防、搶險(xiǎn)、救災(zāi)等特殊行業(yè),應(yīng)避免出現(xiàn)關(guān)于災(zāi)害、事故、死亡等可能引起答題者心理不適方面的素材。
4.表述清晰準(zhǔn)確
試題及有關(guān)作答要求應(yīng)表達(dá)清晰、表述規(guī)范、無(wú)歧義,專業(yè)術(shù)語(yǔ)的使用符合本行業(yè)現(xiàn)行有關(guān)規(guī)定。題干應(yīng)避免使用復(fù)雜句式、否定句式且不暗示答案,不出現(xiàn)錯(cuò)別字、病句等文字表達(dá)方面的錯(cuò)誤??陀^題應(yīng)避免使用疑問(wèn)句。
5.評(píng)分標(biāo)準(zhǔn)明晰
在編制試題的同時(shí),應(yīng)科學(xué)、合理制定評(píng)分標(biāo)準(zhǔn),使評(píng)分簡(jiǎn)便、準(zhǔn)確、客觀,排除無(wú)關(guān)因素的干擾。主觀題的評(píng)分以分步或分項(xiàng)評(píng)分為主,每個(gè)步驟或項(xiàng)目的評(píng)分標(biāo)準(zhǔn)應(yīng)明確、可操作,盡可能細(xì)化、量化,做到每個(gè)步驟或要點(diǎn)都能有效區(qū)分考生水平。原則上,每個(gè)步驟或要點(diǎn)的分值以不超過(guò)3分為宜。
6.參數(shù)標(biāo)注規(guī)范
試題應(yīng)標(biāo)注必要的參數(shù),為建立題庫(kù)、實(shí)現(xiàn)自動(dòng)組卷提供基礎(chǔ)。試題參數(shù)通常包括內(nèi)容參數(shù)、題型參數(shù)、難度參數(shù)、試題和考評(píng)要點(diǎn)的一致性參數(shù)等。內(nèi)容參數(shù)主要表明該試題所考核的考評(píng)要點(diǎn),通常采用細(xì)目表中該考評(píng)點(diǎn)的代碼表示。題型參數(shù)用于區(qū)分該試題所屬的試題類型,可根據(jù)需要選用不同的字母或數(shù)字來(lái)代表。難度參數(shù)表明該試題的難易程度,命題時(shí)可先由專家預(yù)估(可采用等級(jí)難度),考試結(jié)束后可通過(guò)數(shù)據(jù)計(jì)算難度值并對(duì)預(yù)估參數(shù)進(jìn)行校正。試題和考評(píng)要點(diǎn)的一致性程度表明該試題是否考查了考評(píng)要點(diǎn)的核心內(nèi)容,可以采用不同的數(shù)字來(lái)區(qū)分一致性程度(如從1到5分別對(duì)應(yīng)從差到好)。
需要說(shuō)明的是,試題參數(shù)標(biāo)注方法有多種,以上只是可供選用的一種方式。無(wú)論采用哪種標(biāo)注方法,應(yīng)做到有效辨別和區(qū)分試題,能夠?qū)崿F(xiàn)按規(guī)則組卷和試題動(dòng)態(tài)管理。
(五)審核修訂試題
試題初稿完成后,應(yīng)提交審核專家進(jìn)行審核。審核專家組人數(shù)應(yīng)不少于3人且為奇數(shù)。審核內(nèi)容主要有:考評(píng)藍(lán)圖的符合性,考評(píng)方式和題型的恰當(dāng)性,試題內(nèi)容的正確性、獨(dú)立性和公平性,試題表述及作答要求的準(zhǔn)確性、評(píng)分規(guī)則的可操作性和參數(shù)標(biāo)注的規(guī)范性等。
試題審核一般分為階段性審核和終審。階段性審核貫穿試題命制全過(guò)程,可在形成任一階段性成果后進(jìn)行(如編制完成考評(píng)藍(lán)圖和樣題后可進(jìn)行第一次階段性審核,后續(xù)可根據(jù)工作完成情況適時(shí)審核)。
試題的審核、修訂、存儲(chǔ)、使用、更新等工作可通過(guò)題庫(kù)管理系統(tǒng)實(shí)現(xiàn)。題庫(kù)的基本單元一般為試題,特殊情況也可采用試卷方式存儲(chǔ)和管理。題庫(kù)中試題應(yīng)根據(jù)使用反饋情況及時(shí)修訂、動(dòng)態(tài)更新。題庫(kù)更新原則上每3—5年進(jìn)行一次,試題使用頻次較高的應(yīng)及時(shí)更新題庫(kù);職業(yè)標(biāo)準(zhǔn)有更新的,應(yīng)在新版職業(yè)標(biāo)準(zhǔn)頒布后一年內(nèi)更新題庫(kù)。
(六)編輯制作試卷
試卷的編輯制作通常包括以下步驟:
第一,根據(jù)命題說(shuō)明和考評(píng)藍(lán)圖形成組卷方案,確保考評(píng)的內(nèi)容效度和公平性。
第二,根據(jù)組卷方案,選用相應(yīng)試題,按一定順序編輯制作試卷(先客觀題后主觀題或先簡(jiǎn)單題后復(fù)雜題),確保試卷文字、圖表、格式或計(jì)算機(jī)化考試中的試題呈現(xiàn)方式等符合要求,適合考生作答。
第三,核查試題數(shù)量和題型,確保試卷結(jié)構(gòu)與考評(píng)藍(lán)圖一致。
第四,逐題審查試卷中試題,確保內(nèi)容正確、無(wú)版權(quán)爭(zhēng)議等問(wèn)題。
第五,核查試題參數(shù)等指標(biāo),確??荚u(píng)信度達(dá)到要求。
第六,核查試題之間的相互關(guān)系,確保獨(dú)立性,避免出現(xiàn)互為答案或互相提示的問(wèn)題。
第七,核查試題難度分布,確保試卷能夠有效區(qū)分考生群體,實(shí)現(xiàn)考評(píng)目的。
第八,對(duì)于同一場(chǎng)考試,需準(zhǔn)備平行試卷備用,且平行試卷之間的內(nèi)容、難度、區(qū)分度和信度基本一致。
(七)試測(cè)完善試卷
組卷完成后,可組成1—3人的獨(dú)立小組進(jìn)一步核查試卷與考評(píng)藍(lán)圖和組卷方案的一致性,正式試卷和備用試卷的文字、圖表、格式或計(jì)算機(jī)化考試的試題呈現(xiàn)方式等,同時(shí),可選擇1—2人在保密狀態(tài)下試做一遍試卷,確保作答方式與考生群體的知識(shí)文化水平相當(dāng),確保沒(méi)有違反法律法規(guī)、版權(quán)和意識(shí)形態(tài)等方面的問(wèn)題。
具備條件的,可在符合保密要求的情況下,選擇與考評(píng)群體(總體)極其類似的微小群體進(jìn)行試考(30人以內(nèi)),并進(jìn)行簡(jiǎn)單的統(tǒng)計(jì)分析或個(gè)案研究,以了解試題表述的清晰性、準(zhǔn)確性和科學(xué)性,試卷題量時(shí)長(zhǎng)的適宜性等,并據(jù)此完善試題試卷,形成正式試卷。
正式試卷使用后,可運(yùn)用現(xiàn)代測(cè)評(píng)理論進(jìn)行統(tǒng)計(jì)分析,估計(jì)題目難度、區(qū)分度和公平性,以及考評(píng)的信度和效度等,為后續(xù)改進(jìn)試題試卷提供參考。
五、附件
附件1:理論知識(shí)試卷結(jié)構(gòu)表和考評(píng)要素細(xì)目表示例(略)
附件2:操作技能考評(píng)內(nèi)容結(jié)構(gòu)表和考評(píng)要素細(xì)目表示例(略)
附件3:職業(yè)素養(yǎng)評(píng)價(jià)量表示例(略)
附件4:工作業(yè)績(jī)?cè)u(píng)審量表示例(略)
附件5:綜合評(píng)審內(nèi)容結(jié)構(gòu)表示例(略)
附件6:組卷計(jì)劃書(shū)示例(略)