基于“云平臺(tái)”的臨床技能考官培訓(xùn)模式在考前培訓(xùn)中應(yīng)用效果分析

陳 超 陳麗芬 朱慶雙 陳 晨 王亞軍

(首都醫(yī)科大學(xué)宣武醫(yī)院教育處,北京 100053)

隨著醫(yī)學(xué)教育改革在世界范圍內(nèi)的不斷發(fā)展與推進(jìn),臨床實(shí)踐教學(xué)規(guī)范化、標(biāo)準(zhǔn)化、科學(xué)化的必要性日益凸顯。臨床實(shí)踐技能考核是檢驗(yàn)培訓(xùn)過程和教學(xué)效果的重要依據(jù),考官正是影響考核科學(xué)、規(guī)范、公平、公正的主要因素[1-2]?？脊俚呐嘤?xùn)越到位,考試過程中出現(xiàn)問題的概率越低,工作效率越高,因此規(guī)范有效的考官培訓(xùn)就顯得尤為重要[3-4]?？脊倥嘤?xùn)多分為日常通識(shí)技能培訓(xùn)和考前針對(duì)性培訓(xùn)兩種形式。通過整合云平臺(tái)資源,利用信息技術(shù)與教育深度融合,迎合了時(shí)代的需要,使教育突破時(shí)間和空間的限制,從封閉走向開放[5]。為探索應(yīng)用云平臺(tái)的考官培訓(xùn)模式提升培訓(xùn)效果和效率的可行性,我們對(duì)首都醫(yī)科大學(xué)臨床技能會(huì)考中應(yīng)用云平臺(tái)進(jìn)行考官考前培訓(xùn)及其培訓(xùn)效果進(jìn)行了調(diào)查、分析和評(píng)價(jià)。

1 對(duì)象與方法

1.1 調(diào)查對(duì)象

2021年3月參加首都醫(yī)科大學(xué)臨床技能會(huì)考的考官190名。遴選標(biāo)準(zhǔn)為:中級(jí)以上職稱,2年以上臨床教學(xué)經(jīng)驗(yàn),通過校級(jí)考官資格認(rèn)證培訓(xùn)。

1.2 培訓(xùn)方法

考官培訓(xùn)分為日常通識(shí)技能培訓(xùn)和考前針對(duì)性培訓(xùn)兩種形式。日常通識(shí)技能培訓(xùn)包括職業(yè)素養(yǎng)、考試的基本理論、命題的方法、考試設(shè)計(jì)方法、考試實(shí)施路徑、評(píng)價(jià)量表的應(yīng)用方法、考試結(jié)果的分析評(píng)價(jià)方法7個(gè)方面?？记搬槍?duì)性培訓(xùn)主要針對(duì)考試紀(jì)律、考核流程、考核物品的使用方法、評(píng)價(jià)量表的應(yīng)用標(biāo)準(zhǔn)、試評(píng)分等5個(gè)方面。

此次培訓(xùn)為考前針對(duì)性培訓(xùn),師資為考核實(shí)施負(fù)責(zé)人、首都醫(yī)科大學(xué)遴選的專家型考官以及臨床技能中心工作人員;培訓(xùn)時(shí)間共計(jì)2 h。培訓(xùn)手段與方法如下。

(1)建立云教室:利用云平臺(tái)通過手機(jī)號(hào)碼邀請(qǐng)考官進(jìn)入具備在線通知、視頻直播、在線完成作業(yè)、線上線下實(shí)時(shí)互動(dòng)、填寫問卷、打卡簽到等功能的云教室形成云班級(jí),并根據(jù)不同的專業(yè)進(jìn)行分組,每組配備專職管理員,負(fù)責(zé)組織培訓(xùn)期間的所有教學(xué)活動(dòng)。

(2)云平臺(tái)在線統(tǒng)一培訓(xùn):由考核各環(huán)節(jié)負(fù)責(zé)人采用在線互動(dòng)直播的形式對(duì)相關(guān)內(nèi)容進(jìn)行講授及問題解答。

(3)云評(píng)分模擬考核現(xiàn)場(chǎng)場(chǎng)景:采用考核現(xiàn)場(chǎng)使用的信息化考評(píng)系統(tǒng)的云平臺(tái)版本,在線模擬考核現(xiàn)場(chǎng)場(chǎng)景。在培訓(xùn)前根據(jù)各考核項(xiàng)目中易錯(cuò)點(diǎn)和易誤判點(diǎn)設(shè)定腳本,錄制模擬技能操作考核視頻,并制定相應(yīng)的標(biāo)準(zhǔn)評(píng)分表(標(biāo)準(zhǔn)分為85分)。授課教師(專家型考官)對(duì)有關(guān)要點(diǎn)進(jìn)行指導(dǎo)并講解評(píng)分標(biāo)準(zhǔn)。有疑問的考官可以直接提問,現(xiàn)場(chǎng)交流和解答問題,讓考官可以充分了解評(píng)分標(biāo)準(zhǔn),達(dá)到同質(zhì)化的要求。然后在云平臺(tái)模擬考核場(chǎng)景并播放視頻,由考官進(jìn)行評(píng)價(jià),結(jié)果實(shí)時(shí)反饋并了解培訓(xùn)效果,并對(duì)評(píng)價(jià)差異較大(誤差大于5分)的考官進(jìn)行二次培訓(xùn)。

1.3 評(píng)價(jià)方法

1.3.1 培訓(xùn)效果分析

培訓(xùn)前結(jié)合評(píng)分量表,參考既往難點(diǎn),選擇各專業(yè)具有代表性的操作項(xiàng)目,按照85分的標(biāo)準(zhǔn)分?jǐn)?shù)進(jìn)行操作視頻腳本設(shè)計(jì)與拍攝, 使用云平臺(tái)進(jìn)行評(píng)分。分析經(jīng)過培訓(xùn)后不同專業(yè)(內(nèi)科、外科、婦產(chǎn)科、兒科、急診科、護(hù)理等)考官應(yīng)用云平臺(tái)模擬評(píng)分結(jié)果與標(biāo)準(zhǔn)分?jǐn)?shù)的差異,評(píng)價(jià)培訓(xùn)效果,驗(yàn)證培訓(xùn)有效性。

1.3.2 問卷調(diào)查

采用自設(shè)問卷,利用問卷星平臺(tái)對(duì)研究對(duì)象實(shí)施自填式問卷調(diào)查,調(diào)查內(nèi)容包括調(diào)查對(duì)象的基本情況、培訓(xùn)需求匹配度、培訓(xùn)形式匹配度、培訓(xùn)內(nèi)容合理性、培訓(xùn)效果認(rèn)可度、培訓(xùn)效果自評(píng)、軟件應(yīng)用熟練度、繼續(xù)參加考核意愿、培訓(xùn)流程滿意度等。采用Likert 11級(jí)評(píng)分法[6]對(duì)每個(gè)指標(biāo)11個(gè)等級(jí)由低到高分別賦值0～11分,按照由低級(jí)指標(biāo)得出高級(jí)指標(biāo)的運(yùn)算方向,依次計(jì)算各指標(biāo)的算術(shù)平均分。共發(fā)放問卷190份,回收有效問卷190分,有效回收率為100%。

1.4 統(tǒng)計(jì)學(xué)方法

計(jì)量資料采用均數(shù)±標(biāo)準(zhǔn)差(±s)表示,計(jì)數(shù)資料采用頻數(shù)(百分比)表示。利用可靠性分析、KMO和Bartlett球形檢驗(yàn)的方法對(duì)考官培訓(xùn)效果的認(rèn)同程度進(jìn)行評(píng)價(jià),采用主成分分析的方法對(duì)問卷測(cè)量指標(biāo)的信息進(jìn)行降維處理,采用單樣本t檢驗(yàn)的方法評(píng)價(jià)模擬效果。所有數(shù)據(jù)處理與分析采用SPSS 26.0軟件,雙側(cè)檢驗(yàn),以P＜0.05為差異具有統(tǒng)計(jì)學(xué)意義。

2 結(jié) 果

2.1 考官的基本情況

參加培訓(xùn)的考官均來自首都醫(yī)科大學(xué)21家臨床醫(yī)學(xué)院、附屬醫(yī)院及教學(xué)醫(yī)院,其中男性55名(28.95%),女性135名(71.05%);年齡33～59歲,平均44.56±6.16歲,其中30～39歲46名(24.21%)、40～49歲105名(55.26%)、50～59歲39名(20.53%);職稱為中級(jí)35名(18.43%)、副高級(jí)121名(63.68%)、正高級(jí)34名(17.89%),其中84名(44.2%)具有中級(jí)及以上教學(xué)職稱;參加臨床教學(xué)年限2～37年,平均14.16±7.81年,10年 以 下55人(28.95%),10～19年88人(46.31%),20～29年36人(18.95%),30年及以上11人(5.79%);所從事的專業(yè)(二級(jí)學(xué)科)內(nèi)科66人(34.74%)、外科37人(19.47%)、婦產(chǎn)科30人(15.79%)、兒科29人(15.29%)、護(hù)理20人(10.53%)、急診科8人(4.21%)。

2.2 模擬評(píng)價(jià)效果分析

應(yīng)用單樣本t檢驗(yàn),檢驗(yàn)值為85,對(duì)考官評(píng)分結(jié)果按照專業(yè)進(jìn)行分析,各專業(yè)考官評(píng)價(jià)結(jié)果與標(biāo)準(zhǔn)分?jǐn)?shù)間無顯著性差異(P＞0.05)(表1)。其中各專業(yè)中均存在相較標(biāo)準(zhǔn)分?jǐn)?shù)誤差大于±5分的情況,針對(duì)相應(yīng)考官進(jìn)行二次培訓(xùn)。

表1 各專業(yè)模擬評(píng)價(jià)成績(jī)分析

2.3 培訓(xùn)效果反饋分析

從需求匹配度、形式匹配度、內(nèi)容合理性、效果認(rèn)可度、培訓(xùn)效果自評(píng)、軟件應(yīng)用熟練度、繼續(xù)參加考核意愿、培訓(xùn)流程滿意度8個(gè)方面測(cè)量考官對(duì)此次培訓(xùn)效果的認(rèn)同程度。利用可靠性分析、KMO和Bartlett球形檢驗(yàn)進(jìn)行因子分析適當(dāng)性檢驗(yàn)。本研究得出克隆巴哈系數(shù)為0.87,說明上述8個(gè)問題的內(nèi)在一致性較好。KMO為0.82,Bartlett球形檢驗(yàn)值為815.18(P＜0.01),說明適合進(jìn)行因子分析。根據(jù)特征根大于1 的原則,采取主成分分析法提取公因子。最終得到1個(gè)公因子,累計(jì)貢獻(xiàn)率為55.71 %,基本符合要求,說明這8個(gè)指標(biāo)基本可以解釋大部分測(cè)量指標(biāo)的信息,但解釋度略顯不足,若能增加指標(biāo)數(shù)量,貢獻(xiàn)率可進(jìn)一步提升?？脊賹?duì)培訓(xùn)各方面反饋評(píng)分均值大于10分,其中培訓(xùn)對(duì)軟件應(yīng)用熟練度提升效果最好(10.71±0.81),形式匹配度(10.43±1.25)、效果認(rèn)可度(10.42±1.29)相對(duì)較低(表2)。

表2 培訓(xùn)結(jié)果反饋 (n=190)

3 討 論

《中國教育現(xiàn)代化2035》中明確指出,要加快信息化時(shí)代教育變革,相關(guān)政策鼓勵(lì)醫(yī)療健康行業(yè)通過多元化培訓(xùn)模式提高教育培訓(xùn)的質(zhì)量,利用好信息化技術(shù)為醫(yī)療培訓(xùn)服務(wù)。本研究在既有的臨床實(shí)踐技能考官培訓(xùn)模式的基礎(chǔ)上,借助多媒體技術(shù)、在線考核評(píng)價(jià)系統(tǒng)等信息化技術(shù),利用云平臺(tái)突破培訓(xùn)在空間和時(shí)間上的限制,形成了全新的“云”上培訓(xùn)模式,有效地提升了培訓(xùn)效率,達(dá)到了預(yù)期的培訓(xùn)效果,對(duì)在實(shí)踐技能考核中執(zhí)考規(guī)范、評(píng)價(jià)同質(zhì)化起到了積極的促進(jìn)作用。

3.1 改革了傳統(tǒng)的考前培訓(xùn)模式

目前,各醫(yī)學(xué)院校和臨床醫(yī)學(xué)院均在開展各類型的考官培訓(xùn),部分單位建立了考官庫,考核能力水平得到了日益的提升[7]。但是在各類的臨床實(shí)踐技能考試組織與實(shí)施的過程中,考官隊(duì)伍多為根據(jù)考核內(nèi)容與要求臨時(shí)組建或抽調(diào)組成的,來自多個(gè)單位橫跨多個(gè)專業(yè),穩(wěn)定性、專業(yè)性和熟練程度存在著一定的差異,對(duì)當(dāng)前考試的內(nèi)涵和規(guī)則理解也不夠充分,容易造成集中度和規(guī)范度欠缺。因此,考前的集中培訓(xùn)是必不可少的。對(duì)于成熟考官而言,傳統(tǒng)的考核前考官培訓(xùn)通常采用的是考核前一天或者一周進(jìn)行集中的短時(shí)培訓(xùn),考核規(guī)模越大則要求場(chǎng)地和占用資源越大,組織的難度隨之增加,造成培訓(xùn)效果的實(shí)時(shí)反饋愈加困難,所以隨著培訓(xùn)規(guī)模的擴(kuò)大,培訓(xùn)效果不斷下降。采用云平臺(tái)的培訓(xùn)模式,不受空間限制,組織難度隨之降低,通過研究可以看到,對(duì)于培訓(xùn)需求的匹配度、培訓(xùn)形式的匹配度等方面評(píng)價(jià)分?jǐn)?shù)均在10分以上,可以匹配考官培訓(xùn)的要求。

3.2 在保證質(zhì)量的同時(shí)提高了培訓(xùn)和考核效率

傳統(tǒng)的考前考官培訓(xùn)模式多為專家授課講解,實(shí)際操作欠缺,培訓(xùn)后承擔(dān)考官工作存在標(biāo)準(zhǔn)職責(zé)模糊的情況,影響到評(píng)價(jià)的一致性。通過信息化網(wǎng)絡(luò)平臺(tái)應(yīng)用在考官培訓(xùn)過程中,結(jié)合視頻還原考核場(chǎng)景,豐富了培訓(xùn)形式,了解考核內(nèi)涵更為直接,在線模擬考官評(píng)分,增加互動(dòng),提升了參與度并可集中注意力。隨著智能化的考核管理平臺(tái)的使用,信息化評(píng)分系統(tǒng)使用的培訓(xùn)也是保障考核順利實(shí)施的必要條件[8-11]。在研究中可以看到,對(duì)于培訓(xùn)內(nèi)容的合理性、培訓(xùn)效果的認(rèn)可度評(píng)分均大于10分。通過考官自評(píng)結(jié)合各專業(yè)模擬評(píng)價(jià)的成績(jī)均和標(biāo)準(zhǔn)成績(jī)差異無統(tǒng)計(jì)學(xué)意義?？梢钥闯?運(yùn)用此模式培訓(xùn)后可以有效地保障培訓(xùn)質(zhì)量,并可促進(jìn)評(píng)價(jià)標(biāo)準(zhǔn)的統(tǒng)一,培訓(xùn)效果反饋較好。軟件應(yīng)用熟練度評(píng)分最高,可以看出應(yīng)用與實(shí)際考核中相同的評(píng)價(jià)系統(tǒng)進(jìn)行考官培訓(xùn)可以有效地提升考核效率。同時(shí)多專業(yè)同時(shí)開展培訓(xùn)工作,省時(shí)省力,節(jié)約人力資源,能有效地實(shí)現(xiàn)資源利用最大化,提高培訓(xùn)的整體效率。

3.3 減輕了集中考官培訓(xùn)所帶來的疲勞感

隨著考核方式的不斷完善、內(nèi)容的不斷豐富、規(guī)模的日益增加,臨床教師在承擔(dān)教學(xué)工作的同時(shí)還要承擔(dān)繁重的臨床診療工作[12-13]。傳統(tǒng)培訓(xùn)模式的集中考官團(tuán)體培訓(xùn),占用了組織者、授課教師和考官的整段時(shí)間,由于近期公共衛(wèi)生事件頻發(fā),集中培訓(xùn)防疫壓力陡增,增加了的考官和管理者的壓力和疲勞感。尤其是多單位、多科室參加或者是多中心同時(shí)開展的大型考試考核工作,參加和培訓(xùn)的過程中浪費(fèi)了考官們大量的時(shí)間,尤其是培訓(xùn)前后花費(fèi)在路程上的時(shí)間和精力,采用基于云平臺(tái)的考官培訓(xùn)模式對(duì)于培訓(xùn)效果以及減輕培訓(xùn)壓力有著不可替代的優(yōu)勢(shì)。

4 結(jié) 語

基于云平臺(tái)的學(xué)習(xí)和培訓(xùn)模式已成為現(xiàn)階段社會(huì)主要發(fā)展趨勢(shì),將云平臺(tái)的考官培訓(xùn)模式應(yīng)用于考核評(píng)價(jià)工作中,可以切實(shí)地提高考核培訓(xùn)的效率和質(zhì)量。但是也發(fā)現(xiàn)了一定的不足,培訓(xùn)過程考官很容易受到干擾,這也從側(cè)面反映出了相關(guān)管理人員應(yīng)當(dāng)對(duì)考官在線學(xué)習(xí)的實(shí)際狀況進(jìn)行實(shí)時(shí)監(jiān)督,只有這樣才能從源頭上促進(jìn)培訓(xùn)質(zhì)量的全面提升。

利益沖突所有作者均聲明不存在利益沖突

作者貢獻(xiàn)聲明陳超:提出論文構(gòu)思,收集、整理相關(guān)數(shù)據(jù),撰寫論文;陳麗芬:提出論文構(gòu)思,撰寫論文;朱慶雙、王亞軍:總體把關(guān),審訂論文;陳晨:收集、整理相關(guān)數(shù)據(jù)