外科動物實驗是培養(yǎng)無菌觀念和外科基本操作技能以及培養(yǎng)外科職業(yè)素養(yǎng)的實驗課程,是外科教學(xué)中的一個重要環(huán)節(jié)[1]。目前,外科動物實驗教學(xué)效果評價方法單一,缺乏系統(tǒng)有效的評價體系[2]。操作技能直接觀察法(direct observation of procedural skills,DOPS)是一種形成性評價方法,它通過評估者就某一項或一類臨床技能或操作對受評者即時進(jìn)行評估及反饋,是一種兼具教學(xué)和考核功能的臨床技能形成性評價工具[3]。為了更好的探索外動教學(xué)過程中有效的評價體系,我們在教學(xué)過程中引入DOPS 評估考核體系,探討其能否作為有效的考核和反饋的評價方法,提高教學(xué)質(zhì)量。
選擇2018年3—6月在我院見習(xí)的臨床醫(yī)學(xué)專業(yè)的全日制本科生60名為研究對象。隨機(jī)分為對照組和實驗組,每組30名。對照組男性16名,女14名,平均年齡(20.8±2.0)歲。實驗組男性17名,女性13名,平均年齡(20.2±1.4)歲;兩組見習(xí)生的一般資料對比,差異無統(tǒng)計學(xué)意義(P>0.05),具有可比性。
1.2.1 教學(xué)過程實施 實驗組和對照組均在本院臨床技能中心外動實驗室上課??己藘?nèi)容包括洗手、消毒鋪巾、穿脫手術(shù)衣及戴手套、切開縫合打結(jié)。每項內(nèi)容均由外科教師組授課。期末考試均采用臨床客觀結(jié)構(gòu)化多站考試模式(objective structured clinical examination,OSCE)考核??荚噧?nèi)容及方法一致,具有較高的真實性、客觀性。每個學(xué)生考試總成績是以上4 站考試成績的總和,共100分。
1.2.2 形成性評價實施 實驗組在進(jìn)行每項技能教學(xué)中均進(jìn)行一次操作技能直接觀察評估,作為形成性評價。對照組按照傳統(tǒng)教學(xué)流程組織教學(xué),不進(jìn)行形成性評價。DOPS 評估表為10 項內(nèi)容:相關(guān)知識掌握及擴(kuò)展、告知簽署同意、操作前的準(zhǔn)備工作充足、技能操作熟練、無菌觀念嚴(yán)格、合理尋求幫助、操作后物品的處理流程、溝通順暢多樣、醫(yī)學(xué)職業(yè)素養(yǎng)、操作整體表現(xiàn)。考核教師根據(jù)學(xué)生這10 項內(nèi)容完成的情況進(jìn)行評估,評估結(jié)果分為四個層次:未執(zhí)行、不符合要求、符合要求、表現(xiàn)優(yōu)異。同時對學(xué)生技能操作的優(yōu)缺點及需要改進(jìn)的地方進(jìn)行評價。學(xué)生對教師的教學(xué)效果進(jìn)行評價。教師與見習(xí)生對此次考核的滿意度互相之間進(jìn)行打分。評分標(biāo)準(zhǔn)分3 個級別:1、2、3分不滿意;4、5、6分滿意;7、8、9分非常出色[4]。
數(shù)據(jù)采用SPSS 22.0 統(tǒng)計軟件進(jìn)行分析,實驗組和對照組OSCE 考試總成績及滿意度均以(±s)表示,采用獨(dú)立樣本t檢驗,以P<0.05 為差異有統(tǒng)計學(xué)意義。
結(jié)果顯示實驗組和對照組OSCE 考試總成績服從正態(tài)分布且方差齊性。實驗組的期末考試OSCE 總成績?yōu)椋?0.23±7.26)分,高于對照組(84.77±9.54)分,差異具有統(tǒng)計學(xué)意義(P<0.05)。如表1 所示。
表1 對照組與實驗組期末OSCE 考試總成績比較(±s,分)
表1 對照組與實驗組期末OSCE 考試總成績比較(±s,分)
組別 人數(shù)(n) 考試成績 t 值 P 值實驗組 30 90.23±7.26 2.134 5 <0.05對照組 30 84.77±9.54
教師對實驗組DOPS 考核結(jié)果的滿意度為(8.22±0.75)分,高于對照組的(7.23±0.54)分,差異具有顯著統(tǒng)計學(xué)意義(P<0.01);實驗組見習(xí)生對DOPS 考核結(jié)果的滿意度為(8.66±0.79)分,高于對照組(7.04±0.53)分,差異具有顯著統(tǒng)計學(xué)意義(P<0.01),見表2
表2 教師及見習(xí)生對DOPS 考核結(jié)果的滿意度(±s,分)
表2 教師及見習(xí)生對DOPS 考核結(jié)果的滿意度(±s,分)
組別 教師滿意度 學(xué)生滿意度實驗組 8.22±0.75 8.66±0.79對照組 7.23±0.54 7.04±0.53 t 值 5.867 6.432 P 值 <0.01 <0.01
目前,國內(nèi)在對動物實驗課學(xué)生學(xué)習(xí)情況進(jìn)行考核評價時,多數(shù)采用理論和單純操作,或者客觀結(jié)構(gòu)化考核(OSCE)等終結(jié)性評價[5]。傳統(tǒng)的終結(jié)性評價雖然是經(jīng)典的成熟的評價方法,能夠客觀準(zhǔn)確判斷教育效果;但其評價時間滯后,不能動態(tài)了解學(xué)生的學(xué)習(xí)過程[6]。無法使教師及時改善教學(xué)方法,不能向?qū)W生反饋即時有效信息,使他們能更主動學(xué)習(xí)或進(jìn)行自我調(diào)整。在傳統(tǒng)的終結(jié)性評價基礎(chǔ)上應(yīng)用形成性評價能夠彌補(bǔ)其不足之處。形成性評價可以通過教師及學(xué)生的反饋,及時了解教與學(xué)的進(jìn)行狀況,及時調(diào)整教學(xué)活動,進(jìn)而提高教學(xué)質(zhì)量[7-8]。
DOPS 是一種評估臨床技能的過程性評價方法,其特點在于能提供有效的反饋,兼顧評價的結(jié)果與過程,有利于分別提高“教”與“學(xué)”的質(zhì)量[9]。既可以評價醫(yī)師的臨床技能操作,也可以評估醫(yī)學(xué)生的技能操作水平[10-11]。該項目研究中,我們在實驗組每一項操作內(nèi)容中均進(jìn)行DOPS 評估表評估。操作過程中由指導(dǎo)教師指導(dǎo)學(xué)生操作,評估教師觀察學(xué)生操作并填寫DOPS 評估表,操作結(jié)束后,評估教師對學(xué)生和指導(dǎo)教師現(xiàn)場反饋,同時學(xué)生在表上寫出對教師的反饋意見并進(jìn)行現(xiàn)場討論,反饋和討論時間大概5 min。教師組根據(jù)學(xué)生反饋的意見進(jìn)行總結(jié)并及時調(diào)整教學(xué)方法。期末OSCE 考試總成績表明其無菌觀念、技能水平、與患者的溝通能力以及職業(yè)素養(yǎng)均高于對照組,而且學(xué)生及教師對操作的滿意度也明顯提高。研究結(jié)果證實,DOPS 評估法通過有效的反饋,能夠在實驗操作過程中遇到的問題做出及時、有效的改進(jìn)和調(diào)整,有利于學(xué)生學(xué)習(xí)態(tài)度、職業(yè)素養(yǎng)及技能操作全面提升。同時促使教師不斷完善教學(xué)方法及時調(diào)整教學(xué)計劃,從而促進(jìn)教學(xué)質(zhì)量的整體提高。
外科動物實驗操作具有現(xiàn)場的實時性、真實性,還具有發(fā)展性的特點[12]。在外動教學(xué)過程中以培訓(xùn)教師作為觀察者,以DOPS為主要的形成性評價工具,通過老師和學(xué)生雙方的互評和自評,改變以往以終結(jié)性評價為主的單一的考評形式,重視對操作過程的評價,有效提升動物實驗學(xué)的教學(xué)質(zhì)量;并且在操作過程中對學(xué)生的技能和能力從多角度進(jìn)行現(xiàn)場綜合評價,真正促進(jìn)學(xué)生臨床技能水平的提升,為將來進(jìn)入臨床打下堅實的基礎(chǔ)。