鄧 姣,楊 柳,楊謙梓,蘇斌虓,董海龍,雷 偉*
(1.空軍軍醫(yī)大學(xué)西京醫(yī)院,陜西 西安 710032;2. 空軍軍醫(yī)大學(xué)基礎(chǔ)醫(yī)學(xué)院,陜西 西安710049)
為分析我校外科學(xué)教學(xué)質(zhì)量,評估教學(xué)改革的作用以及進(jìn)一步形成便于錄入、便于分析的數(shù)字化調(diào)查方法,篩選分析了2008—2017年外科學(xué)學(xué)員調(diào)查問卷的總結(jié)報告,將統(tǒng)計資料詳實(shí)可比的代表年份單獨(dú)列出,分析了不同學(xué)年教學(xué)質(zhì)量的變化趨勢及原因,對比了兩種評分方式的優(yōu)劣并總結(jié)了學(xué)員建議,提出了未來改進(jìn)防線。
1.資料來源。選取第四軍醫(yī)大學(xué)2008—2017級不同學(xué)年外科學(xué)教研室教學(xué)質(zhì)量調(diào)查表的統(tǒng)計分析報告。
2.方法。根據(jù)滿意度問卷對外科學(xué)整體教學(xué)質(zhì)量的評估,分析了不同學(xué)年教學(xué)質(zhì)量的波動并回顧其波動的原因??偨Y(jié)學(xué)員建議,對教學(xué)方法改進(jìn)提出建議;提出問卷的局限性,并設(shè)計了新的電子問卷。
3.數(shù)據(jù)處理。將滿意度結(jié)果按照:很滿意=4;滿意=3;一般=2;不滿意=1;很不滿意=0進(jìn)行計分,并按照單項評分結(jié)果錄入Prism 6.0,采用Two-way ANOVA進(jìn)行分析。對比結(jié)果分析兩種評分方式的差異和優(yōu)缺點(diǎn)。
1.一般情況。每學(xué)年調(diào)查人員數(shù)、調(diào)查問卷數(shù)、教師人數(shù)和調(diào)查表項目數(shù)(見表1)。
表1 2007—2017年外科學(xué)教學(xué)質(zhì)量調(diào)查報告基本情況
2.調(diào)查問卷的問題歸類和分析。2008—2014年滿意制評分采用百分制,按教師職稱,對比歷年教學(xué)質(zhì)量變更(2013年資料缺失);2015—2017年采用抽樣調(diào)查滿意制,評估整體教學(xué)質(zhì)量,不針對教師個人。
3.評估結(jié)果分析。通過對2008—2017年歷年教學(xué)質(zhì)量調(diào)查總結(jié)報告的回顧,發(fā)現(xiàn)百分制全面調(diào)查雖然數(shù)據(jù)量大,但由于打分差距過小(大多數(shù)學(xué)生為教師打分均在95及以上),但同職稱不同年度及同年度不同職稱間評分均無明顯差異,且對個人無提示作用。而滿意制抽樣調(diào)查問卷數(shù)量雖小,但便于反應(yīng)教學(xué)技術(shù)的不同方面的差別,且由于轉(zhuǎn)換后屬于等級資料,個體差別較大,可以出現(xiàn)統(tǒng)計學(xué)差異。在跨年比較及改進(jìn)同類教學(xué)技術(shù)的方面有很大優(yōu)勢;缺點(diǎn)是抽樣調(diào)查無法體現(xiàn)不同課程、不同授課教師之間的差別。而開放“點(diǎn)名”式的問題,可能可以發(fā)現(xiàn)榜樣課程、榜樣教師,但對于要改進(jìn)的課程和教師無提示作用。同時,該問卷設(shè)計單一,除教學(xué)技術(shù)外,對教學(xué)表現(xiàn)、學(xué)習(xí)效果等方面均沒有進(jìn)行評價,在調(diào)查范圍上有明顯缺陷。而就分析結(jié)果來看,2016年教學(xué)在重點(diǎn)突出方面有明顯下降(3.27±0.09降至2.92±0.13,P<0.05),通過改進(jìn),2017年恢復(fù)正常水平(3.30±0.08),且2017年啟發(fā)式教學(xué)質(zhì)量較2016年顯著上升(2.92±0.13升至3.28±0.07,P<0.05)。相信以滿意制進(jìn)行評價和轉(zhuǎn)化,在增加問卷數(shù)量(樣本量)的情況下,可以在統(tǒng)計學(xué)上表現(xiàn)出更多的差異。
4.新型電子教學(xué)質(zhì)量調(diào)查問卷的設(shè)計。使用“問卷星”應(yīng)用,在線設(shè)計調(diào)查問卷,對以往我校教學(xué)質(zhì)量評估的調(diào)查問題進(jìn)行歸類和增補(bǔ),分成課程總體滿意度,教學(xué)技術(shù),教學(xué)表現(xiàn)力,學(xué)習(xí)效果和教師特征五個方面,結(jié)合生動、多樣化的形容詞匯,加深學(xué)生理解和接受測評時的耐心。由于每位教師講授一個或幾個章節(jié)的內(nèi)容,本著學(xué)生匿名、評估不針對個人的原則,問卷沒有關(guān)于教師姓名、職稱等相關(guān)內(nèi)容的設(shè)計,根據(jù)課程,將一個完整的教學(xué)內(nèi)容作為一個模塊,對不同課堂不同模塊的教學(xué)質(zhì)量進(jìn)行評估,分析時可根據(jù)模塊(所在教室和教學(xué)內(nèi)容)追溯教師,可將個人結(jié)果和整體結(jié)果發(fā)給其個人,以促進(jìn)其自身成長。具體問卷內(nèi)容見開放測試網(wǎng)址:https://www.wjx.cn/jq/21343417.aspx。
滿意制問卷抽查,優(yōu)勢在于轉(zhuǎn)化為評分時,等級資料差別明顯,因此變化易出現(xiàn)統(tǒng)計學(xué)差異。但缺點(diǎn)在于每學(xué)期僅發(fā)放幾十份,對課程整體評估,對教師教學(xué)質(zhì)量和效果的評估則屬于開放式,由被抽查到的學(xué)生寫下表現(xiàn)比較突出的教師名字,因此調(diào)查報告總結(jié)中沒有具有統(tǒng)計學(xué)意義的信息,或可量化評估每一位教師的教學(xué)情況。學(xué)生反饋由于抽樣樣本量較少,也存在偏倚。因此調(diào)查問卷改革的主要內(nèi)容應(yīng)在以下幾點(diǎn):(1)以課程模塊為單位;(2)全面評估教師的教學(xué)內(nèi)容、教學(xué)技術(shù)、課堂表現(xiàn)力和學(xué)生的吸收掌握能力;(3)充分發(fā)揮群眾調(diào)查的優(yōu)勢,吸納學(xué)生建議,采用無記名形式開放學(xué)生對每一位教師的建議和對整個課程設(shè)計和編排的建議,并反饋給教師和教研室;(4)問卷量大、信息全的同時便于填寫和統(tǒng)計、分析。
總結(jié)設(shè)計新調(diào)查問卷時,應(yīng)從以下幾個方面入手[1]:(1)調(diào)查問卷整體設(shè)計目標(biāo):應(yīng)注重應(yīng)答率,從整體到細(xì)節(jié),由淺入深,由客觀到主觀,優(yōu)化填寫感覺,以反映受調(diào)查人真實(shí)的感受,不僅要明確感興趣的問題。(2)影響關(guān)鍵信息評估結(jié)果的因素問題:還要增補(bǔ)能的內(nèi)容,如學(xué)生自己的學(xué)習(xí)方式,對該門課程的接受程度,以獲得更加準(zhǔn)確的信息。(3)如何設(shè)計問題:應(yīng)注重填寫人感受,包括簡約,避免混淆,提問精確,確保該問題是可以理解并回答的,細(xì)節(jié)程度及敏感問題數(shù)適宜,以盡量使偏倚最小化。(4)應(yīng)答格式:有開放式和封閉式(選擇)兩種,也可以混合,如填寫選擇某項的原因。但在選項的類別設(shè)計中,實(shí)際上描述性分級選項是應(yīng)用最少的,因?yàn)橛涗浐头治龆枷鄬щy。而由于個人理解和對課程要求的不同,學(xué)生回答時的判斷標(biāo)準(zhǔn)可能有差異,導(dǎo)致對每個教師、每一節(jié)課的評價可能都不一樣。但在電子問卷的設(shè)計中,將登記資料直接賦予打分性質(zhì),可以直接得出統(tǒng)計結(jié)果,并且在交叉分析的過程中可以直接篩選一個自變量和一個因變量,對比不同課程內(nèi)容之間、單項評估內(nèi)容之間的差異,也可以對整體效果進(jìn)行分析和對比。(5)問卷長度可能會影響應(yīng)答率和應(yīng)答效果:BMJ一項研究顯示較短的問卷(6 vs. 34)可能更容易獲取更多的完整答卷[2]。為提高應(yīng)答率但又能全面評估課程質(zhì)量,我們最終設(shè)計了全長20個問題。(6)問題的排布:從普遍到特殊,從簡到難,從實(shí)際到抽象,從封閉式題目開始,優(yōu)先排布和主題關(guān)系最密切的問題及避免從個人問題開始。因此問卷排布為學(xué)生對課程總體的感受,到教師教學(xué)技術(shù)、教學(xué)表現(xiàn)力,再到學(xué)生個人的學(xué)習(xí)效果,最后對教師的特性(教師個人特征)進(jìn)行總結(jié)。(7)問卷的發(fā)放方法和時機(jī)[3]:大學(xué)課堂教學(xué)效果問卷一般采用當(dāng)堂發(fā)放或經(jīng)電郵發(fā)放;發(fā)放頻率可以從每章節(jié)結(jié)束后,定期(如周、月)或該門課程結(jié)束后發(fā)放。更改為電子問卷后,避免了分發(fā)、收集的繁冗工作,將二維碼發(fā)送給各班組長,請其負(fù)責(zé)在每次課內(nèi)容結(jié)束后提醒組員進(jìn)行評估,以提高應(yīng)答率。
本問卷在實(shí)施過程中可能還會針對學(xué)生的反應(yīng)及建議進(jìn)行修訂,以期獲得真實(shí)、可靠且有效的數(shù)據(jù)支持,調(diào)查結(jié)果反饋至全體教師以利今后改進(jìn),鼓勵教師不斷改進(jìn)教學(xué)方法,使學(xué)生既能將重點(diǎn)內(nèi)容在課堂上消化并記住、增進(jìn)對臨床病例的理解,又能從疾病角度出發(fā)掌握重點(diǎn)和常見疾病的外科學(xué)診治原則,進(jìn)一步提高我院外科學(xué)教學(xué)質(zhì)量。