張金虎 何亞萍 朱敏佳 聶莉 岳利民
(四川大學(xué)華西基礎(chǔ)醫(yī)學(xué)與法醫(yī)學(xué)院生理學(xué)教研室,四川 成都 610041)
生理學(xué)是醫(yī)藥專業(yè)的公共基礎(chǔ)課,課程教學(xué)質(zhì)量直接關(guān)系到相關(guān)專業(yè)學(xué)生的培養(yǎng),必須重視其試題質(zhì)量,做好題庫(kù)建設(shè)。人民衛(wèi)生出版社組織編寫了一個(gè)面向全國(guó)的醫(yī)學(xué)教育題庫(kù)[1],為檢測(cè)其生理學(xué)試題質(zhì)量,題庫(kù)方指定了60道生理學(xué)A型選擇題用于四川大學(xué)2017秋季期末考試(客觀題部分)。
試卷質(zhì)量指標(biāo)包括信度和效度,試題分析則有難度和區(qū)分度指標(biāo)。A型選擇題在題庫(kù)中所占比例很大,其試題質(zhì)量要求也高,并且有專門的選項(xiàng)分析,即通過統(tǒng)計(jì)備選答案實(shí)際頻數(shù),篩查出存在選項(xiàng)異常的試題。如某干擾選項(xiàng)頻數(shù)接近0時(shí),說明此選項(xiàng)迷惑性差;某干擾選項(xiàng)頻數(shù)接近或高于參考答案時(shí),提示題干描述不清晰導(dǎo)致可以雙選、或者是相應(yīng)知識(shí)點(diǎn)講授存在問題。這些需進(jìn)一步查看原題,分析具體原因[2]。
為此,就上述試題考試結(jié)果進(jìn)行分析,為今后題庫(kù)的建設(shè)、維護(hù),以及課堂教學(xué)的改進(jìn)提供參考。
考試對(duì)象為2016級(jí)基礎(chǔ)醫(yī)學(xué)、臨床醫(yī)學(xué)(五年制)和口腔醫(yī)學(xué)專業(yè)的學(xué)生,共計(jì)474人。五選一的A型選擇題,每題1分。機(jī)讀答題卡并人工校對(duì),輸出個(gè)人總分和每個(gè)小題實(shí)際選項(xiàng)的Excel表。
采用Excel2010,將機(jī)讀結(jié)果用邏輯函數(shù)自動(dòng)轉(zhuǎn)換為0/1計(jì)分。采用KR21公式計(jì)算庫(kù)-李信度[2]。用分類計(jì)數(shù)函數(shù)統(tǒng)計(jì)各題備選答案的頻數(shù)及高分組和低分組分布,對(duì)于備選答案頻數(shù)異常的試題,查看原題后再作相應(yīng)處理。
套用函數(shù)“=IF(ISERROR(FIND(“Y”,Z)),0,1)”,在Excel中可將答案自動(dòng)轉(zhuǎn)換為相應(yīng)得分。其中Y為某題正確答案序號(hào),Z為考生所在單元格代碼。
Excel中求出總成績(jī)及各小題平均分、標(biāo)準(zhǔn)差,發(fā)現(xiàn)3名學(xué)生總分與機(jī)讀后人工核對(duì)的成績(jī)相差±1分,經(jīng)查看答題卡確認(rèn)更改,由此完成了分?jǐn)?shù)核查。
由于均為0/1計(jì)分題,其平均分實(shí)為通過率(即難度)0.828,高于題庫(kù)方預(yù)估難度0.600,本套A型選擇題對(duì)于這部分學(xué)生來說難度不大。
這3個(gè)專業(yè)2013~2016年度四選一的A型選擇題平均難度0.788。由于選項(xiàng)數(shù)不相同,需要預(yù)先作難度校正后再比較[2]。經(jīng)校正,本次試題難度為0.785,前4年平均難度校正值為0.718。
Excel中可直接將總成績(jī)的平均分和標(biāo)準(zhǔn)差代入KR21公式,計(jì)算出庫(kù)-李信度值為0.863,與SPSS得出的Cronbach′s α值0.860非常接近。各小題得分一致性好,測(cè)驗(yàn)的信度較高,考試結(jié)果可靠。
用COUNTIF函數(shù)、并使用通配符“*”可便捷地統(tǒng)計(jì)出各題備選答案頻數(shù)。結(jié)果有8道題選項(xiàng)設(shè)計(jì)合理(各干擾項(xiàng)比例為2%~22%,正確選項(xiàng)比例50%~70%),試題制作質(zhì)量?jī)?yōu)良。另有9道題僅某一干擾選項(xiàng)頻率在1%~2%,試題質(zhì)量較好。
第19、21、28、40題等共計(jì)12道題存在某些干擾選項(xiàng)頻數(shù)為0的情況,其中第40題全部干擾項(xiàng)均不足1%。第58題比較特殊,除干擾選項(xiàng)E頻數(shù)為0外,參考答案A和干擾項(xiàng)D的頻數(shù)比為221:211,在高分組相差稍大(75:44)。這12道題需查看原題,再給出參考意見。
經(jīng)查看原題,第28題考察閾刺激知識(shí),備選項(xiàng)中僅正確答案出現(xiàn)關(guān)鍵字“閾”;第21題與之類似。這類題可適當(dāng)增大干擾選項(xiàng)的迷惑性。第19題正確選項(xiàng)的描述超過20字,而各干擾項(xiàng)用詞均不足10個(gè)字,不排除對(duì)作答者產(chǎn)生了一定的暗示,需要降低兩者句式的差異程度。
第58題題干為“平原地區(qū)的正常人到高原后呼吸運(yùn)動(dòng)增強(qiáng)的原因”,正確答案A為“低氧血癥”,干擾選項(xiàng)D為“低氧血癥合并高碳酸血癥”。此試題題干和選項(xiàng)均無問題,而不少學(xué)生未能選擇正確答案,暴露其相關(guān)知識(shí)點(diǎn)掌握不好的問題,今后在相關(guān)章節(jié)的教學(xué)中應(yīng)著重講解。
第40題等其余9道題是因?yàn)橄嚓P(guān)知識(shí)點(diǎn)屬大綱重點(diǎn)要求內(nèi)容,學(xué)生普遍掌握較好致正確率偏高。這類題不能輕易刪減,但也不宜大量出現(xiàn)在同一套試題中,否則對(duì)試卷難度和區(qū)分度影響較大[3]。
選項(xiàng)分析要比較高分組與低分組差異,實(shí)際上就分析了區(qū)分度。區(qū)分度為0.273,區(qū)分能力一般。
本科課程考試屬于標(biāo)準(zhǔn)參照考試,應(yīng)具備較高的內(nèi)容效度(對(duì)教學(xué)大綱的覆蓋程度)和信度;主要考察學(xué)生是否達(dá)到教學(xué)大綱的要求,對(duì)難度和區(qū)分度要求不高,難度0.5~0.8,區(qū)分度>0.2即可[4]。
題庫(kù)方在選擇試題時(shí)已按掌握、熟悉和了解3檔要求對(duì)各章節(jié)全面覆蓋以確保內(nèi)容效度。信度反映測(cè)驗(yàn)的可靠程度,全國(guó)性題庫(kù)通常要求信度>0.8;由于客觀題可猜測(cè)答案致信度變小,其信度要求會(huì)適當(dāng)降低[2]。本次信度為0.860,試題整體可靠性好。
通過選項(xiàng)分析篩查,并進(jìn)一步對(duì)照試題題干描述和選項(xiàng)設(shè)置,絕大部分試題都符合要求,僅有3道題在備選答案設(shè)計(jì)上待改進(jìn),這樣也可提升難度和區(qū)分度??傮w上,該套A型選擇題制作質(zhì)量較高。
本次考試反映出這部分學(xué)生的生理學(xué)知識(shí)普遍掌握較好,課堂教學(xué)質(zhì)量較高;分析結(jié)果也有望為今后該題庫(kù)在維護(hù)和組題時(shí)提供參考[5]。另外,通過選項(xiàng)分析也發(fā)現(xiàn)學(xué)生在個(gè)別知識(shí)點(diǎn)存在普遍的錯(cuò)誤認(rèn)識(shí),今后應(yīng)重點(diǎn)強(qiáng)化。當(dāng)然,根據(jù)以往的教學(xué)經(jīng)驗(yàn),這3個(gè)專業(yè)的學(xué)生成績(jī)整體上要好于其它專業(yè),若此套A型選擇題用于檢測(cè)其它專業(yè)學(xué)生,試題質(zhì)量指標(biāo)(尤其是難度和區(qū)分度)會(huì)有一定變化。
SPSS在試卷分析使用較廣泛,如連續(xù)計(jì)分題的α信度分析等[6]。而以全或無方式計(jì)分的客觀題采用KR21公式計(jì)算信度,僅需總分的平均值和標(biāo)準(zhǔn)差,計(jì)算非常便捷。本例中讀卡輸出的選項(xiàng)結(jié)果超過2.8萬個(gè),SPSS無法自動(dòng)將選項(xiàng)轉(zhuǎn)換為試題得分,不支持庫(kù)-李公式,也不能使用通配符處理單元格字符前后存在的空格,例如機(jī)讀輸出的“C”和“C”(表示空格)將被SPSS當(dāng)成兩種情況來計(jì)數(shù),實(shí)用性不好。采用Excel對(duì)A型選擇題機(jī)讀結(jié)果進(jìn)行得分轉(zhuǎn)換并作選項(xiàng)分析,方法簡(jiǎn)便、實(shí)用。