外科護(hù)理學(xué)試卷不同出題方式的質(zhì)量評價1)

郭蕾蕾,張 林,劉 堃,宋雪薇

為了體現(xiàn)科學(xué)化、公平性考試的要求,我院對2006級本科外科護(hù)理學(xué)期末考試采用題庫抽題方式進(jìn)行,通過試卷質(zhì)量評價指標(biāo)對題庫抽題與教師出題試卷進(jìn)行比較分析,了解學(xué)生在不同出題方式下,對外科護(hù)理學(xué)知識的掌握程度和試卷質(zhì)量,對科學(xué)評價試卷質(zhì)量、合理出題和題庫建設(shè)具有重要的意義。

1 對象與方法

整群抽取遼寧醫(yī)學(xué)院2005級、2006級本科外科護(hù)理學(xué)試卷249份,其中教師出題 115份,題庫抽題 134份,題型分布見表1。考試從出題到批改,嚴(yán)格遵守遼寧醫(yī)學(xué)院考試規(guī)程,考試試卷經(jīng)過流程批改核對,數(shù)據(jù)采用得分點(diǎn)計分,對各個題型的得分點(diǎn)單獨(dú)計分,各題型得分點(diǎn)分布見表2;難度系數(shù)中,選擇題采用校正猜測機(jī)遇后的難度系數(shù),主觀題采用平均得分率法;區(qū)分度采用極差法;信度中,選擇題采用庫德-理查遜(Kuder-Richardson)信度法,主觀題采用克朗巴赫(α)系數(shù)法;效度采用區(qū)分度估計。全部數(shù)據(jù)雙人盲法錄入SPSS17.0軟件進(jìn)行統(tǒng)計學(xué)分析。

表1 兩種試卷題型分布 題(分)

表2 兩種試卷各題型得分點(diǎn)分布 題(點(diǎn))

2 結(jié)果(見表3～表 6)

表3 采用教師出題與題庫抽題試卷成績分布比較 人(%)

表4 兩種試卷各題型質(zhì)量評價情況

表5 兩種試卷試題得分點(diǎn)難易度分布 點(diǎn)

表6 兩種試卷試題得分點(diǎn)區(qū)分度分布 點(diǎn)

3 討論

3.1 試卷結(jié)構(gòu)及成績分布 題庫抽題后,總題量變化不大,得分點(diǎn)個數(shù)增加5個。應(yīng)用教師出題、題庫抽題試卷不及格率分別是1.74%、1.49%,不及格率有所下降,均維持在低水平;應(yīng)用題庫抽題試卷,成績分布達(dá)及格、中等人數(shù)比例大幅上升,分別上升了16.05%、19.08%;良好比例下降了 31.41%,優(yōu)秀率為0。這與部分題型的難易度加大有關(guān),使得低分?jǐn)?shù)組段的比例上升。

3.2 試卷分析

3.2.1 難易度 難易度是反映學(xué)生完成試題難易程度的定量指標(biāo),取值范圍為0～1,難度系數(shù)數(shù)值越大,說明試題難度越小,反之亦然[1]。課程合格性考試試卷一般要求難度在0.5～0.7,改革考試方法后,試卷總體的難度升高,各題型難易度分布在0.7左右,難易度較好,名詞解釋和病例分析等主觀題難易度增加;極難題、難題、中等題、較易題所占比例上升,分別由原來的3.08%、9.23%、6.15%、20.00%上升到 10.00%、20.00%、7.14%、22.86%,而較難題、容易題所占比例下降,分別由原來的9.23%、52.31%下降到 4.29%、35.71%?？赡芘c題庫抽題試卷強(qiáng)調(diào)知識點(diǎn)造成的考試猜測幾率減小有關(guān),知識點(diǎn)的考核更加全面。

3.2.2 區(qū)分度 區(qū)分度是反映學(xué)生掌握知識差異的能力的定量指標(biāo),取值范圍為0～1,區(qū)分度越大,區(qū)分效果越好[2]。課程合格性考試,試題區(qū)分度一般要求在0.3～0.4。兩種試卷區(qū)分度均不理想,題庫抽題后區(qū)分度除填空題外,各題型均有一定程度下降,而區(qū)分度差的題比例大幅下降,尚可、良好、非常好題目比例均有不同程度上升,這與題庫中試題的質(zhì)量相關(guān)。我院外科護(hù)理學(xué)題庫經(jīng)過外科教研室數(shù)位經(jīng)驗(yàn)豐富的老師修訂,目前還在不斷的完善中,避免了教師出題時臨時編制題目造成的題目區(qū)分度的降低,影響了試卷質(zhì)量。

3.2.3 信度 它是表示考試的可靠性,取值范圍一般為-1～1,其值越大,信度越高[3]。高校課程的合格性考試對信度的要求一般大于0.5。改革考核方式后名詞解釋題的信度上升了0.51;填空題下降了0.09,選擇題、簡答題、病例分析題信度變化不大,試卷總體信度>0.5,符合要求,能比較真實(shí)地反映考生的成績。題庫的題型多經(jīng)過多次篩選,教研室多年教學(xué)過程中的積累對題庫建設(shè)至關(guān)重要,題目能反映考試的真實(shí)性。

3.2.4 效度 效度的高低是反映整套試卷命題的準(zhǔn)確性和有效性的重要參數(shù),取值范圍為0～1,也是考試結(jié)果能否準(zhǔn)確地反映所要測量的特性或功能的程度[1]。一次考試,其效度一般應(yīng)在0.3～0.7之間。改革考試方式后,名詞解釋和病例分析題的效度大幅下降,這可能與評改過程的誤差和效度計算方法有關(guān),因?yàn)闂l件的限制,未能采用專家評定的內(nèi)容效度,而只是采用區(qū)分度估計,區(qū)分度不是太理想的情況下,未能真實(shí)反映效度。

3.3 對策

3.3.1 加強(qiáng)題庫建設(shè),提高試卷質(zhì)量 外科護(hù)理學(xué)教師每年通過試卷分析了解往年題目特點(diǎn),在配合考試中心保密制度的原則下,對外科護(hù)理學(xué)的題庫進(jìn)行增補(bǔ)、刪減,目前已經(jīng)形成了2 000余道題的題庫。題庫建設(shè)應(yīng)適時調(diào)整,刪除部分區(qū)分度較差的題目,加強(qiáng)部分主觀題的區(qū)分度,雖然外科護(hù)理學(xué)試卷的評改有規(guī)章,但由于個人傾向的存在,名詞解釋給分較為單一,區(qū)分度偏低,應(yīng)提高此類主觀題的區(qū)分度,提高病例分析題的應(yīng)答能力;擴(kuò)大較易題、中等難度題比例,在不降低難度的同時,保持較好的區(qū)分度,通過嚴(yán)把考試和試題質(zhì)量關(guān),提高題目的信度;按照教學(xué)大綱和考試要求出題,提高試卷總體的效度,每年應(yīng)在不增加試卷考題量的同時,適當(dāng)增加考點(diǎn)數(shù)。

3.3.2 完善考核方式,嚴(yán)格考評流程 采用在試卷成績、實(shí)驗(yàn)課/見習(xí)課和平時表現(xiàn)相結(jié)合的考核辦法,綜合對外科護(hù)理學(xué)的考核方式;嚴(yán)格評分標(biāo)準(zhǔn),評分標(biāo)準(zhǔn)要統(tǒng)一,評分人員要培訓(xùn),盡量采用流水作業(yè)式評卷方法;對考后試卷進(jìn)行全面分析,了解學(xué)生對試卷知識點(diǎn)的掌握,有針對性地在以后的教學(xué)中彌補(bǔ)不足。

總之,應(yīng)積極探索題庫考評方式,在題庫建設(shè)中提高中等難度題目的比例,適當(dāng)調(diào)整試題區(qū)分度,調(diào)整、刪除部分區(qū)分度較差的題目;提高主觀題,特別是病例分析題的應(yīng)答能力;加強(qiáng)部分主觀題的區(qū)分度,提高此類題型的信度;按照教學(xué)大綱和考試要求出題,提高試卷總體的效度;嚴(yán)格考試流程,嚴(yán)把質(zhì)量關(guān);通過教與考提高教學(xué)質(zhì)量。

[1]陳熙,吳成秋,賀棟梁.試卷分析與評價的指標(biāo)體系及其應(yīng)用[J].西北醫(yī)學(xué)教育,2006,14(5):542-543.

[2]張麗,王輝,李新征.2005級專升本婦產(chǎn)科護(hù)理學(xué)試卷質(zhì)量分析[J].護(hù)理研究,2008,22(1A):81-82.

[3]圈彥偉.相關(guān)性在教育測量中的應(yīng)用[J].湖北第二師范學(xué)院學(xué)報,2008,25(2):80-84.