預(yù)防醫(yī)學(xué)專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》試卷質(zhì)量評(píng)價(jià)*

鄭州大學(xué)公共衛(wèi)生學(xué)院衛(wèi)生統(tǒng)計(jì)學(xué)教研室 (450001)

楊永利　程志偉　杜玉慧　李琳琳　盧　潔　施學(xué)忠△

?

預(yù)防醫(yī)學(xué)專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》試卷質(zhì)量評(píng)價(jià)*

鄭州大學(xué)公共衛(wèi)生學(xué)院衛(wèi)生統(tǒng)計(jì)學(xué)教研室 (450001)

楊永利程志偉杜玉慧李琳琳盧潔施學(xué)忠△

【提要】目的分析鄭州大學(xué)自命題試卷和某985院校自命題試卷用于鄭州大學(xué)預(yù)防醫(yī)學(xué)專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》考試后試卷質(zhì)量，以便了解教學(xué)效果，提高試卷命題質(zhì)量。方法鄭州大學(xué)2011級(jí)預(yù)防醫(yī)學(xué)專業(yè)共有106名學(xué)生，隨機(jī)選取單號(hào)學(xué)生采用自命題試卷，雙號(hào)學(xué)生采用985高校自命題試卷。對(duì)試卷的信度、效度、難度和區(qū)分度進(jìn)行分析。結(jié)果使用鄭州大學(xué)自命題試卷和985高校自命題試卷的學(xué)生卷面原始成績(jī)分別為(76.08±11.58)和(78.21±13.37)分，差異無統(tǒng)計(jì)學(xué)意義，t=0.878，P=0.382。自命題試卷和985高校命題試卷的知識(shí)覆蓋率分別為89.5%和63.2%；信度系數(shù)分別為0.71和0.61；效度系數(shù)分別為0.84和0.78；難度系數(shù)分別為0.24和0.22；區(qū)分度系數(shù)分別為0.29和0.32。結(jié)論鄭州大學(xué)自命題試卷的試卷覆蓋面廣，信度效度較好，達(dá)到水平測(cè)試的要求，但名詞解釋和單項(xiàng)選擇題需改進(jìn)以提高其區(qū)分度。高等院校實(shí)行教考分離時(shí)，不宜直接照搬其它學(xué)校命題的試卷。

衛(wèi)生統(tǒng)計(jì)學(xué)信度效度難易度區(qū)分度

考試工作是高校教學(xué)工作的重要組成部分，考試管理質(zhì)量直接關(guān)系到高校教風(fēng)、學(xué)風(fēng)、考風(fēng)建設(shè)和教學(xué)質(zhì)量的提高。為加強(qiáng)考試管理，鄭州大學(xué)教務(wù)處根據(jù)學(xué)校會(huì)議精神，對(duì)2014-2015學(xué)年第二學(xué)期部分科目的期末考試實(shí)行教考分離。2011級(jí)預(yù)防醫(yī)學(xué)專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》是被抽中的科目之一，在進(jìn)行期末考試時(shí)，根據(jù)學(xué)號(hào)的單雙號(hào)分成兩組，一組使用985高校命題的試卷，一組使用本校教師命題的試卷。該研究分析了學(xué)生的考試成績(jī)，比較了兩套試卷的質(zhì)量，找出命題中存在的問題，一方面可以了解學(xué)生對(duì)統(tǒng)計(jì)知識(shí)的掌握情況，為改進(jìn)教學(xué)工作、提高教學(xué)質(zhì)量提供參考依據(jù)；另一方面可以反饋試卷命題質(zhì)量，以便為日后修改或篩選考試試題，建立試題庫(kù)做準(zhǔn)備。

研究對(duì)象和方法

1.課程安排

鄭州大學(xué)2011級(jí)預(yù)防醫(yī)學(xué)專業(yè)學(xué)生衛(wèi)生統(tǒng)計(jì)學(xué)課程使用教材為《衛(wèi)生統(tǒng)計(jì)學(xué)》第7版。該教材共20個(gè)章節(jié)，除meta分析一章節(jié)沒有講授外，其余19個(gè)章節(jié)均在講授范疇。課程總學(xué)時(shí)數(shù)97學(xué)時(shí)，理論課64學(xué)時(shí)，實(shí)習(xí)課33學(xué)時(shí)。

2.考試分組

2014-2015學(xué)年第二學(xué)期，共有106名2011級(jí)預(yù)防醫(yī)學(xué)專業(yè)學(xué)生參加《衛(wèi)生統(tǒng)計(jì)學(xué)》考試?？荚嚽?，按照學(xué)生學(xué)號(hào)的單雙號(hào)分成兩組，隨機(jī)選取單號(hào)學(xué)生使用鄭州大學(xué)教師自命題試卷，雙號(hào)學(xué)生使用某985高校自命題試卷，使用兩種試卷的考生人數(shù)均為53人。

3.評(píng)分方法

共有4名教師參與閱卷，閱卷教師具有副高級(jí)或高級(jí)職稱。閱卷教師根據(jù)標(biāo)準(zhǔn)答案和評(píng)卷細(xì)則密封閱卷，為確保試卷評(píng)分尺度統(tǒng)一，每個(gè)教師只評(píng)閱一個(gè)題型。

4.試卷質(zhì)量分析方法

(4)區(qū)分度：將全體考生的成績(jī)按降序的方式排列，前27%的學(xué)生為高分組，后27%的學(xué)生為低分組，計(jì)算高分組得分的平均值PH和低分組得分的平均值PL，采用公式D=(PH-PL)/F計(jì)算區(qū)分度。D≥0.4表示區(qū)分度很好；0.3≤D<0.4表示區(qū)分度良好，若能修改更好；0.20≤D<0.3表示區(qū)分度尚可，必須要進(jìn)行修改；D<0.19表示區(qū)分度劣[4]。

(5)統(tǒng)計(jì)軟件：用EXCEL 2007錄入數(shù)據(jù)，用SPSS 19.0進(jìn)行統(tǒng)計(jì)分析。檢驗(yàn)水準(zhǔn)α=0.05。

結(jié)　　果

1.題型和知識(shí)點(diǎn)覆蓋面

自命題試卷由名詞解釋(5個(gè)，共15分)、單項(xiàng)選擇題(12個(gè)，共24分)、簡(jiǎn)答題(4個(gè)，共32分)和綜合應(yīng)用題(3個(gè)，共29分)4種題型組成；知識(shí)點(diǎn)覆蓋17個(gè)章節(jié)，章節(jié)知識(shí)覆蓋率為89.5%。985高校命題試卷由單項(xiàng)選擇題(10個(gè)，共20分)、簡(jiǎn)答題(2個(gè)，共20分)、計(jì)算分析題(2個(gè)，共30分)和論述題(2個(gè)，共30分)4種題型組成；知識(shí)點(diǎn)覆蓋12個(gè)章節(jié)，章節(jié)知識(shí)點(diǎn)覆蓋率為63.2%。

2.成績(jī)分布

使用自命題試卷學(xué)生的卷面原始成績(jī)服從正態(tài)分布(S-W=0.965，P=0.123)，使用985高校命題試卷的學(xué)生原始卷面成績(jī)不滿足正態(tài)分布(S-W=0.901，P<0.001)。使用兩種試卷的學(xué)生成績(jī)分別為(76.08±11.58)分和(78.21±13.37)分，差異無統(tǒng)計(jì)學(xué)意義，t=0.878，P=0.382。各分?jǐn)?shù)段人數(shù)見表1。

表1　學(xué)生考試成績(jī)分布 n(%)

3.試卷質(zhì)量分析

(1)信度

自命題試卷信度系數(shù)為0.71，試卷信度較好。985高校命題試卷信度系數(shù)為0.61，試卷信度尚可。

(2)效度

自命題試卷和985高校命題試卷的效度系數(shù)分別為0.84和0.78，試卷效度均較好。但是985高校試卷的內(nèi)容效度較差。如論述題“論述統(tǒng)計(jì)分析的一般過程和各方法的優(yōu)缺點(diǎn)”(15分)，該題措辭不準(zhǔn)，導(dǎo)致標(biāo)準(zhǔn)答案和評(píng)分標(biāo)準(zhǔn)無法統(tǒng)一。關(guān)于“統(tǒng)計(jì)分析的一般過程”：可以理解為統(tǒng)計(jì)工作的一般步驟，包括統(tǒng)計(jì)設(shè)計(jì)、資料搜集、資料整理和統(tǒng)計(jì)分析；也可以理解為統(tǒng)計(jì)描述和統(tǒng)計(jì)推斷；還可以理解為假設(shè)檢驗(yàn)的步驟，即建立假設(shè)和確定檢驗(yàn)水準(zhǔn)、計(jì)算統(tǒng)計(jì)量和P值，得出統(tǒng)計(jì)結(jié)論。關(guān)于“各方法的優(yōu)缺點(diǎn)”，本身提法就不妥：首先，統(tǒng)計(jì)方法本身并無好壞之分，每種統(tǒng)計(jì)方法都有其特定的適用范圍；其次，“優(yōu)缺點(diǎn)”是相對(duì)的，只有與其它方法相比較的時(shí)候才會(huì)有優(yōu)缺點(diǎn)。如與參數(shù)檢驗(yàn)相比，非參數(shù)檢驗(yàn)的優(yōu)缺點(diǎn)是什么？另外，985高校命題試卷中如選擇題“在多元線性回歸分析中，發(fā)現(xiàn)自變量有多重共線性問題時(shí)，解決的方法是”(2分)，該題有4個(gè)選項(xiàng)：A刪除具有多重共線性的變量,B主成分分析產(chǎn)生新的綜合變量再分析，C兩者均可以，D兩者均不可以。標(biāo)準(zhǔn)答案B存在爭(zhēng)議，當(dāng)自變量有多重共線性問題時(shí)，A和B兩種方法均是常用的方法，但需要依據(jù)數(shù)據(jù)的特征和專業(yè)知識(shí)來判斷哪種方法更合適，不能一概而論。

(3)難度

自命題試卷和985高校命題試卷整體上難度偏易，見表2。

表2　兩套試卷難易度分析

(4)區(qū)分度

自命題試卷區(qū)分度一般，985高校命題試卷區(qū)分度良好，見表3。

表3　兩套試卷區(qū)分度分析

討　　論

試卷質(zhì)量分析是教育統(tǒng)計(jì)中一個(gè)重要組成部分，也是教育部各項(xiàng)評(píng)估中一個(gè)關(guān)鍵性的指標(biāo)。一套好的試卷，無論由何種題型組成，既能符合教學(xué)大綱的要求、準(zhǔn)確、科學(xué)，還應(yīng)具有較高的信度、效度和區(qū)分度，難易度適中，覆蓋面較廣，學(xué)生考試成績(jī)呈正態(tài)分布[2,5]。本研究以鄭州大學(xué)2011級(jí)預(yù)防專業(yè)學(xué)生為對(duì)象，對(duì)比分析了鄭州大學(xué)自命題試卷和985高校命題試卷《衛(wèi)生統(tǒng)計(jì)學(xué)》的試卷質(zhì)量，發(fā)現(xiàn)試卷命題中存在的問題，為我們今后提高命題水平，不斷完善和提高教學(xué)質(zhì)量提供了有益的參考。

從題型分布看，自命題試卷由名詞解釋、單項(xiàng)選擇題、簡(jiǎn)答題和綜合應(yīng)用題組成，前3種題型重在測(cè)評(píng)學(xué)生對(duì)統(tǒng)計(jì)基本知識(shí)的掌握情況，綜合應(yīng)用題重在考核學(xué)生綜合分析問題的能力；985高校命題試卷有單項(xiàng)選擇題、簡(jiǎn)答題、計(jì)算分析題和論述題4種題型。從知識(shí)點(diǎn)覆蓋面看，自命題的試卷章節(jié)知識(shí)覆蓋率(89.5%)高于985高校命題試卷(63.2%)，說明自命題試卷能更全面測(cè)評(píng)學(xué)生對(duì)統(tǒng)計(jì)知識(shí)的掌握能力。自命題的試卷嚴(yán)格參照本學(xué)校教學(xué)大綱的要求出題，盡可能包括所講授的各個(gè)章節(jié)；985高校命題的試卷在出題范圍上，主要考慮的是他們學(xué)校的教材、學(xué)時(shí)數(shù)和教學(xué)大綱。提示在用其它學(xué)校試卷對(duì)自己學(xué)校的學(xué)生考試時(shí)，一定要考慮試卷來源學(xué)校的教材、學(xué)時(shí)數(shù)和教學(xué)大綱，不能直接照搬其它學(xué)校命題的試卷。

自命題試卷和985高校命題試卷信度系數(shù)分別為0.71和0.61，分別處于“較好”和“尚可”的等級(jí)，說明自命題的試卷能夠達(dá)到水平測(cè)試的要求，考試結(jié)果可真實(shí)反映學(xué)生對(duì)統(tǒng)計(jì)知識(shí)的掌握水平。985高校命題的試卷信度系數(shù)略低于自命題試卷，可能與題量少、分值大，知識(shí)覆蓋面低有一定關(guān)系[5]。兩套試卷的效度系數(shù)分別為0.84和0.78，效度等級(jí)為“較好”，說明兩套試卷與要考察的內(nèi)容比較吻合。針對(duì)985高校命題試卷某些試題措辭不準(zhǔn)導(dǎo)致標(biāo)準(zhǔn)答案和評(píng)分標(biāo)準(zhǔn)無法統(tǒng)一、標(biāo)準(zhǔn)答案有爭(zhēng)議以及知識(shí)點(diǎn)覆蓋面低這些問題，提醒教師在命題時(shí)，一定要反復(fù)斟酌卷面用詞，避免出現(xiàn)讓人產(chǎn)生歧義的問題。建議由3個(gè)或以上教師組成命題小組，反復(fù)斟酌每道題的措辭和標(biāo)準(zhǔn)答案，確保每一道試題的科學(xué)性、語言表達(dá)的準(zhǔn)確性和標(biāo)準(zhǔn)答案的正確性，同時(shí)還要避免知識(shí)點(diǎn)之間的重疊，提高知識(shí)點(diǎn)覆蓋面。通過這些完善措施，可以促進(jìn)試卷信度和效度的提高。

兩套試卷整體上難度偏易，這與學(xué)校的考試目的有關(guān)，期末考試主要目的在于測(cè)試學(xué)生的知識(shí)水平，因此應(yīng)有較高的及格率，使絕大多數(shù)學(xué)生可以通過考試從而順利拿到畢業(yè)證和學(xué)位證。但是，為了激發(fā)學(xué)生的學(xué)習(xí)熱情和積極性，讓學(xué)得好與學(xué)得差的學(xué)生在課程考試的成績(jī)中得以體現(xiàn)，選拔成績(jī)優(yōu)秀的學(xué)生參與評(píng)優(yōu)評(píng)先活動(dòng)和碩士研究生免推資格評(píng)選，試卷還必須有一定區(qū)分度。從不同題型的區(qū)分度看：兩套試卷的單項(xiàng)選擇題區(qū)分度“尚可”，必須進(jìn)一步改進(jìn)，自命題試卷的名詞解釋若能改進(jìn)更好。分析原因，可能是由于這兩類型題目主要考察學(xué)生單個(gè)記憶性知識(shí)點(diǎn)，有研究顯示，學(xué)生對(duì)記憶性知識(shí)點(diǎn)掌握程度的區(qū)別不大[6]。自命題試卷的簡(jiǎn)答題和綜合應(yīng)用題很好，尤其是綜合應(yīng)用題，區(qū)分度系數(shù)為0.48，是所有題型中區(qū)分度最大的，985高校命題試卷的簡(jiǎn)單題和計(jì)算分析題區(qū)分度系數(shù)也較其他題型高，說明學(xué)生對(duì)多個(gè)知識(shí)點(diǎn)綜合應(yīng)用能力水平區(qū)別比較大。

綜上，通過對(duì)預(yù)防專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》試卷質(zhì)量的對(duì)比分析，發(fā)現(xiàn)鄭州大學(xué)自命題試卷的試卷覆蓋面廣，信度效度較好，綜合應(yīng)用題題型設(shè)置合理，學(xué)生成績(jī)服從正態(tài)分布，達(dá)到水平測(cè)試的要求。但離“好試卷”的標(biāo)準(zhǔn)還有一定差距，名詞解釋和單項(xiàng)選擇題需改進(jìn)且其所占分值適當(dāng)降低，同時(shí)提高簡(jiǎn)答題和綜合應(yīng)用題的分值，以便提高整套試卷的區(qū)分度；難題的比例和試卷的難度系數(shù)需適當(dāng)增加以利于優(yōu)秀學(xué)生的選拔。

[1]方積乾.主編.《衛(wèi)生統(tǒng)計(jì)學(xué)》第7版.北京：人民衛(wèi)生出版社,2012：271

[2]馬勝梅,趙軍富.基于概率論與數(shù)理統(tǒng)計(jì)的試卷質(zhì)量分析評(píng)價(jià)研究.中國(guó)冶金教育,2014(3):25-27

[3]丁琨，肖永峰，張?jiān)I,等.基于統(tǒng)計(jì)方法的高等數(shù)學(xué)試卷分析.數(shù)學(xué)學(xué)習(xí)與研究，2013，17:15-17.

[4]徐琳,張巖波,鄭建中.醫(yī)學(xué)統(tǒng)計(jì)學(xué)位課程考試項(xiàng)目分析.中國(guó)衛(wèi)生統(tǒng)計(jì),2011,1:84-86，88.

[5]趙珂.試卷質(zhì)量指標(biāo)分析.新疆教育學(xué)院學(xué)報(bào),2001，17(4):134-136.

[6]梁雅麗，袁慧，石瑋,等.預(yù)防醫(yī)學(xué)專業(yè)《衛(wèi)生統(tǒng)計(jì)學(xué)》課程試卷分析.安徽醫(yī)藥,2015,9(19)：1832-1834.

(責(zé)任編輯：劉壯)

鄭州大學(xué)研究生核心學(xué)位課程(編號(hào)：YJSXWKC201516)；河南省研究生教育優(yōu)質(zhì)課程。

施學(xué)忠，E-mail：xzshi@126.com