楊芳麗,鄒杰文,李 檣
·全科醫(yī)學教育研究·
鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試試卷分析與評價
楊芳麗,鄒杰文,李 檣*
目的 評價2016年鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試(試點)醫(yī)學綜合筆試試卷的質(zhì)量。方法 本研究對2016年鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試(試點)醫(yī)學綜合筆試試卷的總體情況、考生成績、掌握率、通過率進行分析,并對試卷的難度、區(qū)分度、信度及效度進行分析。結果 2016年在我國9個省、市、自治區(qū)進行了鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試,共14 137人參加了醫(yī)學綜合筆試,其中合格人數(shù)7 282例,考試通過率為51.51%;成績37~255分,平均成績(169.64±25.16)分,掌握率為56.55%。全體考生在醫(yī)學人文、公共衛(wèi)生、全科醫(yī)療3個模塊的平均成績分別為(11.36±2.45)、(35.98±5.53)、(122.30±20.55)分,掌握率分別為63.12%、57.11%、55.85%。本次考試的試題難度基本分布在0.2~0.9,平均難度為(0.57±0.23);試題平均區(qū)分度為0.2。本次考試試卷的內(nèi)部一致性信度KR20為0.886;醫(yī)學人文、公共衛(wèi)生、全科醫(yī)療與總分的相關系數(shù)分別為0.663、0.739、0.979(P<0.05)。結論 考生的醫(yī)學綜合筆試分數(shù)基本呈正態(tài)分布,略右偏。試題整體難度分布比較平均,區(qū)分度較好;信度良好,具有較好的結構效度和內(nèi)容效度。試卷整體質(zhì)量符合標準參照考試的基本要求。
鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師;醫(yī)師資格考試;教育考核
楊芳麗,鄒杰文,李檣.鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試試卷分析與評價[J].中國全科醫(yī)學,2017,20(16):1983-1986.[www.chinagp.net]
YANG F L,ZOU J W,LI Q. General written test paper analysis and evaluation for rural general practice assistant physician licensing examination[J].Chinese General Practice,2017,20(16):1983-1986.
為探索和建立農(nóng)村基層衛(wèi)生人才遴選新機制,緩解鄉(xiāng)鎮(zhèn)衛(wèi)生院和村衛(wèi)生室缺乏執(zhí)業(yè)助理醫(yī)師的狀況,不斷提高農(nóng)村地區(qū)醫(yī)療衛(wèi)生服務的公平性和可及性,國務院先后出臺了《國務院關于建立全科醫(yī)生制度的指導意見》(國發(fā)〔2011〕23號)、《國務院辦公廳關于進一步加強鄉(xiāng)村醫(yī)生隊伍建設的指導意見》(國辦發(fā)〔2011〕31號)等有關文件。2015年頒布的《國務院辦公廳關于進一步加強鄉(xiāng)村醫(yī)生隊伍建設的實施意見》(國辦發(fā)〔2015〕13號)指出,要建立鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師制度,做好鄉(xiāng)村醫(yī)生隊伍建設和全科醫(yī)生隊伍建設的銜接,在現(xiàn)行的執(zhí)業(yè)助理醫(yī)師資格考試中增設鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試[1],以促進基層醫(yī)療衛(wèi)生人才的執(zhí)業(yè)化進程[2]。根據(jù)文件精神,國家衛(wèi)生計生委醫(yī)師資格考試委員會于2016年在全國9個省、市、自治區(qū)組織實施了鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格試點考試工作。鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試統(tǒng)一組織實施,單獨命題,單獨劃定合格線,對考生的崗位勝任力進行評價。考試時間與醫(yī)師資格考試同期進行;考試內(nèi)容緊密結合鄉(xiāng)鎮(zhèn)衛(wèi)生院和村衛(wèi)生室的工作實際;考試形式分實踐技能考試和醫(yī)學綜合筆試兩部分。實踐技能考試合格者方可參加醫(yī)學綜合筆試,醫(yī)學綜合筆試合格者,可獲得鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格。本研究分析評價了鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試醫(yī)學綜合筆試(鄉(xiāng)村全科醫(yī)學綜合筆試)試卷質(zhì)量,以便深入了解基層醫(yī)療衛(wèi)生人員的專業(yè)知識和能力水平,總結經(jīng)驗,進一步完善考試設計,為今后擴大試點及全國范圍內(nèi)推廣鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試提供借鑒作用。
1.1 考試類型 鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試屬于行業(yè)準入性標準參照考試,有明確的準入標準和考試大綱作為命題的依據(jù),主要評價考生是否具備在鄉(xiāng)、村從事基本公共衛(wèi)生服務和基本醫(yī)療服務所必須具備的基本知識,以及運用基本知識解決居民健康和疾病等問題的能力[3]。
1.2 內(nèi)容結構特點 鄉(xiāng)村全科醫(yī)學綜合筆試內(nèi)容由醫(yī)學人文、公共衛(wèi)生、全科醫(yī)療3個模塊組成。各模塊所占比例分別為5%~10%、30%~35%、55%~65%,3個模塊中均融入了中醫(yī)藥相關內(nèi)容,中醫(yī)藥內(nèi)容共占30%。各模塊由若干二級學科構成(見表1)。
表1 鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試醫(yī)學綜合筆試模塊組成
Table 1 Modules covered by the general written test paper for Rural General Practice Assistant Physician Licensing Examination
模塊二級學科醫(yī)學人文醫(yī)學心理,醫(yī)學倫理a,衛(wèi)生法規(guī)a公共衛(wèi)生公共衛(wèi)生策略a,衛(wèi)生統(tǒng)計及流行病學基本知識,健康教育a,法定傳染病及突發(fā)公共衛(wèi)生事件,慢性非傳染性疾病a,居民健康管理a,衛(wèi)生監(jiān)督協(xié)管,衛(wèi)生管理政策全科醫(yī)療全科醫(yī)學基本知識a,常見癥狀,常見病與多發(fā)病,合理用藥,急診與急救,中醫(yī)辨證論治和適宜技術應用
注:a含中醫(yī)藥相關內(nèi)容
1.3 試題特點 鄉(xiāng)村全科醫(yī)學綜合筆試采用紙筆考試,試題全部為客觀性試題(單項選擇題)??傤}量為300道題,分2個單元,150題/單元。題型為A1、A2、A3/A4題型,其中考查綜合應用能力的A2和A3/A4題型比例達60%以上。每題1分,滿分300分。合格分數(shù)線為170分(Angoff法)。
2.2 統(tǒng)計學方法 采用FoxPro 9.0建立數(shù)據(jù)庫,采用SPSS 16.0統(tǒng)計軟件進行統(tǒng)計學分析。數(shù)據(jù)采用描述性統(tǒng)計分析,信度采用內(nèi)部一致性信度KR20,結構效度采用Pearson相關分析。以P<0.05為差異有統(tǒng)計學意義。
3.1 考試總體情況 2016年在浙江省、福建省、廣西壯族自治區(qū)、重慶市、四川省、貴州省、云南省、甘肅省、寧夏回族自治區(qū)共9個省、市、自治區(qū)進行了試點考試,共14 137人參加了醫(yī)學綜合筆試。其中男8 438例(59.69%),女5 699例(40.31%);年齡17~71歲,平均(38.5±7.0)歲;學歷為中專12 683例(89.71%),大專1 423例(10.07%),本科20例(0.14%),其他11例(0.08%);考生來源于東部考區(qū)732例(5.18%),西部考區(qū)13 405例(94.82%)。
醫(yī)學綜合筆試考生合格人數(shù)7 282例,考試通過率為51.51%。成績37~255分,平均成績(169.64±25.16)分,全體考生的總體掌握率為56.55%。醫(yī)學綜合筆試成績基本呈正態(tài)分布,略右偏,成績分布相對集中在150~190分,即高于平均分數(shù)的考生略多于低于平均分數(shù)的考生,符合標準參照考試的基本要求(見圖1)。
3.2 考生對各模塊考查內(nèi)容的掌握情況 全體考生在醫(yī)學人文、公共衛(wèi)生、全科醫(yī)療3個模塊的平均成績分別為(11.36±2.45)、(35.98±5.53)、(122.30±20.55)分,掌握率分別為63.12%、57.11%、55.85%。不同學歷考生在各模塊的平均成績和掌握率情況見表2。
3.3 不同考區(qū)考生的平均成績和通過率情況 東部、西部考區(qū)考生的平均成績和通過率見表3。
表2 不同學歷考生各模塊的平均成績和掌握率
圖1 醫(yī)學綜合筆試成績分布圖
Figure 1 Distribution curve for the scores of the examinees attending the written test for Rural General Practice Assistant Physician Licensing Examination(pilot)
表3 不同考區(qū)考生的平均成績和通過率
Table 3 Average scores and passing rate in the examinees among different location
地區(qū)例數(shù)平均成績(x±s,分)通過率(%)東部考區(qū) 732180.42±23.5770.08西部考區(qū)13405169.06±25.1150.50
3.4 試題的難度與區(qū)分度 本次考試的試題難度基本分布在0.2~0.9,平均難度為(0.57±0.23)。試題平均區(qū)分度為0.2。
3.5 試卷的信度和效度
3.5.1 信度 本次考試試卷的內(nèi)部一致性信度KR20為0.886。
3.5.2 效度
3.5.2.1 內(nèi)容效度 鄉(xiāng)村全科醫(yī)學綜合筆試試題是依據(jù)《鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試大綱(試行)》命制,嚴格按《組卷細目表》組成試卷,并通過專家反復審校進行質(zhì)量控制,使題型、難度、認知層次等構成符合組卷方案,以確保試卷內(nèi)容的覆蓋面及代表性。
3.5.2.2 結構效度 醫(yī)學人文、公共衛(wèi)生、全科醫(yī)療3個模塊與總分的相關系數(shù)分別為0.663、0.739、0.979;醫(yī)學人文與公共衛(wèi)生、全科醫(yī)療的相關系數(shù)分別為0.499、0.583,公共衛(wèi)生與全科醫(yī)療的相關系數(shù)為0.598(P<0.05)。
鄉(xiāng)村全科醫(yī)學綜合筆試是針對農(nóng)村基層醫(yī)療衛(wèi)生人員增設的準入性考試,是根據(jù)我國農(nóng)村地區(qū)基層醫(yī)療衛(wèi)生實際情況,以問題為中心,以崗位勝任力為導向,量體裁衣而設計的考試??荚囃怀龇乐谓Y合、中西兼顧的原則,強調(diào)職業(yè)素養(yǎng)和人文素質(zhì)[3],充分體現(xiàn)了全科醫(yī)學的理念和思路。
4.1 考生對考查內(nèi)容整體掌握良好 鄉(xiāng)村全科醫(yī)學綜合筆試內(nèi)容的掌握率以醫(yī)學人文模塊最高,分析原因可能是考生對該部分考查的內(nèi)容比較熟悉和了解,屬于從事執(zhí)業(yè)活動必須具備的理論和知識。而全科醫(yī)療模塊的掌握率相對較低,主要原因可能為:第一,考生群體的年齡、畢業(yè)年限、教育與培訓背景等因素比較復雜,差異較大;第二,全科醫(yī)療考試大綱是根據(jù)基層衛(wèi)生人員的崗位需求設計的,特點之一就是涉及的內(nèi)容“面廣點多”。這些因素都在一定程度影響考試結果。此外,考生的學歷也是影響因素之一,平均成績和通過率隨著考生學歷的升高而升高。本次考生學歷結構中以中專學歷者人數(shù)最多,本科學歷者占0.14%,整個學歷結構由高向低呈三角形,而發(fā)達國家醫(yī)療衛(wèi)生人員學歷結構多呈橄欖型[8],表明我國基層醫(yī)療衛(wèi)生人才隊伍整體學歷偏低,需進一步加強繼續(xù)教育和培訓,提高整體學歷層次[9]??傮w來看,考生對各模塊知識的掌握率均在55%以上,說明大多數(shù)考生對考查的重點內(nèi)容掌握良好。因此,可以認為本次考試結果比較理想,基本達到預期目標。
4.2 考試結果存在地區(qū)差異 近年來,盡管國家加大了對西部農(nóng)村醫(yī)療衛(wèi)生工作的扶持和投入力度,各方面均有所改善,但從考試的通過率來看,東部考區(qū)的考生平均成績和通過率均高于西部考區(qū)。說明我國東、西部考區(qū)的醫(yī)療衛(wèi)生人員的知識和能力水平仍存在一定的差異,需進一步加強西部地區(qū)基層衛(wèi)生人才的教育和培訓,提升其綜合素質(zhì)及服務能力,促進地區(qū)的均衡發(fā)展[10]。
4.3 試題及試卷質(zhì)量基本符合標準參照考試的要求 醫(yī)學綜合筆試成績基本呈正態(tài)分布,略右偏,說明高于平均分數(shù)的考生略多于低于平均分數(shù)的考生,符合標準參照考試的基本要求。
難度和區(qū)分度是衡量試題質(zhì)量的重要指標,試題的難度與試題的區(qū)分能力有關,一般來說,特別容易或特別難的試題區(qū)分考生的能力比較差[5]。本次考試總體來看,試題難度比例恰當,難度分布及平均值比較理想,基本符合考試設計。由于標準參照考試的選題原則是試題符合測量目標并具有代表性,
因此在試題區(qū)分度參數(shù)上不做過多約束[11]。本次考試試題的平均區(qū)分度為0.2,可以認為試題對不同群體的考生有較好區(qū)分能力。
信度和效度是評價試卷質(zhì)量的重要指標,一份好的試卷應該具有較高的信度和效度。信度是指測量結果的穩(wěn)定性,也稱可靠性。一般來說,內(nèi)部一致性信度取值范圍在0~1,數(shù)值在0.85以上表明信度良好[6]。鄉(xiāng)村全科醫(yī)學綜合筆試試卷的內(nèi)部一致性信度KR20為0.886,說明試卷的內(nèi)部一致性好,能夠穩(wěn)定地測量考生的能力。此外,衡量考試效度的高低不但要看其是否達到預定目標,還決定于是否考了要考的內(nèi)容[5],本次考試內(nèi)容覆蓋了絕大部分重要的知識點,各部分分值權重合理,且各模塊之間呈中等相關,說明相關性良好。因此,可以認為試卷內(nèi)容及結構比較合理,具有較好的內(nèi)容效度和結構效度,符合教育測量學標準。
綜上,本次考試結果符合準入性考試的基本要求,基本達到了預定目標。同時,考試結果在一定程度上反映了試點地區(qū)基層醫(yī)療衛(wèi)生人員知識及能力的實際水平,為進一步總結經(jīng)驗、完善考試設計及擴大試點奠定了基礎。
作者貢獻:楊芳麗負責論文的構思、撰寫及修改;鄒杰文負責數(shù)據(jù)統(tǒng)計分析及處理;李檣負責文章的質(zhì)量控制。
本文無利益沖突。
[1]國務院辦公廳關于進一步加強鄉(xiāng)村醫(yī)生隊伍建設的實施意見[Z].2015. General Office of the State Council opinions on implementing further strengthening of rural doctors teams[Z].2015.
[2]劉曉君,譚紹清,胡永新,等.論增設鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試的必要性及可行性[J].中國衛(wèi)生政策研究,2015,8(9):64-68.DOI:10.3969/j.issn.1674-2982.2015.09.013. LIU X J,TAN S Q,HU Y X,et al.The necessity and feasibility of adding the qualification examination of rural general practicing assistant doctors[J].Chinese Journal of Health Policy,2015,8(9):64-68.DOI:10.3969/j.issn.1674-2982.2015.09.013.
[3]國家醫(yī)學考試指導用書專家編寫組.鄉(xiāng)村全科執(zhí)業(yè)助理醫(yī)師資格考試指導用書(試用版)[M].北京:人民衛(wèi)生出版社,2016. The Expert Writing Team of Guide Book for National Medical Licensing Examination.The guidebook for the General Practice Assistant Physician Qualification Examination(trial edition)[M].Beijing:People′s Medical Publishing House,2016.
[4]SCHMEISER C B,WELCH C J.Test development/educational measurement[M].Westport,CT:American Council on Education and Praeger Publishers,2006:307-354.
[5]桂詩春.標準化考試——理論、原則與方法[M].廣州:廣東高等教育出版社,1987. GUI S C.The theory、principles and methods of the standardization examination[M].Guangzhou:Guangdong Higher Education Press,1987.
[6]靳修,蘆鴻雁,禹曉琴.中文版老年患者家庭照護能力量表的信效度研究[J].中國全科醫(yī)學,2016,19(1):84-87.DOI:10.3969/j.issn.1007-9572.2016.01.017. JIN X,LU H Y,YU X Q.Reliability and validity of the Chinese version family care-giving competence scale for the elderly[J].Chinese General Practice,2016,19(1):84-87.DOI:10.3969/j.issn.1007-9572.2016.01.017.
[7]楊春軍,張清.中文版絕經(jīng)后女性婦女健康倡議體力活動問卷的信效度研究[J].中國全科醫(yī)學,2016,19(1):88-91.DOI:10.3969/j.issn.1007-9572.2016.01.018. YANG C J,ZHANG Q.Reliability and validity of the Chinese Version Women′s Health Initiative Physical Activity Questionnaire for Postmenopausal Women[J].Chinese General Practice,2016,19(1):88-91.DOI:10.3969/j.issn.1007-9572.2016.01.018.
[8]林培君,劉俊榮,林曉欣,等.我國衛(wèi)生人力資源現(xiàn)狀分析[J].中國初級衛(wèi)生保健,2017,31(1):23-26.DOI:10.3969/j.issn.1001-568X.2017.01.0009. LIN P J,LIU J R,LIN X X,et al.Analysis on the trend situations of human health resources in China[J].Chinese Primary Health Care,2017,31(1):23-26.DOI:10.3969/j.issn.1001-568X.2017.01.0009.
[9]鄧元慧,張新慶,韓躍紅.我國村醫(yī)隊伍發(fā)展的現(xiàn)狀與問題[J].中國衛(wèi)生事業(yè)管理,2017,33(2):120-122. DENG Y H,ZHANG X Q,HAN Y H.Situation and challenge of rural doctors in China [J].Chinese Health Service Management,2017,33(2):120-122.
[10]全國鄉(xiāng)村醫(yī)生教育規(guī)劃(2011—2020年)[Z].2013. National rural doctors education program(2011—2020)[Z].2013.
[11]趙世明,劉景軒.標準參照考試的題目分析方法與適用性[J].中國高等醫(yī)學教育,2001,15(5):15-16.DOI:10.3969/j.issn.1002-1701.2001.05.010. ZHAO S M,LIU J X.Topic analysis method and applicability of standard cross examination[J].China Higher Medical Education,2001,15(5):15-16.DOI:10.3969/j.issn.1002-1701.2001.0 5.010.
(本文編輯:閆行敏)
General Written Test Paper Analysis and Evaluation for Rural General Practice Assistant Physician Licensing Examination
YANGFang-li,ZOUJie-wen,LIQiang*
NationalMedicalExaminationCenter,Beijing100097,China*Correspondingauthor:LIQiang,Associateprofessor;E-mail:liqiang0605@sina.com
Objective To assess the quality of general written test paper for Rural General Practice Assistant Physician Licensing Examination(pilot) conducted in China in 2016.Methods We analyzed the general status,difficulty,discrimination,reliability and validity of the general written test paper for Rural General Practice Assistant Physician Licensing Examination(pilot) conducted in China in 2016,and the scores,rate of mastering the knowledge covered by the test paper and passing rate in the examinees.Results The Rural General Practice Assistant Physician Licensing Examination(pilot) was conducted in 6 provinces,1 municipality and 2 autonomous regions in China in 2016.A total of 14 137 persons participated in the general written test,51.51%(7 282/14 137) of thempassed it;the scores of the examinees ranged from 37 to 255,averaging(169.64±25.16),with a rate of mastering the knowledge covered by the test paper of 56.55%;the average scores of the examinees in modules of medical humanities,public health and general practice were (11.36±2.45),(35.98±5.53),(122.30±20.55) respectively,suggesting that the rate of mastering the knowledge covered by the above modules in the examinees were 63.12%,57.11%,55.85%,respectively.The difficulty of the test paper was 0.2~0.9,averaging (0.57±0.23),the average discrimination of the test paper was 0.2.The internal consistency reliability of this test paper measured by KR20 was 0.886;the correlation coefficient between scores of medical humanities and total scores of the test,scores of public health and total scores of the test,scores of general practice and total scores of the test respectively were 0.663,0.739,0.979(P<0.05).Conclusion The scores of the examinees present normal distribution with a slightly positive skewness;the items arranged in the test paper have similar difficulty with good discrimination,construct validity and content validity;the overall quality of the test paper meets the basic requirements of the criterion-referenced test.
Rural general practice assistant physician;Qualified doctor tests;Educational measurement
R 197
A
10.3969/j.issn.1007-9572.2017.16.016
2017-02-26;
2017-05-04)
100097 北京市,國家醫(yī)學考試中心
*通信作者:李檣,副教授;E-mail:liqiang0605@sina.com