王美蓉 衛(wèi) 海 樊亞玲
(西安鐵路職業(yè)技術(shù)學(xué)院,西安 710014)
高職《機(jī)械基礎(chǔ)》試題庫(kù)中確定試題難度的方法研究
王美蓉衛(wèi)海樊亞玲
(西安鐵路職業(yè)技術(shù)學(xué)院,西安 710014)
建設(shè)高質(zhì)量試題庫(kù)的一個(gè)難點(diǎn)就是如何確定試題庫(kù)中每道試題的難度值,解決好這一問題是保證抽卷系統(tǒng)組出的試卷難度合適,不出現(xiàn)試卷難度偏高或偏低情況的關(guān)鍵。本文結(jié)合高職《機(jī)械基礎(chǔ)》試題庫(kù)的實(shí)際情況分析研究了確定試題難度的四種方法,最后得出結(jié)論采用模糊綜合評(píng)價(jià)法確定的試題難度具有較高的可靠性,但是計(jì)算較為復(fù)雜,因此在試題庫(kù)建設(shè)中應(yīng)將四種方法相結(jié)合來(lái)共同確定試題的難度。
試題庫(kù)試題難度模糊綜合評(píng)價(jià)法專家調(diào)查法
近年來(lái)隨著高職院校課程改革的深入推進(jìn),許多高職院校的部分課程相繼建立了試題庫(kù)系統(tǒng),作為改善教學(xué)質(zhì)量,提高教學(xué)效率的重要突破口[1]。高質(zhì)量的試題庫(kù)不僅能夠促進(jìn)教師嚴(yán)格按照專業(yè)人才培養(yǎng)目標(biāo)和課程標(biāo)準(zhǔn)的要求全面講授課程內(nèi)容,還能促使教師不斷完善教學(xué)方法,提高教學(xué)手段,改善教學(xué)質(zhì)量,同時(shí)也能激發(fā)學(xué)生學(xué)習(xí)的自主性和積極性,為學(xué)生的可持續(xù)發(fā)展奠定良好的基礎(chǔ)。
高質(zhì)量試題庫(kù)的一個(gè)關(guān)鍵問題就是科學(xué)的確定試題的難度等級(jí),只有試題的難度等級(jí)確定的合理、準(zhǔn)確,才能使組出的試卷難度合適,不出現(xiàn)試卷難度偏高或偏低的情況[2]。本文以《機(jī)械基礎(chǔ)》課程試題庫(kù)建設(shè)為例,研究探討確定試題難度的各種方法。
《機(jī)械基礎(chǔ)》是高職院校機(jī)械類專業(yè)的一門重要的專業(yè)基礎(chǔ)課程,涵蓋了機(jī)械工程材料,構(gòu)件的靜力學(xué)基礎(chǔ),構(gòu)件的基本變形,常用機(jī)構(gòu)及傳動(dòng)裝置,公差、配合與測(cè)量技術(shù),液壓傳動(dòng)等多方面的理論基礎(chǔ)知識(shí)和實(shí)踐知識(shí),知識(shí)覆蓋面廣而雜,要全面并深入的了解所有的知識(shí)點(diǎn)有一定的難度,同時(shí)相對(duì)本科院校的學(xué)生,高職院校的學(xué)生知識(shí)基礎(chǔ)較為薄弱,綜合考慮以上原因?qū)ⅰ稒C(jī)械基礎(chǔ)》課程試題庫(kù)中的試題難度劃分為很容易、容易、中等和困難四個(gè)等級(jí)。
2.1根據(jù)試題考核知識(shí)點(diǎn)的能力層次要求確定
根據(jù)專業(yè)人才培養(yǎng)目標(biāo)和課程標(biāo)準(zhǔn)的要求,《機(jī)械基礎(chǔ)》課程中各知識(shí)點(diǎn)的能力層次要求不完全相同,分別可以劃分為“識(shí)記”,“理解”,“簡(jiǎn)單應(yīng)用”和“綜合應(yīng)用”四種。針對(duì)能力層次要求為“識(shí)記”的知識(shí)點(diǎn)所出的試題,多數(shù)難度等級(jí)確定為“很容易”;針對(duì)能力層次要求為“理解”的知識(shí)點(diǎn)所出的試題,多數(shù)難度等級(jí)確定為“容易”;針對(duì)能力層次要求為“簡(jiǎn)單應(yīng)用”的知識(shí)點(diǎn)所出的試題,多數(shù)難度等級(jí)確定為“中等”;針對(duì)能力層次要求為“綜合應(yīng)用”的知識(shí)點(diǎn)所出的試題,多數(shù)難度等級(jí)確定為“困難”。
2.2根據(jù)專家調(diào)查法確定
當(dāng)試題所包含的知識(shí)點(diǎn)單一,試題的考核角度或問法簡(jiǎn)單,則根據(jù)試題考核知識(shí)點(diǎn)的能力層次要求確定試題難度等級(jí)較為準(zhǔn)確。但有些試題可能同時(shí)包含兩個(gè)或多個(gè)能力層次的知識(shí)點(diǎn),有些試題的問法或考核角度與常見試題不同時(shí),就要求學(xué)生在掌握各知識(shí)點(diǎn)的同時(shí)還能進(jìn)行一定的理解和分析,針對(duì)這類試題顯然不宜再用上面的方法來(lái)確定試題的難度,而可以采用專家調(diào)查法來(lái)確定。
專家調(diào)查法是選定若干具有相關(guān)知識(shí)和經(jīng)驗(yàn)的專家,采用背靠背的方式,使每位專家獨(dú)立自由地作出自己的判斷,經(jīng)過(guò)幾輪反饋,使專家的意見逐漸趨同,得出最終結(jié)論。這種方法的優(yōu)點(diǎn)是簡(jiǎn)單易行,具有一定的科學(xué)性和實(shí)用性,保證每個(gè)專家能獨(dú)立的做出自己的判斷不受其它因素的影響,同時(shí)也可以使大家發(fā)表的意見較快收集,參加者也已接受結(jié)論,具有一定的綜合意見的客觀性。
在使用專家調(diào)查法時(shí)除了要保證挑選的專家有一定的代表性、權(quán)威性,還要進(jìn)行問題表的設(shè)計(jì),在《機(jī)械基礎(chǔ)》課程試題庫(kù)建設(shè)中試題難度確定問題表和統(tǒng)計(jì)表的設(shè)計(jì)如下:
從統(tǒng)計(jì)表中可以得出試題1的難度為“很容易”,試題2的難度為“容易”,試題3的難度為“中等”,試題5的難度為“困難”,而確定試題4的難度時(shí)專家意見分散,不能一次確定,可以經(jīng)過(guò)多次反饋調(diào)查使意見趨于一致。
2.3通過(guò)試題測(cè)試確定試題難度
表1 《機(jī)械基礎(chǔ)》課程試題庫(kù)建設(shè)中試題難度確定問題表
表2 《機(jī)械基礎(chǔ)》課程試題庫(kù)建設(shè)中試題難度確定統(tǒng)計(jì)表
采用專家調(diào)查法確定試題難度時(shí)主要是根據(jù)有經(jīng)驗(yàn)的專家的主觀意見來(lái)確定試題的難度值,難以準(zhǔn)確把握學(xué)生的實(shí)際情況和教學(xué)的客觀現(xiàn)實(shí),專家們的意見難免出現(xiàn)偏差或意見嚴(yán)重相左的情況,針對(duì)調(diào)查中專家意見比較分散的試題可以通過(guò)測(cè)試計(jì)算出試題難度等級(jí)。綜合考慮我院學(xué)生的實(shí)際情況及高職院?!稒C(jī)械基礎(chǔ)》課程的培養(yǎng)目標(biāo),確定難度系數(shù)p≤0.2的試題難度等級(jí)為“很容易”,確定0.2<p≤0.4的試題難度等級(jí)為“容易”,確定0.4<P≤為0.6的試題難度等級(jí)為“中等”,確定0.6<P≤0.8的試題難度等級(jí)為“困難”。比如通過(guò)對(duì)試題:拉伸試驗(yàn)時(shí),材料在拉伸力不增加而變形增加的階段稱為()的歷次考試分析發(fā)現(xiàn)150名學(xué)生有135人答對(duì)該題,根據(jù)難度系數(shù)計(jì)算公式:
R表示答對(duì)的人數(shù)
N表示應(yīng)試的人數(shù)
得P=0.1,所以該試題的難度等級(jí)為很容易。
2.4采用模糊綜合評(píng)價(jià)法確定
模糊綜合評(píng)價(jià)法是一種運(yùn)用模糊數(shù)學(xué)原理分析和評(píng)價(jià)具有“模糊性”的事物的系統(tǒng)分析方法,是以模糊推理為主的定性與定量相結(jié)合、精確與非精確相統(tǒng)一的分析評(píng)價(jià)方法[3],是借助模糊數(shù)學(xué)的隸屬度理論把定性評(píng)價(jià)轉(zhuǎn)化為定量評(píng)價(jià),即對(duì)受到多種因素制約的事物或?qū)ο笞龀鲆粋€(gè)整體的評(píng)價(jià)。確定試題難度值的因素不僅多而且難以定量分析,因此采用模糊綜合評(píng)價(jià)法來(lái)確定試題的難度值具有獨(dú)特的優(yōu)越性。
采用模糊綜合評(píng)價(jià)法的整體思路是:確定評(píng)價(jià)對(duì)象→確定指標(biāo)體系→確定指標(biāo)權(quán)重→確定評(píng)價(jià)等級(jí)→建立數(shù)學(xué)模型→估價(jià)結(jié)果分析
在《機(jī)械基礎(chǔ)》課程試題庫(kù)建設(shè)時(shí)為了確定試題難度等級(jí)首先確定試題難度的評(píng)價(jià)指標(biāo)體系見表3。
表3試題難度評(píng)價(jià)體系
由表3可知,第一級(jí)評(píng)價(jià)要素集合為:U={U1,U2},第二級(jí)評(píng)價(jià)要素集合分別為:U1={U11,U12,U13},U2={U21,U22,U23}。
第二,根據(jù)試題難度等級(jí):困難、中等、容易和很容易,即得評(píng)語(yǔ)集合為:V={v1,v2,v3,v4}={困難,中等,容易,很容易},并規(guī)定v1=0.8,v2=0.6,v3=0.4,v4=0.2,所以V={v1,v2,v3,v4}={0.8,0.6,0.4,0.2}。
第三,采用專家調(diào)查法確定指標(biāo)權(quán)重為:
考慮在確定試題難度時(shí),抽查的學(xué)生數(shù)量有限,不能完全代表所有學(xué)生的情況,主要還是依據(jù)專家教師的評(píng)價(jià)來(lái)確定,所以教師評(píng)價(jià)因素的權(quán)重指標(biāo)取0.6大于學(xué)生評(píng)價(jià)因素的指標(biāo)權(quán)重0.4,故A=(0.6,0.4)
A1=(0.2,0.4,0.4),A2=(0.4,0.1,0.5),A1,A2表示各元素相對(duì)于其上一層次元素的相對(duì)重要性權(quán)重值。
第四,選取30名有關(guān)專家教師和100名學(xué)生,對(duì)評(píng)價(jià)指標(biāo)體系中的第二層各元素進(jìn)行單因素評(píng)價(jià),通過(guò)統(tǒng)計(jì)和整理,見表4:
表4 30名有關(guān)專家教師和100名學(xué)生按等級(jí)評(píng)價(jià)試題難度值所屬指標(biāo)的人數(shù)統(tǒng)計(jì)
由表4可以構(gòu)造出專家教師和學(xué)生對(duì)試題難度值的評(píng)價(jià)矩陣:
由A1=(0.2,0.4,0.4),可得教師對(duì)該題難度的評(píng)價(jià)向量為:
再由A=(0.6,0.4),便得到了該試題的難度值綜合評(píng)價(jià)向量:
根據(jù)最大隸屬度原則得該試題的難度值為0.5120。
根據(jù)V={v1v2v3v4}={0.8 0.6 0.4 0.2},判斷該試題的難度等級(jí)為中等。
確定試題庫(kù)中的試題難度等級(jí)時(shí),模糊綜合評(píng)價(jià)法能夠綜合考慮到判斷試題難度的各種因素,能對(duì)蘊(yùn)藏信息呈現(xiàn)模糊性的這些因素做出比較科學(xué)、合理、貼近實(shí)際的量化評(píng)價(jià),因而確定的試題難度值較為可靠,可以使組出的試卷難度合理分布。但在使用模糊綜合評(píng)價(jià)法時(shí)要求測(cè)試的樣本必須足夠大,才能使評(píng)判的準(zhǔn)確度更高。此外模糊綜合評(píng)價(jià)法的計(jì)算也比較復(fù)雜,不可能對(duì)試題庫(kù)中的所有試題都采用該方法,因此在試題庫(kù)建設(shè)中應(yīng)該把以上四種方法結(jié)合起來(lái),共同確定試題的難度。
[1]任占營(yíng),牛金成.試題庫(kù)質(zhì)量控制和評(píng)價(jià)技術(shù)研究。中國(guó)市場(chǎng),2008,03,05.
[2]靳榮,劉樹淑,趙宇宏.模糊綜合評(píng)價(jià)在確定試題難度值中的應(yīng)用.信息技術(shù),2004,07,30.
[3]第九章.模糊數(shù)學(xué)方法[DB/OL].http://166.111.124.195Re-source/ Book/Edu/JKCKS/TS090038/0031_ts090038.htm.
Study on Determining the Level of Difficulty of the QuestionsinVocationalCourseMechanicalBasisTest Database
WANG Meirong,WEI Hai,F(xiàn)AN Yaling
(Xi'an Institute of Railway Technology,Xi'an 710014)
Difficulty in construction of a high-quality test database is how to accurately determine the difficulty value of each item bank of test questions,to solve this problem is the essential to ensure that the system set out pumping volume of difficulty appropriate papers,and does not appear high or low degree of difficulty of the situation. CombinedwiththeactualsituationofVocationalcourseBasic Mechanical Examination Database analysis of four methods to determine the difficulty of questions,and finally concluded that the use of item difficulty fuzzy comprehensive evaluation method to determine with high reliability,but the calculation is more complex,in the test database construction of four methods should be combined together to determine the difficulty of questions.
testdatabase,testdifficulty,fuzzycomprehensive evaluation,expert survey
西安鐵路職業(yè)技術(shù)學(xué)院2015年度立項(xiàng)課題,高職機(jī)械基礎(chǔ)課程試題庫(kù)系統(tǒng)的建設(shè)(XTZY15J07)。