基于韋伯模式的課程標(biāo)準(zhǔn)與試題一致性分析
——以青海師范大學(xué)高等數(shù)學(xué)課程期終試卷為例

賈秀芹,趙青林

(1.青海師范大學(xué) 數(shù)學(xué)與統(tǒng)計(jì)學(xué)院，青海 西寧 810016;2.青海師范大學(xué) 研究生院，青海 西寧 810008)

一致性可以解釋為多種事物之間相吻合的程度.課程一致性研究起源于美國(guó)20世紀(jì)80 年代發(fā)起的“由標(biāo)準(zhǔn)驅(qū)動(dòng)并基于標(biāo)準(zhǔn)”的基礎(chǔ)教育課程改革，并把課程與教學(xué)的一致性做為檢測(cè)課程標(biāo)準(zhǔn)的一項(xiàng)關(guān)鍵指標(biāo)[1].

課程一致性評(píng)價(jià)通常用于基礎(chǔ)教育中的教材、課程標(biāo)準(zhǔn)、課程實(shí)施、課程達(dá)成和課程評(píng)價(jià)等要素之間的吻合程度.我國(guó)在大力推進(jìn)基礎(chǔ)教育課程改革的背景下，引入了西方一致性研究模式，在我國(guó)基礎(chǔ)教育教學(xué)領(lǐng)域進(jìn)行了課程標(biāo)準(zhǔn)的一致性分析和研究.由于基礎(chǔ)教育有統(tǒng)一的課程標(biāo)準(zhǔn)以及統(tǒng)一的高考模式，所以基礎(chǔ)教育的課程一致性研究涉及的領(lǐng)域廣，普及率高.在高等教育領(lǐng)域，這部分研究相對(duì)較少，主要原因是高等院校沒(méi)有統(tǒng)一的課程標(biāo)準(zhǔn)，同一門(mén)課程在不同院校、不同專(zhuān)業(yè)領(lǐng)域的教學(xué)要求、課程達(dá)成度、評(píng)價(jià)體系均有不同，評(píng)價(jià)結(jié)果不具備普遍性.但是，對(duì)于同一所院校的某一門(mén)課程而言，教學(xué)大綱和考試模式相對(duì)穩(wěn)定，因此通過(guò)教學(xué)大綱、考試大綱、教學(xué)達(dá)成度、教學(xué)評(píng)價(jià)等多方面的一致性研究，對(duì)于提高這門(mén)課程的教學(xué)質(zhì)量有很大的促進(jìn)作用，所以高校教學(xué)大綱一致性評(píng)價(jià)有其研究意義.

高等數(shù)學(xué)課程是高等院校開(kāi)設(shè)的一門(mén)重要的公共基礎(chǔ)課程，是理工科專(zhuān)業(yè)的一門(mén)必修通識(shí)課，該課程的教學(xué)內(nèi)容在不同院校，不同專(zhuān)業(yè)領(lǐng)域里存在較高的相似度.基于以上原因，本文運(yùn)用韋伯一致性分析模式，對(duì)我校高等數(shù)學(xué)課程教學(xué)大綱與期終試題進(jìn)行一致性分析，為提高教學(xué)質(zhì)量提供參考.

1 韋伯模式簡(jiǎn)介

目前國(guó)際上比較成熟的一致性分析模式有“SEC分析模式”“韋伯分析模式(webb)”“成功分析模式(Achieve)”[2].本文選用的是由諾曼·韋伯(Norman L.Webb)創(chuàng)建的韋伯分析模式，韋伯模式使用四個(gè)標(biāo)準(zhǔn)來(lái)比較評(píng)價(jià)與課程標(biāo)準(zhǔn)之間的一致性[3].

第一，類(lèi)別一致性，即評(píng)價(jià)與課程標(biāo)準(zhǔn)是否陳述了相同的內(nèi)容范疇.如果包含了相同的或一致內(nèi)容類(lèi)別，則認(rèn)為符合類(lèi)別一致性標(biāo)準(zhǔn).可以根據(jù)評(píng)價(jià)試題是否包含了某一條標(biāo)準(zhǔn)的相應(yīng)內(nèi)容來(lái)判斷類(lèi)別一致性標(biāo)準(zhǔn)的達(dá)成與否.評(píng)價(jià)至少6 次“命中”某一條標(biāo)準(zhǔn)內(nèi)容，如果有6道試題對(duì)于某項(xiàng)次級(jí)標(biāo)準(zhǔn)，就可合理地估計(jì)學(xué)生對(duì)其的掌握情況[4].

第二，知識(shí)深度一致性，即評(píng)價(jià)所要求學(xué)生展示的認(rèn)知水平與課程標(biāo)準(zhǔn)中所期望的學(xué)生所應(yīng)知道與能做的認(rèn)知表述，二者是否保持一致.判斷標(biāo)準(zhǔn)是：測(cè)驗(yàn)試題的認(rèn)知水平至少有50%命中課程標(biāo)準(zhǔn)所要求的認(rèn)知水平.

第三，知識(shí)廣度一致性，是指課程標(biāo)準(zhǔn)中期望學(xué)生所掌握的知識(shí)范圍與評(píng)價(jià)試題的知識(shí)范圍的吻合程度.知識(shí)廣度一致性將50%作為可接受水平.

第四，知識(shí)分布平衡性，是指目標(biāo)所對(duì)應(yīng)的試題是否分布平衡，或試題是否更重視某一目標(biāo)及重視程度.平衡指數(shù)以≥0.7作為可接受水平[5].

一致性可接受水平判斷標(biāo)準(zhǔn)見(jiàn)表1.

2 高等數(shù)學(xué)課程教學(xué)大綱和試題的編碼

研究對(duì)象：2019—2021年青海師范大學(xué)高等數(shù)學(xué)(上)課程期終試卷.

研究方法：韋伯一致性分析模式.

分析過(guò)程：由編碼、數(shù)據(jù)統(tǒng)計(jì)、一致性分析三部分構(gòu)成.

2.1 教學(xué)大綱編碼說(shuō)明

選用韋伯一致性分析模式中“金字塔式”的課程目標(biāo)分析方法[6]，將高等數(shù)學(xué)課程教學(xué)大綱分為三個(gè)層級(jí).

第一層，學(xué)習(xí)領(lǐng)域，指對(duì)課程目標(biāo)的一般描述.高等數(shù)學(xué)(上)教學(xué)大綱中的知識(shí)內(nèi)容分為四個(gè)領(lǐng)域，具體為：函數(shù)與極限、導(dǎo)數(shù)與微分、微分中值定理與導(dǎo)數(shù)的應(yīng)用、不定積分.

第二層，學(xué)習(xí)主題，是對(duì)學(xué)習(xí)領(lǐng)域的補(bǔ)充，是領(lǐng)域下設(shè)的內(nèi)容.例如，函數(shù)與極限領(lǐng)域下分設(shè)了三個(gè)主題，具體是：函數(shù)的概念、數(shù)列的極限、函數(shù)的極限.

第三層，具體目標(biāo)，是課程內(nèi)容的具體目標(biāo)，每個(gè)學(xué)習(xí)主題下設(shè)不同的具體目標(biāo).

2.2 教學(xué)大綱的編碼

對(duì)四個(gè)領(lǐng)域分別用數(shù)字“1、2、3、4”編碼，領(lǐng)域下設(shè)的主題用“1.1、1.2、1.3…”編碼，主題下設(shè)的具體目標(biāo)用“1.1.1、1.1.2、1.1.3…”編碼.

根據(jù)韋伯分析模式知識(shí)深度水平共劃分成四個(gè)等級(jí)，分別是水平1、水平2、水平3、水平4.等級(jí)的劃分以對(duì)應(yīng)的行為動(dòng)詞作為參考.

水平1：對(duì)應(yīng)的動(dòng)詞有，了解、知道、說(shuō)出、識(shí)別、描述等.

水平2：對(duì)應(yīng)的動(dòng)詞有，理解、比較、使用、認(rèn)識(shí)、能用等.

水平3：對(duì)應(yīng)的動(dòng)詞有，掌握、分析、推導(dǎo)、歸納、探究等.

水平4：對(duì)應(yīng)的動(dòng)詞有，運(yùn)用、證明、解決、解釋、討論等.

高等數(shù)學(xué)(上)教學(xué)大綱編碼(微分中值定理與導(dǎo)數(shù)的應(yīng)用部分)見(jiàn)表2.

表2 高等數(shù)學(xué)(上)課程教學(xué)大綱具體目標(biāo)編碼(部分)

2.3 對(duì)高等數(shù)學(xué)(上)期終試卷的編碼

試卷編碼：試卷每道題目所涉及的具體目標(biāo)記為題目數(shù)，如果一道題目涉及到兩個(gè)或多個(gè)具體目標(biāo)，題目數(shù)記為2個(gè)或者多個(gè).試卷每道試題涉及具體目標(biāo)數(shù)的總和為“測(cè)試題目總數(shù)”.

此題可考察無(wú)窮小等價(jià)代換的應(yīng)用、第一重要極限的應(yīng)用和洛必達(dá)法則的應(yīng)用，根據(jù)與2.2中數(shù)學(xué)大綱編碼庫(kù)比對(duì)，此題命中三個(gè)具體目標(biāo)，編碼為1.3.3，1.3.4，3.1.3，題目數(shù)為3.

根據(jù)教學(xué)大綱對(duì)知識(shí)水平的要求“掌握兩個(gè)重要極限”“掌握無(wú)窮小的等價(jià)代換”“掌握洛必達(dá)法則的運(yùn)用”，此題三個(gè)考察目標(biāo)均符合教學(xué)大綱知識(shí)深度水平中的水平3，所以認(rèn)知水平確定為水平3.

3 數(shù)據(jù)統(tǒng)計(jì)與分析

本文從知識(shí)種類(lèi)、知識(shí)深度、知識(shí)廣度、知識(shí)分布平衡性四個(gè)維度進(jìn)行高等教學(xué)課程教學(xué)大綱與試題的一致性評(píng)價(jià)的數(shù)據(jù)統(tǒng)計(jì)與分析.

統(tǒng)計(jì)數(shù)據(jù)的顯示以2021年《高等數(shù)學(xué)》期終試卷為例.

3.1 知識(shí)種類(lèi)一致性

2021年高等數(shù)(上)期終試卷知識(shí)種類(lèi)一致性如表3所示：

表3 試卷知識(shí)種類(lèi)一致性統(tǒng)計(jì)表(2021年)

2019年、2020年、2021年高等數(shù)學(xué)(上)期終試卷一致性如圖1所示.圖1顯示，2021年我校高等數(shù)學(xué)課程期末試卷，按照知識(shí)種類(lèi)一致性評(píng)價(jià)標(biāo)準(zhǔn)，試卷四個(gè)知識(shí)領(lǐng)域與教學(xué)大綱的一致性均為可接受水平.說(shuō)明試卷中所涉及的知識(shí)類(lèi)型與教學(xué)大綱的要求一致性較高.

圖1 高等數(shù)學(xué)課程的期終試卷在知識(shí)種類(lèi)一致性維度上的統(tǒng)計(jì)結(jié)果

2020年我校高等數(shù)學(xué)課程期末試卷，知識(shí)領(lǐng)域中中值定理與導(dǎo)數(shù)的應(yīng)用和不定積分兩部分與教學(xué)大綱的一致性為不可接受.試卷中可以適當(dāng)增加這兩個(gè)知識(shí)領(lǐng)域知識(shí)點(diǎn)的測(cè)試題目.

隨著高等教育流程的不斷更新，應(yīng)用、發(fā)揮大數(shù)據(jù)已經(jīng)成為促進(jìn)教育革新、提高教育質(zhì)量、保證管理效率的必然選擇。教育大數(shù)據(jù)是教育信息化步入新時(shí)代的重要標(biāo)志，教育大數(shù)據(jù)可以為扶貧決策提供精準(zhǔn)、有效、可靠的數(shù)據(jù)支持，促進(jìn)教育智力資源的流轉(zhuǎn)與精準(zhǔn)供給；對(duì)于推進(jìn)教育管理從經(jīng)驗(yàn)型、粗放型、封閉型向精細(xì)化、智能化、可視化轉(zhuǎn)變也具有重要意義；還有助于構(gòu)建多維度的科學(xué)評(píng)價(jià)體系，促進(jìn)規(guī)模化中的個(gè)性化教育。

2019年我校高等數(shù)學(xué)課程期末試卷，知識(shí)領(lǐng)域中積分部分與教學(xué)大綱的一致性為不可接受.試卷可以增加不定積分內(nèi)容的測(cè)試題目.

綜合來(lái)看，三年的期終試卷，2021年的期終試卷在知識(shí)種類(lèi)一致性這一維度達(dá)成度最高.

3.2 知識(shí)深度一致性

2021年高等數(shù)學(xué)(上)期終試卷知識(shí)深度一致性情況如表4所示：

表4 知識(shí)深度一致性統(tǒng)計(jì)表(2021年)

2019年、2020年、2021年高等數(shù)學(xué)(上)期終試卷關(guān)于知識(shí)深度的一致性如圖2所示.根據(jù)圖2顯示，高等數(shù)學(xué)課程期終試卷，按照知識(shí)深度一致性評(píng)價(jià)標(biāo)準(zhǔn)，2019-2020年三套試題每個(gè)知識(shí)領(lǐng)域的知識(shí)深度與教學(xué)大綱一致性均為可接受水平.說(shuō)明我校試卷的難易程度和教學(xué)大綱一致性程度較高.

圖2 高等數(shù)學(xué)課程的期終試卷在知識(shí)深度一致性的統(tǒng)計(jì)結(jié)果

3.3 知識(shí)廣度一致性

2021年高等數(shù)學(xué)(上)期終試卷知識(shí)廣度一致性如表5所示：

表5 知識(shí)廣度一致性統(tǒng)計(jì)表(2021年)

2019年、2020年、2021年高等數(shù)學(xué)(上)期終試卷關(guān)于知識(shí)廣度的一致性如圖3所示.圖3顯示，2021年我校高等數(shù)學(xué)課程期終試卷，按照知識(shí)廣度一致性評(píng)價(jià)標(biāo)準(zhǔn)，試卷四個(gè)知識(shí)領(lǐng)域與教學(xué)大剛的一致性均為可接受水平，說(shuō)明這套試卷的知識(shí)覆蓋率很好.

圖3 高等數(shù)學(xué)課程的期終試卷在知識(shí)廣度的一致性統(tǒng)計(jì)結(jié)果

2020年高等數(shù)學(xué)課程期終試卷，極限和不定積分兩個(gè)知識(shí)領(lǐng)域與教學(xué)大綱的一致性為不可接受水平，說(shuō)明這套試卷的知識(shí)覆蓋率需要進(jìn)一步調(diào)整.

2019年高等數(shù)學(xué)課程期終試卷，不定積分知識(shí)領(lǐng)域與教學(xué)大綱的一致性為不可接受水平；極限和中值定理與導(dǎo)數(shù)的應(yīng)用兩個(gè)知識(shí)領(lǐng)域剛剛達(dá)標(biāo).

綜合三套試卷的數(shù)據(jù)比對(duì)得出，2021年《高等數(shù)學(xué)》試卷的知識(shí)廣度與教學(xué)大綱的一致性達(dá)成度最高.

3.4 知識(shí)分布平衡性

2021年高等數(shù)學(xué)(上)期終試卷知識(shí)分布平衡指數(shù)如表6所示.

表6 知識(shí)分布平衡指數(shù)統(tǒng)計(jì)表(2021)

2019年、2020年、2021年高等數(shù)學(xué)(上)期終試卷關(guān)于知識(shí)分布平衡指數(shù)如圖4所示.圖4顯示，我校高等數(shù)學(xué)課程期終試卷，按照知識(shí)分布平衡性的評(píng)價(jià)標(biāo)準(zhǔn)，2019年和2020年兩套試題的知識(shí)分布平衡性與教學(xué)大綱的一致性均為可接受水平.

圖4 高等數(shù)學(xué)課程的期終試卷在知識(shí)分布平衡性一致性的統(tǒng)計(jì)結(jié)果

2021年試卷中不定積分的分布平衡指數(shù)小于0.7，知識(shí)分布平衡性與教學(xué)大綱的一致性為不可接受.

4 結(jié)論

運(yùn)用韋伯一致性分析模式，對(duì)我校2019—2021年三年的高等數(shù)學(xué)(上)期終試卷與教學(xué)大綱的一致性進(jìn)行分析，分析結(jié)果匯總見(jiàn)表7.

表7 2019—2021年高等數(shù)學(xué)課程期終試卷一致性判斷匯總表

根據(jù)表7分析結(jié)果如下：

試卷極限部分：三套試卷與教學(xué)大綱的一致性較高，其中2020年的試卷需要在知識(shí)廣度的維度加以調(diào)整.

試卷導(dǎo)數(shù)部分：三套試卷與教學(xué)大綱完全達(dá)到一致性可接受水平，試卷與教學(xué)大綱的一致性最好.

試卷中值定理與導(dǎo)數(shù)的應(yīng)用部分：三套試卷與教學(xué)大綱的一致性較高，其中2020年試卷中知識(shí)類(lèi)別未達(dá)到一致性可接受水平，可以做出適當(dāng)調(diào)整.

試卷不定積分部分：三套試卷與教學(xué)大綱的一致性相對(duì)較低，其中2021年試卷中知識(shí)分布平衡性，2020年試卷中知識(shí)類(lèi)別和知識(shí)廣度，2019年試卷的知識(shí)廣度，共計(jì)四次未達(dá)到一致性可接受水平，說(shuō)明在命題時(shí)對(duì)這個(gè)知識(shí)領(lǐng)域的考察需要調(diào)整.

總之，高等數(shù)學(xué)課程的命題以學(xué)校制定的教學(xué)大綱為主，命題教師不同，對(duì)試卷編碼的認(rèn)定標(biāo)準(zhǔn)會(huì)有偏差，這會(huì)影響試卷最終一致性判斷的結(jié)果.如何降低由此帶來(lái)的誤差，使得教學(xué)要求、課程達(dá)成度、評(píng)價(jià)體系有較高的一致性，還需要教師從多方面、多層次、多角度探討教學(xué)目標(biāo)和專(zhuān)業(yè)需求等因素.最終，通過(guò)整合評(píng)價(jià)標(biāo)準(zhǔn)，優(yōu)化評(píng)價(jià)體系，合理擬定試卷，更好地促進(jìn)我校高等數(shù)學(xué)課程的教學(xué)工作.