計(jì)算機(jī)自適應(yīng)測試的現(xiàn)狀反思

摘 要：計(jì)算機(jī)自適應(yīng)測驗(yàn)（computerized adaptive testing，CAT）是基于項(xiàng)目反應(yīng)理論理論和計(jì)算機(jī)技術(shù)的一種測驗(yàn)?zāi)Ｊ健Ｋ鶕?jù)考生的作答情況自適應(yīng)地選擇測驗(yàn)項(xiàng)目。計(jì)算機(jī)自適應(yīng)考試可以避免傳統(tǒng)考試的弊端，較之計(jì)算機(jī)在線測試也有優(yōu)勢。本文對計(jì)算機(jī)自適應(yīng)測試的現(xiàn)狀進(jìn)行反思。

關(guān)鍵詞：自適應(yīng)測試；項(xiàng)目反應(yīng)理論；能力水平；試題參數(shù)

中圖分類號：TP391.6

1 計(jì)算機(jī)自適應(yīng)測試概述

1.1 計(jì)算機(jī)自適應(yīng)測試的含義

計(jì)算機(jī)自適應(yīng)就是指根據(jù)被試的能力水平自動選擇試題，并最終對被試能力做出評價。其中，考試項(xiàng)目的選擇是根據(jù)被試的能力水平選擇而成的，因而被試所做的每一個題目的難度都是與其能力相匹配的。

1.2 計(jì)算機(jī)自適應(yīng)測試的優(yōu)勢

傳統(tǒng)考試中，若被試地理位置分散、時間不統(tǒng)一將無法進(jìn)行測試，考試周期長，閱卷工作量大，考務(wù)工作繁重，有效的形成性評價較少，容易出現(xiàn)泄題漏題現(xiàn)象，試卷保存不便，考試過程中的作弊行為屢禁不止，反饋不及時，試卷復(fù)印所帶來的紙張浪費(fèi)等問題無法解決。

相比傳統(tǒng)考試，計(jì)算機(jī)自適應(yīng)測試有以下優(yōu)勢：方便被試進(jìn)行自我測試，自我測試結(jié)果的呈現(xiàn)及時，幫助學(xué)習(xí)者了解自己的學(xué)習(xí)情況，也可以確定目前的學(xué)習(xí)方法適合有效，是否合適自己的學(xué)習(xí)風(fēng)格，以便及時查缺補(bǔ)漏，在今后的學(xué)習(xí)中更能明確學(xué)習(xí)目標(biāo)；每一項(xiàng)目的選擇都是根據(jù)被試的能力水平“量身定做”的，隨著測試的進(jìn)行，越來越接近被試真實(shí)能力水平，被試在答題目時犯更少的無關(guān)的錯誤，可激發(fā)其學(xué)習(xí)動機(jī)；同時，使得大范圍地區(qū)的評價更為迅速，節(jié)省時間耗費(fèi)；在試卷題目的難度、類型和試題數(shù)量等方面的靈活性，也節(jié)省了被試的時間；此外，在自適應(yīng)考試中，系統(tǒng)隨機(jī)抽取題目，可靈活變化試卷的題目和難度等，甚至每個被試的試卷題目數(shù)量都不同，傳統(tǒng)考試中漏題泄題、作弊的現(xiàn)象迎刃而解，也節(jié)省了教師監(jiān)考的時間。

2 自適應(yīng)測試的基本原理和流程

計(jì)算機(jī)自適應(yīng)測驗(yàn)是在項(xiàng)目反應(yīng)理論基礎(chǔ)上發(fā)展起來的一種測驗(yàn)、它是一種在項(xiàng)目水平上進(jìn)行分析的測驗(yàn)。在測驗(yàn)開始時，計(jì)算機(jī)一般給出一個難度中等的題目，如果被試正確作答，計(jì)算機(jī)就會估計(jì)他的能力高于中等水平，然后再給他一個難度高一點(diǎn)的題目；反之亦然。然后，計(jì)算機(jī)根據(jù)被試第二題的回答情況。在第二次估計(jì)基礎(chǔ)上，計(jì)算機(jī)在題庫中選擇最接近他能力估計(jì)值的題目，接著根據(jù)被試反應(yīng)，對其能力再進(jìn)行估計(jì)。這樣，隨著被試做的題目增多，計(jì)算機(jī)對他能力的估計(jì)精度越來越高，最后其估計(jì)值將向被試的真實(shí)水平靠攏。

計(jì)算機(jī)自適應(yīng)測驗(yàn)實(shí)施程序大體可分為兩個階段：第一階段是考生能力水平的探索階段，以求取該考生的能力初值。第二階段是對考生能力的不斷修正。

3 對計(jì)算機(jī)自適應(yīng)測試的現(xiàn)狀反思

3.1 完善計(jì)算機(jī)自適應(yīng)測試的考核方式

目前，國內(nèi)的計(jì)算機(jī)自適應(yīng)測試題型主要以客觀題為主，題型單一，注重知識維度的考察，對學(xué)習(xí)者其他維度的考察有限。計(jì)算機(jī)自適應(yīng)測試應(yīng)借鑒CAA領(lǐng)域內(nèi)關(guān)于心智技能和操作技能的研究成果，豐富自適應(yīng)測試的題型和考察維度。

3.2 試題庫模塊及整個系統(tǒng)的自適應(yīng)

一個典型的計(jì)算機(jī)自適應(yīng)測試系統(tǒng)有三大模塊構(gòu)成，即適應(yīng)性測試模塊、成績統(tǒng)計(jì)與分析模塊、試題庫更新模塊。系統(tǒng)基于項(xiàng)目反應(yīng)理論實(shí)現(xiàn)了測試模塊的自適應(yīng)，但并沒有實(shí)現(xiàn)整個系統(tǒng)的適應(yīng)。在試題庫更新模塊中，系統(tǒng)還需要教師或?qū)＜覍υ囶}庫定期維護(hù)，由教師或?qū)＜彝瓿刹迦朐囶}、修改試題和刪除試題的操作。在試題庫模塊中，此系統(tǒng)與非自適應(yīng)的考試系統(tǒng)并無區(qū)別，此類系統(tǒng)只能稱為準(zhǔn)自適應(yīng)測試系統(tǒng)。如何實(shí)現(xiàn)試題庫以及整個系統(tǒng)的自適應(yīng)，試題庫根據(jù)某一個或某一群體被試能力水平的變化而自適應(yīng)調(diào)整，真正實(shí)現(xiàn)整個系統(tǒng)的自適應(yīng)，必然成為自適應(yīng)測試的研究重點(diǎn)。

3.3 試題參數(shù)的動態(tài)過程

在自適應(yīng)系統(tǒng)中，試題主要屬性參數(shù)包括試題的難度參數(shù)、區(qū)分度參數(shù)和猜測參數(shù)。確定試題的各個參數(shù)值一般有兩種途徑：一種途徑是選取一定數(shù)量的被試，經(jīng)過測試后進(jìn)行統(tǒng)計(jì)分析；另一種途徑是由專家進(jìn)行評估后，再采用統(tǒng)計(jì)方法確定參數(shù)。無論是哪種確定試題參數(shù)值的途徑，都有缺陷存在。

3.3.1 對選取被試進(jìn)行預(yù)測來確定試題參數(shù)的方法來說，參加預(yù)測被試的抽樣方法、參與預(yù)測的被試人數(shù)、預(yù)測被試的能力水平變化等因素都影響試題參數(shù)的確定。

參加預(yù)測被試的抽樣方法將直接決定了確定的試題參數(shù)的準(zhǔn)確程度；若預(yù)測被試的能力水平較高，可能導(dǎo)致試題的難度參數(shù)偏高；若預(yù)測被試的能力水平趨于集中，可能導(dǎo)致試題的區(qū)分度參數(shù)偏低；因此，參與預(yù)測的被試抽樣應(yīng)盡量滿足以下幾個條件：預(yù)測被試的能力水平應(yīng)較為全面的代表了該年齡階段的所有學(xué)習(xí)者；參加預(yù)測被試的地理范圍應(yīng)盡可能的廣；參加被試的男女比例大體滿足1：1。

參與預(yù)測的被試人數(shù)也是至關(guān)重要的影響因素。如果人數(shù)較少，得出參數(shù)是否客觀、準(zhǔn)確，是否適用于更廣的地域范圍、更多被試參與的自適應(yīng)測試，這些問題都有待探討。

參與預(yù)測被試的能力水平變化對試題參數(shù)的影響也不容忽視。學(xué)習(xí)者的學(xué)習(xí)必然是過程性的。隨著學(xué)習(xí)者在學(xué)習(xí)時間的推移和自身對學(xué)習(xí)內(nèi)容理解的加深，其能力水平必會提高。試題庫維護(hù)更新的頻率和程度，能否滿足被試能力水平的變化。其次，知識的更新速度越來越快，更新周期越來越短，學(xué)習(xí)者獲取知識的渠道愈發(fā)多樣化。試題庫的更新和試題參數(shù)的動態(tài)變化應(yīng)與知識更新、學(xué)習(xí)者能力水平的提高相契合。

3.3.2 由專家進(jìn)行評估后，再采用統(tǒng)計(jì)方法確定參數(shù)的方法，由教師或?qū)＜覍υ囶}進(jìn)行分析、整合、分配權(quán)重、最后確定試題參數(shù)。教師和專家都是專業(yè)領(lǐng)域內(nèi)的拔尖人才，很容易出現(xiàn)對試題的難度參數(shù)估計(jì)偏低的情況。

3.4 滿足不同基準(zhǔn)的評價需要

在實(shí)際的系統(tǒng)使用過程中，被試只能在主觀層面上對其所進(jìn)行的測試進(jìn)行意識上的分類，在系統(tǒng)的設(shè)計(jì)和開發(fā)過程中，可在登陸頁面設(shè)計(jì)不同基準(zhǔn)的測試類型的測試模塊，被試根據(jù)測試的目的不同選擇不同的模塊進(jìn)入答題系統(tǒng)，如自我測驗(yàn)、階段性測試和總結(jié)性測試。在不同類型的模塊中，試題參數(shù)的設(shè)置也應(yīng)不同。在自我測驗(yàn)和階段性測驗(yàn)中，由于其評價具有激發(fā)學(xué)習(xí)者學(xué)習(xí)興趣和動機(jī)的作用和階段性學(xué)習(xí)的學(xué)習(xí)內(nèi)容的非不完整的特點(diǎn)，其試題參數(shù)的難度值應(yīng)有一定的程度的降低。

3.5 對自適應(yīng)測試系統(tǒng)的評價

國內(nèi)大多數(shù)的自適應(yīng)考試系統(tǒng)，并沒有提到對系統(tǒng)本身的評價。也就是說，缺乏對系統(tǒng)本身的價值判斷，測量出的數(shù)據(jù)并沒有可信度。對系統(tǒng)本身的評價是整個自適應(yīng)測試系統(tǒng)使用和發(fā)展的根基。

參考文獻(xiàn)：

[1]蔡旻君.計(jì)算機(jī)輔助教育測量與評價[M].北京：中國水利水電出版社，2010.

[2]黃榮懷，劉黃玲子，李向榮.計(jì)算機(jī)輔助評價的發(fā)展趨勢[J].電化教育研究，2002.

[3]張忠華，謝小慶，鄭日昌.計(jì)算機(jī)自適應(yīng)性測驗(yàn)（CAT）選題策略的新進(jìn)展.心理發(fā)展與教育，2002：91-96.

[4]陳仕品，張劍平.《現(xiàn)代教育技術(shù)》精品課程自適應(yīng)測試系統(tǒng)的設(shè)計(jì)[J].中國電化教育，2008.

[5]Wim J.van der Linden，Cees A.W.Glas.Computerized Adaptive Testing：Theory and Practice[M].Boston：KluwerAcademicPublishers，2000.

作者簡介：袁曉蕾（1989-），女，黑龍江人，碩士研究生，研究方向：計(jì)算機(jī)輔助教育評價；李曉東（1963-），男，黑龍江人，教授，教育技術(shù)系主任，研究方向：教育信息處理和計(jì)算機(jī)輔助教育。

作者單位：哈爾濱師范大學(xué)教育科學(xué)學(xué)院，哈爾濱 150025

基金項(xiàng)目：本文系項(xiàng)目“國家大學(xué)生創(chuàng)新創(chuàng)業(yè)訓(xùn)練計(jì)劃”的成果（項(xiàng)目編號：201310231035）。