iTEST智能測試平臺應用在公共英語無紙化考試中的研究
——以蕪湖職業(yè)技術學院為例

王超

（蕪湖職業(yè)技術學院，安徽蕪湖 241002)

考試，作為對學生知識水平進行測試的一種重要方式，也是高校教學實踐過程當中的一個重要步驟。單一筆試已不能適應現(xiàn)代教育對人才能力全面培養(yǎng)的需要。在信息技術不斷創(chuàng)新和飛速發(fā)展的時代背景下，考試的手段也變得越來越多樣，計算機輔助考試(CAT)作為近年來興起的一種新型考試制度受到越來越多教育界人士的重視和關注。它打破了傳統(tǒng)的教學模式，使教師從繁重而重復的教學活動中解放出來，提高了教學質量。結合現(xiàn)有網上測評系統(tǒng)進行開發(fā)和運用，為教學提供靈活方便的考試系統(tǒng)成為必然趨勢。公共英語無紙化考試是利用現(xiàn)代信息技術在考試方面的創(chuàng)新之舉，摒棄了以往作為測試信息載體的紙張，轉而充分利用移動電子終端，對學生聽說讀寫譯等能力進行考核的考試。在無紙化考試中，常用的系統(tǒng)是基于ITIL 技術構建并運行的英語在線考試系統(tǒng)（簡稱“iTEST系統(tǒng)”)。該考試系統(tǒng)擺脫了時間和空間的限制，簡化了考試流程，節(jié)省了大量的人力和資源，尤其適用大范圍統(tǒng)一考試。因此越來越多的高校目前逐步應用這一系統(tǒng)。

蕪湖職業(yè)技術學院（以下簡稱“學院”)審時度勢,引進iTEST 無紙化測試系統(tǒng)并初步使用,取得了良好的效果。學院打破以往傳統(tǒng)思維，在2020年大一新生期末統(tǒng)考中采用了iTEST 移動端作為期末考試平臺，并取得良好的效果。

1 iTEST測試系統(tǒng)的無紙化測試研究過程

iTEST系統(tǒng)由考生管理模塊、題庫管理模塊、考生成績分析模塊、試卷生成模塊組成。采用iTEST 系統(tǒng)進行無紙化測評，測評流程簡單、靈活、易于掌握，主要可以分為考前、考中、考后三個環(huán)節(jié)。

考前，管理員（即上級教務主管部門）導入統(tǒng)考大一新生班級姓名和任課教師，教師隨后用工號登錄注冊并認領自己教學班級，再由任課教師組織所在教學班同學利用學號注冊歸入各自班級。

其次，由負責教師出題，它是無紙化測試的全部過程中最為重要的步驟。iTEST 系統(tǒng)自帶一般大學應用英語AB 級對應教程的題庫,但為了適應不同專業(yè)不同水平學生考試的需要，學院指定了多位專任教師不斷補充、更新題庫,根據(jù)AB 級考試大綱的要求，錄入難度水平相關試題,并且按照新AB 級測試的題型設計包含選擇、填空、翻譯、寫作等多元題型，確保全方位考查學生能力。同時，在線題庫測試還能夠對學生英語學習有診斷反饋作用，增強考試的公平公正性，激發(fā)學生競爭意識，也規(guī)避了猜題、押題、漏題等不良風氣，對培養(yǎng)學生的自主學習能力和創(chuàng)新能力有著正面引導性作用。

隨著iTEST 無紙化測試研究的由淺入深，總結每一次測試得到的反饋，在不斷發(fā)現(xiàn)問題解決問題的過程中，學院逐漸根據(jù)實際情況不斷完善題庫，同時利用教研會議，定期進行交流經驗和方法，以期為將來題庫建設提供可供更廣闊的思路。題庫從剛開始只能滿足所有專業(yè)統(tǒng)一時間測試，到后來可以根據(jù)專業(yè)、入學分數(shù)、教學層次不同而分別命題,各系部可以根據(jù)自身情況從容安排考試時間,在不降低試卷信度的情況下，也確保了考試的公平性。

考中，監(jiān)考教師只需按照監(jiān)考表到場維持考場紀律，清點考試人數(shù)，省去領試卷核對試卷的煩瑣流程。

在考試結束后，系統(tǒng)會自動批改并生成該考生的卷面成績。待所有試卷主客觀題評分結束后，系統(tǒng)會將所有試卷歸檔，教師就可以查看所在班成績及各班的試卷分析。

2 iTEST系統(tǒng)的優(yōu)點

學院自2020年6月份投入使用以來，系統(tǒng)運行穩(wěn)定、效果良好、學生反饋積極，成效顯著、滿意度高。實踐表明，iTEST 系統(tǒng)在避免學生作弊、節(jié)約資源、降低成本、降低老師重復工作量、提高改卷效率和正確率方面優(yōu)勢明顯[1]。

2.1 有效預防學生作弊，增強考試嚴肅性、公平性

針對機考作弊問題，iTEST 利用客戶端和試卷的橫向同級異序來防止作弊。當學生進入考試后，系統(tǒng)頁面最大化，除了答題以外，考試無關的操作將會被屏蔽掉。例如，打開搜索引擎、查找答案、查詞典等。針對手機客戶端替考、切屏的問題，iTEST系統(tǒng)新增了簽署考前承諾書并對學生進行認證，考中對動態(tài)抓拍的考生圖像進行對比，確保考生身份一致性。后臺管理員可以在開始過程中全程監(jiān)控，超過合理切屏次數(shù)，系統(tǒng)會在考生頁面自動提示，當達到一定次數(shù)，自動判為作弊。試卷的橫向同級異序則是通過從多套試卷的同一部分中抽取不同的題目來組合，增加試卷隨機性，考場前后左右試卷均不相同，從“千人一卷”變成“千人千卷”，從根本上杜絕考試舞弊。

2.2 無紙化機考既節(jié)約了資源，又降低了成本

在啟用iTEST 系統(tǒng)前，學院一直采用傳統(tǒng)紙質考試。每年面臨著大一新生期末統(tǒng)考的巨大壓力，南北校區(qū)15 個二級學院，6 000 多名考生，將近200 個考場。出卷、試卷裝訂、試卷發(fā)放、監(jiān)考、閱卷、存檔環(huán)環(huán)相扣，牽一發(fā)而動全身。對考務人員而言，考試過程中既要防止學生作弊，又要確?？己竺恳环菰嚲泶痤}卡的回收，一旦出現(xiàn)差錯，將會造成教學事故，這在無形中增大了任課教師非教學工作量。iTEST無紙化考試系統(tǒng)的引入，出卷老師只需要錄入題庫，系統(tǒng)自動組卷，從而免去了試卷印刷、保存、派送、分發(fā)等各環(huán)節(jié)。同時也節(jié)約了大量的紙質資源?？荚囘^程中學生無須準備任何文具，iTEST 系統(tǒng)可以實現(xiàn)答題數(shù)據(jù)一分鐘保存一次，本地和服務器雙重存儲，確保數(shù)據(jù)安全不遺失。

2.3 減輕教師工作量，閱卷的速度和準確度得到提高。

公共英語考題通常由主觀題和客觀題組成。針對客觀題iTEST系統(tǒng)采用機器讀入考試數(shù)據(jù)比照題庫事先輸入答案評分的方式。系統(tǒng)通過網絡傳輸試題數(shù)據(jù)到后臺服務器進行處理，然后將處理結果傳送至客戶端。客觀題部分對照輸入的答案自動評分，相較于傳統(tǒng)的答題卡，評分誤判率大幅度下降的同時，評卷速度大幅上升。在翻譯、寫作部分，系統(tǒng)則綜合運用了AI 智能預評分和人工給分。單一的人工評分方式不可避免存在較大的主觀性，評價學生英語水平缺乏客觀性，且受主觀因素的制約，易發(fā)生錯判或者漏判的情況，對考生造成很大的困擾。iTEST 可以實現(xiàn)聽說讀寫譯全題型的智能評閱，在寫作批改方面，系統(tǒng)會調用iwrite 2.0 智能批改引擎提供內容、語言、篇章、結構和技術規(guī)范四個維度的專業(yè)評價，以及基于學生作文的總體評價反饋和智能批改。iwrite2.0首創(chuàng)了基于聯(lián)想詞庫的內容評價方法，可以實現(xiàn)對學生寫作的切題性和連貫性進行評價，從而有效識別跑題和言之無物的作文，在翻譯題方面iTEST 利用內置的智能評估引擎來進行評分，可以實現(xiàn)從語言質量和翻譯質量兩方面對譯文進行評估。從使用的效果來看，受到老師一致好評，為人工給分提供了準確的參考依據(jù)。試驗前后數(shù)據(jù)表明，從考試結束到教務系統(tǒng)登記完全部學生的分數(shù)的時間，在采用無紙化考試前，平均要2 周，在采用無紙化之后平均僅需7 天。并且錄入教務系統(tǒng)后，要求修改成績，統(tǒng)計錯誤的情況大大減少[2]。

2.4 評價更加科學，提高了教學質量

在采用iTEST 系統(tǒng)前，英語測試后主要采用形成性評價的方法，但由于技術手段比較落后，需要任課教師對大量的數(shù)據(jù)進行搜集、分析和加工，造成評價過程的困難，評價結果的信度和效度不高，因此，許多教師不愿意進行形成性評價。iTEST 無紙化測試系統(tǒng)具有成績統(tǒng)計和試卷分析，雙維度、多方位的專業(yè)數(shù)據(jù)統(tǒng)計分析功能，對教學和測評研究起到輔助作用。在成績統(tǒng)計方面，系統(tǒng)有基于考試的最高分、最低分、平均分、最高分標準差等多方位的專業(yè)數(shù)據(jù)統(tǒng)計，同時提供針對整體考試學生的成績分布，餅圖能夠幫助教師方便快捷地把握學生整體成績的分布情況。

在試卷分析維度，系統(tǒng)提供了基于題目的難易度分析以及基于試卷的難易度分布表，還提供了基于選擇題題型的干擾項分析，這些維度能夠幫助任課教師及時把握考試難度、試題質量，掌握學生情況，提高了評價的效度和信度，從而有針對性地指導教學，并可基于數(shù)據(jù)開展測評研究，為學院公共英語實行分層教學提供有力的數(shù)據(jù)支撐。

無紙化考試的實施，客觀上倒逼教師掌握更先進的教學手段，當意識到其優(yōu)點后，能更好地利用并提高其教學質量。對學生而言，參加無紙化考試，對其個人素質也是一種提升[3]。

3 iTEST系統(tǒng)在應用中遇到的問題及解決方法

首先，數(shù)字題庫的構建和維護。試題庫建設的質量在很大程度上決定了試卷的質量，同場考題之間難易度能否相當、考題有沒有很好的區(qū)分度、試卷的信度和效度。試題庫應具有足夠的試題量和多樣化的特點，包括寫作、聽力、閱讀、翻譯、詞匯結構和口語等不同類型的子題庫，不僅僅是題目的堆積，也包括按考試分類的子題庫，構建如AB 級試題庫和大學英語四級試題庫。隨著辦學方向的調整，試題庫還應與時俱進、不斷調整，添加新題、刪除過時題型，既能保證測試質量，又可降低人力成本[4]。

其次，英語機考對教師和學生的計算機應用能力提出了更高要求。從教師主體來看，部分教師的系統(tǒng)操作熟練程度還有待提高，考試前教師需操作一整套系統(tǒng)流程：認證后進入系統(tǒng)，認領班級、生成班級碼、學生輸入班級碼加入班級、將班級與系統(tǒng)進行關聯(lián)、命題組卷、發(fā)布班級考試、學生參加考試、結束考試、開始閱卷、結束閱卷、開始歸檔等。整套流程比較復雜、煩瑣，且每一步的選擇、設定需精準到位，否則無法進入下一環(huán)節(jié)，并且在具體操作過程中極易出錯，因此一些教師產生了畏難情緒。對此，系統(tǒng)提供方多次組織了教師的考前系統(tǒng)使用培訓，教授機考實施方法，并組織微信群，第一時間協(xié)助教師解決操作時遇到的困難，增強教師運用機考系統(tǒng)的能力。此外教務部門聯(lián)合學院共同完善了與無紙化考試相關制度、紀律、要求，從制度層面上進一步保證了考試的順利進行。

從學生主體來看，部分學生在觀念上仍停留在傳統(tǒng)紙筆考試階段，對無紙化考試重視不足[5]。如：無故缺席模擬考試、對考試流程一知半解、不熟悉考試操作界面、不習慣在屏幕上閱讀、對電腦屏幕長時間的視覺疲勞、不熟悉鍵盤輸入作文等，都影響了學生的考試成績。學院考前會安排任課教師統(tǒng)一講授學生端的操作方法，并利用系統(tǒng)題庫，按照期末考試題型指導學生，讓學生適應在屏幕前答題，進而化解學生考試時易產生的緊張、焦躁、憂慮等情緒，讓學生正確看待無紙化考試的形式與作用。

再次，iTEST 系統(tǒng)主觀題閱卷準度尚待提升。當前iTEST試題庫試題單選，閱讀是一種客觀題型，計算機依據(jù)事先給定的答案，可以對客觀題進行準確無誤的批改。但考試中的寫作與翻譯都是主觀題型，盡管iTEST 系統(tǒng)已運用其人工智能軟件自動批改主觀題、給出分數(shù)，但教師反映實際考試中翻譯與作文機器批改后的成績與實際情況出入較大，最后還要閱卷人手動打分，主觀與客觀題加起來，才能得出考生的最終得分。所以，系統(tǒng)提供方也需要對系統(tǒng)進行進一步的改進以提供信度效度更高、能精確批改英語各類型試題的iTEST系統(tǒng),讓其能更好地服務于考試。

最后，利用iTEST 系統(tǒng)實現(xiàn)無紙化機考硬件需要完善的校園無線網絡系統(tǒng)，以及系統(tǒng)提供商軟件系統(tǒng)，這些因素具有很大的不可控性，比如在考試中出現(xiàn)、無線網絡癱瘓、停電、服務器訪問量過大而癱瘓或軟件系統(tǒng)中毒無法工作等，只能依靠專業(yè)技術人員來維護問題，很難在短時間內恢復正常的考試。一旦在大規(guī)?？荚囍谐霈F(xiàn)上述問題，就會直接影響整個考試，甚至全校的考試安排都會受到影響。這一切相關軟硬件，前期都需要大量資金投入，后期的維護也需要資金和人力，這絕不是某一部門一己之力可以完成，需要學校給予大量支持。對此學院聯(lián)系教務處、信息化建設與管理處、系統(tǒng)提供方多方聯(lián)動，保證設備的日常維護，在考前對參考教師進行培訓，進而輻射到所任課班級。每一次考試前，都會對系統(tǒng)服務器進行模擬壓力測試，從而確保正式考試的萬無一失。

4 結束語

2020 年6 月，學院應用iTEST 系統(tǒng)經受了一次巨大的挑戰(zhàn)，來自全國13個省、市的6 300名大一學生在同一時間，采用難度相當?shù)牟煌嚲硗瓿闪斯灿⒄Z課期末考試，第一次向全體教師展現(xiàn)了“互聯(lián)網+”的優(yōu)越性。2022 年初，iTEST 系統(tǒng)在蕪湖職業(yè)技術學院的應用已經趨于成熟，仍然高效、平穩(wěn)地完成了全院的公共英語考試。無紙化測評受到廣大教師和全校學生的認可和喜愛。通過兩年多來的不斷學習和摸索，以iTEST 系統(tǒng)為載體的無紙化測試體系已初步形成，這是蕪湖職業(yè)技術學院在公共課程考核方式上既充分結合了自己的特色，又運用現(xiàn)代化手段進行了大膽的改革與創(chuàng)新的成果，在iTEST系統(tǒng)日益得到更加廣泛應用和功能更加豐富的今天，我們將繼續(xù)完善并創(chuàng)新測試理念，實現(xiàn)iTEST 系統(tǒng)在學校公共英語教學中的深度整合，充分發(fā)揮該平臺在促進學生聽力、閱讀和寫作能力提升方面的作用，促進大學英語的改革和發(fā)展。