MOOC線上學(xué)習(xí)多元評價模式的有效建構(gòu)

陳 道 彬

(北京理工大學(xué)珠海學(xué)院外國語學(xué)院，廣東 珠海 519088)

一、引言

在“互聯(lián)網(wǎng)+”戰(zhàn)略和教育部積極發(fā)展高校線上線下混合性教學(xué)的背景下，以現(xiàn)代信息技術(shù)與教學(xué)的融合為特征，大規(guī)模開放在線課程MOOC(Massive Open Online Course，慕課)成為新一輪高等教育改革的顯著特征。2012年美國三大平臺Udacity、Coursera和edX平臺興起，標(biāo)志著“慕課”元年的開啟。2013年伊始，國內(nèi)一大批在線平臺也陸續(xù)開發(fā)建成，在線教育用戶呈現(xiàn)增長態(tài)勢，隨之全國高等院校MOOC課程建設(shè)也全面鋪開，如中國大學(xué)MOOC、愛課程、超星學(xué)習(xí)通、學(xué)堂在線、網(wǎng)易公開課等。作為高校重要的一門公共必修課程大學(xué)英語，教育部2017新版《大學(xué)英語教學(xué)指南》指出，大學(xué)英語應(yīng)大力推進(jìn)現(xiàn)代信息技術(shù)與課程教學(xué)的有效融合，為外語教學(xué)提供全新的學(xué)習(xí)方式。同年，教育部辦公廳下發(fā)了《教育部辦公廳關(guān)于開展2017年國家精品在線開放課程認(rèn)定工作的通知》，首批認(rèn)定了490門精品課程，這一舉措進(jìn)一步促進(jìn)了高校MOOC課程的發(fā)展。

在后疫情時代，MOOC成為高校大學(xué)課程和學(xué)生學(xué)習(xí)的一種新模式得以推廣。MOOC作為一種新型在線學(xué)習(xí)模式，如何有效評估學(xué)習(xí)者的在線學(xué)習(xí)效果，如何有效進(jìn)行課程考評，成為MOOC課程開發(fā)要考慮的重要問題。由于線上學(xué)習(xí)特點(diǎn)，教師無法隨時進(jìn)行有效的線上學(xué)情監(jiān)控，只有建立一套適應(yīng)慕課特點(diǎn)的質(zhì)量評價指標(biāo)體系，學(xué)生在線學(xué)習(xí)的效果與質(zhì)量才能得到保障[1]。線上評價體系除了客觀評價學(xué)生線上學(xué)習(xí)效果以外，同時也是衡量MOOC課程質(zhì)量的指標(biāo)之一，如何構(gòu)建有效的線上評價體系，更科學(xué)、全面地評價學(xué)生線上學(xué)習(xí)效果，有待于進(jìn)一步研究與探討。

二、MOOC線上評價的特點(diǎn)與研究現(xiàn)狀

傳統(tǒng)的評價方式是師生線下的課堂評價，隨著MOOC線上課程的普及，構(gòu)建MOOC學(xué)習(xí)評價體系逐步引起人們的重視，它是檢測線上教學(xué)和學(xué)習(xí)效果的主要手段，也是線上課程建設(shè)和可持續(xù)性發(fā)展的重要衡量指標(biāo)。MOOC作為一種新興的教育模式，劉路等綜合國內(nèi)外MOOC線上開展的教學(xué)情況發(fā)現(xiàn)，其低完成率及高輟學(xué)率使得MOOC的教育質(zhì)量及評價問題日益突出，對學(xué)習(xí)者學(xué)習(xí)過程及成效的有效評估與認(rèn)證是建立有效質(zhì)量保障體系的重要環(huán)節(jié)[2]。長期以來，國內(nèi)外對評價體系的研究主要集中在形成性評價與終結(jié)性評價二者展開，現(xiàn)行的多元評價體系結(jié)合了這兩種評價體系以及其他形式評價為輔助，以多維度多層次評價為主要特點(diǎn)。

從20世紀(jì)80年代開始，國外學(xué)者主要關(guān)注終結(jié)性評價和形成性評價的區(qū)別，他們強(qiáng)調(diào)形成性評價和終結(jié)性評價兩個階段的各自功能與區(qū)別，認(rèn)為形成性評價主要在于檢測學(xué)習(xí)成效和改進(jìn)空間，為教師和學(xué)生提供階段性參考與反饋。終結(jié)性評估是經(jīng)過連續(xù)性過程評價(continuous assessment)，最終起到結(jié)果作用的診斷性評價(diagnostic assessment)[3]。2012年隨著MOOC的普及，Admiraal等結(jié)合美國幾大主流MOOC平臺的學(xué)習(xí)數(shù)據(jù)，指出MOOC的學(xué)習(xí)評價是線上課程的重要環(huán)節(jié)，線上評價以多元化評價方式為主流，評價過程強(qiáng)調(diào)線上學(xué)習(xí)者的主體地位，自我評價(self-assessment)和同伴互評(peer assessment)也常常作為線上評價的主要手段[4]。近年來，教育技術(shù)發(fā)展和外語教學(xué)模式與理念的不斷創(chuàng)新，MOOC線上的評價方式、評價方法和視角也趨于多元化。吳娟和霍艷娟列舉了歐美國家線上學(xué)習(xí)評價指標(biāo)的開發(fā)特點(diǎn)[5]，其中包括，美國課程審查專業(yè)機(jī)構(gòu)Quality Matters設(shè)立的評價指標(biāo)維度，英聯(lián)邦學(xué)習(xí)共同體(Commonwealth of Learning)發(fā)布的《MOOC質(zhì)量保障與評估指南》，德國學(xué)者于2014年創(chuàng)建的MOOC設(shè)計質(zhì)量保障標(biāo)準(zhǔn)，該標(biāo)準(zhǔn)將評價維度分為教學(xué)和平臺技術(shù)兩大方面，共細(xì)化到75個評價指標(biāo)項(xiàng)。

各國在線課程評價研究取得了很多積極成果，目前國內(nèi)專門圍繞MOOC課程評價開展的研究還有待于進(jìn)一步深入，特別是從學(xué)習(xí)者角度出發(fā)的MOOC課程質(zhì)量評價指標(biāo)體系[6]。由于MOOC線上學(xué)習(xí)者人數(shù)眾多，學(xué)習(xí)者在線學(xué)習(xí)方式與時間上不同步，學(xué)習(xí)周期長，在MOOC開發(fā)中要考慮針性地設(shè)計課程標(biāo)準(zhǔn)化的評價模式，這樣才能提高學(xué)習(xí)質(zhì)量和在線學(xué)習(xí)完成率[7]。劉建達(dá)和李雪蓮闡述了目前四個常見的英語課程教學(xué)評價方式，包括了終結(jié)性評價，形成性評價，綜合評價(comprehensive assessment)和增值評價(value-added assessment)，并強(qiáng)調(diào)多元評價體系在現(xiàn)行大學(xué)英語教學(xué)中的重要地位[8]。可見，MOOC線上評價體系的建立需要以多元化和多維度為特點(diǎn)，構(gòu)建以學(xué)生自主學(xué)習(xí)為特征的多元性和動態(tài)的評價模式，課程開發(fā)者和教師需要發(fā)揮過程性評價與評價反饋，提高M(jìn)OOC線上評價指標(biāo)的信度與效度。

三、大學(xué)英語MOOC線上多元評價模式構(gòu)建

(一)《應(yīng)用型大學(xué)英語》MOOC學(xué)習(xí)平臺設(shè)置

《應(yīng)用型大學(xué)英語》MOOC是本校和廣東省線上線下混合式一流建設(shè)課程，該課程構(gòu)建了以《中國英語能力等級量表》和《中國學(xué)生發(fā)展核心素養(yǎng)》為標(biāo)準(zhǔn)，形成性評價與終結(jié)性評價相結(jié)合的多元多維動態(tài)評價體系。特別加大形成性評估在課程評價中的比重，采取多樣化的終結(jié)性評價方式。該課程線上平臺為超星學(xué)習(xí)通(http://i.mooc.chaoxing.com)，截止2021年，已經(jīng)累計使用了4輪。

學(xué)習(xí)通線上課程基于上海外語教育出版社《全新版大學(xué)進(jìn)階英語綜合教程》第1冊開發(fā)而來，按照課程教學(xué)目標(biāo)，慕課以在線微視頻和學(xué)習(xí)活動材料為主要學(xué)習(xí)資源。線上課程內(nèi)容涵蓋閱讀能力、聽力能力、跨文化能力、交際能力和寫作能力，合計6個單元，按每個單元知識點(diǎn)進(jìn)行設(shè)計。每單元由20個微視頻組成，并按平臺功能板塊開發(fā)各個單元的學(xué)習(xí)活動與評測練習(xí)。每個單元均包含三大主題模塊：8個課前主題導(dǎo)入視頻(theme-related input)、6個主題拓展視頻(theme-related extension)和6個課后學(xué)習(xí)產(chǎn)出視頻(output/outcome-based)，一共120個微視頻，每個微視頻時長10分鐘左右(詳見表1)。

表1 MOOC學(xué)習(xí)通平臺單元微視頻內(nèi)容

本?！稇?yīng)用型大學(xué)英語》使用的MOOC平臺學(xué)習(xí)通用戶群廣泛，在國內(nèi)使用面廣。黃文祥等統(tǒng)計了2020年春季疫情期間線上教學(xué)平臺資源，綜合71所國內(nèi)高校使用的教學(xué)平臺使用情況[9]，結(jié)果發(fā)現(xiàn)使用率分位前三的是超星(32.98%)、雨課堂(25.00%)和中國大學(xué)MOOC(21.34%)，因此，本文探討的構(gòu)建MOOC線上學(xué)習(xí)評價模式有一定的社會參考價值。

大學(xué)英語MOOC課程設(shè)置結(jié)合每個單元的話題導(dǎo)入，設(shè)置教學(xué)目標(biāo)與內(nèi)容，以提高學(xué)生線上參與式學(xué)習(xí)為主?；趯W(xué)習(xí)通平臺功能板塊，《應(yīng)用型大學(xué)英語》MOOC線上課程總體設(shè)置包括：一是線上微視頻。每個單元20個微視頻，每個微視頻內(nèi)容包含“主題引入-本節(jié)學(xué)習(xí)目標(biāo)-學(xué)習(xí)前測-沉浸式學(xué)習(xí)與互動-學(xué)習(xí)后測-內(nèi)容預(yù)告”，需要學(xué)習(xí)者在線自主學(xué)習(xí)完成六個單元，合計120個微視頻；二是交互式學(xué)習(xí)。作業(yè)與活動板塊的功能設(shè)置多樣化，作業(yè)模塊主觀題與客觀題結(jié)合，討論區(qū)設(shè)置互動式話題，章節(jié)客觀題通過平臺功能即時批改，學(xué)生討論模塊以同伴互動互評為主，結(jié)合教師評價、自我評價、生生評價和系統(tǒng)評價；三是異步自主學(xué)習(xí)任務(wù)。學(xué)生碎片化時間自主完成線上話題討論、線上寫作、翻譯練習(xí)、線上章節(jié)小測、線上音頻作業(yè)、線上搶答活動等；四是學(xué)習(xí)過程性評價。教師通過學(xué)習(xí)任務(wù)點(diǎn)完成情況、在線時間投入、生生互動次數(shù)、作業(yè)完成率等環(huán)節(jié)評價線上學(xué)習(xí)，利用后臺生成的學(xué)習(xí)數(shù)據(jù)監(jiān)督與評價學(xué)習(xí)效果。

(二)《應(yīng)用型大學(xué)英語》MOOC線上評價環(huán)節(jié)設(shè)置

大學(xué)英語MOOC線上學(xué)習(xí)評價過程依據(jù)泛在式學(xué)習(xí)特點(diǎn)，結(jié)合學(xué)習(xí)通平臺移動學(xué)習(xí)和即時學(xué)習(xí)的便利，利用學(xué)習(xí)通平臺自帶功能，強(qiáng)調(diào)對學(xué)習(xí)者個性化和差異化評價，以形成性評價為主結(jié)合終結(jié)性評價，以定量評價與定性評價，同伴互評與自我評價相結(jié)合。評價過程包含線上課前、線上課中、線上課后評價和期末學(xué)期總評(詳見表2)。評價環(huán)節(jié)包括每單元20個視頻的前測練習(xí)，章節(jié)測試，話題討論，單元和期末考試；評價內(nèi)容基于課程教學(xué)目標(biāo)與教學(xué)設(shè)計，通過學(xué)生視角設(shè)置學(xué)習(xí)活動，包含聽說讀寫能力，具體到每個單元前的詞匯前測，主題討論，學(xué)習(xí)筆記，線上互動，學(xué)習(xí)反思，課后產(chǎn)出等內(nèi)容；評價主體多元化，即有教師評價和在線系統(tǒng)自動評價，又包含學(xué)生自我評價和生生評價，保證評價主體的多樣化，避免了教師單一評價為主。最后評價指標(biāo)比重依據(jù)線上微視頻觀看的完成度，作業(yè)完成情況，互動完成情況以及各類測試成績，以百分制設(shè)置各部分比重。

表2 線上學(xué)習(xí)多元評價環(huán)節(jié)設(shè)置

(三)《應(yīng)用型大學(xué)英語》MOOC線上評價指標(biāo)與量化

《應(yīng)用型大學(xué)英語》MOOC平臺評價指標(biāo)注重學(xué)習(xí)者的學(xué)習(xí)體驗(yàn)，提倡自主性、探究性的學(xué)習(xí)過程。線上學(xué)習(xí)多元評價的主體是學(xué)生，主要評價維度包括學(xué)生線上學(xué)習(xí)參與度，線上學(xué)習(xí)內(nèi)容完成度，線上交互式學(xué)習(xí)和學(xué)習(xí)產(chǎn)出能力。該評價指標(biāo)以學(xué)生學(xué)習(xí)的形成性評價為主線，包含多種評價模式，以一級指標(biāo)為總體評價維度，看重自主學(xué)習(xí)能力的培養(yǎng)，涵蓋學(xué)生個體、交互、產(chǎn)出與能力提升。綜合前三輪本校學(xué)習(xí)通平臺的使用情況與反饋，劃分一級指標(biāo)，二級指標(biāo)和主要參數(shù)指標(biāo)與量化(詳見表3)。

一級指標(biāo)包括學(xué)習(xí)參與度、內(nèi)容完成度、線上交互學(xué)習(xí)、學(xué)習(xí)產(chǎn)出和學(xué)習(xí)能力提升；二級指標(biāo)具體細(xì)化線上學(xué)習(xí)表現(xiàn)，包含自主學(xué)習(xí)能力的內(nèi)容，包括學(xué)習(xí)元認(rèn)知，情感因素，自我效能感感，交互合作等。最后，主要參數(shù)指標(biāo)為平臺板塊項(xiàng)目的評分規(guī)則與標(biāo)準(zhǔn)，主要通過平臺自帶的評價功能板塊和題庫練習(xí)來實(shí)現(xiàn)。例如，線上活動板塊(考勤，在線投票，主題討論，在線問卷，分組任務(wù)等)，作業(yè)庫(題庫，作業(yè)庫，試卷庫，優(yōu)秀作品庫)、學(xué)習(xí)檔案袋(學(xué)習(xí)反思，學(xué)生錄制的視頻，在線學(xué)習(xí)記錄)和在線互動討論模塊等。

表3 線上學(xué)習(xí)多元評價參數(shù)指標(biāo)與量化表

四、《應(yīng)用型大學(xué)英語》MOOC多元化評價結(jié)果與討論

大學(xué)英語MOOC學(xué)習(xí)通平臺第三輪周期為2020年9月至2021年1月，本輪共有23個教學(xué)班級，合計913人。依據(jù)課程設(shè)置，線上評價過程包含課前、課中、課后和期末總評。利用多元化評價方式，按照評價指標(biāo)與參數(shù)，進(jìn)行線上學(xué)習(xí)過程性評價。綜合本輪線上學(xué)習(xí)統(tǒng)計數(shù)據(jù)和評價分析結(jié)果來看，主要呈現(xiàn)以下幾個特點(diǎn)。

線上課前導(dǎo)學(xué)階段。學(xué)習(xí)通平臺登錄、微視頻自主觀看次數(shù)、小測和作業(yè)完成率呈現(xiàn)波動現(xiàn)象。臨近線上作業(yè)時間節(jié)點(diǎn)和期末，登錄次數(shù)陡增，參與學(xué)習(xí)互動活躍，微視頻觀看完成率也集中在同一時間段。所以，線上學(xué)習(xí)任務(wù)時間節(jié)點(diǎn)影響學(xué)生參與度與完成度，反映部分學(xué)習(xí)者的自主學(xué)習(xí)能力欠缺。因此，評價指標(biāo)需要加強(qiáng)對線上時間段內(nèi)的學(xué)習(xí)時長監(jiān)控，平均統(tǒng)計各個時間段的實(shí)際學(xué)習(xí)時長，納入評價指標(biāo)，避免時間節(jié)點(diǎn)趕作業(yè)現(xiàn)象。

線上課中互動參與式學(xué)習(xí)階段。評價過程與結(jié)果發(fā)現(xiàn)，學(xué)生在主題相關(guān)的開放式話題評論字?jǐn)?shù)過少，語法小錯誤較多，學(xué)生線上互評、生生互動次數(shù)不足，學(xué)生的交互學(xué)習(xí)和參與性有待提高。據(jù)統(tǒng)計，每個學(xué)生按課程要求需完成24個話題討論，由于在線學(xué)生人數(shù)多，教師在師生互動環(huán)節(jié)很難有效監(jiān)控，這部分評分標(biāo)準(zhǔn)主要依賴平臺統(tǒng)計的學(xué)生在線參與討論次數(shù)和留言次數(shù)給分。另外，線上小組合作的作業(yè)、上傳的音頻作業(yè)也以教師主觀性評價為主。相反，一些客觀題類作業(yè)與測試，則可以利用平臺作業(yè)設(shè)置功能實(shí)現(xiàn)即時評分。因此，對參與式學(xué)習(xí)過程的學(xué)生自評和生生互動，教師的主觀評價應(yīng)當(dāng)細(xì)化標(biāo)準(zhǔn)，按等級制評分，提高主觀評價的效度與效率。

線上課后拓展學(xué)習(xí)階段。每個章節(jié)學(xué)習(xí)反思部分和音頻錄制作業(yè)完成率較高，但是完成質(zhì)量有待提升。大多學(xué)生自我學(xué)習(xí)反思只是提到自己某個語言技能的薄弱點(diǎn)，缺少對今后學(xué)習(xí)態(tài)度、學(xué)習(xí)策略等方面的元認(rèn)知反思。學(xué)習(xí)能力產(chǎn)出的微視頻拍攝與跨文化探討部分，完成作品參差不齊。例如第一單元主題是關(guān)于夢想，大多數(shù)學(xué)生只是錄制與主題相關(guān)的文章錄音，拍攝微視頻和原創(chuàng)演講的較少。因此，課后輸出環(huán)節(jié)需要加強(qiáng)教師的動態(tài)跟蹤，即時提供評價反饋意見，改進(jìn)與提高學(xué)生的每次產(chǎn)出作品。

終結(jié)性評價與反饋。本輪MOOC平臺考試題庫總數(shù)631道，課程課外學(xué)習(xí)資料428個，線上共計發(fā)帖總數(shù)4720帖，參與互動人數(shù)為672，測驗(yàn)和作業(yè)共計166次，共有909人參與。統(tǒng)計平臺課程客觀題各類在線作業(yè)、測試和線上參與度、完成度和交互學(xué)習(xí)等情況，參照(表3)線上學(xué)習(xí)多元評價參數(shù)指標(biāo)與量化表總評(參與度15%；完成度20%；交互學(xué)習(xí)15%；學(xué)習(xí)產(chǎn)出20%和能力提30%)，本輪線上最終合格人數(shù)為856，平均分為82.37，通過率93.75%。終結(jié)性評價結(jié)果總體客觀反映了線上學(xué)習(xí)結(jié)果，同時也為今后進(jìn)一步優(yōu)化線上多元、多維評價體系提供參考。特別是在生生互動、師生互動部分，需要進(jìn)一步細(xì)化評分標(biāo)準(zhǔn)，優(yōu)化學(xué)生參與度與生生互動的評價指標(biāo)，在多元多維評價的前提下，注重線上學(xué)習(xí)的動態(tài)評價過程。

五、大學(xué)英語MOOC線上學(xué)習(xí)多元評價模型與建議

本文基于學(xué)習(xí)通平臺的多元化評價模式建構(gòu)與結(jié)果反饋，認(rèn)為今后應(yīng)當(dāng)對MOOC線上多元評價參數(shù)指標(biāo)、線上學(xué)生參與環(huán)節(jié)和線上教師組織管理進(jìn)行優(yōu)化設(shè)計(如圖1)，具體從以下三方面內(nèi)容進(jìn)行完善。

圖1 MOOC線上學(xué)習(xí)多元評價體系模型

一是優(yōu)化學(xué)習(xí)評價內(nèi)容。作為大規(guī)模的線上開放課程，需要對線上評價內(nèi)容進(jìn)行篩選，特別是主觀話題討論部分，應(yīng)當(dāng)參照《中國英語能力等級量表》(2018)指南，線上評測內(nèi)容選擇、話題難易度、素材選用對標(biāo)英語等級量表，針對不同層次學(xué)生，讓其“有話可說”，避免線上學(xué)習(xí)完成率低、完成效果差。楊曉宏等強(qiáng)調(diào)混合式學(xué)習(xí)內(nèi)容的設(shè)計，要注重課程特性與主體需求的有效銜接，進(jìn)而構(gòu)建移動學(xué)習(xí)資源和評價體系，以適應(yīng)現(xiàn)代教育技術(shù)下的學(xué)習(xí)新模式[6]。

二是充分發(fā)掘MOOC平臺自帶的學(xué)習(xí)評價功能，改進(jìn)評價模式與強(qiáng)調(diào)動態(tài)過程性評價，提高被評價者的配合度與積極性。借助MOOC在線平臺線上功能特色板塊，利用多種素材與多元測試形式，設(shè)置多樣化的題型與活動，提高學(xué)生的學(xué)習(xí)樂趣與參與性，避免將課堂測試形式照搬線上。Admiraal等人的研究也表明，學(xué)生MOOC學(xué)習(xí)積極性與評價成績呈現(xiàn)顯著相關(guān)性，特別是利用線上電子檔案，做到可視化管理線上學(xué)習(xí)記錄與成績變化，提升學(xué)生學(xué)習(xí)的成就感[4]。

三是發(fā)揮教師的線上教學(xué)組織和課后管理作用。由于學(xué)生自主學(xué)習(xí)能力存在差異，許多學(xué)生喜歡在時間節(jié)點(diǎn)前應(yīng)付任務(wù)趕作業(yè)，因此需要教師加大在線學(xué)習(xí)的監(jiān)控和組織，對學(xué)習(xí)者橫向和縱向進(jìn)行比較，通過評價反饋促進(jìn)學(xué)習(xí)者調(diào)整學(xué)習(xí)狀態(tài)。教師對學(xué)生的學(xué)習(xí)反饋是評估過程中一個關(guān)鍵因素，教育評估強(qiáng)調(diào)學(xué)生在學(xué)習(xí)過程中的進(jìn)步與提高，發(fā)揮教師引導(dǎo)、監(jiān)控教學(xué)過程的主導(dǎo)作用[9]。同時，在后臺管理中合理分配教師職責(zé)，細(xì)分教師線上管理權(quán)限，健全課程教學(xué)團(tuán)隊(duì)的教師協(xié)作機(jī)制。

六、結(jié)語

MOOC線上多元評價模式是一種多維度、多指標(biāo)的學(xué)習(xí)評價理念與方式。綜上討論，做好對學(xué)生學(xué)習(xí)的及時反饋和優(yōu)化主觀評價維度，是教師要解決的首要問題；對學(xué)習(xí)者而言，多元評價方式對教師與學(xué)習(xí)者要具有可操作性，能夠客觀、綜合地評價學(xué)生各方面的學(xué)習(xí)成效。同時也應(yīng)當(dāng)認(rèn)識到，評價的目的是為了提高學(xué)生認(rèn)知自身不足，進(jìn)而改進(jìn)提高，是一種增值評價(value-added assessment)，需要發(fā)揮評價導(dǎo)向作用[8]。因此，線上評價不能單純以分?jǐn)?shù)來衡量學(xué)生的最終學(xué)習(xí)效果，線上評價應(yīng)當(dāng)借鑒形成性評價與MOOC學(xué)習(xí)者的線上學(xué)習(xí)數(shù)據(jù)，通過評價反饋促使學(xué)習(xí)者自我反思和改進(jìn)提高。