基于AHP的“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系研究

嚴(yán)春燕

摘要：“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)模式被逐漸引入到教學(xué)中，學(xué)習(xí)評(píng)價(jià)作為保障學(xué)習(xí)質(zhì)量和學(xué)習(xí)效果的重要措施，是該教學(xué)模式能否順利實(shí)施的重要環(huán)節(jié)。因此，構(gòu)建基于“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系具有重要的意義。本文分析了“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)的研究現(xiàn)狀，借鑒了MOOC和翻轉(zhuǎn)課堂的現(xiàn)有成果，初步構(gòu)建了“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系，并通過層次分析法確定了各級(jí)指標(biāo)的權(quán)重，最終形成一個(gè)科學(xué)合理的評(píng)價(jià)指標(biāo)體系，充分體現(xiàn)了“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)模式的教學(xué)特色。

關(guān)鍵詞：MOOC;翻轉(zhuǎn)課堂;學(xué)習(xí)評(píng)價(jià);層次分析法

MOOC（massive open online courses，大型開放式網(wǎng)絡(luò)課程）擁有優(yōu)質(zhì)課程資源，促進(jìn)了世界范圍內(nèi)的知識(shí)分享。翻轉(zhuǎn)課堂（Flipped Classroom，Inverted Classroom）重新調(diào)整了課堂內(nèi)外的時(shí)間，其以現(xiàn)代信息技術(shù)為支撐，實(shí)現(xiàn)了以教師引導(dǎo)、學(xué)生為中心的教學(xué)模式。 “MOOC+翻轉(zhuǎn)課堂”的教學(xué)模式有機(jī)整合了MOOC在線學(xué)習(xí)和以討論為主的課堂學(xué)習(xí)，融合了MOOC及翻轉(zhuǎn)課堂的優(yōu)勢(shì)，促進(jìn)了學(xué)習(xí)者的個(gè)性化學(xué)習(xí)和深度學(xué)習(xí)。隨著越來越多的教育者開始引入MOOC課程資源進(jìn)行翻轉(zhuǎn)課堂的研究與實(shí)踐，如何科學(xué)、全面地評(píng)價(jià)學(xué)習(xí)者的學(xué)習(xí)效果，如何進(jìn)行課程考評(píng)，幫助學(xué)生認(rèn)識(shí)自我、促進(jìn)知識(shí)技能的發(fā)展成為教育者不得不考慮的問題。因此，構(gòu)建“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系能有效地評(píng)價(jià)學(xué)習(xí)效果，提高教學(xué)質(zhì)量。

1、“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)研究現(xiàn)狀

目前國(guó)內(nèi)外對(duì)“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)模式下學(xué)習(xí)評(píng)價(jià)研究文獻(xiàn)較少，對(duì)學(xué)習(xí)評(píng)價(jià)的研究或側(cè)重于MOOC，或側(cè)重于翻轉(zhuǎn)課堂。MOOC以多元化的評(píng)價(jià)機(jī)制沖擊了傳統(tǒng)的教學(xué)評(píng)價(jià)方式，借助大數(shù)據(jù)的信息搜集和決策實(shí)現(xiàn)了個(gè)性化的信息反饋。劉志軍指出：現(xiàn)有的MOOC平臺(tái)難以實(shí)現(xiàn)復(fù)雜的學(xué)習(xí)評(píng)價(jià)，MOOC平臺(tái)多為機(jī)器評(píng)價(jià)，難以實(shí)現(xiàn)對(duì)高層次的思維能力的評(píng)價(jià)[1];鄭志高對(duì)Coursera、edX和Udocity_大平臺(tái)課程進(jìn)行調(diào)研，發(fā)現(xiàn)只有不到18%的課程使用了過程性評(píng)價(jià)功能，MOOC的學(xué)習(xí)評(píng)價(jià)主要還是面向?qū)W習(xí)結(jié)果的評(píng)價(jià)[2]。國(guó)外也有學(xué)者基于MOOC平臺(tái)設(shè)計(jì)了自動(dòng)評(píng)價(jià)，如SanchezAcosta和Esribano Otero研究了采用預(yù)先校正算法的自動(dòng)評(píng)價(jià)工具[3];Chiou和Shih改進(jìn)現(xiàn)有評(píng)價(jià)系統(tǒng)，提出自動(dòng)分組及同伴評(píng)分系統(tǒng)[4]。MOOC在學(xué)習(xí)評(píng)價(jià)中有其自身難以突破的局限性，但是，基于MOOC的課堂“翻轉(zhuǎn)”能夠促使學(xué)習(xí)評(píng)價(jià)從二元對(duì)立轉(zhuǎn)向多元評(píng)價(jià)體系。蘇仰娜利用Moodle的平臺(tái)實(shí)踐“多媒體課件設(shè)計(jì)與制作”課程，結(jié)合多元智能原則指導(dǎo)課堂評(píng)估[5];姜玉梅調(diào)研分析MOOC和“翻轉(zhuǎn)課堂”理念下高校思想政課程教學(xué)評(píng)價(jià)體系[6]。目前在評(píng)價(jià)“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)效果的過程中，專門的學(xué)習(xí)評(píng)價(jià)的研究較少，定性研究遠(yuǎn)大于定量研究，在定量研究中也存在評(píng)價(jià)指標(biāo)覆蓋不全面、指標(biāo)交叉重疊、指標(biāo)獲取困難等現(xiàn)象，缺乏科學(xué)的評(píng)價(jià)指標(biāo)體系，尤其是缺少對(duì)學(xué)習(xí)評(píng)價(jià)指標(biāo)進(jìn)行科學(xué)的權(quán)重賦值。因此，本研究綜合運(yùn)用文獻(xiàn)分析法和層次分析法建立一套系統(tǒng)、規(guī)范的“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系，以期為該教學(xué)模式下學(xué)習(xí)評(píng)價(jià)提供理論支撐和實(shí)踐參考。

2、“MOOC+翻轉(zhuǎn)j堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)內(nèi)容設(shè)計(jì)

2.1 "MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)總架構(gòu)

翻轉(zhuǎn)課堂的教學(xué)模式顛倒了課堂內(nèi)外時(shí)間，學(xué)生的學(xué)習(xí)活動(dòng)、教學(xué)過程、教學(xué)方法和教學(xué)結(jié)構(gòu)都發(fā)生了變化。傳統(tǒng)課堂的學(xué)習(xí)評(píng)價(jià)手段不僅難以在“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)模式下科學(xué)地識(shí)別學(xué)生的學(xué)業(yè)水平，而且不能激發(fā)學(xué)生主動(dòng)參與的積極性，忽視了學(xué)習(xí)過程中的評(píng)價(jià)。因此，學(xué)習(xí)評(píng)價(jià)指標(biāo)的設(shè)計(jì)不僅要考慮結(jié)果評(píng)價(jià)，還要考慮過程評(píng)價(jià)。

“MOOC+翻轉(zhuǎn)課堂”教學(xué)模式主要包括線上和線下兩個(gè)學(xué)習(xí)場(chǎng)景，課前、課堂、課后三個(gè)教學(xué)環(huán)節(jié)，過程和結(jié)果兩個(gè)評(píng)價(jià)維度。線上學(xué)習(xí)場(chǎng)景主要在MOOC平臺(tái)，對(duì)應(yīng)課前環(huán)節(jié)，學(xué)習(xí)評(píng)價(jià)對(duì)應(yīng)MOOC平臺(tái)的線上評(píng)價(jià)。線下學(xué)習(xí)場(chǎng)景主要在教室、實(shí)驗(yàn)室和其他學(xué)習(xí)場(chǎng)地，對(duì)應(yīng)課堂和課后環(huán)節(jié)，學(xué)習(xí)評(píng)價(jià)對(duì)應(yīng)教師評(píng)價(jià)、同伴互評(píng)、移動(dòng)支持評(píng)價(jià)。課堂教學(xué)活動(dòng)中引入移動(dòng)輔助工具，可以對(duì)學(xué)生的學(xué)習(xí)情況及時(shí)跟蹤及監(jiān)測(cè)?！癕OOC+翻轉(zhuǎn)課堂”的過程評(píng)價(jià)包含了課前、課堂、課后三個(gè)教學(xué)環(huán)節(jié)，結(jié)果評(píng)價(jià)包含了平時(shí)期末考核以及課程拓展加分。

2.2 “MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)的選取

查閱翻轉(zhuǎn)課堂與MOOC在實(shí)施學(xué)習(xí)評(píng)價(jià)方面的研究文獻(xiàn)，進(jìn)行梳理、分析篩選后得出“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)模式下學(xué)習(xí)評(píng)價(jià)的指標(biāo)，得出評(píng)價(jià)指標(biāo)體系，見表1。根據(jù)評(píng)價(jià)維度可分為過程評(píng)價(jià)和結(jié)果評(píng)價(jià)。在線學(xué)習(xí)評(píng)價(jià)主要是針對(duì)學(xué)生課前在MOOC平臺(tái)學(xué)習(xí)設(shè)計(jì)，主要包括課前資源資料的學(xué)習(xí)情況、課前測(cè)試以及課前的討論等。線下學(xué)習(xí)評(píng)價(jià)主要針對(duì)學(xué)生的課堂表現(xiàn)和課后作業(yè)完成情況設(shè)計(jì)，主要包括課堂任務(wù)完成情況、教師與學(xué)生和學(xué)生之間的互動(dòng)，課堂的互動(dòng)以及課后作業(yè)的完成情況。

3、“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)權(quán)重分配

層次分析法（The analytic hierarchy process）簡(jiǎn)稱AHP，是一種定性和定量的系統(tǒng)分層分析方法，在處理復(fù)雜決策問題方面具有實(shí)用性和有效性。本文采用該分析法，參考表1構(gòu)建一個(gè)多層次模型。層次分析法的基本原理是通過兩兩比較方法確定判斷矩陣，并將對(duì)應(yīng)判斷矩陣的最大特征根對(duì)應(yīng)的特征向量的分量作為相應(yīng)的系數(shù)，進(jìn)而綜合出各指標(biāo)的權(quán)重。

3.1 構(gòu)造判斷矩陣并賦值

AHP構(gòu)建“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系模型的判斷矩陣，采用1-9的標(biāo)度法對(duì)重要性程度進(jìn)行賦值。根據(jù)表1構(gòu)造判斷矩陣A，研，B2，B3，得出對(duì)應(yīng)的特征向量w，w1，w2，w3。

3.2層次單排序（計(jì)算向量）與檢驗(yàn)

使用MTALAB計(jì)算判斷矩陣的最大特征根及其相對(duì)因的特征向量后，得到各層要素對(duì)應(yīng)上層某要素的重要性次序，建立相對(duì)權(quán)重向量。

在層層排序中，要對(duì)判斷矩陣進(jìn)行一致性檢驗(yàn)。判斷矩陣的一致性檢驗(yàn)：

上式中：CR為隨機(jī)一致性比率，當(dāng)CR3.3 層次總排序與檢驗(yàn)

總排序是指每一個(gè)判斷矩陣各因素針對(duì)目標(biāo)層（最上層）的相對(duì)權(quán)重。這一權(quán)重的計(jì)算采用從上而下的方法，逐層合成。這一過程同樣利用CR=CI/RI這一計(jì)算式對(duì)于整個(gè)層次的一致性進(jìn)行檢驗(yàn)。根據(jù)本研究的判斷矩陣可以得出層次總排序（見表3）及層次總排序的CR=0.027<0.1.所以層次總排序具有滿意一致性。

從表3可以看出，各指標(biāo)在總排序中所占的份額比重，例如C12代表的是期末考核，具體指“期末理論、實(shí)踐成績(jī)”，這是權(quán)重值（0.4）最大的一個(gè)指標(biāo)。傳統(tǒng)的考核方式中期末成績(jī)占比較大，在基于MOOC的翻轉(zhuǎn)課堂教學(xué)模式下比重相對(duì)弱化，而加入了在各個(gè)學(xué)習(xí)環(huán)節(jié)設(shè)置學(xué)習(xí)評(píng)價(jià)指標(biāo)，充分體現(xiàn)了多元化的過程性學(xué)習(xí)評(píng)價(jià)特點(diǎn)。

4、總結(jié)

“MOOC+翻轉(zhuǎn)課堂”混合式教學(xué)涉及MOOC平臺(tái)、課堂技術(shù)支持、教師、學(xué)生等諸多因素，本文基于MOOC和翻轉(zhuǎn)課堂評(píng)價(jià)體系，構(gòu)建了“MOOC+翻轉(zhuǎn)課堂”學(xué)習(xí)評(píng)價(jià)指標(biāo)體系，由3個(gè)一級(jí)指標(biāo)和13個(gè)二級(jí)指標(biāo)組成。所建指標(biāo)體系較好地覆蓋了各個(gè)重要學(xué)習(xí)環(huán)節(jié)，能夠較好地評(píng)測(cè)該教學(xué)模式下的學(xué)習(xí)效果。運(yùn)用層次分析法對(duì)各個(gè)指標(biāo)進(jìn)行了權(quán)重的計(jì)算，對(duì)大量定性指標(biāo)作量化處理，以期建立更加科學(xué)完善的學(xué)習(xí)評(píng)價(jià)指標(biāo)體系。筆者在電子商務(wù)專業(yè)課程教學(xué)的實(shí)踐過程中發(fā)現(xiàn)，MOOC平臺(tái)在知識(shí)傳承類、認(rèn)知類課程的學(xué)習(xí)中效果良好，而實(shí)驗(yàn)類課程、實(shí)訓(xùn)、實(shí)踐類的課程，線下學(xué)習(xí)過程更重要，因此制定學(xué)習(xí)評(píng)價(jià)指標(biāo)體系還需要重視課程內(nèi)容、目標(biāo)等具體因素，適當(dāng)調(diào)整線上線下指標(biāo)的比重。

參考文獻(xiàn)：

[l]劉志軍，馮永華.“顛覆論”下的MOOC反思——兼論基于MOOC的課堂“翻轉(zhuǎn)”[J].課程.教材.教法，2015，35（09）：16-23.

[2]鄭志高，張立國(guó)，張春榮.xMOOC的學(xué)習(xí)評(píng)價(jià)方法調(diào)查研究[J].中國(guó)電化教育，2014（11）：44-49.

[3] Acosta E S， Otero J J E.Automated assessment of freetext questions for MOOC using regular expressions[J].Information Resources Management Journal （IRMJ），2014.27（2）：1-13.

[4]Chiou Y， Shih T K.Auto grouping and peer gradingsystem in massive open online course （MOOC） [J].International Journal of Distance Education Technologies（IJDET）， 2015，13（3）： 25-43.

[5]蘇仰娜.基于多元智能理論與Moodle平臺(tái)活動(dòng)記錄的翻轉(zhuǎn)課堂學(xué)習(xí)評(píng)價(jià)研究——以“多媒體課件設(shè)計(jì)與開發(fā)”課程實(shí)踐為例[J].電化教育研究，2016，37（4）：77-83.

[6]姜玉梅.在MOOC和“翻轉(zhuǎn)課堂”下高校思政課教學(xué)評(píng)價(jià)體系的構(gòu)建[J].黑龍江教育（高教研究與評(píng)估），2018（04）：49-52.