混合學習五維評價模型的構建與應用—以“現(xiàn)代教育技術”公共課程為例

唐文秀 石晉陽 陳 剛

?

混合學習五維評價模型的構建與應用—以“現(xiàn)代教育技術”公共課程為例

唐文秀 石晉陽 陳 剛

（揚州大學新聞與傳媒學院，江蘇揚州225002）

在信息時代，混合學習是教學改革的重要方式之一。文獻調(diào)研表明，混合學習的評價存在諸多問題，主要表現(xiàn)為評價方式單一、量規(guī)不科學、過程性評價缺位、情感體驗評價缺乏等。文章在“現(xiàn)代教育技術”公共課程的混合學習實踐中，從參與度、交互性、適應性、滿意度和效果度五個方面構建了混合學習的五維評價模型。在此基礎上，文章分析了五維學習評價結果并反思了其不足，最后針對該模型反映的問題提出了解決方案。

混合學習；教學評價；現(xiàn)代教育技術；五維評價模型

引言

近年來，混合學習在學校教育中受到了廣泛關注，逐漸成為研究的重點。它不僅混合了學習環(huán)境、學習方式和學習空間，還混合了學習進程[1]。這種將傳統(tǒng)學習方式與計算機輔助教學相結合的新型學習方式，克服了兩種學習方式的局限[2]——就學習評價而言，傳統(tǒng)課堂以總結性評價為主，過程性評價往往因數(shù)據(jù)采集困難而遭到忽視；計算機輔助教學則可以通過信息技術實時記錄學習者的學習過程，并對學習中遇到的問題進行及時反饋，從而捕捉學習過程中學習者的認知成就、學習努力、進步、動機和態(tài)度等。因此，混合學習評價不僅應該基于紙筆測驗，還應該在全視角學習觀的視野下對學習過程、學習效果和學習態(tài)度等進行全面測量。本研究從當前混合學習評價的現(xiàn)狀出發(fā)，結合師范生公共課程“現(xiàn)代教育技術”的教學改革需求，試圖從理論和實踐的雙重角度展開行動研究，為混合學習構建一個合理有效的評價模型。

本研究采用文獻研究法，調(diào)研了目前混合學習評價的現(xiàn)狀，發(fā)現(xiàn)其問題主要在于：①評價方式單一。評價應包含對教學資源、效果和實施的評價，若對各方面的評價僅通過問卷調(diào)查來完成，則形式過于單一[3]。②評價量規(guī)設計不科學。盡管大多數(shù)學校開發(fā)了相應的網(wǎng)絡課程，采用與傳統(tǒng)教學相結合的方式進行課程設計與實施，且實施效果較好[4]，但未制定合理的評價量規(guī)來科學地評價學生。③注重結果評價，忽略過程評價。大多數(shù)混合學習只評價學生的學習結果，忽略了學習過程[5]；對學習結果的評價僅表現(xiàn)為教師的主觀評價，也略顯片面。④缺乏對情感體驗的評價。部分混合學習課程逐漸關注對學習過程的評價[6]，卻忽視對學生情感體驗的評價。

基于此，本研究選取“現(xiàn)代教育技術”公共課程作為樣本，試圖將混合學習模式引入教學實踐，嘗試構建一個合理有效的全視角學習評價模型，并根據(jù)網(wǎng)絡教學平臺采集的學生行為和問卷調(diào)查數(shù)據(jù)進行了數(shù)據(jù)挖掘和學習分析[7]，以實現(xiàn)對學生學習態(tài)度、學習過程和學習效果的全視角評價，從而為不斷改善混合學習的教學設計提供依據(jù)。

一 面向混合學習的課程設計

本研究選擇“現(xiàn)代教育技術”公共課程作為行動研究樣本。該課程每周一次，每次4課時，采用講授結合；選課人數(shù)較多，采用大班授課制，平均每班91人；采用“清華教育在線網(wǎng)絡教學綜合平臺”（THEOL），可實現(xiàn)課程的模塊化設計，為混合學習提供有力的技術支持。根據(jù)上述課程現(xiàn)狀，本研究結合Bersin[8]混合學習過程四環(huán)節(jié)理論，提出了混合學習設計流程（如圖1所示），包括研究對象分析、混合學習設計、混合教學實踐和修改完善等四個環(huán)節(jié)。

圖1 混合學習設計流程圖

圖2 混合學習的五維評價模型

二 面向混合學習評價的模型構建

1混合學習評價模型構建

教學評價指以教學目標為依據(jù)，制定科學的標準，運用一切有效的技術手段，對教學活動及其結果進行測定、衡量，并給以價值判斷[9]。本研究將過程性評價和總結性評價相結合，從學習過程、學習效果和學習態(tài)度三方面構建了面向混合學習的五維評價模型，如圖2所示。其中，學習過程評價主要調(diào)查學生網(wǎng)絡課程的參與度和交互性；學習結果評價由效果度（指對各個實驗專題成果評分的總和）實現(xiàn)；學習態(tài)度評價則通過適應性與滿意度的問卷調(diào)查來計算。

2五維評價模型詳解

根據(jù)混合學習的特點，五維評價模型涉及的五個學習維度如下：

（1）參與度

在“現(xiàn)代教育技術”公共課程中，從任務設計到課程實施均要求學生全程參與該課程的學習。此處本研究僅計算學生的網(wǎng)絡參與度，主要包括登錄次數(shù)（C1）、進入課程的次數(shù)（C2）、提交課程作業(yè)的次數(shù)（C3）、參與課程問卷的次數(shù)（C4）和在線時長（C5）。

由于課堂反饋問卷采用李克特五點量表，為了便于計算，本研究采用5分制計算評價模型的各個維度。假設參與度C=C1+C2+C3+C4+C5，每項各占1分以簡化計算；假設上述各項實際值為Ci（i=1,2,3,4,5），理論值為C'i，n為參數(shù)的個數(shù)，總?cè)藬?shù)為S，那么參與度的計算見公式（1）：

（n=5）公式（1）

Ci/S是某參數(shù)的實際平均值，Ci/(S×C' i)是實際值/理論值，即理論值的完成度。若Ci/(C' i×S)≥1，則該項值為1，達到理論目標；若Ci/(C' i×S)<1，則未完成理論目標。

隨著THEOL平臺的迭代，采集的數(shù)據(jù)也會越來越多、越來越全面，那么n值也會隨之增加，而本研究的公式（1）同樣適用。

（2）交互性

由于課堂實時交互數(shù)據(jù)無法獲取，本研究僅計算網(wǎng)絡交互，主要包括閱讀教學材料的次數(shù)（D1）、課程討論區(qū)發(fā)表話題的次數(shù)（D2）、課程討論區(qū)回文的次數(shù)（D3）、課程討論區(qū)被回文的次數(shù)（D4）和閱讀課程通知的次數(shù)（D5）。

同樣假設交互性D=D1+D2+D3+D4+D5，每項各占1分；假設上述各項實際值為Di（i=1,2,3,4,5），理論值為D' i，n為參數(shù)的個數(shù)，總?cè)藬?shù)為S，那么交互性的計算見公式（2）：

（n=5）公式（2）

Di/S是某參數(shù)的實際平均值，Di/(S×D' i)是實際值/理論值，即理論值的完成度。若Di/(D' i×S)≥1，則該項值為1，達到理論目標；若Di/(D' i×S)<1，則未完成理論目標。

（3）適應性

根據(jù)適應性學習理論，適應性學習是通過自身原有的知識經(jīng)驗和適應性學習系統(tǒng)進行交互活動來獲取知識、獲得能力的過程[10]。學生已有的知識經(jīng)驗水平不同，對混合學習的適應性就會有所不同?；旌蠈W習的適應性主要考察學生對新的學習方式、任務難度、團隊合作等是否適應，主要通過階段性問卷采集數(shù)據(jù)。

（4）滿意度

在遠程培訓中對學員反應的評價通常以滿意度的形式出現(xiàn)，主要包括學員對培訓主題、網(wǎng)絡培訓課程、網(wǎng)絡輔導老師以及網(wǎng)絡培訓組織的整體反應等四個方面[11]。同樣，對學生反應的評價應包含對混合學習滿意度的評價，主要包括對網(wǎng)絡課程、在線支持項目、網(wǎng)絡課程的實施等方面的滿意度。本研究將從這些角度進行補充和修改，主要就混合學習過程中的各項內(nèi)容、實驗專題成果和網(wǎng)絡課程整體等三個方面來設計滿意度調(diào)查問卷。

（5）效果度

宋國平[12]認為，“對學習效果的評估要建立在加強實踐環(huán)節(jié)、注重形成性考核的基礎上進行。通過對學習者學習活動的評估及學習者學習能力、學習效果的綜合評定，可以真正掌握學習者的學習過程，從而做出反饋并提出建議?！北狙芯刻岢?，效果度評價學生混合學習的學習效果主要包括兩部分內(nèi)容：①對學生實驗專題成果的評價，采用教師評價和學生互評相結合的方式；②通過問卷調(diào)查學生專題技能的掌握程度。

綜上所述，本研究從參與度、交互性、效果度、適應性和滿意度等五個維度評價了學生在“現(xiàn)代教育技術”公共課程中的混合學習，期望通過評價結果改進混合教學設計，為下一步教學實踐提供依據(jù)。

三 混合學習評測數(shù)據(jù)的分析及討論

1 五維學習評價結果

（1）學生的參與度較高

根據(jù)假設，參與度=登陸次數(shù)+進入課程的次數(shù)+上交課程作業(yè)的次數(shù)+參與課程問卷+在線時長，經(jīng)計算C1/S=23.52，C2/S=5.19，C3/S=3.96，C4/S=5.03，C5/S=202.48；C'1=6，C' 2=6，C'3=4，C'4=6，C'5=114。根據(jù)參與度公式（1），C=(23.52/6)+(5.19/6)+(3.96/4)+(5.03/6)+(202.48/114)=4.695，即參與度為4.695，從五分制的角度看，說明學生的參與度較高。

（2）學生在網(wǎng)絡平臺的交互較差

根據(jù)假設，交互性=閱讀教學材料的次數(shù)+課程討論區(qū)發(fā)表話題的次數(shù)+課程討論區(qū)回文的次數(shù)+課程討論區(qū)被回文的次數(shù)+閱讀課程通知的次數(shù)，經(jīng)計算D1/S=209.62，D2/S=0.04，D3/S=3.68，D4/S=0.23，D5/S=3.81；D' 1=80，D' 2=1，D' 3=4，D' 4=1，D' 5=9。根據(jù)交互性公式（2），D=(209.62/80)+(0.04/1)+(3.68/4)+(0.23/1)+(3.81/9)=2.61，即交互性為2.61，從五分制的角度看，說明學生在網(wǎng)絡平臺的交互較差，這就提醒教師在設計網(wǎng)絡課程時要注重交互的設計。

（3）學生對混合學習適應性較好

本文采用“非常適應～非常不適應”五點量表來衡量學生對混合學習的適應性，依次順序?qū)?～1”（整數(shù)值）。問卷包含對學習方式、學習材料組織等6項內(nèi)容的適應性調(diào)查，如表1所示。根據(jù)調(diào)查結果，計算出學生對混合學習各項內(nèi)容的適應性為4.11，說明學生對混合學習的適應性較好，能迅速適應網(wǎng)絡課程的開展。

表1 “混合學習過程中各項內(nèi)容的適應性”調(diào)查

說明：課程面向Y大學文學院中文系2014級新生，根據(jù)上課時間將他們分為“周四班”和“周五班”。

（4）學生對混合學習滿意度較高

本文采用“非常滿意～非常不滿意”五點量表衡量學生對混合學習的滿意度，依次順序?qū)?～1”（整數(shù)值）。問卷包括對混合學習過程中各項內(nèi)容、實驗成果和網(wǎng)絡課程整體等三方面的滿意度調(diào)查，如表2、表3、表4所示。根據(jù)三個表格的調(diào)查結果，計算出滿意度為4.19，說明學生對混合學習的滿意度總體較高。

（5）學生的學習效果較好

效果度在各個實驗專題作品評分后確定。實驗課的總成績構成=實驗1（10%）+實驗2（10%）+實驗3（40%）+實驗4（10%）+實驗5（30%），其統(tǒng)計結果如表5所示。根據(jù)調(diào)查結果，計算出實驗課的總成績?yōu)?6.5、效果度為4.325，說明學生的學習效果較好。

表2 “混合學習過程中各項內(nèi)容的滿意度”調(diào)查

表3 “實驗專題成果的滿意度”調(diào)查

表4 “網(wǎng)絡課程及信息技術能力提升的滿意度”調(diào)查

表5 網(wǎng)絡課程各個實驗專題的平均成績及總成績

根據(jù)五維評價模型的學習評價結果（如圖5所示），學生的網(wǎng)絡課程參與度、滿意度和效果度較高；經(jīng)過一學期的學習，學生對混合學習的適應性較好，但在THEOL平臺的交互較差。同時，該結果反映出本次混合學習取得了明顯的成效，特別是在提升學生參與積極性、強化操作意識和鍛煉知識技能等方面成效顯著。

圖5 五維評價模型的學習評價結果

圖6 網(wǎng)絡課程的整體情況

2 五維學習評價反思

（1）交互設計明顯不足，課堂交互數(shù)據(jù)無法采集

根據(jù)五維評價模型的評測結果，學生在THEOL平臺的交互較差——這既反映了學生在網(wǎng)絡平臺上交互不足，又反映了混合教學實踐在交互設計上做得不夠好。需要指出的是，由于模型中的“交互性”僅指網(wǎng)絡教學平臺上發(fā)生的交互，而實際實時課堂的交互數(shù)據(jù)無法獲取，因此從教師的課堂觀察和問卷調(diào)查來看，實際網(wǎng)絡課堂的交互可能比模型測量的結果要好。

（2）學生僅在課堂參與課程，學習主動性有待提高

THEOL平臺采集的數(shù)據(jù)反映出大多數(shù)學生僅在課程當天參與網(wǎng)絡課程（如圖6所示），而課后很少主動參與。這一現(xiàn)象表明：網(wǎng)絡課程的吸引力不夠，同時學生的學習主動性亟待提高。

（3）學生作品整體質(zhì)量有待提高

部分學生在完成專題任務的過程中投入的時間、精力不夠，再加上實驗室設備帶寬有限，不能很好地滿足學生的個性化學習需求，致使作品的整體質(zhì)量不高。

（4）評價模型自身的不足

五維評價模型反映了學生在混合學習中的整體表現(xiàn)良好，然而本研究使用的算法尚不夠精細，故最終結果存在一定的誤差。

3 針對問題的解決方案

針對五維評價模型反映的問題，本研究試圖從以下幾方面予以解決：

（1）完善交互設計。根據(jù)評價結果和課堂實踐經(jīng)驗，進一步完善交互設計，提高學生在網(wǎng)絡平臺上的有效性交互。

（2）提高課程吸引力。了解學生需求，根據(jù)需求制作相關課程，并提供形式多樣的資源，以提高課程的吸引力。此外，還需拓展資源，并提供指導和幫助，以滿足不同層次學生的需求。

（3）加強實驗室設備建設。籌集經(jīng)費，購置儀器設備，改善設備管理機制，并在一定條件下允許學生免費使用設備，以強化學生的動手實踐能力。

（4）制定合理規(guī)范的算法，完善五維評價模型，更合理、更科學地評價混合學習。

四 結語

本研究從學習態(tài)度、學習過程和學習效果三方面構建了面向混合學習的五維評價模型，具有一定的創(chuàng)新性，進而以該模型為框架，采用混合學習模式指導“現(xiàn)代教育技術”公共課程的設計與實踐，并通過數(shù)據(jù)采集和問卷調(diào)查，分別從參與度、交互性、適應性、滿意度和效果度等五個維度對學生進行評價，不斷反饋和調(diào)整混合學習的設計，不僅提高了學生的學習效果，而且驗證了五維評價模型的有效性及其對學習過程積極的激勵效果。

本研究期望通過教學實踐，不斷完善混合學習五維評價模型，改進混合學習設計，提高混合學習效果；同時，以網(wǎng)絡教學平臺為支撐，將學習進度可視化呈現(xiàn)，參照五維評價模型，對數(shù)據(jù)進行量化，以“儀表盤”[13]的形式直接展示在網(wǎng)絡課程頁面，從而促進學生在學習上不斷取得進步。

參考文獻

[1]孫眾,尤佳鑫,溫雨熹,等.混合學習的深化與創(chuàng)新——第八屆混合學習國際會議暨教育技術國際研討會綜述[J].中國遠程教育,2015,(9):5-9.

[2]詹澤慧.混合學習:定義、策略、現(xiàn)狀與發(fā)展趨勢——與美國印第安納大學柯蒂斯·邦克教授的對話[J].中國電化教育,2009,(12):1-5.

[3]吳東醒.網(wǎng)絡環(huán)境中面向混合學習的教學模式研究[J].中國電化教育,2008,(6):72-75.

[4]姚?，?趙嵬.基于網(wǎng)絡課程平臺的混合學習模式的探索與實踐[J].高教論壇,2012,(11):85-88.

[5]姜強.《現(xiàn)代教育技術》網(wǎng)絡課程的設計與開發(fā)[J].現(xiàn)代遠距離技術,2005,(6):63-66.

[6]羅冬梅.混合學習模式下的教學過程設計與實施[J].現(xiàn)代教育技術,2010,(10):36-40.

[7]孫洪濤.學習分析視角下的遠程教學交互分析案例研究[J].中國電化教育,2012,(11):40-46.

[8]李克東,趙建華.混合學習的原理與應用模式[J].電化教育研究,2004,(7):1-6.

[9]何克抗,林君芬,張文蘭.教學系統(tǒng)設計[M].北京:高等教育出版社,2006:153-154.

[10]杜龍輝.以評價為中心的適應性網(wǎng)絡課程設計與開發(fā)[D].上海:華東師范大學,2008:10.

[11]武麗志,吳甜甜.教師遠程培訓效果評估指標體系構建——基于德爾菲法的研究[J].開放教育研究,2014,(5):91-100.

[12]宋國平,金桃,陳華予.建立標準化遠程教學評估模型初探[J].吉林廣播電視大學學報,2003,(2):16-21.

[13]新媒體聯(lián)盟(NMC),北京開放大學項目組.新媒體聯(lián)盟地平線報告(2015高等教育版)[J].北京廣播電視大學學報,2015,(2):1-18.

The Construction and Application of Five-dimensional Evaluation Model of Blended Learning——A Case Study on the Experimental Curriculum Modern Educational Technology

TANG Wen-xiu SHI Jin-yang CHEN Gang

In the information age, blended learning is one of the important ways of teaching reform. Literature review has shown that there were many problems existing in the evaluation of blended learning, including single evaluation method, unscientific gauge, the absence of formative evaluation and the lack of students’ emotional experience. In the practice of a public course which named “modern educational technology”, the five-dimensional evaluation model of blended learning from five aspects of participation, interaction, adaptability, satisfaction and effects was constructed. On this basis, the article analyzed the results of the model and rethink its shortcomings, and finally proposed solutions to the problems.

blended learning; teaching assessment; modern educational technology; five-dimensional evaluation model

G40-057

A

1009—8097（2016）08—0089—07

10.3969/j.issn.1009-8097.2016.08.013

本文為揚州大學2014年度教改項目“基于翻轉(zhuǎn)課堂的程序設計類課程項目化教學模式建構與實踐探索”（項目編號：YZUJX2014-14B）的階段性研究成果。

唐文秀，在讀碩士，研究方向為學習分析和博物館學習評價，郵箱為1197154596@qq.com。

2015年10月7日

編輯：小西