基于用戶(hù)體驗(yàn)的慕課公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)研究*

曾 宇 黎忠文

(成都大學(xué) 信息科學(xué)與工程學(xué)院， 四川 成都 610106)

一、背景

“互聯(lián)網(wǎng)+"促進(jìn)了MOOC(Massive Open Online Course，大規(guī)模在線(xiàn)開(kāi)放課程)的迅猛發(fā)展，優(yōu)質(zhì)教育資源的共享對(duì)推進(jìn)教育公平、提高教學(xué)質(zhì)量起到了重要的作用。2012年以來(lái)，MOOC在國(guó)外迅速發(fā)展，快速成為一種新興的網(wǎng)絡(luò)教育形式。近年來(lái)MOOC在中國(guó)也取得了長(zhǎng)足發(fā)展，網(wǎng)易、果殼網(wǎng)、中國(guó)大學(xué)MOOC、學(xué)堂在線(xiàn)等平臺(tái)陸續(xù)出現(xiàn)并吸引了大批的網(wǎng)絡(luò)學(xué)習(xí)者，產(chǎn)生了一定的社會(huì)效益。教育部、四川省政府和成都市政府在2009年4月簽訂了《共建統(tǒng)籌城鄉(xiāng)教育綜合改革試驗(yàn)區(qū)合作協(xié)議》，成都市成為了國(guó)家首個(gè)部、省、市共建的統(tǒng)籌城鄉(xiāng)教育綜合改革試驗(yàn)區(qū)，開(kāi)展MOOC基礎(chǔ)教育公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)的研究將有助于成都試驗(yàn)區(qū)的國(guó)際化并搶占理論研究高地，進(jìn)一步落實(shí)“互聯(lián)網(wǎng)+"在城鄉(xiāng)教育均衡發(fā)展中的推動(dòng)和促進(jìn)作用。在學(xué)校教育中，成都市區(qū)的學(xué)校已經(jīng)全部實(shí)現(xiàn)了信息化教學(xué)手段的覆蓋，而成都的鄉(xiāng)鎮(zhèn)地區(qū)也已基本覆蓋了電子白板、平板電腦等教學(xué)手段。此外，智能手機(jī)、平板電腦等移動(dòng)式計(jì)算設(shè)備在公眾中已經(jīng)基本普及，學(xué)校教育逐步開(kāi)始延伸到MOOC平臺(tái)上，一大批優(yōu)質(zhì)課程在MOOC平臺(tái)上的出現(xiàn)為成都市MOOC基礎(chǔ)教育公共服務(wù)平臺(tái)的搭建創(chuàng)造了良好的條件。

在MOOC平臺(tái)評(píng)價(jià)指標(biāo)方面，Hollands F.M.和Tirthali D.在針對(duì)美國(guó)66所院校的MOOC研究中提出了6點(diǎn)共同目標(biāo)： 延伸院校教育覆蓋面、MOOC平臺(tái)品牌效應(yīng)、經(jīng)濟(jì)效益、MOOC教學(xué)效果、創(chuàng)新教育以及引導(dǎo)教學(xué)研究[1]。該項(xiàng)研究發(fā)現(xiàn)由于種種原因，很少有MOOC達(dá)成了這6個(gè)目標(biāo)。Chapman S.A.和Goodman S.等在研究中提出將MOOC的覆蓋面、參與度、教學(xué)質(zhì)量和成績(jī)作為評(píng)價(jià)指標(biāo)的要求[2]。Lorenzo Vigentini和Catherine Zhao的研究提出了MOOC平臺(tái)學(xué)生體驗(yàn)概念模型的應(yīng)用[3]。劉和海等基于Edutools評(píng)價(jià)體系提出了MOOC平臺(tái)的現(xiàn)狀與優(yōu)化策略[4]。劉麗波提出了基于MOOC的學(xué)習(xí)行為評(píng)價(jià)量規(guī)[5]。在MOOC對(duì)基礎(chǔ)教育的影響的研究中，首都師范大學(xué)魏建宏、康昆等提出了MOOC理念對(duì)中小學(xué)“翻轉(zhuǎn)課堂”的啟示，認(rèn)為中小學(xué)教育的“翻轉(zhuǎn)課堂"可以借助MOOC實(shí)現(xiàn)從“要我學(xué)"到“我要學(xué)"的轉(zhuǎn)變[6]。劉路等認(rèn)為構(gòu)建MOOC評(píng)價(jià)指標(biāo)體系需要評(píng)價(jià)整個(gè)教育過(guò)程中“輸入"、“過(guò)程"、“輸出"三個(gè)要素，并需綜合MOOC教育的特點(diǎn)與對(duì)評(píng)估的特定要求，全方位地對(duì)MOOC教育質(zhì)量進(jìn)行評(píng)價(jià)[7]。

在這些評(píng)價(jià)指標(biāo)中，國(guó)內(nèi)外針對(duì)MOOC平臺(tái)的評(píng)價(jià)指標(biāo)選擇有較大的差異，特別是針對(duì)MOOC公共服務(wù)平臺(tái)基于用戶(hù)體驗(yàn)的評(píng)價(jià)指標(biāo)研究尚存空白，基本沒(méi)有搜索到相關(guān)的論文和研究。用戶(hù)體驗(yàn)(User Experience)是指在與產(chǎn)品的交互過(guò)程中用戶(hù)對(duì)產(chǎn)品的完整心理感受，除了對(duì)產(chǎn)品進(jìn)行功能性的評(píng)估外，用戶(hù)體驗(yàn)更要求對(duì)用戶(hù)使用產(chǎn)品的過(guò)程和體驗(yàn)進(jìn)行全面評(píng)價(jià)，這為MOOC公共服務(wù)平臺(tái)的評(píng)價(jià)指標(biāo)研究提供了新的亮點(diǎn)。

二、MOOC公共服務(wù)平臺(tái)需求分析

(一)用戶(hù)調(diào)研

本調(diào)研分為預(yù)調(diào)查與用戶(hù)初步篩選、正式問(wèn)卷調(diào)查、數(shù)據(jù)搜集三個(gè)步驟，采用網(wǎng)絡(luò)問(wèn)卷的形式進(jìn)行。

調(diào)查問(wèn)卷中將調(diào)查者分為了兩類(lèi)：MOOC平臺(tái)用戶(hù)和非MOOC平臺(tái)用戶(hù)。研究在網(wǎng)絡(luò)系統(tǒng)中隨機(jī)進(jìn)行，經(jīng)過(guò)15天的調(diào)查，收回有效問(wèn)卷5107份，用戶(hù)的分布情況如圖1所示。

圖1 MOOC平臺(tái)用戶(hù)情況

從MOOC平臺(tái)用戶(hù)分布來(lái)看，目前使用MOOC平臺(tái)的公眾用戶(hù)數(shù)量在被調(diào)查者中占有不到10%的比例。MOOC平臺(tái)在公眾中的普及率比較低，還有較大的發(fā)展?jié)摿Α?/p>

在使用MOOC平臺(tái)的479名用戶(hù)中，職業(yè)分布情況如表1所示。

表1 MOOC平臺(tái)用戶(hù)職業(yè)分布情況

MOOC平臺(tái)用戶(hù)在年齡分布上，24周歲以下年齡組占比最高，為49.3%；60歲以上年齡組僅4人，占比0.8%。在性別分布上，男性和女性樣本占比分別為45.7%和54.3%。

(二)用戶(hù)需求模型

作為基礎(chǔ)教育公共服務(wù)，應(yīng)該充分滿(mǎn)足公眾日益增長(zhǎng)的教育公共服務(wù)需求，特別是在大數(shù)據(jù)、云技術(shù)和移動(dòng)互聯(lián)網(wǎng)等新技術(shù)的發(fā)展與支持下，教育服務(wù)中的教育接受者需求的服務(wù)類(lèi)型也在與時(shí)俱進(jìn)。就參與學(xué)習(xí)者而言，這些服務(wù)的提供又直接與參與學(xué)習(xí)前用戶(hù)的心理動(dòng)機(jī)、學(xué)習(xí)過(guò)程中用戶(hù)的滿(mǎn)意度和學(xué)習(xí)后對(duì)未來(lái)產(chǎn)生的效益密切相關(guān)。圖2為基于用戶(hù)的MOOC公共服務(wù)平臺(tái)需求關(guān)系層次模型。

對(duì)于用戶(hù)而言，評(píng)價(jià)MOOC平臺(tái)的需求分為使用前的心理需求，使用過(guò)程中的滿(mǎn)意度需求以及使用后對(duì)未來(lái)發(fā)展的影響。MOOC公共服務(wù)平臺(tái)提供者也應(yīng)在這三個(gè)階段對(duì)用戶(hù)產(chǎn)生的影響進(jìn)行定性與定量的評(píng)估和分析，使之更符合用戶(hù)體驗(yàn)的需求。

圖2基于用戶(hù)的MOOC公共服務(wù)平臺(tái)需求關(guān)系層次模型

三、基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系

結(jié)合成都市建設(shè)統(tǒng)籌城鄉(xiāng)教育綜合改革試驗(yàn)區(qū)的要求，從基礎(chǔ)教育公共服務(wù)平臺(tái)的搭建出發(fā)，根據(jù)用戶(hù)體驗(yàn)設(shè)計(jì)理論和MOOC公共服務(wù)平臺(tái)的自身特點(diǎn)，在基于用戶(hù)需求關(guān)系層次模型的基礎(chǔ)上，研究構(gòu)建出基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)的層次模型，在課程資源質(zhì)量、教師教學(xué)過(guò)程、學(xué)生學(xué)習(xí)過(guò)程及結(jié)果評(píng)價(jià)、技術(shù)支撐、基礎(chǔ)設(shè)施建設(shè)等功能性評(píng)價(jià)指標(biāo)的基礎(chǔ)上，引入了基于用戶(hù)體驗(yàn)的評(píng)價(jià)體系，從用戶(hù)角度對(duì)所有影響用戶(hù)感受的因素進(jìn)行全面的定性和定量研究。

(一)構(gòu)建MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系指導(dǎo)思想

為了適應(yīng)城鄉(xiāng)教育的要求，制定MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)應(yīng)從信息化促進(jìn)城鄉(xiāng)教育均衡發(fā)展和教育質(zhì)量提升的視角出發(fā)，首先以“城鄉(xiāng)教育均衡發(fā)展"為指導(dǎo)思想，切實(shí)貫徹成都市城鄉(xiāng)教育一體化發(fā)展的政策導(dǎo)向。第二應(yīng)該堅(jiān)持以政府為主導(dǎo)，按照“全域成都"的理念，圍繞城鄉(xiāng)統(tǒng)籌、產(chǎn)教融合，深化、完善、創(chuàng)新統(tǒng)籌城鄉(xiāng)教育綜合改革試驗(yàn)區(qū)的宗旨，促進(jìn)區(qū)域教育均衡化、現(xiàn)代化、國(guó)際化，有助于提高“成都試驗(yàn)區(qū)"和“成都統(tǒng)籌城鄉(xiāng)教育發(fā)展研究中心"的國(guó)際影響力。最后，要加強(qiáng)相關(guān)標(biāo)準(zhǔn)的制定和推廣，在研究基礎(chǔ)上搭建符合城鄉(xiāng)教育的公共服務(wù)平臺(tái)，并使已有的相關(guān)MOOC平臺(tái)逐步落實(shí)評(píng)價(jià)指標(biāo)的要求。

(二)MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系的構(gòu)建

基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系層次結(jié)構(gòu)如表2所示。

表2基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系層次結(jié)構(gòu)

(續(xù)表2)

四、評(píng)價(jià)體系的驗(yàn)證及權(quán)重計(jì)算

(一)問(wèn)卷調(diào)查

在用戶(hù)調(diào)研的基礎(chǔ)上，研究對(duì)479名MOOC平臺(tái)用戶(hù)進(jìn)行了評(píng)價(jià)體系問(wèn)卷調(diào)查，其中收回有效問(wèn)卷471份。問(wèn)卷對(duì)評(píng)價(jià)因子采用李克特量表的五點(diǎn)計(jì)量法，將各個(gè)指標(biāo)的評(píng)價(jià)表現(xiàn)形式作為問(wèn)題項(xiàng)，如表3所示。

表3 基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)問(wèn)題項(xiàng)

(二)問(wèn)卷的信度分析

問(wèn)卷采用克朗巴哈系數(shù)(Cronbach's Alpha)法，通過(guò)SPSS對(duì)所有數(shù)據(jù)的信度進(jìn)行了分析，其可靠性統(tǒng)計(jì)量如表4所示。

表4 可靠性統(tǒng)計(jì)量

(三)權(quán)重分析

根據(jù)定量統(tǒng)計(jì)方法，研究在471名MOOC平臺(tái)用戶(hù)進(jìn)行的問(wèn)卷調(diào)查的基礎(chǔ)上，對(duì)調(diào)查結(jié)果進(jìn)行了統(tǒng)計(jì)，將“非常重要"選項(xiàng)賦值“5”，“重要"賦值“4”，“一般"賦值“3”，“不重要"和“完全不重要"分別賦值“2”和“1”。將調(diào)查結(jié)果結(jié)合權(quán)重計(jì)算出每個(gè)指標(biāo)的權(quán)重，如表5所示。

表5 各指標(biāo)權(quán)重

(四)綜合分析

由權(quán)重的計(jì)算結(jié)果可以得到基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)評(píng)價(jià)指標(biāo)排序結(jié)果。在用戶(hù)心理需求層中，政府戰(zhàn)略和學(xué)習(xí)指南等指標(biāo)所占權(quán)重較大；過(guò)程滿(mǎn)意度層中，教學(xué)互動(dòng)、學(xué)習(xí)規(guī)劃和課程創(chuàng)新等所占權(quán)重較大；而用戶(hù)后期需求層中，用戶(hù)對(duì)達(dá)成目標(biāo)和大數(shù)據(jù)統(tǒng)計(jì)等指標(biāo)比較看重，所占權(quán)重較大。

提出基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)體系指標(biāo)，能夠較好地滿(mǎn)足基層群眾對(duì)互聯(lián)網(wǎng)學(xué)習(xí)的需求。同時(shí)我們也發(fā)現(xiàn)，目前成都市還沒(méi)有統(tǒng)一的互聯(lián)網(wǎng)學(xué)習(xí)平臺(tái)及MOOC公共服務(wù)平臺(tái)標(biāo)準(zhǔn)，這也反映出政府在互聯(lián)網(wǎng)建設(shè)中階段性的特點(diǎn)，即首先著力于硬件設(shè)備建設(shè)，再進(jìn)行軟件、平臺(tái)和體系的推廣。雖然我國(guó)近年來(lái)在MOOC平臺(tái)發(fā)展中取得了長(zhǎng)足的進(jìn)步，但與西方發(fā)達(dá)國(guó)家相比還有待完善，特別是平臺(tái)的評(píng)價(jià)指標(biāo)體系和政府戰(zhàn)略的契合非常重要。建設(shè)好城鄉(xiāng)一體化發(fā)展的MOOC教育公共服務(wù)平臺(tái)，有利于城鄉(xiāng)教育的均衡發(fā)展。隨著我國(guó)大數(shù)據(jù)、移動(dòng)互聯(lián)網(wǎng)、云計(jì)算等相關(guān)領(lǐng)域的發(fā)展，MOOC公共服務(wù)平臺(tái)一定能在指標(biāo)體系上得到更好的完善，極大提升公眾教育面和教育程度。

五、結(jié)論

MOOC是一項(xiàng)受到公眾廣泛關(guān)注的技術(shù)，MOOC在公共服務(wù)平臺(tái)領(lǐng)域的應(yīng)用契合了城鄉(xiāng)一體化發(fā)展的政府策略。雖然我國(guó)對(duì)MOOC的研究還不及發(fā)達(dá)國(guó)家，研究基礎(chǔ)還比較薄弱，但是隨著政府戰(zhàn)略的提出，建立一套成熟的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系已經(jīng)成為一項(xiàng)極具挑戰(zhàn)的課題。

本文在比較客觀(guān)和全面地分析了MOOC公共服務(wù)平臺(tái)內(nèi)涵的基礎(chǔ)上，利用用戶(hù)體驗(yàn)設(shè)計(jì)原理以成都市的實(shí)際情況構(gòu)建了基于用戶(hù)體驗(yàn)的MOOC公共服務(wù)平臺(tái)評(píng)價(jià)指標(biāo)體系，研究在用戶(hù)體驗(yàn)設(shè)計(jì)的前期、中期和后期選取了39個(gè)操作性較強(qiáng)的評(píng)價(jià)指標(biāo)。結(jié)果表明，平臺(tái)的互動(dòng)性指標(biāo)和對(duì)用戶(hù)未來(lái)影響等指標(biāo)占據(jù)了比較重要的地位，公共服務(wù)平臺(tái)的創(chuàng)新性指標(biāo)有待完善。

參考文獻(xiàn)：

[1]Hollands F.M.,Tirthali D.MOOCs:Expectations and Reality[J].Online Submission，2014:3.

[2]Chapman S.A.,Goodman S.,Jawitz J.et al.A Strategy for Monitoring and Evaluating Massive Open Online Courses[J].Evaluation & Program Planning,2016,57:55-63.

[3]Vigentini L.,Zhao C.Evaluating the ‘Student' Experience in MOOCs[J].ACM Conference，2016:161-164.

[4]劉和海,李起斌,張舒予.基于Edutools評(píng)價(jià)體系的中文MOOC平臺(tái)現(xiàn)狀與優(yōu)化策略[J].電化教育研究,2016(1):84-90.

[5]魏建宏,康昆.MOOC理念對(duì)中小學(xué)翻轉(zhuǎn)課堂的一些啟示[J].當(dāng)代教育實(shí)踐與教學(xué)研究:電子版,2015(5):9-10.

[6]胡以濤,查貴庭,唐惠燕,等.國(guó)內(nèi)外MOOC的移動(dòng)終端評(píng)價(jià)研究[J].現(xiàn)代教育技術(shù),2015(10):73-79.

[7]劉路,劉志民,羅英姿.歐洲MOOC教育質(zhì)量評(píng)價(jià)方法及啟示[J].開(kāi)放教育研究,2015(5):57-65.

[8]李雪.慕課及其在我國(guó)高校中的應(yīng)用研究[J].教育與教學(xué)研究，2016(9)：95-99.

[9]曾一帆.基于教育生態(tài)視域的高校數(shù)字化教學(xué)模式研究[J].教育與教學(xué)研究，2016(7)：80-85.