鄭志高,張立國(guó),張春榮
(1.陜西師范大學(xué) 教育學(xué)院,陜西 西安 710062;2.西安交通大學(xué)出版社有限責(zé)任公司,陜西 西安 710049)
xMOOC的學(xué)習(xí)評(píng)價(jià)方法調(diào)查研究 *
鄭志高1,張立國(guó)1,張春榮2
(1.陜西師范大學(xué) 教育學(xué)院,陜西 西安 710062;2.西安交通大學(xué)出版社有限責(zé)任公司,陜西 西安 710049)
該文通過(guò)對(duì)Coursera、edX和 Udacity三個(gè)平臺(tái)349門課程學(xué)習(xí)評(píng)價(jià)方法的調(diào)查、統(tǒng)計(jì)與分析,發(fā)現(xiàn)xMOOC在課程平臺(tái)評(píng)測(cè)系統(tǒng)的支持下,應(yīng)用傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方法,開(kāi)展針對(duì)知識(shí)層面學(xué)習(xí)結(jié)果的評(píng)價(jià)。由于應(yīng)用環(huán)境的改變和xMOOC特殊的評(píng)價(jià)需求,傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方法在xMOOC中的應(yīng)用過(guò)程中,評(píng)價(jià)過(guò)程和評(píng)價(jià)方式都產(chǎn)生了相應(yīng)的變化。目前,xMOOC的學(xué)習(xí)評(píng)價(jià)還存在著:(1)如何加強(qiáng)學(xué)習(xí)評(píng)價(jià)的公正性和權(quán)威性;(2)學(xué)習(xí)過(guò)程評(píng)價(jià)缺失;(3)如何加強(qiáng)課程平臺(tái)測(cè)評(píng)系統(tǒng)的功能及開(kāi)放性以滿足一些課程特殊的學(xué)習(xí)評(píng)價(jià)需求三個(gè)問(wèn)題需加以解決。xMOOC學(xué)習(xí)評(píng)價(jià)的成功實(shí)踐為我們應(yīng)用傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方法開(kāi)展網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)實(shí)踐提供了可借鑒的經(jīng)驗(yàn),其中存在的問(wèn)題也為網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)理論研究帶來(lái)了思考問(wèn)題。
xMOOC;學(xué)習(xí)評(píng)價(jià);調(diào)查
2012年出現(xiàn)并快速發(fā)展的xMOOC聚集了全球一流高校的教師開(kāi)展網(wǎng)絡(luò)教學(xué),課程中的學(xué)習(xí)評(píng)價(jià)方法凝聚著這些教育機(jī)構(gòu)及相關(guān)教師對(duì)網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)理論與實(shí)踐的理解,它們?yōu)槲覀兲峁┝丝裳芯康木W(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)實(shí)踐案例。對(duì)其中的學(xué)習(xí)評(píng)價(jià)方法進(jìn)行研究,對(duì)網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)的理論研究和實(shí)踐都具有重要意義。為此,本研究對(duì)xMOOC的學(xué)習(xí)評(píng)價(jià)方法開(kāi)展調(diào)查,期望對(duì)當(dāng)前網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)的理論研究與實(shí)踐有所啟迪。
1.研究對(duì)象
為能較全面了解xMOOC的學(xué)習(xí)評(píng)價(jià)方法,本研究選擇目前世界上提供主要大型開(kāi)放課程的Coursera、edX和 Udacity三個(gè)平臺(tái)中的課程作為研究對(duì)象。截至本研究開(kāi)始(2014年4月),Coursera平臺(tái)提供了110所高校的657門課程,分25類[1],edX平臺(tái)提供了39所高校的202門課程,分成28類[2],Udacity平臺(tái)提供了11個(gè)合作機(jī)構(gòu)的32門課程,共4類[3]。
2.研究方法
本研究采用調(diào)查法和訪談法。筆者以學(xué)習(xí)者身份參與三個(gè)平臺(tái)所有已開(kāi)放的課程,調(diào)查每門課程的學(xué)習(xí)評(píng)價(jià)方法并參加課程的學(xué)習(xí)評(píng)價(jià)過(guò)程,當(dāng)課程內(nèi)的學(xué)習(xí)評(píng)價(jià)方法不清晰時(shí),通過(guò)電子郵件或論壇對(duì)授課教師或輔導(dǎo)教師進(jìn)行訪談,獲取學(xué)習(xí)評(píng)價(jià)方法相關(guān)信息。受課程使用的語(yǔ)言、開(kāi)課時(shí)間等因素的影響,本研究無(wú)法對(duì)三個(gè)平臺(tái)的所有課程開(kāi)展調(diào)查,調(diào)查的課程數(shù)和訪談人數(shù)如表1所示(截止2014年4月)。
表1 三個(gè)平臺(tái)調(diào)查的課程數(shù)量和訪談人數(shù)
1.學(xué)習(xí)評(píng)價(jià)方式
三個(gè)平臺(tái)被調(diào)查的課程通過(guò)以下幾種方式對(duì)學(xué)習(xí)者的學(xué)習(xí)狀況進(jìn)行評(píng)價(jià)。
(1)嵌入式問(wèn)題(Embedded Questions)
在視頻課程播放過(guò)程中或在播放結(jié)束后呈現(xiàn)若干與視頻講解的內(nèi)容相關(guān)的問(wèn)題,要求學(xué)習(xí)者進(jìn)行作答,在答題過(guò)程中學(xué)習(xí)者可以查閱正確答案判斷回答是否正確,以此幫助學(xué)習(xí)者對(duì)當(dāng)前學(xué)習(xí)內(nèi)容的掌握情況進(jìn)行自我評(píng)估。
(2)家庭作業(yè)(Homework Problems)
學(xué)習(xí)者完成視頻課程的學(xué)習(xí)后,需完成獨(dú)立于視頻課程之外的練習(xí)題,以此檢查學(xué)習(xí)者對(duì)所學(xué)內(nèi)容的掌握情況。
(3)單元測(cè)試(Unit Quiz)
由教師根據(jù)教學(xué)需求,在約定的時(shí)間針對(duì)一個(gè)或若干個(gè)教學(xué)單元的內(nèi)容發(fā)布測(cè)試題,測(cè)試學(xué)習(xí)者對(duì)一個(gè)或幾個(gè)單元學(xué)習(xí)內(nèi)容的掌握情況。
(4)周測(cè)試(Weekly Assessment)
由教師根據(jù)教學(xué)需求,每周或每隔幾周發(fā)布測(cè)試題,對(duì)學(xué)習(xí)者的學(xué)習(xí)狀況進(jìn)行分階段評(píng)估。
(5)期中考試(Midterm Exam)
教師在課程中期發(fā)布測(cè)試題,對(duì)學(xué)習(xí)者的學(xué)習(xí)狀況進(jìn)行中期診斷。
(6)期末考試(Final Exam)
在課程內(nèi)容結(jié)束后發(fā)布,對(duì)學(xué)習(xí)者的學(xué)習(xí)狀況進(jìn)行總結(jié)性評(píng)價(jià)。
(7)論壇參與情況(Participating in Discussion)
通過(guò)統(tǒng)計(jì)學(xué)習(xí)者參與論壇討論的次數(shù)、發(fā)布或回答問(wèn)題的質(zhì)量等,對(duì)學(xué)習(xí)者的論壇參與度進(jìn)行評(píng)估。
(8)視頻課程瀏覽狀況(Video Completion)
根據(jù)學(xué)習(xí)者瀏覽視頻課程的狀況評(píng)估學(xué)習(xí)者的學(xué)習(xí)參與度。
以上各種學(xué)習(xí)評(píng)價(jià)方式除嵌入式問(wèn)題外都要求學(xué)習(xí)者在規(guī)定的時(shí)間內(nèi)遞交測(cè)試題答案,由課程平臺(tái)的自動(dòng)評(píng)分系統(tǒng)、授課教師或其他學(xué)習(xí)者評(píng)定成績(jī)。如果學(xué)習(xí)者對(duì)測(cè)試結(jié)果不滿意,可以在規(guī)定時(shí)間、規(guī)定次數(shù)內(nèi)重復(fù)參加測(cè)試。
2.各種評(píng)價(jià)方式在課程中的應(yīng)用情況
各種評(píng)價(jià)方式在被調(diào)查課程中的運(yùn)用次數(shù)如表2所示。
表2 各種評(píng)價(jià)方式在被調(diào)查課程中使用的次數(shù)
如表2所示,有87%的被調(diào)查課程應(yīng)用了嵌入式問(wèn)題,表現(xiàn)出授課教師希望學(xué)習(xí)者通過(guò)自我檢測(cè)了解自身對(duì)所學(xué)單元知識(shí)的掌握情況,強(qiáng)化對(duì)課程內(nèi)容的掌握,并在此基礎(chǔ)上進(jìn)行學(xué)習(xí)行為的自我調(diào)節(jié)。期末考試能對(duì)學(xué)生的學(xué)習(xí)進(jìn)行總結(jié)性評(píng)價(jià),有57.3%的課程使用了此種評(píng)價(jià)方式,表明有一半以上的教師注重課程整體學(xué)習(xí)狀況的評(píng)估。家庭作業(yè)、單元測(cè)試、周測(cè)試和期中考試都是對(duì)學(xué)習(xí)者學(xué)習(xí)狀況進(jìn)行階段性評(píng)估,調(diào)查顯示,除兩門課程外,其它所有被調(diào)查的課程至少使用了以上四種階段性評(píng)價(jià)方式中的一種,表明xMOOC授課教師注重對(duì)學(xué)習(xí)者學(xué)習(xí)狀況進(jìn)行分階段評(píng)估。論壇參與和視頻課程瀏覽狀況在一定程度上可以體現(xiàn)學(xué)習(xí)者參與學(xué)習(xí)的狀況,對(duì)其進(jìn)行跟蹤和記錄能了解學(xué)習(xí)者的學(xué)習(xí)過(guò)程,但這兩種評(píng)估方法并未在被調(diào)查的課程中得到廣泛使用,體現(xiàn)出大部分教師并不是特別關(guān)注學(xué)生如何開(kāi)展學(xué)習(xí),而更關(guān)注學(xué)習(xí)者通過(guò)學(xué)習(xí)獲取了哪些知識(shí),是否達(dá)到課程教學(xué)目標(biāo)。
3.課程使用的評(píng)價(jià)方式統(tǒng)計(jì)
課程應(yīng)用的評(píng)估方式的種類統(tǒng)計(jì)如表3所示。
表3 課程使用的評(píng)價(jià)方式
如表3所示,有20.3%的被調(diào)查課程只用了一種評(píng)價(jià)方式,其它所有課程均采用了兩種或兩種以上的評(píng)價(jià)方式。統(tǒng)計(jì)分析表明,在只應(yīng)用一種評(píng)價(jià)方式的71門課程中,有兩門課程只采用了期末考試,其它均采用具有階段性評(píng)價(jià)性質(zhì)的評(píng)價(jià)方式;在采用兩種或兩種以上評(píng)價(jià)方式的課程中,有198門課程采用階段性評(píng)價(jià)和期末考試相結(jié)合的方式,其它課程使用兩種或兩種以上的階段性評(píng)價(jià)方式開(kāi)展學(xué)習(xí)評(píng)價(jià)。
4.測(cè)試題類型及其評(píng)定方式
被調(diào)查的課程出現(xiàn)了不同類型測(cè)試題用于學(xué)習(xí)評(píng)價(jià),主要包括:
(1)單選題/多選題(Single Choice/Multiple Choice)。學(xué)習(xí)者在多個(gè)選項(xiàng)中根據(jù)課程內(nèi)容選擇正確答案。
(2)誤判斷(True-or-False)。學(xué)習(xí)者根據(jù)課程內(nèi)容判斷正誤。
(3)簡(jiǎn)答題(Short Answer)。學(xué)習(xí)者根據(jù)課程內(nèi)容簡(jiǎn)短地回答問(wèn)題。
(4)案例分析(Case Study)。運(yùn)用課程知識(shí)分析與課程內(nèi)容相關(guān)的案例,撰寫分析報(bào)告。
(5)項(xiàng)目設(shè)計(jì)(Project)。根據(jù)教師的要求,學(xué)習(xí)者運(yùn)用課程知識(shí)設(shè)計(jì)、實(shí)施項(xiàng)目。
(6)實(shí)驗(yàn)測(cè)試(Lab Quiz)。根據(jù)教師的要求,學(xué)習(xí)者設(shè)計(jì)與開(kāi)展實(shí)驗(yàn)項(xiàng)目。
(7)論文撰寫(Essay/Paper)。根據(jù)教師的要求,學(xué)習(xí)者撰寫與課程內(nèi)容相關(guān)的論文。
在學(xué)習(xí)評(píng)價(jià)實(shí)施過(guò)程中,授課教師根據(jù)課程教學(xué)內(nèi)容特點(diǎn)和教學(xué)要求,選擇不同類型的測(cè)試題組合開(kāi)展評(píng)價(jià)活動(dòng)。選擇題、正誤判斷題和簡(jiǎn)答題等客觀題出現(xiàn)在各類課程除論壇參與和視頻課程瀏覽狀況之外的所有評(píng)價(jià)方式中,案例分析、項(xiàng)目設(shè)計(jì)、實(shí)驗(yàn)測(cè)試和論文撰寫四種測(cè)試題更多地出現(xiàn)在家庭作業(yè)、周測(cè)試、單元測(cè)試、期中考試和期末考試等評(píng)價(jià)方式中。在課程類型上,案例分析常見(jiàn)于醫(yī)學(xué)、商業(yè)類課程中,項(xiàng)目設(shè)計(jì)、實(shí)驗(yàn)測(cè)試在計(jì)算機(jī)、電子工程和物理類等課程中有較多的應(yīng)用,而論文撰寫被廣泛應(yīng)用于人文類課程的學(xué)習(xí)評(píng)價(jià)。
測(cè)試題成績(jī)的判定通過(guò)以下三種方式完成:(1)由教師或助教判定;(2)由課程支持平臺(tái)的自動(dòng)評(píng)分系統(tǒng)(Auto-Grade)完成,此種評(píng)定方式主要用于選擇題、正誤判斷和簡(jiǎn)答題三種客觀題;(3)同伴互評(píng)(Peer Assessment),主要用于案例分析、項(xiàng)目設(shè)計(jì)、實(shí)驗(yàn)測(cè)試和論文撰寫四類主觀題的評(píng)定,互評(píng)成績(jī)通常由三部分構(gòu)成:學(xué)習(xí)者對(duì)自己測(cè)試結(jié)果的評(píng)價(jià)、學(xué)習(xí)者對(duì)他人測(cè)試結(jié)果的評(píng)價(jià)以及同伴對(duì)自己測(cè)試結(jié)果的評(píng)價(jià)。
5.學(xué)習(xí)評(píng)價(jià)最終結(jié)果和最終狀態(tài)
xMOOC學(xué)習(xí)評(píng)價(jià)最終結(jié)果由評(píng)價(jià)過(guò)程中使用的各種評(píng)價(jià)方式的最終得分綜合形成。嵌入式問(wèn)題評(píng)價(jià)得分通常不計(jì)入學(xué)習(xí)評(píng)價(jià)最終結(jié)果;在采用單種評(píng)價(jià)方式的課程中,評(píng)價(jià)方式如果是期末考試,期末考試成績(jī)即為課程學(xué)習(xí)評(píng)價(jià)的最終結(jié)果,如果是家庭作業(yè)、單元測(cè)試等階段性的評(píng)價(jià)方式,最終評(píng)價(jià)結(jié)果是各階段評(píng)價(jià)結(jié)果按一定方式折合而成;在采用多種評(píng)價(jià)方式的課程中,如果同時(shí)包含總結(jié)性評(píng)價(jià)的期末考試和階段性評(píng)價(jià),首先將各種階段性評(píng)價(jià)方式的各階段評(píng)價(jià)結(jié)果按一定方式折合形成平時(shí)成績(jī),再綜合期末考試成績(jī)形成學(xué)習(xí)評(píng)價(jià)最終結(jié)果;如果均為階段性評(píng)價(jià)方式,則先按不同評(píng)價(jià)方式將各階段的評(píng)價(jià)結(jié)果形成一個(gè)總成績(jī),然后將不同評(píng)價(jià)方式的總成績(jī)按一定方式形成課程學(xué)習(xí)評(píng)價(jià)最終結(jié)果;論壇參與情況和視頻課程瀏覽狀況通常作為單獨(dú)的一部分折合進(jìn)學(xué)習(xí)評(píng)價(jià)最終結(jié)果。
xMOOC的學(xué)習(xí)評(píng)價(jià)最終結(jié)果最后會(huì)形成課程學(xué)習(xí)評(píng)價(jià)最終狀態(tài),三個(gè)平臺(tái)的課程學(xué)習(xí)評(píng)價(jià)最終狀態(tài)包括:
課程未完成狀態(tài)。指學(xué)習(xí)者參與課程學(xué)習(xí),學(xué)習(xí)評(píng)價(jià)未能達(dá)到課程所規(guī)定的各種學(xué)習(xí)評(píng)價(jià)最終狀態(tài)要求的情況。
課程完成狀態(tài)(Statement of Accomplishment)。由Coursera提供的一種學(xué)習(xí)評(píng)價(jià)最終狀態(tài)。學(xué)習(xí)者完成規(guī)定課程內(nèi)容的學(xué)習(xí),學(xué)習(xí)評(píng)價(jià)最終結(jié)果達(dá)到了課程規(guī)定的考核要求。學(xué)習(xí)者可以獲得由課程平臺(tái)出具的包括授課教師、課程內(nèi)容描述等信息的證書。
帶認(rèn)證證書的完成狀態(tài)(Statement of Accomplishment with Verified Certificate)。三個(gè)平臺(tái)都提供這種完成狀態(tài)。學(xué)習(xí)者完成規(guī)定課程內(nèi)容的學(xué)習(xí),學(xué)習(xí)評(píng)價(jià)的最終結(jié)果達(dá)到了規(guī)定的要求后,授予由授課教師所在大學(xué)和課程平臺(tái)出具的課程合格證書。通常,此類狀態(tài)比課程完成狀態(tài)有更高、更多的要求,并非所有課程都有這種評(píng)價(jià)狀態(tài)。此類狀態(tài)通常需要驗(yàn)證個(gè)人身份標(biāo)識(shí),在Coursera平臺(tái)中,獲取此類課程完成狀態(tài)還需參加簽名跟蹤(Signature Track)。
帶榮譽(yù)代碼的完成狀態(tài)(Statement of Accomplishment with Honor Code)。這是由edX平臺(tái)提供的一種學(xué)習(xí)評(píng)價(jià)最終狀態(tài)。學(xué)習(xí)者完成課程內(nèi)容的學(xué)習(xí)后,學(xué)習(xí)評(píng)價(jià)最終結(jié)果達(dá)到相應(yīng)的要求后,便授予此狀態(tài),此類狀態(tài)不需要驗(yàn)證個(gè)人身份標(biāo)識(shí),類似于前面的課程完成狀態(tài)。
系列化課程帶證書的完成狀態(tài)(Statement of Accomplishment with XSeries Certificates)。這是edX平臺(tái)提供的一種學(xué)習(xí)評(píng)價(jià)最終狀態(tài)。edX與3所大學(xué)開(kāi)展系列化課程教學(xué),規(guī)定學(xué)習(xí)者完成系列化課程所有課程的學(xué)習(xí)并獲得相應(yīng)的認(rèn)證證書后就可獲得此類評(píng)價(jià)狀態(tài)。
1.xMOOC的學(xué)習(xí)評(píng)價(jià)主要是面向?qū)W習(xí)結(jié)果的評(píng)價(jià)
網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)是在網(wǎng)絡(luò)環(huán)境下依據(jù)一定的課程目標(biāo)對(duì)學(xué)習(xí)者的學(xué)習(xí)結(jié)果和過(guò)程進(jìn)行評(píng)價(jià),并對(duì)學(xué)習(xí)者的學(xué)習(xí)作價(jià)值判斷的過(guò)程,除了對(duì)學(xué)生者自身的學(xué)習(xí)情況進(jìn)行評(píng)價(jià)外,還要包括對(duì)網(wǎng)絡(luò)學(xué)習(xí)環(huán)境(包括學(xué)習(xí)支持平臺(tái))和學(xué)習(xí)資源的評(píng)價(jià)[4],在網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)定義描述的多項(xiàng)評(píng)價(jià)內(nèi)容中,xMOOC的學(xué)習(xí)評(píng)價(jià)是針對(duì)知識(shí)層面學(xué)習(xí)結(jié)果的評(píng)價(jià)。在評(píng)價(jià)最終目標(biāo)上,xMOOC學(xué)習(xí)評(píng)價(jià)的目的是考查學(xué)生是否達(dá)到課程所設(shè)定的考查目標(biāo),并對(duì)達(dá)到不同目標(biāo)層次的學(xué)習(xí)者授予不同的課程完成狀態(tài)。調(diào)查表明,課程設(shè)定的學(xué)習(xí)評(píng)價(jià)最終狀態(tài)的判斷標(biāo)準(zhǔn)是學(xué)習(xí)者對(duì)課程知識(shí)掌握程度的量化積分是否達(dá)到一定水平。在評(píng)價(jià)過(guò)程上,雖然除了兩門課程之外的其它所有課程均采用過(guò)程性評(píng)價(jià)或者過(guò)程性評(píng)價(jià)和總結(jié)性評(píng)價(jià)相結(jié)合的評(píng)價(jià)方式,但這種評(píng)價(jià)過(guò)程主要表現(xiàn)為對(duì)學(xué)習(xí)者的學(xué)習(xí)結(jié)果、掌握的知識(shí)進(jìn)行分階段評(píng)價(jià),為更客觀、準(zhǔn)確地確定學(xué)習(xí)者的最終評(píng)價(jià)結(jié)果奠定基礎(chǔ),并非是對(duì)學(xué)習(xí)者的學(xué)習(xí)過(guò)程進(jìn)行分析與評(píng)估。在評(píng)價(jià)方式上,雖然在xMOOC中出現(xiàn)了論壇參與和視頻課程瀏覽狀況等帶有過(guò)程性評(píng)價(jià)功能的評(píng)價(jià)方式,但這些評(píng)價(jià)方式只在不到18%的課程中得到應(yīng)用,課程中應(yīng)用得更多的是諸如單元測(cè)試、家庭作業(yè)、期末考試等評(píng)價(jià)方式,測(cè)試題也多為針對(duì)知識(shí)層面的考核。以上三點(diǎn)表明,xMOOC的學(xué)習(xí)評(píng)價(jià)主要是面向?qū)W習(xí)結(jié)果的評(píng)價(jià)。
xMOOC作為一種高度自主化的課程,學(xué)習(xí)者通過(guò)觀看視頻學(xué)習(xí)課程內(nèi)容,在論壇中與教師、其他學(xué)習(xí)者開(kāi)展學(xué)習(xí)交流,解決學(xué)習(xí)過(guò)程中碰到的疑難問(wèn)題,參加必要的學(xué)習(xí)考核,獲得課程學(xué)習(xí)評(píng)價(jià)最終狀態(tài)。這種相對(duì)簡(jiǎn)單、學(xué)習(xí)者對(duì)自身學(xué)習(xí)行為高度負(fù)責(zé)的學(xué)習(xí)過(guò)程以及以知識(shí)傳遞作為主要目標(biāo)的教學(xué)過(guò)程使得學(xué)習(xí)評(píng)價(jià)可以重點(diǎn)關(guān)注學(xué)習(xí)結(jié)果,淡化對(duì)學(xué)習(xí)過(guò)程的評(píng)估;另外,大部分課程在對(duì)學(xué)習(xí)結(jié)果進(jìn)行階段性評(píng)價(jià)時(shí),如果學(xué)習(xí)者未能得到理想的評(píng)價(jià)結(jié)果,可以選擇再次學(xué)習(xí)相關(guān)的課程內(nèi)容,在限定的范圍內(nèi)多次參加測(cè)試,這種針對(duì)學(xué)習(xí)結(jié)果的評(píng)價(jià)而形成的對(duì)學(xué)習(xí)者學(xué)習(xí)行為的調(diào)節(jié)進(jìn)一步弱化了對(duì)學(xué)習(xí)過(guò)程評(píng)價(jià)的需求,這使得xMOOC現(xiàn)階段學(xué)習(xí)評(píng)價(jià)對(duì)學(xué)習(xí)過(guò)程的分析、評(píng)估與反饋的需求顯得并不是特別突出。
2.xMOOC的學(xué)習(xí)評(píng)價(jià)采用傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)方法
調(diào)查表明,xMOOC使用的評(píng)價(jià)方式除論壇參與和視頻課程瀏覽狀況之外的其它評(píng)價(jià)方式均為目前傳統(tǒng)教學(xué)中常用而有效的評(píng)價(jià)方式,其中采用的“過(guò)程性評(píng)價(jià)、過(guò)程性評(píng)價(jià)+總結(jié)性評(píng)價(jià)、過(guò)程性評(píng)價(jià)+階段性總結(jié)評(píng)價(jià)+最終總結(jié)性評(píng)估評(píng)價(jià)”過(guò)程也都是目前傳統(tǒng)教學(xué)常見(jiàn)的評(píng)價(jià)過(guò)程。
學(xué)者王萍認(rèn)為三個(gè)平臺(tái)的課程的教學(xué)過(guò)程和理念接近于傳統(tǒng)教學(xué)過(guò)程和理念[5]。雖然教學(xué)環(huán)境產(chǎn)生了變化,從傳統(tǒng)課堂轉(zhuǎn)變到網(wǎng)絡(luò)環(huán)境,但xMOOC課程的教學(xué)結(jié)構(gòu)和教學(xué)流程并沒(méi)有發(fā)生根本性的變化,使得在傳統(tǒng)教學(xué)中廣泛使用的學(xué)習(xí)評(píng)價(jià)方法同樣適用于xMOOC的學(xué)習(xí)評(píng)價(jià)。在接受訪談的課程相關(guān)人員中的授課教師均承擔(dān)傳統(tǒng)課堂教學(xué),進(jìn)行網(wǎng)上教學(xué)時(shí),他們對(duì)課程的學(xué)習(xí)評(píng)價(jià)方法有自主決定權(quán),更趨向于采用熟悉的、在傳統(tǒng)教學(xué)中使用的、行之有效的學(xué)習(xí)評(píng)價(jià)方法。調(diào)查顯示,傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)方法得到課程平臺(tái)的有效支持,使得評(píng)價(jià)活動(dòng)能在網(wǎng)絡(luò)環(huán)境下順利開(kāi)展。以上原因促進(jìn)了傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)方法在xMOOC中的廣泛應(yīng)用。
3.傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方法在xMOOC中的應(yīng)用有所創(chuàng)新
由于教學(xué)環(huán)境的變化以及特殊的評(píng)價(jià)需求,傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方法在xMOOC的應(yīng)用產(chǎn)生了相應(yīng)的變化,表現(xiàn)在:(1)正誤判斷題等客觀題的評(píng)判由系統(tǒng)完成,學(xué)習(xí)評(píng)價(jià)結(jié)果反饋迅捷快速;(2)在案例分析、項(xiàng)目設(shè)計(jì)等主觀題的評(píng)定中引入了同伴互評(píng)機(jī)制(Peer Assessment),評(píng)價(jià)最終結(jié)果由學(xué)習(xí)者自我評(píng)價(jià)、學(xué)習(xí)者對(duì)同伴的評(píng)價(jià)以及同伴對(duì)學(xué)習(xí)者的評(píng)價(jià)的結(jié)果按照一定方式折合而成;(3)在家庭作業(yè)、單元測(cè)試等過(guò)程性評(píng)價(jià)中,每次測(cè)評(píng)都允許學(xué)習(xí)者在規(guī)定時(shí)間、限定的次數(shù)內(nèi)多次參加學(xué)習(xí)評(píng)價(jià),并取最好的測(cè)試成績(jī)計(jì)入課程最終成績(jī);(4)測(cè)試時(shí)間加長(zhǎng),每次測(cè)試都會(huì)延續(xù)一到兩周的時(shí)間。
與一次面向幾十、幾百人的傳統(tǒng)教學(xué)相比,xMOOC要同時(shí)面對(duì)幾千、幾萬(wàn)甚至幾十萬(wàn)學(xué)習(xí)者開(kāi)展教學(xué),課程教師無(wú)法每次對(duì)每個(gè)學(xué)習(xí)者的學(xué)習(xí)評(píng)價(jià)結(jié)果進(jìn)行評(píng)定。信息技術(shù)在課程以及課程支持平臺(tái)中的廣泛應(yīng)用,實(shí)現(xiàn)了對(duì)選擇題、正誤判斷題等客觀題測(cè)試結(jié)果的評(píng)定自動(dòng)化,這種由機(jī)器自動(dòng)評(píng)分(Auto-Grade)的交互式練習(xí)支持以及對(duì)學(xué)習(xí)者的即時(shí)反饋(Instant Feedback),能夠讓教師擺脫大量重復(fù)的批改工作,提高了測(cè)評(píng)效率[6]。同伴互評(píng)機(jī)制的應(yīng)用一方面可以減少教師對(duì)學(xué)習(xí)評(píng)價(jià)結(jié)果的評(píng)定工作,另一方面也能促進(jìn)學(xué)習(xí)者對(duì)課程知識(shí)掌握,加強(qiáng)學(xué)習(xí)者之間的交流以及增強(qiáng)學(xué)習(xí)者對(duì)知識(shí)運(yùn)用能力。測(cè)試時(shí)間的加長(zhǎng)保證了不同學(xué)習(xí)進(jìn)度的學(xué)習(xí)者都有充分的時(shí)間參與學(xué)習(xí)評(píng)價(jià),允許學(xué)習(xí)者多次參加同一測(cè)試既可以減少因?yàn)樵u(píng)價(jià)過(guò)程中的意外而造成的對(duì)學(xué)習(xí)結(jié)果錯(cuò)誤評(píng)價(jià),也能幫忙學(xué)習(xí)者在未能得到理想評(píng)價(jià)結(jié)果的狀況下進(jìn)行自我矯正學(xué)習(xí)行為,促進(jìn)其對(duì)課程知識(shí)的掌握。
4.評(píng)價(jià)過(guò)程注重階段性評(píng)估,實(shí)現(xiàn)了多種評(píng)價(jià)方式的有機(jī)結(jié)合
被調(diào)查的課程除2門課程外,其它所有課程都至少采用家庭作業(yè)、周測(cè)試和單元測(cè)試等帶有過(guò)程性評(píng)價(jià)性質(zhì)的評(píng)價(jià)方式,表明xMOOC注重對(duì)學(xué)習(xí)者的學(xué)習(xí)結(jié)果進(jìn)行分階段評(píng)價(jià),有57.3%的課程使用期末考試,實(shí)現(xiàn)了過(guò)程性評(píng)價(jià)和總結(jié)性評(píng)價(jià)的有機(jī)結(jié)合;評(píng)價(jià)過(guò)程中的嵌入式問(wèn)題和同伴互評(píng)中的自我評(píng)價(jià)可以幫助學(xué)習(xí)者對(duì)已學(xué)習(xí)過(guò)的課程知識(shí)進(jìn)行自我評(píng)估,客觀題的自動(dòng)化評(píng)分實(shí)現(xiàn)了系統(tǒng)對(duì)學(xué)習(xí)者學(xué)習(xí)的評(píng)價(jià),主觀題中的同伴互評(píng),較好地實(shí)現(xiàn)了他人對(duì)學(xué)習(xí)者學(xué)習(xí)的評(píng)價(jià),實(shí)現(xiàn)了自我評(píng)價(jià)、系統(tǒng)評(píng)價(jià)和他人評(píng)價(jià)的有機(jī)結(jié)合。這種對(duì)學(xué)習(xí)者學(xué)習(xí)結(jié)果進(jìn)行分階段評(píng)估以及多種評(píng)價(jià)方式組合應(yīng)用為全面、客觀地評(píng)價(jià)學(xué)習(xí)者的學(xué)習(xí)結(jié)果提供了保障。
5.學(xué)習(xí)評(píng)價(jià)的開(kāi)展依賴于課程支持平臺(tái)的支持
調(diào)查表明,xMOOC學(xué)習(xí)評(píng)價(jià)過(guò)程中測(cè)試卷的生成、客觀題的自動(dòng)評(píng)分、主觀題的同伴互評(píng)、學(xué)習(xí)者最終測(cè)評(píng)成績(jī)的生成以及學(xué)習(xí)評(píng)估過(guò)程的控制等都得到課程平臺(tái)評(píng)測(cè)系統(tǒng)的有效支持,課程平臺(tái)有效支持保障了xMOOC學(xué)習(xí)評(píng)價(jià)過(guò)程的順利、高效實(shí)施。
1.學(xué)習(xí)評(píng)價(jià)的公正性
由于教與學(xué)時(shí)空上的分離以及龐大的學(xué)生群體,xMOOC學(xué)習(xí)評(píng)價(jià)過(guò)程主要采用學(xué)習(xí)者自評(píng)、系統(tǒng)評(píng)價(jià)和同伴互評(píng)三種方式完成,在評(píng)價(jià)過(guò)程中學(xué)習(xí)者被要求遵守誠(chéng)信守則,誠(chéng)實(shí)而獨(dú)立地完成評(píng)價(jià)過(guò)程。這種在很大程度上依賴于學(xué)習(xí)者的道德以及自我約束的評(píng)價(jià)過(guò)程是否能客觀、公正地評(píng)價(jià)學(xué)習(xí)者的學(xué)習(xí)結(jié)果受到部分教師、研究者,也包括相關(guān)教學(xué)機(jī)構(gòu)的質(zhì)疑。如有學(xué)者通過(guò)調(diào)查研究指出“部分學(xué)生同伴評(píng)價(jià)存在態(tài)度粗魯,回答、評(píng)價(jià)效率低下的問(wèn)題,無(wú)法與教授或助教相比”[7];有研究表明,edX、Udacity等主要的xMOOC項(xiàng)目正在開(kāi)始與培生(Pearson)等公司合作,使學(xué)習(xí)者可以在全球分布的培生考試中心參加考試,以增加評(píng)價(jià)結(jié)果的客觀、公正性[8]。以上信息表明,如何對(duì)學(xué)習(xí)者的學(xué)習(xí)結(jié)果開(kāi)展高效、公正和權(quán)威的評(píng)價(jià)是xMOOC學(xué)習(xí)評(píng)價(jià)今后需解決的關(guān)鍵問(wèn)題。
2.學(xué)習(xí)過(guò)程的評(píng)價(jià)
開(kāi)展學(xué)習(xí)者學(xué)習(xí)過(guò)程的評(píng)估,對(duì)動(dòng)態(tài)監(jiān)控、指導(dǎo)和調(diào)節(jié)學(xué)習(xí)者的學(xué)習(xí)行為,促進(jìn)學(xué)習(xí)者持續(xù)、有效地學(xué)習(xí),對(duì)教師動(dòng)態(tài)掌握學(xué)習(xí)者的學(xué)習(xí)狀況,實(shí)施教學(xué)調(diào)控和工作反思以及對(duì)網(wǎng)絡(luò)遠(yuǎn)程教育機(jī)構(gòu)進(jìn)行教學(xué)模式與服務(wù)模式創(chuàng)新、教學(xué)資源和教學(xué)平臺(tái)開(kāi)發(fā)等都具有極其重要的作用,但前文分析表明,xMOOC現(xiàn)有學(xué)習(xí)評(píng)價(jià)主要是針對(duì)學(xué)習(xí)者知識(shí)層面學(xué)習(xí)結(jié)果的評(píng)價(jià),而對(duì)學(xué)習(xí)者學(xué)習(xí)過(guò)程的評(píng)估與反饋還比較欠缺。對(duì)學(xué)習(xí)過(guò)程分析相對(duì)不足導(dǎo)致目前xMOOC學(xué)習(xí)評(píng)價(jià)在促進(jìn)學(xué)生學(xué)習(xí)反饋、改善教師教學(xué)和深化教學(xué)研究等方面的功能難以發(fā)揮,是目前xMOOC學(xué)習(xí)評(píng)價(jià)需解決的又一問(wèn)題。有研究表明,edx等課程平臺(tái)對(duì)學(xué)習(xí)者的學(xué)習(xí)過(guò)程有詳細(xì)的跟蹤與記錄,并設(shè)置專門項(xiàng)目開(kāi)始研究如何合理運(yùn)用這些數(shù)據(jù)分析學(xué)習(xí)者的學(xué)習(xí)過(guò)程[9],或開(kāi)展基于平臺(tái)大數(shù)據(jù)的學(xué)習(xí)分析[10],但這方面的研究和實(shí)踐才剛剛開(kāi)始。相信在不久的將來(lái),隨著相關(guān)研究的不斷深入,借助對(duì)學(xué)習(xí)者學(xué)習(xí)過(guò)程的分析輔助教師和學(xué)習(xí)者更有效地開(kāi)展網(wǎng)絡(luò)教學(xué)和網(wǎng)絡(luò)學(xué)習(xí)將成為可能。
3.學(xué)習(xí)評(píng)價(jià)支持系統(tǒng)
受課程平臺(tái)測(cè)評(píng)系統(tǒng)的支持,xMOOC的對(duì)以選擇題、判斷題等客觀題為主的測(cè)評(píng)過(guò)程能實(shí)現(xiàn)自動(dòng)評(píng)分和及時(shí)反饋,對(duì)以論文撰寫等主觀題為主的測(cè)評(píng)過(guò)程能夠?qū)崿F(xiàn)同伴互評(píng),保證了學(xué)習(xí)評(píng)價(jià)過(guò)程順利、高效開(kāi)展。但調(diào)查表明,一些有特殊評(píng)價(jià)需求的課程由于缺乏課程平臺(tái)測(cè)試系統(tǒng)的支持,教師為能全面、客觀地考核學(xué)習(xí)者的學(xué)習(xí)結(jié)果不得不自設(shè)學(xué)習(xí)評(píng)價(jià)系統(tǒng),這給課程的學(xué)習(xí)評(píng)價(jià)帶來(lái)障礙:學(xué)習(xí)者為完成課程學(xué)習(xí)評(píng)價(jià)必須在課程平臺(tái)與其它評(píng)價(jià)系統(tǒng)之間來(lái)回切換,而教師也難以將在自設(shè)評(píng)價(jià)系統(tǒng)中得到的學(xué)習(xí)評(píng)價(jià)結(jié)果折合進(jìn)課程學(xué)習(xí)評(píng)價(jià)最終結(jié)果。為此,如何增強(qiáng)課程平臺(tái)測(cè)評(píng)系統(tǒng)的功能和開(kāi)放性,以滿足不同類型課程對(duì)學(xué)習(xí)評(píng)價(jià)的不同需求是今后xMOOC課程平臺(tái)測(cè)評(píng)系統(tǒng)研究面臨的重要課題。
在課程平臺(tái)測(cè)評(píng)系統(tǒng)的支持下,應(yīng)用傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)方法,xMOOC對(duì)學(xué)習(xí)者開(kāi)展針對(duì)知識(shí)層面學(xué)習(xí)結(jié)果的評(píng)價(jià);為滿足xMOOC特殊的評(píng)價(jià)需求,傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)方法在xMOOC的應(yīng)用中,評(píng)價(jià)方式和評(píng)價(jià)過(guò)程中都產(chǎn)生了相應(yīng)的變化,這些成功的學(xué)習(xí)評(píng)價(jià)案例為我們?cè)谌粘>W(wǎng)絡(luò)教學(xué)過(guò)程中應(yīng)用傳統(tǒng)評(píng)價(jià)方法開(kāi)展網(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)提供了可借鑒的經(jīng)驗(yàn)。除此之外,xMOOC學(xué)習(xí)評(píng)價(jià)還存在著如何保證學(xué)習(xí)評(píng)價(jià)的公正性和權(quán)威性、學(xué)習(xí)過(guò)程評(píng)價(jià)缺失和如何加強(qiáng)課程平臺(tái)測(cè)評(píng)系統(tǒng)的功能及開(kāi)放性以滿足一些課程特殊的學(xué)習(xí)評(píng)價(jià)需求三個(gè)問(wèn)題,這些在xMOOC評(píng)價(jià)實(shí)踐中產(chǎn)生的問(wèn)題同樣也值得我們?cè)诰W(wǎng)絡(luò)學(xué)習(xí)評(píng)價(jià)理論研究過(guò)程中深思。
[1] coursera course list [EB/OL].https://www.coursera.org/courses,2014-04-05.
[2] edx course list[EB/OL].https://www.edx.org/course-list,2014-04-05.
[3] udacity course list[EB/OL]. ttps://www.udacity.com/courses#!/all,2014-04-05.
[4] 高丹丹.論網(wǎng)絡(luò)學(xué)習(xí)的評(píng)價(jià)[J].電化教育研究, 2009,(11):25-29.
[5][8] 王萍.大規(guī)模在線開(kāi)放課程的新發(fā)展與應(yīng)用:從cMOOC到xMOOC[J].現(xiàn)代遠(yuǎn)程教育研究,2013,(3):13-19.
[6] Udacity[EB/OL].http://en.wikipedia.org/wiki/Udacity#Certification,2013-08-26.
[7] Colman,D. MOOC Interrupted: Top 10 Reasons Our Re aders Didn’t Finish a Massive Open Online Course[EB/OL].http://www.opencul- ture.com/2013/04/10_reasons_you_didnt_complete_a_mooc.html,2014-04-10.
[9] 陳肖庚,王頂明. MOOC 的發(fā)展歷程與主要特征分析[J].現(xiàn)代教育技術(shù), 2013,(23):5-10.
[10] 韓錫斌,葛文雙,周潛,程建鋼. MOOC平臺(tái)與典型網(wǎng)絡(luò)教學(xué)平臺(tái)的比較研究[J].中國(guó)電化教育,2014,(1):61-68.
鄭志高:講師,在讀博士,研究方向?yàn)樾畔⒓夹g(shù)教育應(yīng)用(zhigaozh@hotmail.com) 。
張立國(guó):教授,博士生導(dǎo)師,陜西師范大學(xué)教育學(xué)院教育技術(shù)系系主任,研究方向?yàn)榻逃紝W(xué)術(shù)基本理論、網(wǎng)絡(luò)遠(yuǎn)程教育(zhangliguok@126.com)。
張春榮:中級(jí)編輯,學(xué)士,研究方向?yàn)閿?shù)字媒體編輯與出版(zhangchr007@163.com)。
2014年6月15日
責(zé)任編輯:馬小強(qiáng)
the Investigation of Learning Evaluation Methods for xMOOC
Zheng Zhigao1, Zhang Liguo1, Zhang Chunrong2
(1.Shaanxi Normal University School of Education, Xi’an Shaanxi 710062;2. Xi'an Jiaotong University Press Co. Ltd., Xi’an Shaanxi 710049)
s:By investigating and analyzing the learning evaluation methods of three hundred and forty-nine courses which is on Coursera、edX and Udacity, we find that xMOOC use traditional methods to evaluate students' learning outcomes with the support of assessment system, because of changes in applying environment and special requirements, the traditional evaluation methods used in xMOOC changed in some way. Now, the assessment of learning in xMOOC has three problems to solve:(1)How to improve the fairness and authority of the evaluation.(2)How to evaluate learning process. (3) How to improve the compatibility and functionality of assessment system to meet various requirement from different courses. The successful practice of evaluation of learning in xMOOC provides us useful experience to conduct assessment for online learning by using traditional learning evaluation methods,and the problems also bring some questions which are worth considering when we conduct the theoretical research on assessment of online learning.
xMOOC; Evaluation of Learning; Investigation
G434
A
1006—9860(2014)11—0044—06
* 本文得到陜西師范大學(xué)現(xiàn)代教學(xué)技術(shù)教育部重點(diǎn)實(shí)驗(yàn)室交叉學(xué)科培育項(xiàng)目“混合式學(xué)習(xí)的研究型網(wǎng)絡(luò)課程的研發(fā)與實(shí)證研究”和陜西師范大學(xué)“教育技術(shù)學(xué)導(dǎo)論”信息化示范課建設(shè)項(xiàng)目的資助。