基于“證據(jù)”的高?；旌蠈W(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)模型構(gòu)建

王慧君 張念

[摘? ?要] 混合學(xué)習(xí)已成為高校教學(xué)的新常態(tài)，混合學(xué)習(xí)課程的學(xué)業(yè)評(píng)價(jià)問(wèn)題逐漸進(jìn)入研究者視域并成為教育研究者和教育實(shí)踐者共同關(guān)注的熱點(diǎn)。文章針對(duì)目前在高校課程學(xué)業(yè)評(píng)價(jià)中的“軟評(píng)價(jià)”現(xiàn)象，以評(píng)價(jià)三角為理論基礎(chǔ)，在綜合分析國(guó)內(nèi)外相關(guān)研究成果的基礎(chǔ)上，構(gòu)建了基于“證據(jù)” 的高?；旌蠈W(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)模型（e-ABC模型）。借助德?tīng)柗品▽＜易稍儭⑸疃仍L談等方法，對(duì)模型進(jìn)行修訂和完善;又將模型進(jìn)行了為期一學(xué)期的教學(xué)實(shí)踐。實(shí)踐表明：e-ABC模型的應(yīng)用對(duì)營(yíng)造公平公正的評(píng)價(jià)氛圍、增強(qiáng)實(shí)踐者基于“證據(jù)”實(shí)施評(píng)價(jià)的意識(shí)和能力、提升學(xué)業(yè)評(píng)價(jià)結(jié)果的科學(xué)性和公信力以及培養(yǎng)學(xué)生自我監(jiān)控、自主學(xué)習(xí)能力等都具有積極的影響。

[關(guān)鍵詞] 證據(jù); 混合學(xué)習(xí); 學(xué)業(yè)評(píng)價(jià); e-ABC模型

[中圖分類號(hào)] G434? ? ? ? ? ? [文獻(xiàn)標(biāo)志碼] A

[作者簡(jiǎn)介] 王慧君（1966—），女，河南新鄉(xiāng)人。教授，博士，主要從事信息技術(shù)與教學(xué)融合、教師教育、基于技術(shù)的學(xué)業(yè)評(píng)價(jià)等研究。E-mail：henuwhuijun@163.com。

一、引? ?言

隨著教育信息化的發(fā)展，混合學(xué)習(xí)已成為我國(guó)高校課程教學(xué)的新常態(tài)，混合學(xué)習(xí)課程的學(xué)業(yè)評(píng)價(jià)問(wèn)題逐漸進(jìn)入研究者視野，并成為教育研究者和教育實(shí)踐者共同關(guān)注的話題。目前，高?；旌蠈W(xué)習(xí)課程的學(xué)業(yè)評(píng)價(jià)多是基于教師經(jīng)驗(yàn)的“軟評(píng)價(jià)”[1]，評(píng)價(jià)中缺乏證據(jù)和數(shù)據(jù)意識(shí)[2]，未能充分利用信息技術(shù)所提供的工具和資源，從而導(dǎo)致評(píng)價(jià)結(jié)果主觀性強(qiáng)，隨意性大，缺乏證據(jù)和公信力。學(xué)業(yè)評(píng)價(jià)是否科學(xué)、有效，從微觀論關(guān)乎學(xué)生課程學(xué)習(xí)的公正評(píng)價(jià)，從宏觀論則關(guān)乎高校的培養(yǎng)目標(biāo)、培養(yǎng)什么人的大問(wèn)題。文章對(duì)高?；旌蠈W(xué)習(xí)課程的學(xué)業(yè)評(píng)價(jià)進(jìn)行研究，并嘗試構(gòu)建基于“證據(jù)”的混合學(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)模型，旨在為高校教師開展基于 “證據(jù)”的課程學(xué)業(yè)評(píng)價(jià)提供“腳手架”，提高高校混合學(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)的科學(xué)性和公信力，充分發(fā)揮學(xué)業(yè)評(píng)價(jià)的功能。

二、基于“證據(jù)”學(xué)業(yè)評(píng)價(jià)的相關(guān)研究

（一）基于“證據(jù)”的評(píng)價(jià)理念及評(píng)價(jià)內(nèi)涵

“證據(jù)”是法律領(lǐng)域的專門術(shù)語(yǔ)，指“可以用于證明案件事實(shí)的材料”。新版《現(xiàn)代漢語(yǔ)詞典》將“證據(jù)”解釋為“能夠證明某事物真實(shí)性的有關(guān)事實(shí)或材料”[3]?；凇白C據(jù)”的評(píng)價(jià)是一種評(píng)價(jià)理念或者評(píng)價(jià)態(tài)度，具體而言，就是在評(píng)價(jià)中強(qiáng)調(diào)“證據(jù)”的作用和價(jià)值，注重證據(jù)的收集、分析和利用，在充分占有、分析相關(guān)證據(jù)信息的基礎(chǔ)上，通過(guò)證據(jù)鏈推理作出價(jià)值判斷。秉持“證據(jù)理性”觀，是證據(jù)理性在評(píng)價(jià)中的具體體現(xiàn)。美國(guó)國(guó)家研究委員會(huì)指出，由于評(píng)價(jià)會(huì)受到評(píng)價(jià)的具體內(nèi)容、評(píng)價(jià)形式、評(píng)價(jià)時(shí)間等多方因素的影響，所以任何評(píng)價(jià)從某種程度而言都只能是一種“基于證據(jù)的推理（Reasoning from Evidence）”[4]。2010年，SBAC和PARCC兩個(gè)評(píng)價(jià)聯(lián)盟采用“以證據(jù)為中心”的設(shè)計(jì)框架（簡(jiǎn)稱ECD），研制了新一代學(xué)業(yè)質(zhì)量評(píng)價(jià)體系，旨在通過(guò)收集學(xué)生學(xué)習(xí)的證據(jù)來(lái)推理判定學(xué)生學(xué)業(yè)表現(xiàn)[5]。美國(guó)教師教育領(lǐng)域特別強(qiáng)調(diào)用證據(jù)來(lái)證明已取得的績(jī)效，在1998年制定的《高等教育法》中規(guī)定，所有州每年都要向聯(lián)邦政府提供關(guān)于教師教育質(zhì)量的證據(jù)[6]。2013年，美國(guó)教師培養(yǎng)認(rèn)證委員會(huì)建立了一套基于“證據(jù)”的、高標(biāo)準(zhǔn)的教師培養(yǎng)機(jī)構(gòu)質(zhì)量認(rèn)證體系，要求教師培養(yǎng)機(jī)構(gòu)要形成注重研究、調(diào)查和證據(jù)分析的氛圍[7-8]。有研究指出，美國(guó)各院校的成果評(píng)估工作已轉(zhuǎn)向一種基于“證據(jù)”的評(píng)估文化的創(chuàng)建[9]。置身于這種評(píng)估文化中的教師，會(huì)被習(xí)慣性地問(wèn)及“你有什么證據(jù)證明，你教給學(xué)生的東西達(dá)到了預(yù)期的目標(biāo)”;教師自己也會(huì)不斷反思“我有什么證據(jù)證明，我教給學(xué)生的東西達(dá)到了預(yù)期的目標(biāo)”。2006年到2008年，美國(guó)教育考試服務(wù)中心（簡(jiǎn)稱ETS）連續(xù)發(fā)布了三個(gè)以“證據(jù)文化”為主題的報(bào)告[10-12]，有力推動(dòng)了基于“證據(jù)”的學(xué)生學(xué)習(xí)成果評(píng)估機(jī)制在高等院校中的運(yùn)行。

基于“證據(jù)”的學(xué)業(yè)評(píng)價(jià)在國(guó)內(nèi)也逐漸受到關(guān)注。姚林群等認(rèn)為，學(xué)業(yè)評(píng)價(jià)必須講究證據(jù)、重視證據(jù)，對(duì)學(xué)生的評(píng)價(jià)必須建立在充分占有、分析與學(xué)業(yè)表現(xiàn)密切相關(guān)的證據(jù)信息的基礎(chǔ)上，才能全面、客觀反映學(xué)生在課程中的表現(xiàn)狀態(tài)[13]。楊明全等指出，正是通過(guò)證據(jù)的呈現(xiàn)，人們得以判斷學(xué)生的學(xué)習(xí)是否真正發(fā)生，亦即“運(yùn)用證據(jù)來(lái)提升學(xué)習(xí)結(jié)果，由此證明個(gè)體的能力和學(xué)習(xí)績(jī)效的持續(xù)提升”[14]。

（二）基于“證據(jù)”的評(píng)價(jià)模型研究

為促進(jìn)基于“證據(jù)”評(píng)價(jià)的普及和推廣，增加評(píng)價(jià)的可操作性，國(guó)內(nèi)外學(xué)者致力于模型的構(gòu)建并研發(fā)了若干評(píng)價(jià)模型。梅斯雷弗（Mislevy，R.J.）等人于20世紀(jì)90年代提出了ECD框架，強(qiáng)調(diào)學(xué)業(yè)評(píng)價(jià)是一種證據(jù)推理過(guò)程，評(píng)價(jià)者需根據(jù)有限的學(xué)習(xí)證據(jù)對(duì)學(xué)生的學(xué)業(yè)成就進(jìn)行推理和判斷[15]。美國(guó)國(guó)家學(xué)習(xí)成果評(píng)估中心制定了基于“證據(jù)”的學(xué)生學(xué)習(xí)成果透明度模型，包括確定學(xué)生學(xué)習(xí)目標(biāo)、開展評(píng)估活動(dòng)、收集學(xué)生學(xué)習(xí)證據(jù)、使用證據(jù)等六個(gè)環(huán)節(jié)。該模型有力推動(dòng)和指導(dǎo)了美國(guó)各院校、機(jī)構(gòu)開展基于證據(jù)的評(píng)估實(shí)踐，在獲得質(zhì)量認(rèn)證的美國(guó)高等院校中，84%以上的院校都采用此模型開展大學(xué)內(nèi)部的本科學(xué)生學(xué)習(xí)成果評(píng)估[16]。2008年，ETS發(fā)布的“證據(jù)文化”白皮書中提出了“學(xué)生學(xué)習(xí)成果證據(jù)模型”，模型包含闡明期望的學(xué)生學(xué)習(xí)成果、審核評(píng)估、增強(qiáng)評(píng)估、建立并維持證據(jù)文化等七個(gè)環(huán)節(jié)，又稱為“七步模型”。其中，“闡明期望的學(xué)生學(xué)習(xí)成果”是指評(píng)估機(jī)構(gòu)要明確學(xué)生應(yīng)該取得哪些成果以及收集學(xué)生學(xué)習(xí)相關(guān)證據(jù)的目的;“審核評(píng)估”指評(píng)估機(jī)構(gòu)要確定當(dāng)前有哪些證據(jù)能夠證明學(xué)生達(dá)到了學(xué)習(xí)目標(biāo);“增強(qiáng)評(píng)估”指還需要收集哪些額外的證據(jù)來(lái)證明學(xué)生達(dá)到了學(xué)習(xí)目標(biāo)。該模型允許各大院校自行進(jìn)行系統(tǒng)的評(píng)審和分析，旨在幫助院校創(chuàng)建或完善一種評(píng)估學(xué)生學(xué)習(xí)成果的證據(jù)文化[12]。

形成性評(píng)價(jià)在美國(guó)學(xué)生學(xué)習(xí)成果評(píng)價(jià)中起著重要作用，是學(xué)業(yè)評(píng)價(jià)研究中最活躍的部分。在美國(guó)現(xiàn)有的形成性評(píng)價(jià)模型中，以瑪格麗特·赫里蒂奇（Margaret Heritage）提出的“證據(jù)為中心”的形成性評(píng)價(jià)環(huán)最為典型[17]。他將形成性評(píng)價(jià)劃分為學(xué)習(xí)進(jìn)程、學(xué)習(xí)目標(biāo)、成功標(biāo)準(zhǔn)、獲取學(xué)習(xí)證據(jù)、解釋證據(jù)等10個(gè)相互關(guān)聯(lián)的環(huán)節(jié)。其中“成功標(biāo)準(zhǔn)”是對(duì)學(xué)生學(xué)習(xí)目標(biāo)的明確表達(dá)，“獲取學(xué)習(xí)證據(jù)”是指通過(guò)具體的策略和方法系統(tǒng)地收集學(xué)生學(xué)習(xí)過(guò)程中出現(xiàn)的各種證據(jù)，“解釋證據(jù)”是指教師根據(jù)證據(jù)分析學(xué)生的學(xué)習(xí)內(nèi)容和學(xué)習(xí)方式。強(qiáng)調(diào)證據(jù)理性、收集證據(jù)的有效性、證據(jù)分析與成功標(biāo)準(zhǔn)的一致性是美國(guó)形成性評(píng)價(jià)獲得成功的最重要因素，體現(xiàn)了美國(guó)學(xué)業(yè)評(píng)價(jià)鮮明的證據(jù)文化特色。我國(guó)學(xué)者王健等運(yùn)用評(píng)價(jià)三角理論，以證據(jù)收集和解讀作為評(píng)價(jià)設(shè)計(jì)的基本范式，構(gòu)建了中小學(xué)學(xué)生學(xué)業(yè)評(píng)價(jià)質(zhì)量框架[2]。該框架將“證據(jù)的來(lái)源”“評(píng)價(jià)任務(wù)的設(shè)計(jì)”“證據(jù)的收集與解讀”作為基于“證據(jù)”進(jìn)行推理學(xué)業(yè)質(zhì)量的主要環(huán)節(jié)，并給出了詳細(xì)說(shuō)明。

三、模型的建構(gòu)過(guò)程

（一）研究設(shè)計(jì)

1. 研究目的及方法

本研究以混合學(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)為研究對(duì)象，秉持證據(jù)理性，致力于構(gòu)建基于“證據(jù)”的混合學(xué)習(xí)課程學(xué)業(yè)評(píng)價(jià)模型，旨在為高校教師實(shí)施學(xué)業(yè)評(píng)價(jià)提供腳手架，提升學(xué)業(yè)評(píng)價(jià)的科學(xué)性和公信力，充分發(fā)揮學(xué)業(yè)評(píng)價(jià)的功能。課程學(xué)業(yè)評(píng)價(jià)即對(duì)學(xué)生在某門課程中所獲得的學(xué)習(xí)成就進(jìn)行評(píng)價(jià)，具體而言，就是指根據(jù)預(yù)先設(shè)定的評(píng)價(jià)標(biāo)準(zhǔn)，采用恰當(dāng)有效的評(píng)價(jià)工具，系統(tǒng)收集學(xué)生學(xué)習(xí)證據(jù)，對(duì)學(xué)生的學(xué)習(xí)過(guò)程、學(xué)習(xí)成就等作出判斷的過(guò)程。

研究方法主要有文獻(xiàn)研究法、模型構(gòu)建法與德?tīng)柗品ā?/p>

2. 模型建構(gòu)流程

（1）明確模型建構(gòu)目標(biāo)。為高校教師實(shí)施基于“證據(jù)”的學(xué)業(yè)評(píng)價(jià)提供“腳手架”，提升高校學(xué)業(yè)評(píng)價(jià)的科學(xué)性和公信力，充分發(fā)揮評(píng)價(jià)的功能。（2）明確模型構(gòu)成要素。結(jié)合國(guó)內(nèi)外已有的實(shí)踐模型、個(gè)人開展混合學(xué)習(xí)設(shè)計(jì)及教學(xué)的經(jīng)驗(yàn)，依據(jù)評(píng)價(jià)操作的流程（環(huán)節(jié)）確定模型的構(gòu)成要素，并對(duì)各構(gòu)成要素進(jìn)行界定和說(shuō)明。（3）分解要素，并對(duì)構(gòu)成要素的子系統(tǒng)功能、操作工具和方法進(jìn)行講解和說(shuō)明。（4）揭示各構(gòu)成要素、各要素的子系統(tǒng)之間的聯(lián)系及相互作用。（5）模型可視化。

（二）模型的初步建構(gòu)

在文獻(xiàn)研究基礎(chǔ)上，結(jié)合教學(xué)實(shí)踐經(jīng)驗(yàn)，構(gòu)建基于“證據(jù)”的學(xué)業(yè)評(píng)價(jià)初步模型。模型構(gòu)成要素包括識(shí)別證據(jù)、創(chuàng)設(shè)證據(jù)、采集證據(jù)、篩選證據(jù)、分析證據(jù)、解釋證據(jù)及使用證據(jù)七要素，亦即七個(gè)環(huán)節(jié);將各要素及各要素的子系統(tǒng)以左右結(jié)構(gòu)呈現(xiàn)，即得到如圖1所示的模型。

為表達(dá)方便起見(jiàn)，對(duì)該模型完整的英文表述進(jìn)行關(guān)鍵詞提取，最終將模型命名為e-ABC模型。其中，“e”為“evidence”，“A” 為“Academic Achievement Assessment”，“BC”為“Blended Curriculum”。

1. 識(shí)別證據(jù)：認(rèn)識(shí)證據(jù)并判斷證據(jù)價(jià)值

識(shí)別證據(jù)是開展基于“證據(jù)”評(píng)價(jià)的首要環(huán)節(jié)。識(shí)別證據(jù)就是能夠分辨出哪些可以作為證據(jù)，其屬于哪一種類型的證據(jù)，并在此基礎(chǔ)上能夠判斷證據(jù)對(duì)應(yīng)于學(xué)生哪方面的能力，具有怎樣的評(píng)價(jià)價(jià)值。

2. 創(chuàng)設(shè)證據(jù)：通過(guò)一定手段引出所需證據(jù)

創(chuàng)設(shè)證據(jù)是指通過(guò)一定的工具或手段引出并留存證據(jù)的過(guò)程。該環(huán)節(jié)的提出主要受到司法領(lǐng)域創(chuàng)設(shè)證據(jù)的啟發(fā)。在司法領(lǐng)域的案件中，最有價(jià)值的證據(jù)往往不會(huì)自然呈現(xiàn)，而是要通過(guò)“創(chuàng)設(shè)”的方法獲得?；旌蠈W(xué)習(xí)中學(xué)生的學(xué)習(xí)行為和學(xué)習(xí)結(jié)果，有些證據(jù)可以自動(dòng)記錄，如登錄次數(shù)、登錄時(shí)長(zhǎng)、點(diǎn)擊量等;有些證據(jù)卻不能自動(dòng)存儲(chǔ)，如果不及時(shí)收集，這些證據(jù)就會(huì)消失。需要提前設(shè)計(jì)登錄入口、植入插件（線上創(chuàng)設(shè)）或者現(xiàn)場(chǎng)錄音、拍攝（線下創(chuàng)設(shè)）等方能收集。如我們可以將學(xué)生的教學(xué)試講、角色扮演等錄制成視頻，上傳平臺(tái)共享，作為學(xué)生自評(píng)和互評(píng)的證據(jù);將小組討論移至線上，通過(guò)平臺(tái)自動(dòng)記錄小組活動(dòng)過(guò)程，為小組自評(píng)互評(píng)留存證據(jù)。

3. 采集證據(jù)：收集存儲(chǔ)并整理證據(jù)

采集證據(jù)即收集、整理證據(jù)。不同的證據(jù)需選擇不同的采集工具和采集方法。證據(jù)采集方法有：課堂觀察、問(wèn)卷調(diào)查、照片拍攝、視頻錄像、文本采集、情感識(shí)別等[18]。證據(jù)采集工具有：錄音筆、錄像機(jī)、監(jiān)控設(shè)備、教學(xué)管理系統(tǒng)、教育機(jī)器人、智能穿戴設(shè)備、物聯(lián)感知系統(tǒng)等[19]。

4. 篩選證據(jù)：對(duì)證據(jù)進(jìn)行挑選和排序

篩選證據(jù)是指通過(guò)一定的方法對(duì)證據(jù)的真實(shí)性和相關(guān)性進(jìn)行評(píng)定，挑選出有用的證據(jù)。實(shí)際應(yīng)用中，采集的證據(jù)往往是雜亂無(wú)章的，需要對(duì)這些證據(jù)進(jìn)行篩選和整理以保證證據(jù)的質(zhì)量。真實(shí)性是保證評(píng)價(jià)結(jié)果公正性的重要條件，也是實(shí)施公正評(píng)價(jià)的前提;相關(guān)性是證據(jù)最基本的屬性，相關(guān)性越強(qiáng)，證據(jù)力就越大。

5. 分析證據(jù)：對(duì)證據(jù)進(jìn)行統(tǒng)計(jì)和推理

分析證據(jù)是指使用恰當(dāng)?shù)募夹g(shù)或框架對(duì)證據(jù)進(jìn)行統(tǒng)計(jì)和推理，挖掘證據(jù)價(jià)值并使其轉(zhuǎn)化為評(píng)價(jià)信息。目前，常用的分析方法主要包括：學(xué)習(xí)行為分析、內(nèi)容分析、社會(huì)網(wǎng)絡(luò)分析、情感分析等。

6. 解釋證據(jù)：對(duì)證據(jù)及其分析結(jié)果進(jìn)行解釋

解釋證據(jù)即對(duì)證據(jù)分析的結(jié)果進(jìn)行闡釋說(shuō)明，揭示證據(jù)所反映的現(xiàn)象和規(guī)律。

7. 使用證據(jù)：利用證據(jù)及證據(jù)分析結(jié)果實(shí)現(xiàn)學(xué)業(yè)評(píng)價(jià)

使用證據(jù)與學(xué)業(yè)評(píng)價(jià)目標(biāo)息息相關(guān)。本研究的證據(jù)使用包括3個(gè)出口，分別滿足學(xué)業(yè)評(píng)價(jià)的3個(gè)層面的目標(biāo)。評(píng)定學(xué)業(yè)成績(jī)、形成學(xué)業(yè)評(píng)價(jià)報(bào)告并反饋給學(xué)生，促進(jìn)學(xué)生的學(xué)習(xí)和發(fā)展;向教師提供學(xué)生學(xué)習(xí)的數(shù)據(jù)和證據(jù)，幫助教師反思教學(xué)問(wèn)題，改進(jìn)教學(xué);向?qū)W校提供學(xué)生學(xué)習(xí)的數(shù)據(jù)和證據(jù)，為學(xué)校學(xué)習(xí)質(zhì)量評(píng)估、綜合素質(zhì)評(píng)價(jià)、教學(xué)質(zhì)量評(píng)估等提供素材和決策依據(jù)。

（三）模型的修訂與完善

[5] 劉晶晶，郭元祥. 美國(guó)學(xué)生學(xué)業(yè)質(zhì)量評(píng)估聯(lián)盟PARCC與SBAC述評(píng)[J].中國(guó)考試， 2015（6）：24-30.

[6] 鞠玉翠. 美國(guó)教師教育中的證據(jù)：現(xiàn)狀、問(wèn)題與改進(jìn)[J].全球教育展望，2011（10）：54-60.

[7] Teacher Preparation Analytics.Building an evidence-based system for teacher preparation[EB/OL].（2013-09-01）[2019-02-17].http：//caepnet.org/knowledge-center？page=2.

[8] 段曉明. 美國(guó)教師教育認(rèn)證制度的變革走向——基于CAEP標(biāo)準(zhǔn)的分析[J].中小學(xué)教師培訓(xùn)，2017（6）：71-75.

[9] 俞佳君. 美國(guó)高校中的學(xué)生學(xué)習(xí)成果評(píng)估[J].外國(guó)教育研究，2016（1）：17-29.

[10] DWYER C A， MILLETT C M， PAYNE D G. A culture of evidence： postsecondary assessment and learning outcomes. Recommendations to policymakers and the higher education community[R]. Educational Testing Service， 2006.

[11]? MILLETT C M， STICKLER L M， PAYNE D G， et al. A Culture of evidence： critical features of assessments for postsecondary student learning[R]. Educational Testing Service， 2007.

[12]? MILLETT C M， CATHERINE M，et al. A culture of evidence： an evidence-centered approach to accountability for student learning outcomes[R].Educational Testing Service， 2008.

[13] 姚林群，戴根元.論基于證據(jù)的學(xué)業(yè)質(zhì)量評(píng)價(jià)[J].全球教育展望， 2016（5）：49-57.

[14] 楊明全，吳娟. 論基于證據(jù)的學(xué)習(xí)的內(nèi)涵與意義[J]. 教育科學(xué)研究， 2017（11）：45-49.

[15] MISLEVY R J， HAERTEL G D. Implications of evidence-centered design for educational testing[J].Educational measurement：issues and practice， 2006（4）：6-20.

[16] National Institute for Learning Outcomes Assessment. Providing evidence of student learning：a transparency framework[EB/OL].（2011-04-25）[2018-11-09]. http：//www.learningoutcomesassessment.org/TransparencyFramework.htm.

[17] HERITAGE M.Formative assessment：making it happen in the classroom[M].Corwin Press，2010：170.

[18] 葉俊民，陳曙，郭思培，王嬙，黃朋威，王志鋒.線下學(xué)習(xí)數(shù)據(jù)的分析方法研究[J].電化教育研究，2016（12）： 52-59.

[19] 劉雅馨，楊現(xiàn)民，李新，田雪松.大數(shù)據(jù)時(shí)代教師數(shù)據(jù)素養(yǎng)模型構(gòu)建[J].電化教育研究，2018（2）：109-116.

[20] 劉文輝，王藝亭，趙敏.教育游戲評(píng)價(jià)指標(biāo)的設(shè)計(jì)與開發(fā)[J].開放教育研究，2017（2）：111-120.

[21] CHANG P C，TSOU N T，YUAN B J C，HUANG C C.Development trends in Taiwan's? opto-electronics industry[J].Technovation，2002（3）：161-173.