基于網(wǎng)絡(luò)的同伴評(píng)價(jià)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)*

舒存葉，張海萍，李亞盼

（1.南京曉莊學(xué)院新聞傳播學(xué)院，江蘇南京210017；2.南京曉莊學(xué)院 教師教育學(xué)院，江蘇南京211171；3.洛陽(yáng)卓陽(yáng)科技園，河南洛陽(yáng)4713000）

基于網(wǎng)絡(luò)的同伴評(píng)價(jià)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)*

舒存葉1，張海萍2，李亞盼3

（1.南京曉莊學(xué)院新聞傳播學(xué)院，江蘇南京210017；2.南京曉莊學(xué)院 教師教育學(xué)院，江蘇南京211171；3.洛陽(yáng)卓陽(yáng)科技園，河南洛陽(yáng)4713000）

在教學(xué)實(shí)踐中發(fā)現(xiàn)現(xiàn)有在線評(píng)價(jià)平臺(tái)不能滿足實(shí)踐需求。根據(jù)前期調(diào)查和實(shí)踐的經(jīng)驗(yàn)，設(shè)計(jì)和實(shí)現(xiàn)了基于php技術(shù)的網(wǎng)絡(luò)同伴評(píng)價(jià)系統(tǒng)。該系統(tǒng)不僅用于慕課網(wǎng)絡(luò)教學(xué)評(píng)價(jià)環(huán)節(jié)，也可以作為傳統(tǒng)評(píng)價(jià)方式的有益補(bǔ)充。

在線評(píng)價(jià)平臺(tái)；同伴評(píng)價(jià)；php

一、問(wèn)題的提出

同伴評(píng)價(jià)是指具有相同背景的學(xué)習(xí)者之間相互評(píng)價(jià)的過(guò)程[1]。同伴評(píng)價(jià)可以促進(jìn)學(xué)習(xí)者對(duì)學(xué)習(xí)內(nèi)容的深層次理解，參照評(píng)價(jià)標(biāo)準(zhǔn)評(píng)價(jià)他人的學(xué)習(xí)，能夠更好地理解學(xué)習(xí)內(nèi)容。同伴的評(píng)價(jià)是從學(xué)習(xí)者而不是從教師的角度給出評(píng)價(jià)，學(xué)習(xí)者之間可以共享彼此的成功經(jīng)驗(yàn)，從各自的不足中吸取經(jīng)驗(yàn)教訓(xùn)。

隨著網(wǎng)絡(luò)技術(shù)的發(fā)展,同伴評(píng)價(jià)逐漸在網(wǎng)絡(luò)教學(xué)評(píng)估領(lǐng)域中被采用。與此同時(shí)，一種新的教育模式——慕課正在興起，其影響力與日俱增。由于慕課本身大規(guī)模、在線、開(kāi)放的特點(diǎn)，學(xué)習(xí)者眾多，作業(yè)的評(píng)價(jià)就成為一個(gè)難題。同伴互評(píng)的機(jī)制因此被引入慕課平臺(tái)，但其準(zhǔn)確性以及有效性一直受到懷疑[3]。早期的同伴評(píng)價(jià)多基于課堂進(jìn)行面對(duì)面評(píng)價(jià)，但是這種方式存在很多不足：“如學(xué)習(xí)者不能及時(shí)獲得同伴的評(píng)價(jià)，存在時(shí)間和空間的限制，很難實(shí)現(xiàn)評(píng)價(jià)方式和評(píng)價(jià)形式的多樣性等”[4]。而在線的同伴評(píng)價(jià)系統(tǒng)可以解決上述問(wèn)題，避免傳統(tǒng)同伴評(píng)價(jià)方式的不足。目前已有的網(wǎng)絡(luò)的同伴評(píng)價(jià)系統(tǒng)，主要有兩類(lèi)：一類(lèi)是專(zhuān)門(mén)的評(píng)價(jià)平臺(tái)，如Web-Spa[5]、PRAZA[6]、PASS[7]等；另一類(lèi)為網(wǎng)絡(luò)教學(xué)平臺(tái)自帶的評(píng)價(jià)系統(tǒng)，如Moodle[8]。以上平臺(tái)多為國(guó)外開(kāi)發(fā)，可通過(guò)互聯(lián)網(wǎng)訪問(wèn)。國(guó)內(nèi)用戶在使用上存在一些不便和限制，此外功能也不夠完善，不能滿足同伴評(píng)價(jià)實(shí)踐的需要。如對(duì)于小組評(píng)價(jià)的支持度不夠，不能較好地區(qū)分小組內(nèi)不同成員的貢獻(xiàn)；同伴評(píng)價(jià)中的互評(píng)關(guān)系在同伴定量評(píng)分和定性文本評(píng)論上均存在顯著差異，是影響評(píng)價(jià)質(zhì)量的一個(gè)重要因素[9][10]，現(xiàn)有評(píng)價(jià)系統(tǒng)不能對(duì)該因素進(jìn)行控制。為了解決上述問(wèn)題，減輕教師負(fù)擔(dān)，實(shí)現(xiàn)評(píng)價(jià)方式的多樣性，使同伴評(píng)價(jià)更加科學(xué)有效，本研究在現(xiàn)有文獻(xiàn)研究和同伴評(píng)價(jià)系統(tǒng)的基礎(chǔ)上，設(shè)計(jì)和實(shí)現(xiàn)了一個(gè)在線同伴評(píng)價(jià)系統(tǒng)。期望為高校教學(xué)評(píng)價(jià)改革提供一些借鑒和參考，更好的服務(wù)于評(píng)價(jià)實(shí)踐。

二、設(shè)計(jì)分析

1.需求分析

同伴評(píng)價(jià)是傳統(tǒng)教學(xué)評(píng)價(jià)方式之外的一種評(píng)價(jià)手段，需要教師和學(xué)習(xí)者的額外付出，因此，需要在盡量減少教師和學(xué)習(xí)者負(fù)擔(dān)的情況下，進(jìn)行科學(xué)有效的同伴評(píng)價(jià)實(shí)踐。筆者曾借助其他平臺(tái)開(kāi)展過(guò)同伴評(píng)價(jià)的實(shí)踐，并進(jìn)行過(guò)調(diào)查研究和系列實(shí)驗(yàn)研究。結(jié)合多年的實(shí)踐經(jīng)驗(yàn)和研究成果，對(duì)用戶的需求進(jìn)行梳理與分析，具體如下：

（1）評(píng)價(jià)方式的多樣化。主要有：評(píng)價(jià)主體的多樣化，允許教師設(shè)置不同評(píng)價(jià)主體的權(quán)限及權(quán)重；評(píng)價(jià)形式的多樣化，提供多種評(píng)價(jià)形式如百分制評(píng)價(jià)、量表評(píng)等評(píng)價(jià)、文本評(píng)論評(píng)價(jià)，供教師選擇和組合。

（2）同伴評(píng)價(jià)影響因素的控制。相關(guān)研究表明，評(píng)價(jià)署名方式、互評(píng)類(lèi)型是影響同伴評(píng)價(jià)質(zhì)量的重要因素[10]。系統(tǒng)允許教師對(duì)以上因素的不同類(lèi)型進(jìn)行組合，尋找最佳的評(píng)價(jià)模式。

（3）同伴評(píng)價(jià)任務(wù)的自動(dòng)分配。系統(tǒng)根據(jù)教師的設(shè)置，為評(píng)價(jià)者和被評(píng)價(jià)者進(jìn)行配對(duì)，自動(dòng)為每位學(xué)習(xí)者分配同伴評(píng)價(jià)任務(wù)。

（4）同伴評(píng)價(jià)的監(jiān)控與管理。系統(tǒng)對(duì)同伴評(píng)價(jià)的完成進(jìn)度進(jìn)行統(tǒng)計(jì)，并對(duì)同伴評(píng)價(jià)行為的質(zhì)量進(jìn)行監(jiān)控。對(duì)于同伴評(píng)分質(zhì)量的評(píng)價(jià)由系統(tǒng)自動(dòng)完成。而對(duì)于同伴文本評(píng)論質(zhì)量的評(píng)價(jià)，必須由人工完成。系統(tǒng)設(shè)計(jì)由被評(píng)價(jià)者而不是教師進(jìn)行評(píng)價(jià)反饋，這樣不僅更加合理，還可以減少教師負(fù)擔(dān)。

（5）小組貢獻(xiàn)評(píng)價(jià)。小組協(xié)作學(xué)習(xí)是高校教學(xué)中經(jīng)常采用的一種方式，系統(tǒng)支持多樣化的分組方式，如隨機(jī)分組、自由分組、教師分組等。同時(shí)系統(tǒng)還提供小組貢獻(xiàn)評(píng)價(jià)功能，以解決小組成績(jī)沒(méi)有區(qū)分度的問(wèn)題。

2.開(kāi)發(fā)技術(shù)與數(shù)據(jù)庫(kù)設(shè)計(jì)

本系統(tǒng)采用了php+MySQL進(jìn)行開(kāi)發(fā)。系統(tǒng)中的各種數(shù)據(jù)資源可分成五個(gè)部分：用戶數(shù)據(jù)、分組數(shù)據(jù)、作業(yè)數(shù)據(jù)、評(píng)價(jià)數(shù)據(jù)、消息數(shù)據(jù)。分別用于存放用戶的賬號(hào)信息，關(guān)聯(lián)的課程和班級(jí)信息，學(xué)習(xí)者分組信息，作業(yè)的發(fā)布、提交和成績(jī)信息，評(píng)價(jià)任務(wù)和同伴評(píng)價(jià)以及小組評(píng)價(jià)信息，用戶發(fā)送的消息等數(shù)據(jù)。這些數(shù)據(jù)庫(kù)通過(guò)主鍵相連，形成了一個(gè)大的數(shù)據(jù)網(wǎng)絡(luò)。

三、系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)

教師注冊(cè)后即可使用系統(tǒng)，學(xué)習(xí)者賬號(hào)為學(xué)號(hào)，由教師導(dǎo)入或自行注冊(cè)到系統(tǒng)。根據(jù)用戶的需求，系統(tǒng)設(shè)計(jì)了以下功能模塊：信息管理、課程作業(yè)、課程評(píng)價(jià)、課程統(tǒng)計(jì)，用戶登錄后按照其教師或?qū)W習(xí)者的身份顯示相應(yīng)權(quán)限的功能。系統(tǒng)功能結(jié)構(gòu)如圖1所示。

圖1 系統(tǒng)功能結(jié)構(gòu)

1.信息管理模塊

信息管理模塊主要實(shí)現(xiàn)課程管理、站內(nèi)信息收發(fā)、密碼管理等功能。教師先要開(kāi)設(shè)相應(yīng)的課程，才可以進(jìn)行后續(xù)教學(xué)活動(dòng)。教師在該模塊上可以創(chuàng)建課程和班級(jí)，導(dǎo)入該班級(jí)學(xué)習(xí)者的學(xué)號(hào)、姓名等信息，并對(duì)課程、班級(jí)、學(xué)習(xí)者的信息進(jìn)行管理。站內(nèi)信息頁(yè)面主要實(shí)現(xiàn)站內(nèi)信息的收發(fā)，學(xué)習(xí)者之間、師生之間可以通過(guò)站內(nèi)短信息進(jìn)行答疑或?qū)W習(xí)內(nèi)容的交流。密碼管理是系統(tǒng)的一項(xiàng)基本的功能，用戶可以修改密碼，設(shè)置密碼保護(hù)問(wèn)題，在忘記密碼的情況下，可以通過(guò)回答密碼保護(hù)問(wèn)題找回密碼。

2.課程作業(yè)模塊

課程作業(yè)模塊主要實(shí)現(xiàn)作業(yè)的發(fā)布、小組分組、作業(yè)查看、優(yōu)秀作業(yè)展示等功能。布置作業(yè)是教師進(jìn)行評(píng)價(jià)活動(dòng)的前提，教師通過(guò)該模塊進(jìn)行課程作業(yè)的創(chuàng)建，進(jìn)行相關(guān)參數(shù)的設(shè)置。參數(shù)包括標(biāo)題、內(nèi)容、作業(yè)類(lèi)型（小組作業(yè)或個(gè)人作業(yè)）、截止日期、作業(yè)大小限制等。在教學(xué)中分組作業(yè)是一種經(jīng)常采用的方式，如果教師發(fā)布了小組作業(yè)，則進(jìn)行課程分組。教師設(shè)定分組參數(shù)，包括分組方法、小組人數(shù)、截止時(shí)間等。分組方法包括以下三種方式：學(xué)習(xí)者自由組合、教師指定分組、系統(tǒng)隨機(jī)分組。教師可以對(duì)小組的成員和組長(zhǎng)進(jìn)行管理。學(xué)習(xí)者可以查看分組參數(shù)和分組結(jié)果。自由組合情況下，系統(tǒng)顯示每一個(gè)小組的人員信息，學(xué)習(xí)者可以選擇未滿員的小組加入，并申請(qǐng)是否成為組長(zhǎng)。

作業(yè)發(fā)布后，教師可以查看已發(fā)布的作業(yè)信息，對(duì)作業(yè)進(jìn)行編輯，還可以查看學(xué)習(xí)者的完成進(jìn)度，下載、評(píng)閱作業(yè)。教師在評(píng)閱過(guò)程中可以設(shè)置質(zhì)量較高的作業(yè)為優(yōu)秀作業(yè)。系統(tǒng)提取優(yōu)秀作業(yè)名單，并展示給學(xué)習(xí)者。學(xué)習(xí)者可以查看教師和其他同伴對(duì)該作業(yè)的評(píng)價(jià)，借鑒同伴的學(xué)習(xí)成果。學(xué)習(xí)者可以查看作業(yè)信息，提交作業(yè)，提交后可以查看教師對(duì)作業(yè)的評(píng)價(jià)。如果該作業(yè)有同伴評(píng)價(jià)任務(wù)，還可查看同伴的評(píng)價(jià)情況。

3.課程評(píng)價(jià)模塊

課程評(píng)價(jià)模塊主要實(shí)現(xiàn)同伴評(píng)價(jià)任務(wù)發(fā)布與分配、同伴評(píng)價(jià)、同伴反饋、小組貢獻(xiàn)評(píng)價(jià)等功能。該模塊為本系統(tǒng)的核心功能，下面對(duì)其進(jìn)行重點(diǎn)介紹。

（1）評(píng)價(jià)任務(wù)發(fā)布

在發(fā)布同伴評(píng)價(jià)任務(wù)時(shí)，教師可以對(duì)同伴評(píng)價(jià)過(guò)程進(jìn)行控制，其中包括:

1）基本信息。教師選取需要?jiǎng)?chuàng)建同伴評(píng)價(jià)的作業(yè)，描述評(píng)價(jià)要求，設(shè)定評(píng)價(jià)截止時(shí)間。

2）評(píng)價(jià)標(biāo)準(zhǔn)與作品范例。筆者進(jìn)行的一項(xiàng)問(wèn)卷調(diào)查顯示：92%的學(xué)習(xí)者認(rèn)為教師有必要提供一份詳細(xì)的評(píng)價(jià)標(biāo)準(zhǔn)，并對(duì)標(biāo)準(zhǔn)進(jìn)行解釋和指導(dǎo)；84.8%的學(xué)習(xí)者認(rèn)為教師應(yīng)該提供作品的范本。教師可以上傳評(píng)價(jià)標(biāo)準(zhǔn)和作品范例，供學(xué)習(xí)者評(píng)價(jià)時(shí)參考。

3）評(píng)價(jià)形式。同伴評(píng)價(jià)可以采取多種評(píng)價(jià)方式，如百分制、量表評(píng)等的定量評(píng)價(jià)，文本評(píng)論的定性評(píng)價(jià)，教師可以選擇以上三種方式或它們的組合，百分制+文本為系統(tǒng)默認(rèn)的評(píng)價(jià)形式。

4）評(píng)價(jià)主體與權(quán)重。同伴評(píng)價(jià)可以有多個(gè)評(píng)價(jià)主體，包括同伴評(píng)價(jià)、教師評(píng)價(jià)、自我評(píng)價(jià)。教師可以設(shè)置每個(gè)主體的評(píng)價(jià)權(quán)限以及署名方式。

5）任務(wù)數(shù)量。教師需要為學(xué)習(xí)者分配適當(dāng)?shù)耐樵u(píng)價(jià)任務(wù)。教師可以結(jié)合具體的情境，設(shè)置適當(dāng)?shù)娜蝿?wù)量。

在同伴評(píng)價(jià)過(guò)程中，教師還需要對(duì)影響同伴評(píng)價(jià)質(zhì)量的其他因素進(jìn)行控制。這些因素有：評(píng)價(jià)署名方式。包括評(píng)價(jià)者和被評(píng)價(jià)者在評(píng)價(jià)時(shí)的署名方式；互評(píng)的類(lèi)型，互評(píng)的類(lèi)型分直接互評(píng)和間接互評(píng)。相關(guān)學(xué)者開(kāi)展了一系列實(shí)驗(yàn)研究，表明上述因素對(duì)評(píng)價(jià)質(zhì)量構(gòu)成影響。評(píng)價(jià)者的不同署名方式在評(píng)價(jià)的批判性、關(guān)注焦點(diǎn)上存在差異，而被評(píng)價(jià)者的署名方式的不同在評(píng)價(jià)質(zhì)量上存在差異[9]?；ピu(píng)關(guān)系在同伴量化評(píng)分以及文本評(píng)論上均存在顯著影響。不同的互評(píng)方式和評(píng)價(jià)署名方式的組合對(duì)同伴評(píng)價(jià)質(zhì)量會(huì)產(chǎn)生不同的效果，評(píng)價(jià)中存在互評(píng)關(guān)系和被評(píng)者署名方式的交互效應(yīng)[10]。教師在發(fā)布任務(wù)時(shí)，可以對(duì)以上因素進(jìn)行控制，在評(píng)價(jià)時(shí)嘗試不同的組合，尋找最適合的評(píng)價(jià)模式。

（2）評(píng)價(jià)任務(wù)分配

評(píng)價(jià)任務(wù)發(fā)布后，系統(tǒng)需要為每一位學(xué)習(xí)者生成評(píng)價(jià)任務(wù)表，評(píng)價(jià)任務(wù)的分配是同伴評(píng)價(jià)系統(tǒng)一個(gè)重要功能，保證每位評(píng)價(jià)者的任務(wù)數(shù)量是相同的，按照不同的互評(píng)模式對(duì)評(píng)價(jià)者和被評(píng)價(jià)者進(jìn)行配對(duì)。實(shí)現(xiàn)原理是將每位學(xué)習(xí)者提交的作品進(jìn)行隨機(jī)編號(hào)，如果是小組作業(yè)，則以小組為單位進(jìn)行作品編號(hào)。系統(tǒng)根據(jù)評(píng)價(jià)數(shù)量和互評(píng)關(guān)系通過(guò)算法進(jìn)行匹配，自動(dòng)生成每位評(píng)價(jià)者的同伴評(píng)價(jià)任務(wù)分配表，如表1所示。表1以10位學(xué)習(xí)者為例，展示了兩種互評(píng)模式下評(píng)價(jià)者和被評(píng)價(jià)者的配對(duì)結(jié)果。

從表1可以看出，直接互評(píng)模式下被評(píng)價(jià)同伴將對(duì)評(píng)價(jià)者的作品進(jìn)行評(píng)價(jià)，間接互評(píng)模式下被評(píng)價(jià)者不會(huì)對(duì)評(píng)價(jià)者的作品進(jìn)行評(píng)價(jià)。

評(píng)價(jià)任務(wù)發(fā)布和分配后，學(xué)習(xí)者可以查看同伴評(píng)價(jià)任務(wù)的具體要求以及同伴評(píng)價(jià)任務(wù)表。任務(wù)表顯示被評(píng)價(jià)的同伴作品編號(hào)，被評(píng)價(jià)同伴姓名（被評(píng)價(jià)者匿名時(shí)則不顯示），互評(píng)關(guān)系，作業(yè)完成情況，評(píng)價(jià)狀態(tài)，評(píng)價(jià)截止時(shí)間等，如圖2所示。

圖2 同伴評(píng)價(jià)任務(wù)表

（3）同伴評(píng)價(jià)與反饋

如果教師在發(fā)布評(píng)價(jià)任務(wù)時(shí)允許自我評(píng)價(jià)，學(xué)習(xí)者還可以對(duì)自己的作品進(jìn)行評(píng)價(jià)。自我評(píng)價(jià)能夠輔助同伴評(píng)價(jià)的開(kāi)展，提高學(xué)習(xí)者的反思能力。學(xué)習(xí)者獲取同伴評(píng)價(jià)任務(wù)后，通過(guò)被評(píng)同伴作品編號(hào)鏈接入同伴評(píng)價(jià)頁(yè)面。根據(jù)教師設(shè)置的評(píng)價(jià)形式，學(xué)習(xí)者以署名或匿名的方式對(duì)同伴的作品進(jìn)行量化評(píng)分或文本評(píng)價(jià)，學(xué)習(xí)者在進(jìn)行文本評(píng)價(jià)時(shí)被要求對(duì)同伴作品的亮點(diǎn)和不足進(jìn)行評(píng)價(jià)，提出修改意見(jiàn)。學(xué)習(xí)者評(píng)價(jià)之后可以瀏覽教師和其他同伴對(duì)于該作品的評(píng)價(jià)。學(xué)習(xí)者在參與同伴評(píng)價(jià)任務(wù)過(guò)程中，既是評(píng)價(jià)者，又是被評(píng)價(jià)者，學(xué)習(xí)者可以查看同伴對(duì)自己作品的評(píng)價(jià)。

同伴評(píng)價(jià)的形式主要有定量評(píng)分和定性文本評(píng)論，教師通常采取兩種方式進(jìn)行結(jié)合。學(xué)習(xí)者在評(píng)價(jià)過(guò)同伴的作品之后，由被評(píng)價(jià)者對(duì)同伴的評(píng)價(jià)質(zhì)量進(jìn)行評(píng)價(jià)，并對(duì)同伴的評(píng)價(jià)內(nèi)容和行為進(jìn)行反饋，以幫助同伴提高評(píng)價(jià)質(zhì)量。同伴的反饋對(duì)評(píng)價(jià)者的行為有一定的約束作用。為保證反饋的公正性，系統(tǒng)在反饋前隱藏同伴的評(píng)分，反饋后再顯示，以避免因?yàn)檩^低的評(píng)分而給予負(fù)面的反饋。小組作業(yè)的成員需要全體參與到同伴反饋，根據(jù)評(píng)價(jià)人的數(shù)量以及小組人數(shù)來(lái)調(diào)節(jié)每位組員的工作量。文本評(píng)論質(zhì)量的評(píng)價(jià)依賴(lài)于被評(píng)價(jià)者積極地完成反饋，系統(tǒng)對(duì)學(xué)習(xí)者反饋同伴的情況也進(jìn)行監(jiān)控，如果有待完成的反饋任務(wù)，系統(tǒng)將進(jìn)行提醒。

（4）小組貢獻(xiàn)評(píng)價(jià)

小組學(xué)習(xí)是可以促進(jìn)學(xué)習(xí)者各方面能力的發(fā)展，如責(zé)任心，人際交流能力，小組協(xié)作以及組織能力，在高校教學(xué)中被廣泛地使用。但在實(shí)踐中卻容易存在搭便車(chē)的情況。如何公正地評(píng)價(jià)小組中各成員的成績(jī)是一個(gè)難題。教師因?yàn)檩^少參加小組內(nèi)部活動(dòng)，很難進(jìn)行公正、合理的評(píng)價(jià)，只有小組成員才有足夠的信息對(duì)相互之間的貢獻(xiàn)進(jìn)行評(píng)價(jià)。小組貢獻(xiàn)評(píng)價(jià)可以解決小組成員作品分?jǐn)?shù)一致沒(méi)有區(qū)分度的問(wèn)題，讓貢獻(xiàn)較多的成員獲得較高分?jǐn)?shù)，讓貢獻(xiàn)較少的成員獲得較低的分?jǐn)?shù)。教師可以通過(guò)貢獻(xiàn)評(píng)價(jià)頁(yè)面為小組作業(yè)創(chuàng)建貢獻(xiàn)評(píng)價(jià)任務(wù)。發(fā)布時(shí)教師需要設(shè)置該任務(wù)的起止時(shí)間，依據(jù)貢獻(xiàn)大小的等級(jí)設(shè)置加權(quán)系數(shù)。系統(tǒng)將小組成員的貢獻(xiàn)分為五個(gè)等級(jí)：遠(yuǎn)超過(guò)平均值、比平均值略多、平均值、比平均值略少、遠(yuǎn)低于平均值，賦予1分到5分的分值，學(xué)習(xí)者在進(jìn)行小組貢獻(xiàn)評(píng)價(jià)時(shí)依據(jù)該等級(jí)評(píng)分。以貢獻(xiàn)達(dá)到平均值為基準(zhǔn)系數(shù)（設(shè)為1），教師為不同貢獻(xiàn)等級(jí)設(shè)置適當(dāng)?shù)呢暙I(xiàn)系數(shù)。學(xué)習(xí)者的總成績(jī)以小組作品成績(jī)?yōu)榛鶞?zhǔn)，根據(jù)個(gè)人貢獻(xiàn)的多少進(jìn)行加權(quán)。教師發(fā)布小組貢獻(xiàn)評(píng)價(jià)任務(wù)后，學(xué)習(xí)者可以查看任務(wù)列表，進(jìn)行個(gè)人貢獻(xiàn)描述，并根據(jù)其他組員的貢獻(xiàn)描述和實(shí)際貢獻(xiàn)情況，給予相應(yīng)等級(jí)的評(píng)價(jià)。如果評(píng)價(jià)者給全部或多數(shù)組員過(guò)高或過(guò)低的貢獻(xiàn)評(píng)分，系統(tǒng)將不予通過(guò)。

4.課程統(tǒng)計(jì)模塊

學(xué)習(xí)者在完成相關(guān)任務(wù)后，教師需要進(jìn)行很多項(xiàng)目的統(tǒng)計(jì)工作，例如學(xué)習(xí)者的學(xué)習(xí)進(jìn)度，同伴評(píng)價(jià)作品成績(jī)，同伴評(píng)價(jià)行為質(zhì)量的量化成績(jī)，基于組員貢獻(xiàn)對(duì)小組作業(yè)成績(jī)的統(tǒng)計(jì)。如果采用傳統(tǒng)的方式進(jìn)行統(tǒng)計(jì)，由于其巨大的工作量，將會(huì)給教師帶來(lái)較大的負(fù)擔(dān)，學(xué)習(xí)者也無(wú)法得知其成績(jī)?cè)u(píng)定的細(xì)節(jié)，而系統(tǒng)的統(tǒng)計(jì)功能可以解決上述問(wèn)題。

（1）進(jìn)度監(jiān)控與統(tǒng)計(jì)。教師發(fā)布各項(xiàng)任務(wù)后，需要對(duì)學(xué)習(xí)者的學(xué)習(xí)進(jìn)度進(jìn)行監(jiān)控和管理。系統(tǒng)為教師統(tǒng)計(jì)全體學(xué)習(xí)者的作業(yè)提交、同伴評(píng)價(jià)與反饋、小組貢獻(xiàn)評(píng)價(jià)的完成情況，并提供詳情；系統(tǒng)為學(xué)習(xí)者統(tǒng)計(jì)課程任務(wù)的完成情況，以清單的形式列出所有任務(wù)及其完成進(jìn)度。這些任務(wù)包括提交課程作業(yè)，加入課程小組，評(píng)價(jià)同伴作品，反饋同伴評(píng)價(jià)，提交個(gè)人貢獻(xiàn)，評(píng)價(jià)組員貢獻(xiàn)。

（2）作業(yè)成績(jī)統(tǒng)計(jì)：一般的作業(yè)由教師評(píng)定成績(jī)，同伴參與評(píng)價(jià)的作業(yè)，其成績(jī)由多個(gè)評(píng)價(jià)主體共同評(píng)定，系統(tǒng)根據(jù)不同主體的權(quán)重計(jì)算總評(píng)分。小組作業(yè)的成績(jī)?cè)u(píng)定，由系統(tǒng)統(tǒng)計(jì)學(xué)習(xí)者的小組貢獻(xiàn)系數(shù)，以小組作品總評(píng)分為基準(zhǔn)，計(jì)算總評(píng)分。教師和學(xué)習(xí)者可以查看作業(yè)成績(jī)統(tǒng)計(jì)過(guò)程的細(xì)節(jié)。

（3）評(píng)價(jià)行為成績(jī)統(tǒng)計(jì)。在同伴評(píng)價(jià)過(guò)程中，只有參與評(píng)價(jià)的學(xué)習(xí)者積極認(rèn)真地履行評(píng)價(jià)職責(zé)，評(píng)價(jià)才能取得良好的效果。教師需要對(duì)同伴評(píng)價(jià)的質(zhì)量進(jìn)行監(jiān)控，并對(duì)評(píng)價(jià)質(zhì)量高的學(xué)習(xí)者進(jìn)行激勵(lì)。筆者的一項(xiàng)問(wèn)卷調(diào)查表明：79.8%的學(xué)習(xí)者表示贊成教師將評(píng)價(jià)質(zhì)量進(jìn)行成績(jī)考核；76.8%的學(xué)習(xí)者認(rèn)為這一措施可以提供同伴評(píng)價(jià)質(zhì)量。為提高學(xué)習(xí)者參與評(píng)價(jià)的積極性和評(píng)價(jià)質(zhì)量，督促學(xué)習(xí)者認(rèn)真完成同伴任務(wù)，系統(tǒng)將同伴評(píng)價(jià)行為的質(zhì)量進(jìn)行量化，并納入平時(shí)成績(jī)考核中去。由教師設(shè)置同伴評(píng)價(jià)行為的考核規(guī)則，以及該項(xiàng)成績(jī)?cè)诳偝煽?jī)中的權(quán)重。

學(xué)習(xí)者的同伴評(píng)價(jià)行為成績(jī)由三部分組成，量化評(píng)分的質(zhì)量，文本評(píng)論的質(zhì)量，以及對(duì)同伴反饋的完成度，每一部分均量化為百分制，由教師設(shè)定各部分的權(quán)重。評(píng)分質(zhì)量的考核是將單個(gè)評(píng)價(jià)者的評(píng)分與教師評(píng)分和總評(píng)分進(jìn)行比較，考查其一致性，一致性越高，說(shuō)明評(píng)分質(zhì)量越高。評(píng)論質(zhì)量的考核由被評(píng)價(jià)者完成，根據(jù)被評(píng)價(jià)者進(jìn)行同伴反饋時(shí)給出的評(píng)價(jià)結(jié)果進(jìn)行統(tǒng)計(jì)。如果被評(píng)價(jià)者超期未對(duì)同伴的評(píng)論進(jìn)行反饋，教師可以設(shè)定為默認(rèn)好評(píng)或由教師代為反饋。同伴反饋的考核主要考察完成度，即個(gè)人反饋的數(shù)量與待反饋數(shù)量比例。如果是小組作業(yè)，以小組整體為單位考察同伴反饋的完成度。

同伴評(píng)價(jià)行為成績(jī)由系統(tǒng)依據(jù)評(píng)分規(guī)則，對(duì)同伴評(píng)價(jià)行為進(jìn)行量化成績(jī)統(tǒng)計(jì)。系統(tǒng)提供學(xué)習(xí)者每一項(xiàng)評(píng)價(jià)行為的細(xì)節(jié)及得分情況，如圖3所示。圖3中評(píng)價(jià)形式為百分制加文本，系統(tǒng)分別統(tǒng)計(jì)了量化評(píng)分評(píng)價(jià)成績(jī)、文本評(píng)論的評(píng)價(jià)成績(jī)、以及同伴反饋的成績(jī)。

（4）課程成績(jī)匯總。課程成績(jī)統(tǒng)計(jì)方便用戶查看單獨(dú)的作業(yè)成績(jī)和評(píng)價(jià)成績(jī)的細(xì)節(jié)，但不能對(duì)成績(jī)進(jìn)行匯總顯示。為方便教師對(duì)作業(yè)成績(jī)和評(píng)價(jià)成績(jī)進(jìn)行匯總統(tǒng)計(jì)，制作報(bào)表，系統(tǒng)提供了成績(jī)匯總功能，提取歷次作業(yè)和評(píng)價(jià)行為成績(jī)，如圖4所示。

如果教師布置有多次課程作業(yè)，通常的做法是將歷次作業(yè)成績(jī)相加取平均分。在實(shí)際教學(xué)中，如果某次作業(yè)比較重要，教師可以賦予該作業(yè)較高的權(quán)重。系統(tǒng)允許教師對(duì)作業(yè)的權(quán)重進(jìn)行設(shè)置，可以平均分配，也可以不平均分配。如果是后者，教師可以設(shè)置作業(yè)的權(quán)重，系統(tǒng)依據(jù)每份作業(yè)的權(quán)重計(jì)算課程作業(yè)總成績(jī)。如果有多次同伴評(píng)價(jià)任務(wù)，則取平均分。系統(tǒng)依據(jù)作業(yè)成績(jī)和同伴評(píng)價(jià)成績(jī)的權(quán)重，計(jì)算課程總成績(jī)。

四、總結(jié)和討論

1.應(yīng)用情況

本系統(tǒng)完成后，在南京曉莊學(xué)院新聞傳播學(xué)院2011級(jí)到2014級(jí)多個(gè)班級(jí)的課程中投入了使用。如社科類(lèi)課程《社會(huì)研究方法》、《社會(huì)心理學(xué)》，理工類(lèi)課程《php網(wǎng)絡(luò)編程》、《網(wǎng)頁(yè)設(shè)計(jì)》，取得了較好的效果。每一輪使用后，就同伴評(píng)價(jià)的效果和系統(tǒng)的功能進(jìn)行了調(diào)研。最新一次針對(duì)三個(gè)班級(jí)的99位學(xué)習(xí)者的調(diào)查顯示，78.9%的人認(rèn)為同伴的評(píng)價(jià)可以促進(jìn)反思，意識(shí)到自己作品的不足；83.1%的人認(rèn)為同伴的意見(jiàn)可以幫助修改和完善作品，74.6%的學(xué)習(xí)者認(rèn)為同伴的意見(jiàn)是中肯的?？傮w而言，多數(shù)學(xué)習(xí)者認(rèn)可同伴評(píng)價(jià)這種方式。筆者對(duì)使用系統(tǒng)的教師也進(jìn)行了訪談。受訪者表示：系統(tǒng)功能較為完善，可以滿足教師進(jìn)行同伴評(píng)價(jià)實(shí)踐的需要，方便易用。此外，用戶對(duì)系統(tǒng)的功能方面提出了各種改進(jìn)建議，比如完善流程控制，提供系統(tǒng)使用說(shuō)明和指導(dǎo)等。筆者結(jié)合用戶反饋的意見(jiàn)對(duì)系統(tǒng)的功能不斷進(jìn)行完善。

圖3 學(xué)習(xí)者評(píng)價(jià)行為成績(jī)?cè)斍?/p>

圖4 成績(jī)匯總

2.小結(jié)和討論

基于php的在線同伴評(píng)價(jià)基本能夠滿足當(dāng)前同伴評(píng)價(jià)實(shí)踐需要，但也存在一些問(wèn)題，例如對(duì)于同伴評(píng)價(jià)行為表現(xiàn)進(jìn)行量化的算法比較簡(jiǎn)單，存在一定誤差。在進(jìn)行小組貢獻(xiàn)評(píng)價(jià)時(shí)，會(huì)陷入一團(tuán)和氣，評(píng)價(jià)者礙于情面對(duì)低貢獻(xiàn)者仍給予較高評(píng)級(jí)，不能完全有效地區(qū)分不同學(xué)習(xí)者的貢獻(xiàn)。這種情況尤其在小組成員較少時(shí)比較明顯，這超出了系統(tǒng)設(shè)計(jì)本身的問(wèn)題。在同伴評(píng)價(jià)實(shí)踐中，除了系統(tǒng)平臺(tái)的支持之外，學(xué)生和教師都需要付出額外的精力。教師在任務(wù)發(fā)布后，需要跟蹤學(xué)生評(píng)價(jià)進(jìn)度，對(duì)學(xué)生進(jìn)行督促，激勵(lì)學(xué)生積極、高質(zhì)量地進(jìn)行同伴評(píng)價(jià)。

本系統(tǒng)不僅適用于高校的傳統(tǒng)教學(xué)，也可應(yīng)用在高校的慕課教學(xué)評(píng)價(jià)實(shí)踐中，下一步將擴(kuò)大其應(yīng)用范圍，完善系統(tǒng)功能。

[1]Albon R.A Case Study of the Integration of Self, Peer,and Group Assessment in a CoreFirst.Year Educational Psychology Unit through Flexible Delivery Implementation f[M].Bundaberg：Information Science Publishing,2006．

[2]Lin,S.S.J.,Liu,&Yuan,S.-M.Web-based peer assessment:Relation of attitude and achievement[J].IEEE Transactions on Education,2001,44(2)13.

[3]范奕博.慕課中的同伴互評(píng).http://weibo.com/p/1005052484767530/home,2015.

[4]許姣華.基于學(xué)習(xí)者特征的適應(yīng)性同伴評(píng)價(jià)系統(tǒng)的研究與實(shí)現(xiàn)[D].華南師范大學(xué)碩士學(xué)位論文,2010:1-2.

[5]Sung YT．,Chang K．E．,Chiou S．K．，Hou H．T．The design and application of a web-basedself-and peer-assessment system[J]．Computers&Education，2005,45(2):187-202．

[6]Mulder R．A．,Pearce J．M．PRAZE：Innovating teaching through online peer review[C]．Proceedings ascilite Singapore 2007．ICT：Providing choices for learners and learning，2007：727-736．

[7]Lan Li A．L．S．Peer Assessment Support System (PASS)[J]．The Instructional DesignPortfolio，2004(49):80,84．

[8]沈度珩,黃信義.網(wǎng)路同儕互評(píng)在Moodle系統(tǒng)上的應(yīng)用[J].教育資料與圖書(shū)館學(xué),2006,43(3)：67,284．

[9]張倩.網(wǎng)絡(luò)環(huán)境下同伴匿名評(píng)價(jià)實(shí)證研究[J].電化教育研究，2007(7):55-57.

[10]舒存葉,張海萍.網(wǎng)絡(luò)環(huán)境下同伴評(píng)價(jià)影響因素的實(shí)證研究[J].電化教育研究,2005（2）：89-93.

（編輯：楊馥紅）

G40-057

A

1673-8454（2016）23-0092-05

本文為2015年度江蘇省教育科學(xué)十二五規(guī)劃重點(diǎn)課題“基于慕課的新聞社科類(lèi)課程翻轉(zhuǎn)課堂模式應(yīng)用效果的實(shí)證研究——以地方應(yīng)用型高校為例”(課題編號(hào)：B-b/2015/01/079)的階段性研究成果。