• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    超越常規(guī)評(píng)價(jià)方法:網(wǎng)絡(luò)世界的成績(jī)認(rèn)定

    2015-09-10 07:22:44史蒂芬·道恩斯肖俊洪
    中國(guó)遠(yuǎn)程教育 2015年6期
    關(guān)鍵詞:學(xué)習(xí)網(wǎng)絡(luò)評(píng)價(jià)

    史蒂芬·道恩斯 肖俊洪

    【摘 要】

    基于網(wǎng)絡(luò)的評(píng)價(jià)形式涉及面更加廣泛,有了這種形式的評(píng)價(jià),考試和審查將會(huì)是多余的,而電子檔案袋和開(kāi)放徽章僅僅代表第一波基于網(wǎng)絡(luò)的評(píng)價(jià)形式。本文討論了基于網(wǎng)絡(luò)的能力自動(dòng)發(fā)展和認(rèn)定(network-based automated competency development and recognition)領(lǐng)域的新進(jìn)展給傳統(tǒng)機(jī)構(gòu)帶來(lái)的挑戰(zhàn),和給真正自主的開(kāi)放學(xué)習(xí)帶來(lái)的機(jī)會(huì)。本文還探討了與學(xué)習(xí)分析和評(píng)價(jià)相關(guān)的道德規(guī)范問(wèn)題以及另類(lèi)證書(shū)的發(fā)展情況,在此基礎(chǔ)上提出基于社交和社區(qū)環(huán)境所產(chǎn)生的內(nèi)容對(duì)個(gè)人學(xué)習(xí)進(jìn)行評(píng)價(jià)的一種機(jī)制。

    【關(guān)鍵詞】 ?網(wǎng)絡(luò);學(xué)習(xí);評(píng)價(jià);社交媒體;分析技術(shù);道德規(guī)范

    【中圖分類(lèi)號(hào)】 ?G420 ? ? ?【文獻(xiàn)標(biāo)識(shí)碼】 ?B ? ? ?【文章編號(hào)】 1009—458x(2015)06—0034—13

    導(dǎo)讀:本文是加拿大學(xué)者、慕課創(chuàng)始人之一史蒂芬·道恩斯(Stephen Downes)為本刊撰寫(xiě)的系列文章之三,三篇文章分別闡述作者對(duì)網(wǎng)絡(luò)世界的開(kāi)放學(xué)習(xí)、個(gè)人學(xué)習(xí)和成績(jī)認(rèn)定的批判性思考。

    《超越常規(guī)評(píng)價(jià)方法:網(wǎng)絡(luò)世界的成績(jī)認(rèn)定》首先通過(guò)發(fā)生在幾年前的一個(gè)真實(shí)事例對(duì)傳統(tǒng)學(xué)習(xí)評(píng)價(jià)方式的客觀性和準(zhǔn)確性提出質(zhì)疑。2007年,美國(guó)麻省理工學(xué)院招生辦主任在工作28年后獲得該校最高榮譽(yù)獎(jiǎng)但卻被揭發(fā)偽造學(xué)歷(沒(méi)有獲得過(guò)學(xué)位),于是被迫辭職。道恩斯有感而發(fā)提出一系列值得深思的問(wèn)題:何謂成功?成功的標(biāo)準(zhǔn)是什么?學(xué)位的價(jià)值有多大?作者認(rèn)為評(píng)價(jià)的目的是為了了解技能差距,即個(gè)人已經(jīng)具備的技能與“應(yīng)該具備”的技能之間的差距。從現(xiàn)實(shí)看,傳統(tǒng)正規(guī)教育培養(yǎng)出來(lái)的人才不能滿足要求,因此有機(jī)構(gòu)(比如Canada2020)提出一系列縮小技能差距的措施。文章在第三節(jié)闡述了傳統(tǒng)評(píng)價(jià)方式的不足,首先是混淆教育結(jié)果(考試成績(jī))與教育過(guò)程,作者認(rèn)為“用測(cè)試、成效為本的方法發(fā)展教育并非難事,但是一旦這樣做,教育體系的根基就會(huì)受到破壞”。換言之,簡(jiǎn)單化學(xué)習(xí)過(guò)程的評(píng)價(jià)(考核)無(wú)助于學(xué)習(xí)效果的提高,也無(wú)助于客觀評(píng)價(jià)學(xué)習(xí)效果。其次,為了方便考核,使考核具有可操作性,我們經(jīng)常杜撰一些有違事實(shí)或說(shuō)不清道不明的概念,比如“能力”——這是當(dāng)代教育的一個(gè)熱詞,能力為本的教育更是一種時(shí)髦,但是什么是某門(mén)課程或某個(gè)職位必備的能力?這個(gè)問(wèn)題貌似多余——這些不是清楚列出來(lái)的嗎?但作者認(rèn)為這樣做缺乏理?yè)?jù)。正因?yàn)槿绱?,各種另類(lèi)認(rèn)定方式已經(jīng)悄然出現(xiàn)。換言之,正規(guī)教育體系的成績(jī)考核方法正在受到越來(lái)越多“另類(lèi)”評(píng)價(jià)方式的挑戰(zhàn)。

    那么,什么才是評(píng)價(jià)的內(nèi)容和目標(biāo)呢?文章第四節(jié)指出重點(diǎn)在理解和做。我們不能光看“懂”多少實(shí)事、理論、規(guī)則等等,而是要看能否準(zhǔn)確“識(shí)別”——做,也就是說(shuō)要強(qiáng)調(diào)教育的過(guò)程——如何學(xué)習(xí)“做”。何謂評(píng)價(jià)?第五節(jié)指出評(píng)價(jià)是一項(xiàng)(模式)識(shí)別任務(wù),在科學(xué)技術(shù)高度發(fā)達(dá)的今天,我們要發(fā)揮技術(shù)的作用,作為一項(xiàng)識(shí)別任務(wù),評(píng)價(jià)“涉及神經(jīng)網(wǎng)絡(luò)的工作,涉及我們?nèi)绾卧O(shè)計(jì)和建設(shè)界面,涉及我們與物聯(lián)網(wǎng)的交互”。因此,我們要注意避免在網(wǎng)絡(luò)交互中無(wú)意泄露自己的情感變化(反應(yīng)),要注意數(shù)據(jù)挖掘與分析的道德規(guī)范。但現(xiàn)實(shí)的情況是,個(gè)人數(shù)據(jù)難以得到妥善保護(hù),因此我們必須保護(hù)好個(gè)人隱私。

    文章最后一節(jié)闡述一種新的評(píng)價(jià)系統(tǒng),或者說(shuō)是作者對(duì)新的評(píng)價(jià)系統(tǒng)的“設(shè)想”。它的基本運(yùn)作機(jī)制是使用個(gè)人服務(wù)器,用戶(hù)能有效管控自己的資料和身份。這個(gè)系統(tǒng)跟神經(jīng)網(wǎng)絡(luò)一樣是一種模式識(shí)別器;人人都是策展者,每個(gè)人所做的一切,其他人都能看到、識(shí)別、傳播和評(píng)論等。

    本文所闡述的成績(jī)?cè)u(píng)價(jià)在很大程度上已經(jīng)超越一般意義的學(xué)習(xí)成績(jī)考核,涉及對(duì)人的綜合評(píng)價(jià)。也許我們覺(jué)得道恩斯的觀點(diǎn)和設(shè)想顯得過(guò)于超前、不甚現(xiàn)實(shí)或在現(xiàn)實(shí)中可行性不大(至少?gòu)哪壳暗那闆r看,尤其是考慮到正規(guī)教育評(píng)價(jià)體系的根深蒂固和普羅大眾人才觀的根深蒂固),但是本文對(duì)于現(xiàn)行成績(jī)認(rèn)定或人才評(píng)價(jià)方法的批判不是空穴來(lái)風(fēng),現(xiàn)實(shí)的確存在,我們?cè)缫选傲?xí)以為?!倍笆煲暉o(wú)睹”,但又經(jīng)常隱約感到“不對(duì)勁”的“頑疾”。這就是為什么人才培養(yǎng)模式改革一直都是各國(guó)教育改革的出發(fā)點(diǎn)和落腳點(diǎn)。但是,毋庸諱言,教育改革成效甚微——全世界都如此。道恩斯在這篇文章中對(duì)此作了專(zhuān)門(mén)的批判并探討了其中的原因。我們現(xiàn)在經(jīng)常批評(píng)學(xué)生高分低能,動(dòng)手能力差,其實(shí)這涉及我們應(yīng)該評(píng)價(jià)什么這個(gè)根本問(wèn)題。從社會(huì)對(duì)人才的評(píng)價(jià)看,的確也存在很多值得深思的問(wèn)題。比如說(shuō),在其他國(guó)家和地區(qū),包括我國(guó)港澳地區(qū),銀行前臺(tái)柜員的任職條件通常是高中畢業(yè)外加相關(guān)從業(yè)資格證書(shū),而在中國(guó)大陸,銀行在招聘柜員時(shí)通常都提出應(yīng)聘者必須具備本科或以上學(xué)歷?,F(xiàn)在中國(guó)大學(xué)生在校最后一年的主要任務(wù)是找工作,趕集似地參加各種招聘會(huì)、筆試、面試,這從某種意義上講只能說(shuō)明社會(huì)的人才觀與教育界的人才觀脫節(jié)了,誰(shuí)是誰(shuí)非難以理清,但我們不能讓無(wú)辜的學(xué)生“買(mǎi)單”,學(xué)生最不應(yīng)該成為“受害者”!

    在“另類(lèi)”成績(jī)認(rèn)定或人才評(píng)價(jià)方法逐漸被人所接受的今天,專(zhuān)門(mén)從事遠(yuǎn)程開(kāi)放教育的我們是否比傳統(tǒng)正規(guī)教育機(jī)構(gòu)更具優(yōu)勢(shì)?我們能夠在哪些方面扮演更加積極的角色?我們的教育模式或人才培養(yǎng)模式又該朝哪個(gè)方向發(fā)展?我們的課程體系、管理體系和評(píng)價(jià)體系等又該如何與時(shí)俱進(jìn)?凡此種種,都值得我們深思和探索。

    道恩斯是“名人”,但是,從向他發(fā)出稿約到這三篇文章的完稿,歷時(shí)8個(gè)月。在此期間,我們說(shuō)不清有過(guò)多少次郵件往來(lái),磋商、討論、釋疑和商榷——不厭其煩,委實(shí)難能可貴。我們謹(jǐn)再次向史蒂芬·道恩斯致以衷心感謝?。ㄐた『椋?/p>

    一、何謂成功

    麻省理工學(xué)院的招生辦主任為學(xué)校服務(wù)28年后獲得學(xué)院的“領(lǐng)導(dǎo)變革卓越獎(jiǎng)”,然而人們發(fā)現(xiàn)她竟然沒(méi)有任何學(xué)位(Lewin, 2007)。這位主任已經(jīng)被迫辭職,她當(dāng)初不該偽造學(xué)歷,但有趣的是即使沒(méi)有受過(guò)正規(guī)大學(xué)教育,她在招生辦主任這個(gè)崗位上干得非常出色,因此而獲得享譽(yù)世界的麻省理工學(xué)院頒發(fā)的最高榮譽(yù)獎(jiǎng)。這件事促使我們思考學(xué)位的價(jià)值。

    事實(shí)上很多人同樣有弄虛作假的行為(Tremonti, 2014),而且不僅僅是在職場(chǎng)上偽造學(xué)歷。最常見(jiàn)的是對(duì)文化知識(shí)不懂裝懂,比如,沒(méi)有讀過(guò)《戰(zhàn)爭(zhēng)與和平》的人卻假裝對(duì)其人物和情節(jié)非常熟悉。再如,很多人(包括我自己)沒(méi)有讀過(guò)《白鯨》,但卻喜歡談?wù)撈淝楣?jié)。

    在討論這類(lèi)問(wèn)題時(shí),是否存在一種核心知識(shí)——我們每個(gè)人都知道的共同文化遺產(chǎn)?或者說(shuō),我們每一個(gè)人都是文化架構(gòu)(cultural fabric)的一條線,共同構(gòu)成我們的文化架構(gòu)嗎?究竟哪些東西可以偽造?哪些東西偽造不了?比如,是否懂一種語(yǔ)言是造假不了的。

    把文化看成是一種語(yǔ)言,即有助于我們彼此交流的工具(Hereford, 2014)——這點(diǎn)很有趣。比如在一個(gè)會(huì)議上一位發(fā)言者引用了格雷·伊根(Greg Egan)一本科幻小說(shuō)作為例子,因?yàn)槲抑酪粮晕尹c(diǎn)頭表示同意,以使交流繼續(xù)下去。但是,不幸的是,我沒(méi)有讀過(guò)他引用的那本小說(shuō),所以不明白這個(gè)例子的背景,無(wú)法接著他的話發(fā)表意見(jiàn)。由此可見(jiàn),文化知識(shí)可以造假,而文化交互無(wú)法造假。我們有時(shí)以為懂一種語(yǔ)言、懂一種文化指的是記住一系列事實(shí);如果我們知道這些事實(shí),我們便知道別人知道了什么。但是,誠(chéng)如維特根斯坦(Wittgenstein)所言,記住事實(shí)或規(guī)則不意味著懂這種語(yǔ)言。語(yǔ)言是更加動(dòng)態(tài)、更具行為性和更加復(fù)雜的東西;語(yǔ)言不是一系列事實(shí),而是體現(xiàn)為一種技能,像玩游戲,也像一種生活方式。

    從這個(gè)角度看,成功指的是什么呢(Thomason, 2014)?一個(gè)人能夠當(dāng)好麻省理工學(xué)院招生辦主任,那么她是成功的;如果她僅熟記招生辦主任的任職條件、要求和職責(zé),她是不成功的。再如,對(duì)于研究者而言,什么才算是成功呢?學(xué)者的成功是不是取決于論文數(shù)量、論文被引量以及發(fā)表這些論文的期刊的影響因子?顯然,我們不能以這些標(biāo)準(zhǔn)來(lái)論成敗。

    回到學(xué)習(xí)成績(jī)這個(gè)主題,學(xué)習(xí)指的是什么?什么樣的學(xué)習(xí)才算是成功的學(xué)習(xí)?如何評(píng)價(jià)學(xué)習(xí)成績(jī)?這些都是值得我們認(rèn)真探索的問(wèn)題。一,雖然今天我們可以通過(guò)更多渠道求職,然而找到適合自己的工作的難度似乎越來(lái)越大(Young, 2014a)。為什么會(huì)這樣呢?二,今天學(xué)生們?cè)诰W(wǎng)上留下很多數(shù)據(jù)蹤跡,從人口信息到閱讀、喜歡什么電子書(shū)等等。如果把這些數(shù)據(jù)蹤跡作為評(píng)價(jià)學(xué)習(xí)成績(jī)的依據(jù),我們應(yīng)該怎樣做才符合道德規(guī)范呢(Young, 2014b)?三,學(xué)習(xí)經(jīng)歷因人而異;每個(gè)人都是獨(dú)特的,是什么人就有什么經(jīng)歷。他們學(xué)習(xí)的是自己最能理解的東西,這是不是意味著每個(gè)人都取得優(yōu)秀成績(jī)?四,我們需要慕課或非正式學(xué)習(xí)嗎?按照傳統(tǒng)標(biāo)準(zhǔn),這些顯然不是我們需要的(Moe, 2014)。這是因?yàn)檩z學(xué)者為數(shù)不少,學(xué)習(xí)者的目的也不是為了記住各種事實(shí),他們通過(guò)考試證明自己的知識(shí)并獲得學(xué)位。

    慕課或開(kāi)放在線學(xué)習(xí)正在改變教育的定義:我們不必從歷史根源上定義教育,教育是一種基于技能、具有工具性功能的活動(dòng),如同講一種語(yǔ)言一樣。

    二、評(píng)價(jià)的目的

    評(píng)價(jià)是為了了解技能差距。如果有人找不到工作,而有些崗位又招不到合適的人,這就意味著存在技能差距(圖1):找不到工作的人不具備崗位需要的技能。教育的目的是幫助這些人掌握工作需要的技能。另一方面,雇主也可以向這些人提供教育機(jī)會(huì),幫助他們掌握企業(yè)需要的技能,然后招聘他們。當(dāng)然,沒(méi)有雇主這樣做(Munroe, 2014a),原因之一可能是雇主不知道要招聘具備什么技能的員工。他們只知道缺人手,知道這些找不到工作的人不能勝任他們提供的崗位,但卻并不真正知道這些崗位需要什么技能。這就是為什么要面試求職者的原因,面試官通過(guò)交談便能判斷應(yīng)聘者是否合格——這是很有趣的現(xiàn)象。

    面對(duì)這種情況,政府和工商界有何對(duì)策?加拿大的一個(gè)智庫(kù)Canada 2020提出了一系列應(yīng)對(duì)措施:實(shí)施全國(guó)性學(xué)習(xí)成果評(píng)價(jià)計(jì)劃;成立技能和高等教育委員會(huì);增加土著居民教育和技能培訓(xùn)的投入;縮小男女之間的技能差距;改進(jìn)移民的資歷認(rèn)定和技能培訓(xùn)(Munroe, 2014b)。我認(rèn)為這些舉措的作用不大,問(wèn)題的關(guān)鍵在于我們?nèi)绾瘟私馍鐣?huì)需要什么和社會(huì)上的人已經(jīng)具備什么。換言之,我們必須能夠扮演合格面試官的角色。

    <D:\教育盤(pán)\2015年教育\2015-06\06-01.jpg>

    數(shù)據(jù)來(lái)源:加拿大國(guó)家統(tǒng)計(jì)局

    圖1 ?技能差距

    三、傳統(tǒng)的評(píng)價(jià)方式

    1. 混淆教育的結(jié)果與過(guò)程

    Canada 2020提出的對(duì)策無(wú)法解決我們的問(wèn)題,成立委員會(huì)、制訂技能和能力清單——這些都僅起到小修小補(bǔ)的作用,沒(méi)有觸及問(wèn)題實(shí)質(zhì)。比如,制訂學(xué)習(xí)任務(wù)清單的目的是為了給各種技能規(guī)定相應(yīng)的學(xué)習(xí)活動(dòng)(MacNeil, Wood, Zivcakova, Glover, & Smith, 2014)。這是教學(xué)設(shè)計(jì)的基礎(chǔ)(Quinlan, 2014)——根據(jù)教學(xué)目標(biāo)設(shè)計(jì)學(xué)習(xí)活動(dòng),學(xué)生完成學(xué)習(xí)活動(dòng),中間嵌入考核任務(wù),確保學(xué)生達(dá)到預(yù)定學(xué)習(xí)目標(biāo)。Canada 2020的一系列措施正是建立在這種理念的基礎(chǔ)上。再如,國(guó)際學(xué)生評(píng)估項(xiàng)目(PISA)的測(cè)試也不過(guò)如此:他們首先確定15歲的學(xué)生應(yīng)該掌握什么知識(shí)和技能,然后設(shè)計(jì)一套標(biāo)準(zhǔn)的試題,并對(duì)各國(guó)參賽成績(jī)進(jìn)行排名。

    這是非常傳統(tǒng)的方法。學(xué)習(xí)任務(wù)清單詳細(xì)列出某門(mén)課程的學(xué)習(xí)任務(wù),體現(xiàn)在標(biāo)準(zhǔn)化課程內(nèi)容上(如加拿大“西部教育協(xié)議”或美國(guó)的“州共同核心課程標(biāo)準(zhǔn)”),以提高學(xué)習(xí)效果?!氨娝苤稚⒕毩?xí)(把學(xué)習(xí)活動(dòng)分散在幾個(gè)相對(duì)較短的時(shí)間段進(jìn)行)的學(xué)習(xí)效果優(yōu)于集中練習(xí)”(MacNeil, Wood, Zivcakova, Glover, & Smith, 2014)。學(xué)習(xí)任務(wù)清單雖然能使學(xué)生明白自己需要學(xué)習(xí)什么,但是否真的對(duì)學(xué)習(xí)有幫助卻不得而知?!爸挥?0%-20%的學(xué)生相信學(xué)習(xí)任務(wù)清單在促進(jìn)學(xué)習(xí)或提高課程成績(jī)方面有很大作用?!?/p>

    制訂學(xué)習(xí)任務(wù)清單會(huì)增加教學(xué)設(shè)計(jì)工作量,但是否促進(jìn)學(xué)生學(xué)習(xí)或提高學(xué)習(xí)效果尚不清楚。有趣的是,在國(guó)際學(xué)生評(píng)估項(xiàng)目測(cè)試中取得好成績(jī)的國(guó)家現(xiàn)在開(kāi)始懷疑這個(gè)項(xiàng)目的作用。比如,上海(或者說(shuō)中國(guó))認(rèn)為學(xué)生的技能和素質(zhì)應(yīng)該通過(guò)各種各樣的活動(dòng)進(jìn)行培養(yǎng),而不是僅僅學(xué)習(xí)某些“核心”技能然后參加考試(Zhao, 2014)。“掌握”不只是記住可以通過(guò)考試檢查的事實(shí),像玩耍、在線活動(dòng)和游戲等都有助于學(xué)生掌握知識(shí)和技能。那么,我們又為何如此重視國(guó)際學(xué)生評(píng)估項(xiàng)目測(cè)試?有一種說(shuō)法是為了賺錢(qián),每生的考試費(fèi)是31美元,按美國(guó)5,000萬(wàn)學(xué)生計(jì)算,這筆收入非??捎^(Heick, 2014)。很多提倡考試的機(jī)構(gòu)都開(kāi)辦自己的考試業(yè)務(wù),比如提倡考試的《華盛頓郵報(bào)》擁有KAPLAN教育集團(tuán)。

    教育對(duì)經(jīng)濟(jì)發(fā)展和個(gè)人發(fā)展仍然至關(guān)重要,教育是為了進(jìn)一步提高技能(Pearson, 2014)。人們認(rèn)為教育是積累起來(lái)的,好像是把事實(shí)累加在一起,但我們知道教育不是這樣。有報(bào)告指出,一個(gè)國(guó)家里兒童上學(xué)的時(shí)間與這個(gè)國(guó)家工人的生產(chǎn)力直接相關(guān)。對(duì)此,我想從另一個(gè)角度說(shuō)明教育的重要性:教育程度越高,幸福感越高,社會(huì)越發(fā)達(dá)。

    我認(rèn)為我們的主要問(wèn)題是把教育結(jié)果(比如考試成績(jī)等)與教育過(guò)程混淆在一起。關(guān)注過(guò)程就是關(guān)注上學(xué)時(shí)間,而非考試成績(jī)。相對(duì)于教育過(guò)程而言,要證明考試成績(jī)與經(jīng)濟(jì)發(fā)展或生產(chǎn)力成正比,難度要大得多。是否達(dá)到學(xué)習(xí)目標(biāo)是很難通過(guò)考試檢驗(yàn)的。比如“理解”和“領(lǐng)會(huì)”這樣的學(xué)習(xí)目標(biāo)幾乎無(wú)法下定義(Talbert, 2014),從某種意義上講,不可言喻。

    上文把文化比喻為語(yǔ)言,以說(shuō)明學(xué)習(xí)的不可言喻性。我們無(wú)法用言語(yǔ)表達(dá)學(xué)習(xí)一種語(yǔ)言究竟是一種什么經(jīng)歷,語(yǔ)言知識(shí)、結(jié)構(gòu)和規(guī)則等都不同于學(xué)習(xí)的過(guò)程。同理,沒(méi)有一系列清晰易懂的概念和原理可用于說(shuō)明什么是“理解”,因此我們只能通過(guò)行為性的結(jié)果(比如“展示”“背誦”和“定義”等)來(lái)證明能夠理解,但是這些行為性結(jié)果靠的是死記硬背,可以造假,這正是考試的問(wèn)題:考試可以造假。

    加德納·坎貝爾(Campbell, 2014)指出:“妥善處理事物的復(fù)雜性才是重要的。如果用自信、通俗、簡(jiǎn)單、有條理的方法解決一件復(fù)雜事情,我聽(tīng)到的就不再是小斧頭砍樹(shù)的聲音,而是我坐在上面的那棵樹(shù)枝折斷的咔擦聲。”用測(cè)試、成效為本的方法發(fā)展教育并非難事,但是一旦這樣做,教育體系的根基就會(huì)受到破壞。

    2. 有心理過(guò)程這種東西嗎

    我們左右兩難:一方面不能依靠考試,另一方面,知識(shí)儲(chǔ)存在大腦里,很難提取出來(lái)。我們?cè)撛趺崔k(Watters, 2014)?是繼續(xù)采用黑匣子方法(建立在“背誦”“定義”等基礎(chǔ)上)(McLeod, 2014),還是采用休姆(Hume)所說(shuō)的“為了方便而憑空杜撰的東西”來(lái)掩蓋我們的無(wú)知。

    我為什么用“杜撰”一詞呢?大腦需要某種方法來(lái)決定對(duì)什么進(jìn)行編碼、如何編碼,以便在需要時(shí)能取回這些東西。大腦根據(jù)情緒反應(yīng)對(duì)信息進(jìn)行編碼,解決了上述問(wèn)題(Shackleton-Jones, 2014)。這是我們熟悉的理論。然而,什么是“情緒反應(yīng)”?即使能給出一個(gè)定義,這個(gè)定義具有可操作性嗎?能觀察得到嗎?這就是杜撰的東西。說(shuō)“大腦需要某種方法來(lái)決定對(duì)什么進(jìn)行編碼……”,我們?cè)趺粗肋@是大腦所需要的?這只不過(guò)是一個(gè)假設(shè),假設(shè)大腦在進(jìn)行某種活動(dòng),而實(shí)際并非如此。

    史蒂芬·塔爾伯特(Talbott, 2014)說(shuō)我們喜歡把人體、人體系統(tǒng)(包括思維和諸如血循環(huán)系統(tǒng)這樣的東西)當(dāng)成機(jī)器。比如,我們習(xí)慣把心臟比作“泵”,認(rèn)為心臟把血液輸送到血循環(huán)系統(tǒng)。他認(rèn)為如果真是這樣,心臟施加在血循環(huán)系統(tǒng)上的壓力會(huì)導(dǎo)致小血管破裂。事實(shí)上,血循環(huán)系統(tǒng)更像潮汐,牽涉血管里的液體和身體其他部位的液體,像潮水般流動(dòng)。

    如圖2所示,心臟是一個(gè)調(diào)節(jié)器。血液的流動(dòng)不僅僅靠心臟,身體其他器官也在發(fā)揮作用,比如大腿的靜脈將血液送回心臟。事實(shí)上,我們?nèi)碜鳛橐粋€(gè)系統(tǒng)在促使血液流動(dòng),心臟只是這個(gè)系統(tǒng)的一員。

    <D:\教育盤(pán)\2015年教育\2015-06\06-02.jpg>

    圖2 ?心臟不僅僅是一個(gè)泵

    3. 有能力這種東西嗎

    能力為本的教育(competency-based education)是當(dāng)代e-learning的主要趨勢(shì)(Tamburri, 2014)。這種教育根據(jù)學(xué)生展示的水平給他們頒發(fā)資格證書(shū)(Eduvation, 2014;Shapiro, 2014)。批評(píng)者認(rèn)為能力為本的教育更像是培訓(xùn),過(guò)于強(qiáng)調(diào)結(jié)果。這也許有點(diǎn)道理。但我認(rèn)為這種教育把一個(gè)大難題(比如評(píng)判某個(gè)人是否具備當(dāng)牙醫(yī)的資格)分解為若干小難題,每一個(gè)小難題跟原來(lái)的大難題一樣都不好解決。

    我甚至懷疑個(gè)人學(xué)習(xí)是否需要能力這種東西。難道我們需要把某個(gè)學(xué)習(xí)領(lǐng)域分解成一系列定義清晰的能力才能掌握這個(gè)領(lǐng)域的知識(shí)和技能嗎?我們?cè)谟懻撃硞€(gè)領(lǐng)域的學(xué)習(xí)時(shí)難道需要同時(shí)討論在這個(gè)領(lǐng)域所學(xué)到的能力嗎?比如,如果一個(gè)人獲得了我們所制定的物理學(xué)家必備的那些能力,這個(gè)人就成為物理學(xué)家了嗎?從某種意義上講的確如此(Mind/Shift, 2014)。有人認(rèn)為如果對(duì)能力沒(méi)有共識(shí)就不可能有個(gè)人學(xué)習(xí),比如我們必須知道物理學(xué)家應(yīng)該知道什么。但是,我們根據(jù)什么來(lái)界定物理學(xué)家應(yīng)該知道什么?這時(shí),能力為本的教育顯得力不從心,因?yàn)橐缍ㄎ锢韺W(xué)家必不可少的全部能力非常困難。只在某些情況下,我們才需要知道和要求某些共同的核心能力,這時(shí)個(gè)人學(xué)習(xí)才需要能力這種東西,但這是例外情況,不是常態(tài)。

    加拿大安大略高等教育質(zhì)量委員會(huì)(Higher Education Quality Council)對(duì)能力為本的教育的一項(xiàng)研究顯示,目前還沒(méi)有系統(tǒng)和全面研究證明能力為本的教育的哪些技能在實(shí)踐中得以體現(xiàn)(Abner, Bartosh, &Ungerleider, 2014)。因此,有人問(wèn):我們的實(shí)際工作究竟需要哪些能力?高中教育必須能培養(yǎng)學(xué)生哪些能力才算是合格教育?我們以為自己知道這些基本的能力,但事實(shí)上我們并不知道。于是,我們杜撰了各種能力,然后在沒(méi)有充分根據(jù)的情況下聲稱(chēng)這些是基本能力。

    4. 另類(lèi)證書(shū)

    過(guò)去我們僅有中學(xué)畢業(yè)證書(shū),學(xué)士、碩士和博士學(xué)位證書(shū)和一些專(zhuān)業(yè)證書(shū),而現(xiàn)在“另類(lèi)”認(rèn)定方式的種類(lèi)越來(lái)越多。比如:

    · Qualt(http://www.qualt.com/)與諸多專(zhuān)業(yè)機(jī)構(gòu)合作(如專(zhuān)業(yè)會(huì)計(jì)員協(xié)會(huì)[Association of Accounting Technicians]、谷歌、直銷(xiāo)與數(shù)字營(yíng)銷(xiāo)研究所[the Institute of Direct and Digital Marketing]等)提供職業(yè)技能慕課并頒發(fā)相應(yīng)證書(shū)。

    · 哈佛大學(xué)增設(shè)“準(zhǔn)備就緒證書(shū)”(Credential of Readiness),學(xué)生順利修完相關(guān)課程則可獲得此證書(shū),表明他(她)已經(jīng)為在哈佛學(xué)習(xí)做好準(zhǔn)備(Useem, 2014)。

    · 英國(guó)學(xué)習(xí)技術(shù)協(xié)會(huì)(Association for Learning Technology)為慕課“技術(shù)促進(jìn)學(xué)習(xí)”(the Open Course in Technology Enhanced Learning)配發(fā)徽章。此外,它還發(fā)布一個(gè)插件程序BadgeOS,可以給徽章加上“合規(guī)聲明”(Open Badges compliant Assertion),相當(dāng)于開(kāi)放徽章的DNA,包含徽章的頒發(fā)條件和持有人信息(Hawksey, 2014;Levine, 2014)。

    · Udacity和AT&T合作,后者提供150萬(wàn)啟動(dòng)資金,準(zhǔn)備開(kāi)設(shè)“納米學(xué)位”(nanodegrees)(Shen, 2014)——緊湊、靈活和面向職業(yè)的課程證書(shū),供學(xué)習(xí)者在職業(yè)生涯中隨時(shí)修讀積累。

    · 歐盟資助旨在為基于虛擬移動(dòng)和開(kāi)放課件的課程提供認(rèn)證的項(xiàng)目VM Pass (Knowledge Innovation Centre, 2014)。該項(xiàng)目通過(guò)同行評(píng)審和眾包方式對(duì)課程學(xué)習(xí)進(jìn)行認(rèn)證(Creelman, 2014)。

    · 康泰納仕(Condé Nast Publications Inc)國(guó)際期刊出版集團(tuán)準(zhǔn)備與一些學(xué)院合作頒發(fā)學(xué)院證書(shū)(Lederman, 2014),由雜志作者和編輯擔(dān)任專(zhuān)家,提供學(xué)習(xí)內(nèi)容。

    · 最近被Desire2Learn收購(gòu)的成就標(biāo)準(zhǔn)網(wǎng)絡(luò)(Achievement Standards Network)將教育機(jī)構(gòu)公布的學(xué)習(xí)目標(biāo)(包括美國(guó)的“州共同核心課程標(biāo)準(zhǔn)”)錄入機(jī)讀數(shù)據(jù)庫(kù),根據(jù)這些標(biāo)準(zhǔn)制作學(xué)習(xí)材料,最終目的是把考核與這些標(biāo)準(zhǔn)掛鉤(JES & Co., 2014)。

    · Learning Locker是一個(gè)開(kāi)源學(xué)習(xí)記錄項(xiàng)目,機(jī)構(gòu)能夠在這里儲(chǔ)存、分類(lèi)和分享學(xué)習(xí)數(shù)據(jù)(Betts, 2014)。

    四、我們要檢驗(yàn)什么

    1. 理解

    我們需要能檢驗(yàn)學(xué)習(xí)成果的可持續(xù)和可靠的方法。但是檢驗(yàn)的對(duì)象是學(xué)習(xí)還是學(xué)習(xí)者呢?企業(yè)招聘的是求職者的學(xué)習(xí)還是求職者?答案顯然是后者,否則他們直接看求職簡(jiǎn)歷就行了,沒(méi)有必要設(shè)置選拔程序,也沒(méi)必要通過(guò)面試驗(yàn)證求職者是否真的“理解”。

    什么是理解(Stanley, 2014)?如果一個(gè)人想證明理解某件事情,于是說(shuō):“我來(lái)演示吧!”這顯然不妥,因?yàn)檠菔竞苋菀自旒?。比如,做了一件跟量子物理學(xué)有關(guān)的事情,然后聲稱(chēng)“我懂量子物理學(xué)”,別人肯定不信。這是因?yàn)槔斫饬孔游锢韺W(xué)更像是沉浸在一種文化之中,如同語(yǔ)言學(xué)習(xí)一樣,不僅僅把相關(guān)事實(shí)和原理記在腦海里。

    從這個(gè)意義上講,所謂“懂”指的是“識(shí)別”(recognize)(Wilkins, 2013)。比如,我們第一次接觸《沃爾多在哪里?》(Where's Waldo?)(http://whereswaldo.com),打開(kāi)這本書(shū),尋找沃爾多,最終找到他。下一次看到沃爾多,如果我們一眼能認(rèn)出他,我們想不認(rèn)識(shí)他都做不到,這說(shuō)明我們“懂”了。再比如,我們能在火車(chē)站出口的人流中一眼認(rèn)出自己的配偶或好朋友,這看上去好像很容易,但其實(shí)是一個(gè)異常復(fù)雜的過(guò)程,我們想裝著不認(rèn)識(shí)都做不到。我們一旦懂某件事情就不可能回到“不懂”的狀態(tài)。

    “懂”可以說(shuō)是把我們大腦里神經(jīng)元的鏈接組織起來(lái);大腦是一種感知機(jī)制,我們一旦看到認(rèn)識(shí)或懂的東西,神經(jīng)元一下子就被接連激活,于是我們輕而易舉地認(rèn)出這個(gè)人是誰(shuí)、這件東西是什么,等等。

    2. 懂與做

    學(xué)習(xí)很大程度指學(xué)習(xí)如何做事,而不是為了“懂”(Ferguson, 2014)。這點(diǎn)很重要。我們?cè)谠u(píng)價(jià)學(xué)習(xí)效果時(shí)以事實(shí)、原理、理論、定義或描述等為衡量標(biāo)準(zhǔn),但是這些代表的是我們懂什么,而非我們能做什么。這些東西是工具,幫助我們學(xué)習(xí)和理解,但不是我們真正懂的東西,能夠完成“識(shí)別”過(guò)程才說(shuō)明我們真正懂了。我們的大腦是一臺(tái)模式識(shí)別(pattern-recognition)器,不是數(shù)碼電腦。說(shuō)它是模式識(shí)別機(jī)器也不很貼切,大腦是非常復(fù)雜的生物質(zhì),由能夠集體識(shí)別模式和相互連接的神經(jīng)元組成,所以把它比喻成數(shù)碼電腦也不妥。

    那么,我們?nèi)绾巫C明自己的所學(xué)?通過(guò)演示,還是實(shí)際行為?演示的目的是為了證明符合一套具體的標(biāo)準(zhǔn),有固定的套路(Kuhlmann, 2014)。比如,要證明自己是e-learning學(xué)習(xí)者,首先必須參加e-learning,其次能夠舉出e-learning的例子,最后分享自己做什么和學(xué)什么。但是,我們不能僅是舉例說(shuō)明,我們要展示相關(guān)的過(guò)程和思考,即幕后的那些東西。這正是現(xiàn)代學(xué)習(xí)網(wǎng)絡(luò)能夠做到的。在網(wǎng)上學(xué)習(xí)時(shí),我在網(wǎng)絡(luò)上所做的一切能證明我懂什么,而這一切都是公之于眾的,別人看到了,別人也可能會(huì)發(fā)表意見(jiàn)。比如,我的領(lǐng)英(LinkedIn)網(wǎng)絡(luò)能說(shuō)明我懂什么(Downes, 2014)(見(jiàn)圖3)。我的網(wǎng)絡(luò)有很多鏈接,電腦把它們繪成一張圖并涂上不同顏色;不同顏色的區(qū)域代表不同聯(lián)系人群組,這些是電腦自動(dòng)檢測(cè)出來(lái)的,而通過(guò)這些與我建立連接關(guān)系的群組,別人從某種程度上能發(fā)現(xiàn)我懂什么。

    <D:\教育盤(pán)\2015年教育\2015-06\06-03.jpg>

    圖3 ?我的領(lǐng)英網(wǎng)絡(luò)圖

    這是未來(lái)的趨勢(shì)。比如SCROLL(System for Capturing and Reusing of Learning Log,采集和重新利用學(xué)習(xí)日志)系統(tǒng)能把一個(gè)人的學(xué)習(xí)過(guò)程記錄下來(lái)(Ogata, Hou, Li, Uosaki, Mouri, &Liu, 2014),電腦可以把它繪成類(lèi)似于領(lǐng)英網(wǎng)絡(luò)這樣的東西,重點(diǎn)學(xué)習(xí)領(lǐng)域變成了“群組”。

    我們不妨設(shè)想通過(guò)萬(wàn)物互聯(lián)(Internet of Everything)進(jìn)行學(xué)習(xí)的情形(Jarche, 2014)。萬(wàn)物互聯(lián)是人、資源和事物的因特網(wǎng)。我們知道有物聯(lián)網(wǎng),但是真正有意思的是萬(wàn)物互聯(lián),我們不但能實(shí)現(xiàn)人與人之間的交流互動(dòng),而且能實(shí)現(xiàn)人與設(shè)備和工具的交流互動(dòng)。很多年前,我曾舉過(guò)會(huì)教人釣魚(yú)的魚(yú)竿的例子(Downes, 2004)。這種魚(yú)竿有內(nèi)置感應(yīng)器檢測(cè)垂釣者怎么拋竿,然后做出判斷并反饋給他(比如“你以前沒(méi)釣過(guò)魚(yú),對(duì)吧?”),接著魚(yú)竿會(huì)一步一步教他怎么釣魚(yú)。換言之,魚(yú)竿與垂釣者互動(dòng)。過(guò)去總覺(jué)得這些只是理論上的東西,但是不久前我看到一個(gè)電視節(jié)目——網(wǎng)球拍能教人打網(wǎng)球(Diallo, 2014)。隨著時(shí)間的推移,人與機(jī)器都得學(xué)會(huì)善于把數(shù)據(jù)和事物等互聯(lián)互通,然后過(guò)濾和分門(mén)別類(lèi),以更好理解不斷變化的情況。打網(wǎng)球和釣魚(yú)都不可能造假,如何學(xué)打網(wǎng)球、如何學(xué)釣魚(yú)——這些就是學(xué)習(xí)。這些數(shù)據(jù)實(shí)際上也在告訴別人我們是誰(shuí)、我們?cè)谧鍪裁础?/p>

    這是基于公開(kāi)行為表現(xiàn)的評(píng)價(jià),如同評(píng)價(jià)一篇作文一樣。我們?cè)陂喿x一篇作文之后對(duì)它做出評(píng)價(jià),有時(shí)還會(huì)參照某些標(biāo)準(zhǔn)(這其實(shí)是把問(wèn)題復(fù)雜化了,參見(jiàn)“三、傳統(tǒng)的評(píng)價(jià)方式 3. 有能力這種東西嗎”),而更多時(shí)候則是沒(méi)有按照什么評(píng)價(jià)標(biāo)準(zhǔn),有時(shí)甚至只讀了開(kāi)頭幾段便能判斷這篇作文寫(xiě)得怎么樣(當(dāng)然我主張要通讀全文)。這是因?yàn)槲覀兡堋白R(shí)別”什么是好文章。比如,文章的語(yǔ)言如何?研究的問(wèn)題是否有價(jià)值?從某種意義上講這些是不可言喻的。誠(chéng)如德萊弗斯(Dreyfus)所說(shuō)的:“專(zhuān)家憑直覺(jué),懂得識(shí)別?!保↙ester, 2005)現(xiàn)在機(jī)器正越來(lái)越智能化,越來(lái)越能勝任這種工作;神經(jīng)網(wǎng)絡(luò)軟件也正越來(lái)越智能化,越來(lái)越能勝任這種工作?,F(xiàn)在,我們可以用電腦給作文打分。與我們一般所想象的不同,電腦不是根據(jù)關(guān)鍵詞和語(yǔ)法結(jié)構(gòu)打分(Kolowich, 2014),而是自動(dòng)打分(Paruchuri, 2013)。先給電腦的神經(jīng)網(wǎng)絡(luò)輸入經(jīng)過(guò)人工打分的5、100、1,000篇作文(甚至更多)作為訓(xùn)練素材,然后在神經(jīng)網(wǎng)絡(luò)建立識(shí)別機(jī)制(特別是模式和連接方面),之后每輸入一篇新作文,系統(tǒng)就會(huì)根據(jù)以往經(jīng)驗(yàn)給出一個(gè)分?jǐn)?shù)。

    五、何謂評(píng)價(jià)

    1. 一項(xiàng)識(shí)別任務(wù)

    如果把創(chuàng)建領(lǐng)英網(wǎng)絡(luò)群組的機(jī)制和作文自動(dòng)評(píng)分機(jī)制結(jié)合在一起,我們便有可能建設(shè)一個(gè)不需“訓(xùn)練”便能識(shí)別“專(zhuān)家話語(yǔ)”并使用這種話語(yǔ)對(duì)新事物進(jìn)行評(píng)價(jià)的系統(tǒng)。這項(xiàng)工作極具挑戰(zhàn)性,但已經(jīng)取得了重大進(jìn)展。目前,這種機(jī)器正在進(jìn)行圖靈測(cè)試(Turing Test) (Baraniuk, 2014)。比如,聊天機(jī)器人自從上世紀(jì)90年代以來(lái)就以MUD和IRC等方式存在并且一直在不斷改進(jìn)。

    評(píng)價(jià)是一項(xiàng)識(shí)別任務(wù),涉及神經(jīng)網(wǎng)絡(luò)的工作,涉及我們?nèi)绾卧O(shè)計(jì)和建設(shè)界面,涉及我們與物聯(lián)網(wǎng)的交互(Lockton, 2004)。我們不用親自分析所有數(shù)據(jù),而是設(shè)計(jì)一些系統(tǒng)把分析結(jié)果以圖譜、曲線圖和數(shù)據(jù)儀表盤(pán)等形式呈現(xiàn)給我們。我們現(xiàn)在開(kāi)始以這種方式理解世界。有些人覺(jué)得評(píng)價(jià)是一種直覺(jué),但唐·泰普史考特(Don Tapscott)和馬克·平恩斯卡(Marc Prensky)等卻認(rèn)為評(píng)價(jià)是一種文化而且這種文化伴隨著我們的成長(zhǎng)(Tapscott, 2013)。他們的意思是我們現(xiàn)在開(kāi)始通過(guò)識(shí)別復(fù)雜數(shù)據(jù)中的模式這種方法理解世界。換言之,如果我們?cè)诳匆唤M復(fù)雜數(shù)據(jù)時(shí),我們能識(shí)別蘊(yùn)藏在其中的模式,比如我們能夠在紛繁復(fù)雜的論壇中厘清不同主題的跟帖,這就是模式識(shí)別。

    那么,我們是如何識(shí)別模式的呢?這是我們長(zhǎng)期對(duì)大腦進(jìn)行訓(xùn)練的結(jié)果。比如,我們以前接觸過(guò)這種數(shù)據(jù),大腦就建立一套鏈接。大腦是一臺(tái)模式識(shí)別器。這是一種知識(shí)的本能(an instinct of knowledge)。我們不知道把它稱(chēng)為什么,但是我們知道這種東西的確存在,我們知道它是什么。

    2. 留意情感反應(yīng)

    現(xiàn)在,我們對(duì)通過(guò)因特網(wǎng)發(fā)送的信息開(kāi)始敏感起來(lái)了,甚至是過(guò)度敏感(Flaherty, 2014)。我們?cè)谧约喊l(fā)布的信息中透露了自己的情況(Tyson, 2014),比如我們泄露自己想法的次數(shù)要遠(yuǎn)比我們知道的多,他人也可能在他們的信息中泄露對(duì)我們的看法,而這些評(píng)價(jià)可能是人身攻擊、無(wú)所顧忌。網(wǎng)絡(luò)上的評(píng)價(jià)有時(shí)不留情面(Rose, 2014)——這不一定是誠(chéng)實(shí)的表現(xiàn),而是懷有惡意。對(duì)此人們可能會(huì)有不同反應(yīng),包括積極和消極反應(yīng)。我相信大家跟我一樣,兩種反應(yīng)都有過(guò)。

    加拿大國(guó)家研究委員會(huì)開(kāi)展一項(xiàng)研究(Mechanical Turk, 2013),旨在了解推特信息所引起的情感反應(yīng)。比如,對(duì)已發(fā)表的數(shù)據(jù)進(jìn)行神經(jīng)網(wǎng)絡(luò)分析能顯示人們看了推特發(fā)布的某個(gè)事件的消息后,是感到高興,還是難過(guò),等等。有時(shí)我們不由自主流露自己的反應(yīng)。比如,我們?cè)诰W(wǎng)上看到一只貓的頭上放著一個(gè)冰激凌甜筒,不由自主發(fā)出一聲“呀”。如果這時(shí)我們正在跟別人聊天,“呀”這種反應(yīng)可能會(huì)在聊天中流露出來(lái),我們甚至可能直接打出“呀”這個(gè)字。

    反應(yīng)不是單向的,而是處于動(dòng)態(tài)的相互影響之中。比如,有人認(rèn)為玩暴力電子游戲會(huì)使人對(duì)暴力失去敏感,我對(duì)此持不同意見(jiàn)。這是因?yàn)橥婕遗c游戲中的人物沒(méi)有雙向互動(dòng),因此不會(huì)出現(xiàn)情感依戀(Bilton, 2014),也就沒(méi)有激活鏡像神經(jīng)元(Winerman, 2005)。

    3. 遵守道德規(guī)范

    這些評(píng)價(jià)機(jī)制正在被嵌入學(xué)習(xí)管理系統(tǒng)(Petropoulou, Kasimatis, Dimopoulos, &Retalis, 2014),因此學(xué)生使用這個(gè)系統(tǒng)時(shí),系統(tǒng)對(duì)學(xué)生學(xué)習(xí)行為的分析會(huì)隨著時(shí)間的推移越來(lái)越細(xì)。當(dāng)然,學(xué)習(xí)管理系統(tǒng)的這些數(shù)據(jù)可能會(huì)被移作他用。人們對(duì)于如何使用用戶(hù)數(shù)據(jù)開(kāi)始提出質(zhì)疑(Association for Learning Technology, 2014),比如通過(guò)這種途徑收集教育數(shù)據(jù)合適嗎?機(jī)構(gòu)可以收集哪些數(shù)據(jù)?學(xué)習(xí)管理系統(tǒng)應(yīng)該收集能泄露用戶(hù)情感狀態(tài)的信息嗎?這些都涉及數(shù)據(jù)捕撈(data fishing)問(wèn)題。

    在這方面,隱私和分析技術(shù)這兩個(gè)世界相互交叉(Heath, 2014)。用戶(hù)留下痕跡,有人則專(zhuān)門(mén)分析這些痕跡,了解用戶(hù)的內(nèi)心——最真實(shí)的東西。我們有權(quán)利這樣做嗎?或者說(shuō),我們有權(quán)利要回我們留下的痕跡,即抹掉我們的數(shù)字存在嗎?從某種意義上講,這是不可能的。打比方說(shuō),十分鐘前你跟我見(jiàn)面,我不可能因?yàn)槲耶?dāng)時(shí)狀態(tài)不佳而否認(rèn)這個(gè)事實(shí)。

    臉譜(Facebook)曾經(jīng)在用戶(hù)不知情的情況下試驗(yàn)689,003名用戶(hù)的情感反應(yīng),以證明情感狀態(tài)具有傳染性(Kramer, Guillory, & Hancock, 2014)。有研究表明,如果提供給人們的只是犯罪故事,他們可能會(huì)認(rèn)為犯罪率很高;即使實(shí)際上犯罪率是在下降,因?yàn)槿藗兛吹降亩际欠缸锕适?,他們?huì)以為犯罪率在上升。這也是臉譜的試驗(yàn)內(nèi)容,只不過(guò)它不告知用戶(hù)。有些人得知這件事后想退出臉譜,改用推特(Globe and Mail, 2014)。然而,推特比臉譜更加道德嗎?雅虎和谷歌宣布啟動(dòng)“防止跟蹤”機(jī)制(Marvin, 2014);去年4月谷歌宣布停止出于可能的廣告目的掃描學(xué)生Gmail賬戶(hù)(Bout, 2014;Molnar, 2014)。換句話說(shuō),此前他們一直在干這種事。有時(shí)信息泄露會(huì)造成非常惡劣的影響(Biemiller, 2014),比如美國(guó)弗吉尼亞大學(xué)法學(xué)院收集學(xué)生成績(jī)信息并向潛在雇主發(fā)布,包括班級(jí)排名、政治傾向、工作經(jīng)驗(yàn)和推薦者,甚至女朋友住在什么地方(Zaretsky, 2014)!這些都是個(gè)人隱私的信息,學(xué)生自己可能不全知道,但雇主卻了如指掌。

    4. 應(yīng)對(duì)辦法

    我們?cè)撛趺崔k?一種辦法是刪除我們所有社交媒體賬戶(hù)(Bussing, 2014;Suarez, 2014),但這不現(xiàn)實(shí),我們離不開(kāi)臉譜(Elliott, 2014)、谷歌和領(lǐng)英,它們的服務(wù)大有用處。這些服務(wù)有助于我們了解朋友近況、自己的情況和世界正在發(fā)生的事情。盡管如此,一些機(jī)構(gòu)開(kāi)始感到妥善處理這個(gè)問(wèn)題的必要性。蓋茨(Gates)資助inBloom機(jī)構(gòu)(Thompson, 2014),負(fù)責(zé)為客戶(hù)集中保存學(xué)生數(shù)據(jù),但是竟然有那么多方面能夠獲取這些數(shù)據(jù)(如圖4所示)。由于民眾對(duì)此反應(yīng)強(qiáng)烈,inBloom最終關(guān)閉了(Korach, 2014;Solove, 2014)。具有諷刺意味的是,現(xiàn)在人們擔(dān)心自己的數(shù)據(jù)會(huì)出現(xiàn)“斯諾登效應(yīng)” (Grealish, 2014)。

    <D:\教育盤(pán)\2015年教育\2015-06\06-04.jpg>

    圖4 ?inBloom

    加拿大剛剛通過(guò)《反垃圾郵件法》,但就我而言,作用甚微(Davison, 2014)。在這個(gè)法律通過(guò)之前,很多人給我發(fā)郵件,請(qǐng)求我同意他們繼續(xù)給我發(fā)送郵件,我沒(méi)有理會(huì)他們??墒?,時(shí)至今日,垃圾郵件照樣源源不斷,雖然我們已經(jīng)有了《反垃圾郵件法》。人們?cè)絹?lái)越擔(dān)心個(gè)人隱私的安全。比如,有些人認(rèn)為不該在課堂錄音錄像,因?yàn)檎n堂是一個(gè)隱私空間。但是,對(duì)課堂進(jìn)行錄音錄像現(xiàn)在越來(lái)越常見(jiàn)(Opidee, 2014),不管是公開(kāi)的,還是私下的。Mozilla基金會(huì)的道格·貝爾肖(Belshaw, 2014)提出要保證共同的空間是公共空間,不能由某些人為所欲為,但是我們現(xiàn)在的公共空間卻沒(méi)有隱私,不管我們身居何處,似乎都無(wú)法擺脫政府和企業(yè)的監(jiān)控,我們私下的談話都可能成為它們的產(chǎn)品或商品。

    5. 保護(hù)個(gè)人隱私

    即使我們不讓億萬(wàn)富豪們插手這些事,而是交由政府負(fù)責(zé),我們的隱私仍然無(wú)法得到保證,因?yàn)樗怪Z登事件會(huì)重演。個(gè)人隱私和非正式評(píng)價(jià)密切相關(guān)。大數(shù)據(jù)和學(xué)習(xí)分析這些東西與個(gè)人隱私互不相容,因此前者必定遭遇來(lái)自后者的阻力。顯而易見(jiàn),我們都很在乎個(gè)人隱私。例如,Seedmatch眾籌網(wǎng)為一種能防止美國(guó)國(guó)家安全局監(jiān)控的個(gè)人服務(wù)器募款(Russia Today, 2014),他們只需7.5萬(wàn)歐元,然而活動(dòng)僅進(jìn)行89分鐘就募集到75萬(wàn)歐元!

    現(xiàn)在,越來(lái)越多的人轉(zhuǎn)移到能保護(hù)隱私的個(gè)人網(wǎng)絡(luò)上了,比如Privatext、TigerText、Whisper、 Cyber Dust、Ansa、Omelette和Diaspora (Bourne, 2014)。

    六、一種新的評(píng)價(jià)系統(tǒng)

    1. 新系統(tǒng)的運(yùn)作機(jī)制

    新系統(tǒng)使用的是個(gè)人服務(wù)器,因此用戶(hù)資料不必存放在學(xué)習(xí)管理系統(tǒng)、臉譜或領(lǐng)英上,而是存放在自己可以控制和擁有的網(wǎng)絡(luò)上(BCNet, 2014)。這個(gè)系統(tǒng)會(huì)有一個(gè)公共空間,用戶(hù)可以在這里發(fā)布愿意跟他人分享的信息。這是用戶(hù)的公共面孔,如同衣服一樣。這個(gè)系統(tǒng)會(huì)對(duì)身份進(jìn)行管理,但是個(gè)人負(fù)責(zé)控制自己的身份。臉譜堅(jiān)持一個(gè)用戶(hù)只能擁有一個(gè)身份,然而在現(xiàn)實(shí)生活中,我們是有多重身份的——對(duì)不同人扮演不同身份角色。

    我們?cè)诰W(wǎng)上所做的一切都會(huì)被匯集成各種內(nèi)容網(wǎng)絡(luò),這叫作個(gè)人產(chǎn)生的內(nèi)容(Waters, 2014)(圖5)。這些內(nèi)容網(wǎng)絡(luò)是一個(gè)全面內(nèi)容過(guò)濾系統(tǒng),一個(gè)全面感知系統(tǒng)。該系統(tǒng)的功能跟神經(jīng)網(wǎng)絡(luò)一樣,是一種模式識(shí)別器。在這個(gè)系統(tǒng)里,人人都是策展者,他們理解、修訂、重新搭配內(nèi)容以及改變用途,等等。這已經(jīng)超出策展的范圍。換言之,對(duì)于每個(gè)人所做的一切,其他人都能看到、認(rèn)出、傳播和評(píng)論等。

    <D:\教育盤(pán)\2015年教育\2015-06\06-05.jpg>

    圖5 ?個(gè)人產(chǎn)生的內(nèi)容

    第一個(gè)層面是社交網(wǎng)絡(luò)(Andrade, 2014),負(fù)責(zé)評(píng)價(jià)個(gè)人的資格。比如,一個(gè)由量子物理學(xué)家組成的社交網(wǎng)絡(luò),主要成員都彼此認(rèn)識(shí)、相互交流、評(píng)論彼此的論文、一起參加會(huì)議、彼此直呼其名……如果我想冒充量子物理學(xué)家加入這個(gè)網(wǎng)絡(luò),只要他們跟我聊一聊我便露餡,因?yàn)檎嬲牧孔游锢韺W(xué)家能輕而易舉地識(shí)別冒牌貨。由此可見(jiàn),這種人際網(wǎng)絡(luò)是一種甄別資格的感知機(jī)制。一個(gè)人有什么學(xué)歷并不是真的很重要,重要的是他如何與他人交往和互動(dòng)。這在今天的網(wǎng)絡(luò)世界尤為重要。

    各行各業(yè)都有自己的網(wǎng)上社區(qū),這些都是開(kāi)放式網(wǎng)絡(luò),它們類(lèi)似于實(shí)踐社區(qū),但又不盡然,可能還有諸如游戲、愛(ài)好等社區(qū)的特點(diǎn)(Nisnevich, 2014)。我們可以對(duì)社區(qū)成員交互的產(chǎn)物(比如交談)進(jìn)行分析,以此評(píng)價(jià)他們的資格(Salmons, 2014)。比如面試,求職者只需接受專(zhuān)業(yè)面試官的一次面試,然后把面試的錄像和轉(zhuǎn)寫(xiě)成文字的面試內(nèi)容放到網(wǎng)上,想錄用他的公司便可以使用自己的系統(tǒng)根據(jù)公司制定的標(biāo)準(zhǔn)評(píng)價(jià)求職者,決定是否錄用。

    未來(lái)的評(píng)價(jià)會(huì)從根本上重新定義我們現(xiàn)在所說(shuō)的“作品”(Bentley, 2014)。一般而言,作品指的是一個(gè)人的正式出版物,比如專(zhuān)著、畫(huà)作和電影等,今后可能是指我們?cè)诠惨蛱鼐W(wǎng)上的一切行為,包括通信交流和活動(dòng)。這是好事,因?yàn)槲覀兡軌蚋訙?zhǔn)確、仔細(xì)地評(píng)價(jià)一個(gè)人,判斷哪些方面有待充實(shí),而這正是評(píng)價(jià)的目的之一。

    2. 新系統(tǒng)的可行性

    有人認(rèn)為這種方法不見(jiàn)得比現(xiàn)行的能力地圖(competency maps)更好。能力地圖沒(méi)什么不好,問(wèn)題是這種地圖在教育體系中扮演什么角色。我們現(xiàn)在所提出的那些能力只不過(guò)是一種指南——幫助我們了解完成某項(xiàng)工作需要什么能力,但是這些能力究竟是什么卻難以清晰界定(參見(jiàn)“三、傳統(tǒng)的評(píng)價(jià)方式 3. 有能力這種東西嗎”)。

    我們可以采用不同方法制作地圖。一種方法是派人帶著星盤(pán)和指南針出海,沿著海岸線航行,一路繪制地圖。這是老掉牙的辦法,費(fèi)用高且不準(zhǔn)確?,F(xiàn)在是通過(guò)衛(wèi)星拍照繪制地圖,雖然比舊方法好,但仍然有待改進(jìn)。比如,用GPS繪制衛(wèi)星實(shí)景地圖,提高準(zhǔn)確性,當(dāng)然這也不是最好的辦法,也可能會(huì)出錯(cuò)(比如,有人按照GPS導(dǎo)航的指引結(jié)果把車(chē)開(kāi)到河里)。同樣,人工繪制能力地圖費(fèi)用高且不準(zhǔn)確,因此我們需要一種能自動(dòng)識(shí)別能力的機(jī)制。事實(shí)上,我們有這樣一個(gè)課題——能力自動(dòng)發(fā)展和認(rèn)定(automated competency development and recognition)。這個(gè)系統(tǒng)類(lèi)似衛(wèi)星拍照,對(duì)社交功能基礎(chǔ)設(shè)施(social infrastructure)進(jìn)行全面搜索,分析各種鏈接,根據(jù)人們?cè)诰W(wǎng)上的實(shí)際行為繪制出一種“地圖”。

    我們可能認(rèn)為人工干預(yù)能保證其準(zhǔn)確性,但實(shí)際上這反而可能導(dǎo)致這種“地圖”更不準(zhǔn)確。比如,所有人都可以參加開(kāi)放街道地圖(OpenStreetMap)(http://www.openstreetmap.org)的繪制,人口密集的地方在地圖上可能有很詳細(xì)的信息,而人煙稀少的地方可能就沒(méi)有人去繪制詳細(xì)的地圖。因此,總的來(lái)看它不如谷歌地圖(Google Maps)準(zhǔn)確。當(dāng)然,機(jī)器可能有盲區(qū),對(duì)數(shù)據(jù)分析的設(shè)計(jì)也可能存在盲區(qū)。人的感知也如此,有時(shí)會(huì)出錯(cuò)。一些人可能是色盲,一些人可能只是關(guān)注他們想看的東西。因此,感知不是一個(gè)完美的機(jī)制。過(guò)去的社會(huì)感知機(jī)制是專(zhuān)家、學(xué)者和記者等通過(guò)研究、觀察、拍照、寫(xiě)文章和發(fā)表作品等體現(xiàn),總的來(lái)看運(yùn)行情況良好,但也有一些明顯不足,比如機(jī)構(gòu)可以控制報(bào)紙或影響研究結(jié)果。這里提出的新系統(tǒng)雖然也不完美,但可能優(yōu)于舊機(jī)制,特別是在迫使我們質(zhì)疑自己是否能正確理解世界這方面——這不是我們所擅長(zhǎng)的。我們不擅長(zhǎng)自我糾錯(cuò),因?yàn)樽晕壹m錯(cuò)需要自我意識(shí)、自我反思的全局性機(jī)制。

    3. 其他相關(guān)問(wèn)題

    首先是費(fèi)用。買(mǎi)單的總是作為用戶(hù)的我們。臉譜提供免費(fèi)服務(wù),但眾所周知,我們不是臉譜的客戶(hù),我們是一種產(chǎn)品,臉譜把我們賣(mài)給真正顧客——廣告商、營(yíng)銷(xiāo)商和公司等。

    我們可以用兩種方法應(yīng)對(duì)這個(gè)問(wèn)題。一是把它看成是一個(gè)技術(shù)問(wèn)題——如何設(shè)計(jì)自我組織(self-organization)以便通過(guò)這個(gè)系統(tǒng)公平分配收入和工作;二是通過(guò)社會(huì)過(guò)程(social processes)分配收入和工作。第一種方法能使大家有工作、有收入,而第二種的結(jié)果卻難以預(yù)料,我們最終可能一無(wú)所有。

    另一個(gè)相關(guān)的問(wèn)題是控制權(quán)。機(jī)構(gòu)總是希望掌控一切。比如,我所在的機(jī)構(gòu)(政府部門(mén))提出任何數(shù)據(jù)都不能外泄,雖然從實(shí)際來(lái)看這是不可能的。當(dāng)今的世界更有滲透性,因?yàn)槲覀儾豢赡苌硖幰粋€(gè)完全與世隔絕的網(wǎng)絡(luò),同時(shí)又希望能與外界交流??刂茩?quán)的問(wèn)題不是三言?xún)烧Z(yǔ)可以講清楚的,它歸根結(jié)底是一個(gè)權(quán)力問(wèn)題。當(dāng)今個(gè)人與雇主之間的權(quán)力關(guān)系正在發(fā)生變化,但這已經(jīng)超出本文范疇。

    今后,能改變事物的是人的自我組織能力、快速和高效尋找所需人才(包括個(gè)人和承包商)的能力。因此,我們必將更具移動(dòng)性和推銷(xiāo)自己的能力——向全世界各式各樣的雇主推銷(xiāo)自己的作品。雇員與雇主將會(huì)是兩個(gè)平等主體,而不是哪一方以強(qiáng)欺弱支配一切。這是上文提到的技術(shù)解決方案,只有這樣才有可能討論數(shù)據(jù)的擁有權(quán)和管理問(wèn)題。但是,這種方案會(huì)遭遇社會(huì)阻力,雇主們不喜歡它,當(dāng)權(quán)者不喜歡它,他們必定會(huì)抵制它。

    [參考文獻(xiàn)]

    [1] Abner, B., Bartosh, O., & Ungerleider, C. (2014). Productivity Implications of a Shift to Competency-Based Education: An environmental scan and review of the relevant literature. Retrieved from Higher Education Qualoity Council of Ontario: http://heqco.ca/SiteCollectionDocuments/CBE%20Report-ENG.pdf.

    [2] Andrade, D. (2014, June11). Google announces Google Educator Groups - great resource for educators . Retrieved from Educational Technology Guy: http://educationaltechnologyguy.blogspot.ca/2014/06/google-announces-google-educator-groups.html.

    [3] Association for Learning Technology. (2014, May 12). ALT Members views on Learning Analytics. Retrieved from Association for Learning Technology Online Newsletter: https://newsletter.alt.ac.uk/2014/05/alt-members-views-on-learning-analytics/.

    [4] Baraniuk, C. (2014, June 9). How online 'chatbots' are already tricking you. Retrieved from BBC: http://www.bbc.com/future/story/20140609-how-online-bots-are-tricking-you.

    [5] BCNet. (2014, April 30). The New Face of Provincial Identity Management: The B.C. Services Card. Retrieved from BCNet 2014: http://vimeo.com/95196331.

    [6] Belshaw, D. (2014, April 23). Software with shareholders (or, the menace of private public spaces). Retrieved from Doug Belshaw: http://dougbelshaw.com/blog/2014/04/23/software-with-shareholders/.

    [7] Bentley, D. C. (2014). Inquiry Guided Learning Projects for the Development of Critical Thinking in the College Classroom: a pilot study. Collected Essays on Learning and Teaching, 7(2).

    [8] Betts, B. (2014, January 4). Learning Locker: The Open Source Learning Record Store. Retrieved from Stoatly Different: http://www.ht2.co.uk/ben/?p=534.

    [9] Biemiller, L. (2014, June 6). Emailed in Error, UVa Law School’s Student GPA Spreadsheet Spreads Fast. Retrieved from Chronicle of Higher Education: http://chronicle.com/blogs/wiredcampus/emailed- in-error-uva-law-schools-student-spreadsheet-spreads-fast/53133.

    [10] Bilton, N. (2014, June 15). Looking at Link Between Violent Video Games and Lack of Empathy. Retrieved from Bits: http://bits.blogs.nytimes.com/2014/06/15/looking-at-link-between-violent-video- games-and-lack-of-empathy/.

    [11] Bourne, W. (2014, July). The Revolution Will Not Be Monetized. Retrieved from Inc.: http://www.inc.com/magazine/201407/ceo-of- wickr-leads-social-media-resistance-movement.html.

    [12] Bout, B. (2014, April 30). Protecting Students with Google Apps for Education. Retrieved from Official Google Blog: http://googleforwork.blogspot.ca/2014/04/protecting-students-with-google-apps.html.

    [13] Bussing, H. (2014, April 17). Why I Killed My Linkedin Account. Retrieved from HR Examiner: http://www.hrexaminer.com/why-i-killed-my-linkedin-account/.

    [14] Campbell, G. (2014, April 20). Understanding and learning outcomes. Retrieved from Gardner Writes: http://www.gardnercampbell.net/blog1/?p=2239.

    [15] Creelman, A. (2014, June 27). Passport for learning. Retrieved from The corridor of uncertainty: http://acreelman.blogspot.ca/2014/06/passport-for-learning.html.

    [16] Solove, D. (2014, April 28). Why Did inBloom Die? A Hard Lesson About Education Privacy. Retrieved from SafeGov: http://www.safegov.org/2014/4/28/why-did-inbloom-die-a-hard-lesson-about-education-privacy.

    [17] Davison, J. (2014, July 1). Canada's new anti-spam law: Can it really clean up your inbox? Retrieved from CBC News: http://www.cbc.ca/news/technology/canada-s-new-anti-spam-law-can-it-really- clean-up-your-inbox-1.2688773.

    [18] Diallo, A. (2014, August 28). Can Babolat's Smart Racket Improve Your Tennis Game? Retrieved from Forbesd: http://www.forbes.com/sites/amadoudiallo/2014/08/28/can-babolats-smart-racket-improve-your-tennis-game/.

    [19] Downes, S. (2004, October 9). The Buntine Oration: Learning Networks. Retrieved from Stephen's Web: http://www.downes.ca/post/20.

    [20] Downes, S. (2014, April 27). Techniques and Tools: How To Visualize Your Network. Retrieved from Stephen's Web: http://www.downes.ca/post/62137.

    [21] Eduvation. (2014, November 17). Competency-Based Degrees. Retrieved from Eduvation: http://eduvation.ca/ideas/competency- based-degrees/.

    [22] Elliott, N. (2014, June 24). Facebook Still Dominates Teens’ Social Usage. Retrieved from Forrester: http://blogs.forrester.com/nate_elliott/14-06-24-facebook_still_dominates_teens_social_usage.

    [23] Ferguson, D. (2014, May 5). The basic understanding, or, fact-based theory. Retrieved from Dave's Whiteboard: http://www.daveswhiteboard.com/archives/5265.

    [24] Flaherty, C. (2014, June 13). 'Can I Tweet That?'. Retrieved from Inside Higher Ed: https://www.insidehighered.com/news/2014/06/13/aaup-conference-sessions-focus-academic-freedom-relation-social-media.

    [25] Globe and Mail. (2014, June 29). Facebook psychology experiment raises ire . Retrieved from Globe and Mail: http://www.theglobeandmail.com/technology/tech-news/facebook-psychology-experiment- raises-ire/article19386909/.

    [26] Grealish, G. (2014, April 27). Key Data Residency Requirements Global Organizations Need to Understand. Retrieved from Cloud Computing Journal: http://cloudcomputing.sys-con.com/node/3069314.

    [27] Hawksey, M. (2014, June 16). ALT issues first Open Badges as part of ocTEL and releases plugin to the community. Retrieved from Association for Learning Technology Online Newsletter: https://newsletter.alt.ac.uk/2014/06/alt-issues-first-open-badges-as-part-of-octel- and-releases-plugin-to-the-community/.

    [28] Heath, J. (2014). Contemporary Privacy Theory Contributions to Learning Analytics. Journal of Learning Analytics, 1(1).

    [29] Heick, T. (2014, August 25). Using ‘Self-Initiated Transfer’ To Drive 21st Century Assessment. Retrieved from te@chthought: http://www.teachthought.com/learning/solving-the-problem-of-modern- assessment/.

    [30] Hereford, Z. (2014, November 17). Ludwig Wittgenstein (1889-1951). Retrieved from Essential Life Skills.net: http://www.essentiallifeskills.net/ludwig-wittgenstein-philosophy.html.

    [31] Jarche, H. (2014, June 3). Mastering the Internet of Everything. Retrieved from Harold Jarche: http://jarche.com/2014/06/mastering-the-internet-of-everything/.

    [32] JES & Co. (2014, November 18). Achievement Standards Network. Retrieved from Achievement Standards Network: http://www.achievementstandards.org/.

    [33] Knowledge Innovation Centre. (2014, November 18). VM Pass. Retrieved from http://vmpass.eu/.

    [34] Kolowich, S. (2014, April 28). Writing Instructor, Skeptical of Automated Grading, Pits Machine vs. Machine. Retrieved from Chronicle of Higher Education: http://chronicle.com/article/Writing-Instructor-Skeptical/146211/.

    [35] Korach, B. (2014, April 22). Parents Force Shutdown of Gate’s InBloom Student Data Collection. Retrieved from The Report Card: http://education-curriculum-reform-government-schools.org/w/2014/04/parents-force-shutdown-of-gates-inbloom-student-data-collection/.

    [36] Kramer, A. D., Guillory, J. E., & Hancock, J. T. (2014, March 25). Experimental evidence of massive-scale emotional contagion through social networks. (S. T. Fiske, Ed.) Proceedings of the National Academy of Sciences of the United States of America, 111(24).

    [37] Kuhlmann, T. (2014, June 3). The Secret Formula to Becoming an E-Learning Pro. Retrieved from The Rapid E-Learning Blog: http://www.articulate.com/rapid-elearning/secret-formula-becoming-e- learning-pro/.

    [38] Lederman, D. (2014, June 3). College Credentials by Condé Nast. Retrieved from Inside Higher Ed: https://www.insidehighered.com/news/2014/06/03/conde-nast-team-venture-fund-create-college- courses-credentials.

    [39] Lester, S. (2005). Novice to Expert: the Dreyfus model of skill acquisition. Retrieved from Stan Lester Developments: http://www.sld.demon.co.uk/dreyfus.pdf.

    [40] Levine, A. (2014, June 25). To Badge [Yourself] or to Be Badged? Retrieved from CogDogBlog: http://cogdogblog.com/2014/06/25/to-badge-yourself-or-to-be-badged/.

    [41] Lewin, T. (2007, April 27). Dean at M.I.T. Resigns, Ending a 28-Year Lie . Retrieved from New York Times: http://www.nytimes.com/2007/04/27/us/27mit.html?_r=0.

    [42] Lockton, D. (2004, April 21). Introducing Powerchord (Blackbird edition). Retrieved from Architectures: http://architectures.danlockton.co.uk/2014/04/21/introducing-powerchord-blackbird-edition/.

    [43] MacNeil, S., Wood, E., Zivcakova, L., Glover, R., & Smith, P. (2014). Learning Task Inventories (LTIs). Exploration of Optimal Conditions to Help Students Develop, Improve and Sustain Good Study and learning Practices. Collected Essays on Learning and Teaching, 7(2).

    [44] Marvin, G. (2014, May 1). Yahoo Ditches “Do Not Track”: Lack Of Standards Said Too Confusing. Retrieved from Marketing Land: http://marketingland.com/yahoo-ditches-track-will-signal-end-privacy- initiative-82384.

    [45] McLeod, S. (2014, June 8). Ed tech behaviorism. Retrieved from Dangerously Irrelevant: http://dangerouslyirrelevant.org/2014/06/ed-tech-behaviorism.html.

    [46] Mechanical Turk. (2013, October 21). Canada’s National Research Council Builds Huge Word-Emotion Lexicon using Mechanical Turk . Retrieved from The Mechanical Turk Blog : http://mechanicalturk.typepad.com/blog/2013/10/canadas-national-research-council-builds-huge-word-emotion-lexicon-using-mechanical-turk-.html.

    [47] Mind/Shift. (2014, June 16). Going All In: How to Make Competency-Based Learning Work. Retrieved from Katrina Schwartz: http://blogs.kqed.org/mindshift/2014/06/going-all-in-how-to-make-competency-based-learning-work/.

    [48] Moe, R. (2014, May 15). The MOOC Problem. Retrieved from Hybrid Pedagogy: http://www.hybridpedagogy.com/journal/mooc-problem/.

    [49] Molnar, M. (2014, April 30). Google Halts Scanning of Student Gmail Accounts . Retrieved from Education Week: http://blogs.edweek.org/edweek/DigitalEducation/2014/04/google_halts_scanning_ of_stude.html.

    [50] Munroe, D. (2014, May 12a). Employers must start investing in skills training or risk having public policy nudge them along. Retrieved from Financial Post: http://business.financialpost.com/2014/05/12/employers-must-start-investing-in-skills-training-or-risk- having-public-policy-nudge-them-along/.

    [51] Munroe, D. (2014b). Skills and Higher Education in Canada. Canada2020.

    [52] Nisnevich, A. (2014). Untrusted. Retrieved from Games With Purpose: http://gameswithpurpose.org/untrusted/.

    [53] Ogata, H., Hou, B., Li, M., Uosaki, N., Mouri, K., & Liu, S. (2014). Ubiquitous Learning Project Using Life-Logging Technology in Japan. Educational Technology & Society, 17(2), 85-100.

    [54] Opidee, I. (2014, June). Lecture capture: Privacy, please. Retrieved from University Business: http://www.universitybusiness.com/article/lecture-capture-privacy-please.

    [55] Paruchuri, V. (2013, July 31). On the automated scoring of essays and the lessons learned along the way. Retrieved from Vik Paruchuri: http://vikparuchuri.com/blog/on-the-automated-scoring-of-essays/.

    [56] Pearson. (2014). The Learning Curve. Pearson.

    [57] Petropoulou, O., Kasimatis, K., Dimopoulos, I., & Retalis, S. (2014, January). LAe-R: A new learning analytics tool in Moodle for assessing students’ performance. Bulletin of the IEEE Technical Committee on Learning Technology, 16(1).

    [58] Quinlan, O. (2014, June 11). Theory of Change in Education. Retrieved from Oliver Quinlan: http://www.oliverquinlan.com/blog/2014/06/11/theory-of-change-in-education/.

    [59] Rose, E. (2014). “Would you ever say that to me in class?”: Exploring the Implications of Disinhibition for Relationality in Online Teaching and Learning. In S. Bayne, C. Jones, M. d. Laat, T. Ryberg, & C. Sinclair (Ed.), Proceedings of the 9th International Conference on Networked Learning 2014.

    [60] Russia Today. (2014, June 5). German ‘NSA-proof’ private server raises $1mn crowdfunding in 89 minutes. Retrieved from Russia Today: http://rt.com/news/163968-nsa-proof-server-crowdfunding/.

    [61] Salmons, J. (2014, June 7). MM4: Online Interviews for Active Online Learning with Janet Salmons . Retrieved from WizIQ: http://www.wiziq.com/class/info.aspx?7P2M2COncN/5Xs/5ivC1NlYJsTEBRRThQITIBdbg4QqeIUDbnj0i6HRES9H+M/IUe7Jne36hcQtRp28 qgh9wx/QlHMhCcypz0nRi38B1PjA6lxDLzZL/Gz/u2pDyWsHl.

    [62] Shackleton-Jones, S. (2014, June 13). Learning Explained. Retrieved from aconventional: http://www.aconventional.com/2014/06/learning-explained.html.

    [63] Shapiro, J. (2014, February 17). Competency-Based Degrees: Coming Soon to a Campus Near You. Retrieved from Chronicle of Higher Education: http://chronicle.com/article/Competency-Based-Degrees-/144769/.

    [64] Shen, C. (2014, June 16). Announcing nanodegrees: a new type of credential for a modern workforce - See more at: http://blog.udacity.com/2014/06/announcing-nanodegrees-new-type-of.html#sthash.aPxPvhpM.dpuf. Retrieved from Udacity Blog: http://blog.udacity.com/2014/06/announcing-nanodegrees-new-type-of.html.

    [65] Stanley, D. (2014, November 18). On Maturana and Varela’s Aphorismof Knowing, Being and Doing: APhenomenological-ComplexityCirculation. Retrieved from Academica.edu: http://www.academia.edu/611581/On_Maturana_and_Varelas_Aphorism_of_Knowing_Being_and_Doing_A_Phenomenological-Complexity_Circulation.

    [66] Suarez, L. (2014, May 6). Why I, Too, Killed My LinkedIn Account. Retrieved from elusa.net: http://www.elsua.net/2014/05/06/why-i-too-killed-my-linkedin-account/.

    [67] Talbert, R. (2014, March 5). Creating learning objectives, flipped classroom style. Retrieved from Casting Out Nines: http://chronicle.com/blognetwork/castingoutnines/2014/03/05/creating-learning-objectives-flipped-classroom-style/.

    [68] Talbott, S. L. (2014, April 24). Biology’s Shameful Refusal to Disown the Machine-Organism. Retrieved from Rediscovering Life: http://natureinstitute.org/txt/st/org/comm/ar/2014/machines_18.htm.

    [69] Tamburri, R. (2014, June 11). Will competency-based degree programs come to Canada? Retrieved from University Affairs: http://www.universityaffairs.ca/competency-based-degree-programs-are- growing-in-the-us.aspx.

    [70] Tapscott, D. (2013, July 24). Meet the (Real) Net Generation. Retrieved from YouTube: Meet the (Real) Net Generation.

    [71] Thomason, A. (2014, June 3). Scientists, Calculate Your Chances of Success in Academe. Retrieved from The Chronicle of Higher Education: http://chronicle.com/blogs/ticker/scientists-calculate-your- chances-of-success-in-academe/79063.

    [72] Thompson, C. (2014, April 21). Gates-funded student data group to shut down . Retrieved from Associated press: The Big Story: http://bigstory.ap.org/article/gates-funded-student-data-group-shut- down.

    [73] Tremonti, A. M. (2014, June 3). Are we faking cultural literacy? Retrieved from CBC Radio - The Current: http://www.cbc.ca/player/News/Canada/Audio/ID/2461862894/.

    [74] Tyson, C. (2014, June 27). Mean Tweets, Academic Style. Retrieved from Inside Higher Ed: https://www.insidehighered.com/news/2014/06/27/amusing-video-has-professors-read-aloud-harsh-student- reviews.

    [75] Useem, J. (2014, May 31). Business School, Disrupted. Retrieved from New York Times: http://www.nytimes.com/2014/06/01/business/business-school-disrupted.html?_r=1.

    [76] Waters, S. (2014, June 12). Curation: Creatively Filtering Content. Retrieved from The Edublogger: http://www.theedublogger.com/2014/06/12/curation/.

    [77] Watters, A. (2014, June 7). No Really, What Should Technologists Know About Education? Retrieved from Hack Education: http://www.hackeducation.com/2014/06/07/what-should-technologists-know- about-education/.

    [78] Wilkins, J. (2013, January 27). Pattern recognition: neither deduction nor induction. Retrieved from Evolving Thoughts: http://evolvingthoughts.net/2013/01/pattern-recognition-neither-deduction- nor-induction/.

    [79] Winerman, L. (2005, October). The mind's mirror. 36(9), p. 48.

    [80] Young, N. (2014a, April 27). HR tech. Retrieved from CBC Radio - Spark: http://www.cbc.ca/spark/blog/2014/04/27/hr-tech/.

    [81] Young, N. (2014b, April 27). Personal education. Retrieved from CBC Radio - Spark: http://www.cbc.ca/spark/blog/2014/04/27/personal-education/.

    [82] Zaretsky, S. (2014, June 5). Oops! Top Law School Email Screw-Up Reveals Grades, Ranks Of All Clerkship Applicants . Retrieved from Above the Law: http://abovethelaw.com/2014/06/oops-top-law- school-email-screw-up-reveals-grades-ranks-of-all-clerkship- applicants/?show=comment.

    [83] Zhao, Y. (2014, May 25). “Not Interested in Being #1:” Shanghai May Ditch PISA. Retrieved from Yong Zhao: http://zhaolearning.com/2014/05/25/not-interested-in-being-1-shanghai-may-ditch-pisa/.

    收稿日期:2014-11-30

    定稿日期:2015-04-24

    作者簡(jiǎn)介:史蒂芬·道恩斯(Stephen Downes),加拿大國(guó)家研究委員會(huì)(National Research Council of Canada)高級(jí)研究員,慕課始創(chuàng)者之一。

    譯者簡(jiǎn)介:肖俊洪,汕頭廣播電視大學(xué)教授,《Distance Education (Taylor & Francis)》雜志副主編,《System: An International Journal of Educational Technology and Applied Linguistics (Elsevier)》編委。

    責(zé)任編輯 ? ?池 ? 塘

    猜你喜歡
    學(xué)習(xí)網(wǎng)絡(luò)評(píng)價(jià)
    SBR改性瀝青的穩(wěn)定性評(píng)價(jià)
    石油瀝青(2021年4期)2021-10-14 08:50:44
    試論在高?!爱a(chǎn)、學(xué)、研”中發(fā)展現(xiàn)代傳統(tǒng)手工藝文化
    人間(2016年26期)2016-11-03 18:25:32
    小學(xué)數(shù)學(xué)學(xué)習(xí)興趣的培養(yǎng)
    家庭習(xí)得環(huán)境對(duì)初中學(xué)生英語(yǔ)學(xué)習(xí)的影響研究
    創(chuàng)設(shè)探索情境,讓學(xué)生在“探”中“學(xué)”
    油氣集輸系統(tǒng)信息化發(fā)展形勢(shì)展望
    基于網(wǎng)絡(luò)的信息資源組織與評(píng)價(jià)現(xiàn)狀及發(fā)展趨勢(shì)研究
    基于網(wǎng)絡(luò)的中學(xué)閱讀指導(dǎo)
    考試周刊(2016年79期)2016-10-13 21:50:36
    新形勢(shì)下地市報(bào)如何運(yùn)用新媒體走好群眾路線
    基于Moodle的學(xué)習(xí)評(píng)價(jià)
    亚洲欧美日韩高清专用| 国产一区有黄有色的免费视频 | kizo精华| 精品一区二区三区视频在线| 卡戴珊不雅视频在线播放| 97在线视频观看| 国产成人免费观看mmmm| 日日撸夜夜添| 亚洲乱码一区二区免费版| 亚洲精品日韩在线中文字幕| 久久精品人妻少妇| 中文字幕av成人在线电影| 久久精品91蜜桃| 精品不卡国产一区二区三区| 欧美变态另类bdsm刘玥| 秋霞伦理黄片| 可以在线观看毛片的网站| 黄色欧美视频在线观看| 天堂影院成人在线观看| 中文在线观看免费www的网站| 亚洲精品一区蜜桃| 亚洲精品456在线播放app| 中文字幕精品亚洲无线码一区| 韩国av在线不卡| 精品无人区乱码1区二区| 亚洲成人久久爱视频| 精品无人区乱码1区二区| 免费在线观看成人毛片| 99在线视频只有这里精品首页| 好男人在线观看高清免费视频| 亚洲精品国产av成人精品| 一区二区三区免费毛片| 69av精品久久久久久| 91精品伊人久久大香线蕉| 我要搜黄色片| 免费观看性生交大片5| 免费看美女性在线毛片视频| 中国国产av一级| 激情 狠狠 欧美| 国产精品日韩av在线免费观看| 精品久久久久久久久av| 日本猛色少妇xxxxx猛交久久| 国产一区二区在线av高清观看| 黑人高潮一二区| 黑人高潮一二区| 亚洲国产欧美人成| 久久久久久大精品| 国产亚洲最大av| 成人特级av手机在线观看| 亚洲最大成人av| av在线天堂中文字幕| 国产高清有码在线观看视频| 两个人视频免费观看高清| 国产高清有码在线观看视频| 青青草视频在线视频观看| 亚洲av电影在线观看一区二区三区 | 国产精品综合久久久久久久免费| 我的老师免费观看完整版| 大话2 男鬼变身卡| 亚洲欧美精品自产自拍| 天堂中文最新版在线下载 | 99久久中文字幕三级久久日本| 看非洲黑人一级黄片| 草草在线视频免费看| 国产成人免费观看mmmm| 我的女老师完整版在线观看| 国产私拍福利视频在线观看| АⅤ资源中文在线天堂| 九九热线精品视视频播放| 国产黄a三级三级三级人| 又粗又硬又长又爽又黄的视频| av国产免费在线观看| 国产爱豆传媒在线观看| 神马国产精品三级电影在线观看| 久久久亚洲精品成人影院| 91午夜精品亚洲一区二区三区| 国产精品福利在线免费观看| 91aial.com中文字幕在线观看| 亚洲欧美日韩无卡精品| 看非洲黑人一级黄片| 色综合亚洲欧美另类图片| av免费在线看不卡| 99在线人妻在线中文字幕| 激情 狠狠 欧美| 91在线精品国自产拍蜜月| 国产精品久久久久久av不卡| 国产亚洲精品久久久com| 亚洲欧美清纯卡通| 日本一二三区视频观看| 一区二区三区免费毛片| av女优亚洲男人天堂| 国产精品一二三区在线看| 国产v大片淫在线免费观看| 日本三级黄在线观看| 国产高清三级在线| 亚洲av中文字字幕乱码综合| 欧美一区二区亚洲| 青青草视频在线视频观看| 精品久久久久久久末码| 一本一本综合久久| 国产麻豆成人av免费视频| 欧美3d第一页| 国产一级毛片在线| 午夜精品国产一区二区电影 | 波野结衣二区三区在线| 国产精品一区二区在线观看99 | 九九爱精品视频在线观看| 丝袜喷水一区| av专区在线播放| 91狼人影院| 成人高潮视频无遮挡免费网站| 亚洲经典国产精华液单| 永久网站在线| 日韩av不卡免费在线播放| 少妇被粗大猛烈的视频| 美女国产视频在线观看| 99久久中文字幕三级久久日本| 长腿黑丝高跟| 国产精品爽爽va在线观看网站| 久久精品久久精品一区二区三区| 日日干狠狠操夜夜爽| 一区二区三区免费毛片| 亚洲国产精品成人久久小说| 建设人人有责人人尽责人人享有的 | av在线观看视频网站免费| 菩萨蛮人人尽说江南好唐韦庄 | 国产精品电影一区二区三区| 国产伦理片在线播放av一区| 伦理电影大哥的女人| 久久久久久久久久成人| 一级黄色大片毛片| 亚洲无线观看免费| 亚洲国产成人一精品久久久| 尤物成人国产欧美一区二区三区| 午夜视频国产福利| 少妇熟女aⅴ在线视频| 亚洲中文字幕日韩| 91aial.com中文字幕在线观看| 日韩三级伦理在线观看| 超碰av人人做人人爽久久| 男插女下体视频免费在线播放| 三级国产精品片| 直男gayav资源| 国产伦精品一区二区三区四那| 精品少妇黑人巨大在线播放 | 成人漫画全彩无遮挡| 男人和女人高潮做爰伦理| 国产亚洲一区二区精品| 嘟嘟电影网在线观看| 成人综合一区亚洲| 国产精品乱码一区二三区的特点| 精品国产露脸久久av麻豆 | 欧美变态另类bdsm刘玥| 亚洲av二区三区四区| 日韩精品青青久久久久久| 少妇丰满av| 成人特级av手机在线观看| 亚洲婷婷狠狠爱综合网| 热99re8久久精品国产| 亚洲久久久久久中文字幕| 日韩一区二区视频免费看| 免费无遮挡裸体视频| 又粗又爽又猛毛片免费看| 色综合亚洲欧美另类图片| 激情 狠狠 欧美| 六月丁香七月| 偷拍熟女少妇极品色| 午夜老司机福利剧场| 干丝袜人妻中文字幕| 色视频www国产| 国产精品蜜桃在线观看| 欧美3d第一页| 亚洲不卡免费看| 中文资源天堂在线| 日本免费在线观看一区| 亚洲精品,欧美精品| 久久久成人免费电影| 美女xxoo啪啪120秒动态图| 大香蕉97超碰在线| 免费看日本二区| 国产伦精品一区二区三区四那| 国产白丝娇喘喷水9色精品| 日产精品乱码卡一卡2卡三| 爱豆传媒免费全集在线观看| 国产高清有码在线观看视频| 水蜜桃什么品种好| 午夜久久久久精精品| 日韩国内少妇激情av| 22中文网久久字幕| 美女黄网站色视频| 日本免费a在线| 日韩 亚洲 欧美在线| 国产大屁股一区二区在线视频| 尾随美女入室| 中文天堂在线官网| 日韩欧美三级三区| 国产免费视频播放在线视频 | 国产美女午夜福利| 直男gayav资源| 搞女人的毛片| 久久精品人妻少妇| 高清日韩中文字幕在线| 欧美一区二区亚洲| 国产美女午夜福利| 国产精品麻豆人妻色哟哟久久 | 免费看光身美女| 日本五十路高清| 国产精品人妻久久久影院| 丝袜美腿在线中文| 麻豆乱淫一区二区| 国产淫语在线视频| 美女脱内裤让男人舔精品视频| 色噜噜av男人的天堂激情| 色综合站精品国产| 午夜福利视频1000在线观看| 亚洲久久久久久中文字幕| 亚洲,欧美,日韩| 国内少妇人妻偷人精品xxx网站| 日日撸夜夜添| av卡一久久| 亚洲国产成人一精品久久久| 国产成人午夜福利电影在线观看| 国产午夜福利久久久久久| 哪个播放器可以免费观看大片| 综合色av麻豆| 国产亚洲精品久久久com| 国产91av在线免费观看| 欧美日本视频| 欧美精品一区二区大全| 亚洲av免费在线观看| 亚洲国产最新在线播放| 嘟嘟电影网在线观看| 亚洲成av人片在线播放无| 日韩人妻高清精品专区| 天堂√8在线中文| 亚洲av熟女| 日本黄色片子视频| 午夜视频国产福利| 边亲边吃奶的免费视频| 免费av毛片视频| 嫩草影院新地址| 成年免费大片在线观看| 亚洲人成网站在线观看播放| 欧美三级亚洲精品| 亚洲国产精品专区欧美| 一区二区三区四区激情视频| 久久精品国产亚洲网站| 赤兔流量卡办理| 精品熟女少妇av免费看| 久久久久久久久久黄片| 最后的刺客免费高清国语| 国产精品永久免费网站| 麻豆成人av视频| 波多野结衣高清无吗| a级毛片免费高清观看在线播放| 麻豆成人午夜福利视频| videos熟女内射| 国产又色又爽无遮挡免| 在线观看av片永久免费下载| 国产男人的电影天堂91| 春色校园在线视频观看| 日韩欧美国产在线观看| 伊人久久精品亚洲午夜| 国内精品美女久久久久久| 国产伦精品一区二区三区视频9| 亚洲欧美日韩卡通动漫| 欧美成人免费av一区二区三区| 尾随美女入室| 日韩精品青青久久久久久| 国产一区二区亚洲精品在线观看| 午夜精品在线福利| 日韩欧美国产在线观看| 色网站视频免费| 国产精品一及| 一级毛片我不卡| 乱码一卡2卡4卡精品| 国产熟女欧美一区二区| 国产私拍福利视频在线观看| 欧美成人一区二区免费高清观看| 国产在线一区二区三区精 | 亚洲精品自拍成人| 国产一区二区亚洲精品在线观看| 国产麻豆成人av免费视频| 午夜视频国产福利| 久久99精品国语久久久| 超碰av人人做人人爽久久| 久久精品国产亚洲网站| 国产精品不卡视频一区二区| 只有这里有精品99| 观看美女的网站| 国产一级毛片在线| 色综合色国产| 日本wwww免费看| 丰满少妇做爰视频| 老师上课跳d突然被开到最大视频| 国产熟女欧美一区二区| 欧美精品国产亚洲| 午夜爱爱视频在线播放| 国产伦精品一区二区三区四那| 亚洲激情五月婷婷啪啪| 国产视频首页在线观看| 少妇人妻精品综合一区二区| 91狼人影院| 国产不卡一卡二| 国模一区二区三区四区视频| 国产高清三级在线| 国产精品一区二区性色av| 成年女人永久免费观看视频| 久久精品夜色国产| a级一级毛片免费在线观看| 国产极品天堂在线| 狠狠狠狠99中文字幕| 亚洲国产精品久久男人天堂| 99视频精品全部免费 在线| 国产男人的电影天堂91| 国产人妻一区二区三区在| 尾随美女入室| 在线观看一区二区三区| 91精品伊人久久大香线蕉| 又黄又爽又刺激的免费视频.| 国产免费福利视频在线观看| 成人特级av手机在线观看| 久久草成人影院| 免费看光身美女| 免费电影在线观看免费观看| 国产精品久久久久久精品电影小说 | 91久久精品国产一区二区成人| 国产精品蜜桃在线观看| 少妇熟女aⅴ在线视频| 成人国产麻豆网| 亚洲va在线va天堂va国产| 一级爰片在线观看| 22中文网久久字幕| 综合色丁香网| 欧美成人午夜免费资源| 国产一级毛片七仙女欲春2| 国产精品精品国产色婷婷| 精品久久久久久成人av| 精品不卡国产一区二区三区| av又黄又爽大尺度在线免费看 | 可以在线观看毛片的网站| 国产极品天堂在线| 久久精品久久精品一区二区三区| 亚洲国产精品国产精品| 天堂中文最新版在线下载 | 午夜福利成人在线免费观看| 白带黄色成豆腐渣| 国产一区亚洲一区在线观看| 能在线免费观看的黄片| 国产午夜精品论理片| 九九久久精品国产亚洲av麻豆| 1024手机看黄色片| 中文字幕av在线有码专区| 亚洲欧美日韩无卡精品| 欧美xxxx黑人xx丫x性爽| 美女被艹到高潮喷水动态| 91av网一区二区| 性色avwww在线观看| 亚洲丝袜综合中文字幕| av免费观看日本| 午夜福利视频1000在线观看| 人人妻人人看人人澡| 在线观看一区二区三区| 男人的好看免费观看在线视频| 亚洲av中文字字幕乱码综合| 少妇人妻一区二区三区视频| 日韩高清综合在线| 欧美变态另类bdsm刘玥| 3wmmmm亚洲av在线观看| 六月丁香七月| 精品国内亚洲2022精品成人| 日产精品乱码卡一卡2卡三| or卡值多少钱| 51国产日韩欧美| 中文资源天堂在线| 亚洲欧洲国产日韩| 成人av在线播放网站| 高清视频免费观看一区二区 | 黑人高潮一二区| 亚洲人与动物交配视频| 女人久久www免费人成看片 | 久久人妻av系列| 只有这里有精品99| 春色校园在线视频观看| 日韩成人伦理影院| 免费av毛片视频| 日韩一区二区三区影片| 精品不卡国产一区二区三区| 丰满乱子伦码专区| 亚洲国产精品国产精品| 亚洲精品久久久久久婷婷小说 | 久久久久久久久久久丰满| 小说图片视频综合网站| 七月丁香在线播放| 日韩一区二区三区影片| av天堂中文字幕网| 国产视频首页在线观看| 99久久人妻综合| 日韩精品青青久久久久久| av卡一久久| 国产精品人妻久久久久久| 精品久久久久久久久亚洲| 精品一区二区三区视频在线| 日本熟妇午夜| 国产男人的电影天堂91| 超碰97精品在线观看| 久久精品91蜜桃| 日本av手机在线免费观看| 亚洲在线自拍视频| 自拍偷自拍亚洲精品老妇| 亚洲婷婷狠狠爱综合网| 午夜视频国产福利| 国产精品久久久久久精品电影| 桃色一区二区三区在线观看| 熟女电影av网| 青青草视频在线视频观看| 天堂网av新在线| 免费观看a级毛片全部| 麻豆成人午夜福利视频| 精品酒店卫生间| 久久久精品94久久精品| a级毛色黄片| 中文亚洲av片在线观看爽| 听说在线观看完整版免费高清| 在线播放国产精品三级| 日产精品乱码卡一卡2卡三| 男人的好看免费观看在线视频| 久久精品国产亚洲av涩爱| 国产男人的电影天堂91| 亚洲av不卡在线观看| 亚洲精品亚洲一区二区| 最后的刺客免费高清国语| 国产午夜精品论理片| 高清av免费在线| 国产精品永久免费网站| 亚洲乱码一区二区免费版| 麻豆成人午夜福利视频| 国产黄片美女视频| 99九九线精品视频在线观看视频| 别揉我奶头 嗯啊视频| 亚洲av中文av极速乱| av国产久精品久网站免费入址| 久久亚洲国产成人精品v| 久久人人爽人人爽人人片va| 免费黄网站久久成人精品| 午夜日本视频在线| 插阴视频在线观看视频| 九草在线视频观看| 狂野欧美激情性xxxx在线观看| 午夜精品一区二区三区免费看| 少妇高潮的动态图| 亚洲欧美成人精品一区二区| 亚洲美女视频黄频| 国产视频内射| 春色校园在线视频观看| 中文字幕人妻熟人妻熟丝袜美| 深夜a级毛片| 亚洲精品影视一区二区三区av| 天堂影院成人在线观看| 免费播放大片免费观看视频在线观看 | 午夜亚洲福利在线播放| 国产午夜精品论理片| 少妇人妻精品综合一区二区| 久久韩国三级中文字幕| 99热精品在线国产| 少妇丰满av| 麻豆乱淫一区二区| 三级国产精品欧美在线观看| 一二三四中文在线观看免费高清| 亚洲精华国产精华液的使用体验| 菩萨蛮人人尽说江南好唐韦庄 | 亚洲国产精品成人久久小说| 国产精品一区二区在线观看99 | 久久99热这里只有精品18| 国产麻豆成人av免费视频| 大话2 男鬼变身卡| 97热精品久久久久久| 日韩国内少妇激情av| 久久久久久久午夜电影| 精品久久久久久久久久久久久| 国产三级在线视频| 国产精品久久久久久精品电影小说 | 国产久久久一区二区三区| av在线观看视频网站免费| 久99久视频精品免费| 全区人妻精品视频| 亚洲aⅴ乱码一区二区在线播放| 国产午夜精品一二区理论片| 亚洲国产欧美在线一区| 极品教师在线视频| 汤姆久久久久久久影院中文字幕 | 亚洲av成人av| av线在线观看网站| 中文欧美无线码| 少妇人妻精品综合一区二区| 九九在线视频观看精品| 91在线精品国自产拍蜜月| 久久亚洲国产成人精品v| 九色成人免费人妻av| 直男gayav资源| 美女大奶头视频| 久99久视频精品免费| 亚洲无线观看免费| 热99在线观看视频| 国产亚洲精品久久久com| 日韩一区二区视频免费看| 久久99蜜桃精品久久| 校园人妻丝袜中文字幕| 国产精品久久电影中文字幕| 国产精品久久久久久久电影| 精品久久久久久久久av| 国产视频内射| 国产精品一区二区三区四区免费观看| 色综合亚洲欧美另类图片| 国内精品宾馆在线| kizo精华| 日韩制服骚丝袜av| 99久国产av精品国产电影| 国产亚洲精品av在线| 午夜a级毛片| 中文乱码字字幕精品一区二区三区 | 亚洲av.av天堂| 亚洲成人久久爱视频| 亚洲成色77777| 欧美zozozo另类| 亚洲在久久综合| 一个人免费在线观看电影| 国产伦理片在线播放av一区| 亚洲最大成人av| 亚洲av中文字字幕乱码综合| 国产一区二区在线av高清观看| 联通29元200g的流量卡| 亚洲自偷自拍三级| 中文字幕亚洲精品专区| 久久精品国产自在天天线| 蜜桃亚洲精品一区二区三区| 97人妻精品一区二区三区麻豆| 国产69精品久久久久777片| 欧美日韩在线观看h| 欧美丝袜亚洲另类| 麻豆久久精品国产亚洲av| 禁无遮挡网站| 成年女人看的毛片在线观看| 亚洲欧美清纯卡通| 久久精品91蜜桃| 亚洲自拍偷在线| 国产精品嫩草影院av在线观看| 精品熟女少妇av免费看| 一本一本综合久久| 国内精品美女久久久久久| 国产老妇伦熟女老妇高清| 一区二区三区高清视频在线| 日本欧美国产在线视频| 亚洲中文字幕一区二区三区有码在线看| 在现免费观看毛片| 国产精品一区二区性色av| 成人性生交大片免费视频hd| 欧美一区二区精品小视频在线| 欧美xxxx性猛交bbbb| 亚洲精品亚洲一区二区| 精品无人区乱码1区二区| 免费看a级黄色片| 日韩一区二区三区影片| 自拍偷自拍亚洲精品老妇| 国产一级毛片在线| 26uuu在线亚洲综合色| 直男gayav资源| 最近最新中文字幕免费大全7| 亚洲人成网站高清观看| 欧美精品国产亚洲| 免费观看精品视频网站| 国产精品日韩av在线免费观看| 亚洲成av人片在线播放无| 超碰av人人做人人爽久久| 久久鲁丝午夜福利片| 天天躁日日操中文字幕| 小说图片视频综合网站| 日本欧美国产在线视频| 麻豆久久精品国产亚洲av| 乱系列少妇在线播放| 久久欧美精品欧美久久欧美| 国产视频内射| 日韩中字成人| 中文字幕人妻熟人妻熟丝袜美| 亚洲国产欧美在线一区| 国产精品麻豆人妻色哟哟久久 | 亚州av有码| 大又大粗又爽又黄少妇毛片口| 亚洲国产欧洲综合997久久,| 国产精品野战在线观看| 97在线视频观看| 亚洲在久久综合| 亚洲av熟女| 人体艺术视频欧美日本| 亚洲av免费高清在线观看| 日韩精品青青久久久久久| 国产单亲对白刺激| 男女下面进入的视频免费午夜| 国产av一区在线观看免费| 国产精品一区二区三区四区久久| 国产日韩欧美在线精品| 欧美一区二区国产精品久久精品| 午夜免费男女啪啪视频观看| 免费看美女性在线毛片视频| 欧美日本视频| 久久6这里有精品| 一级黄色大片毛片| 国产精品嫩草影院av在线观看| 久久精品人妻少妇| 久久草成人影院| 美女国产视频在线观看| 亚洲三级黄色毛片| 中文字幕熟女人妻在线| 少妇熟女aⅴ在线视频| 18禁裸乳无遮挡免费网站照片|