• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于信息技術(shù)的表現(xiàn)性評價:內(nèi)涵、作用點與發(fā)展路向 *

    2023-04-16 02:32:45鄭勤華柴喚友王懷波
    中國電化教育 2023年3期
    關(guān)鍵詞:信息技術(shù)評價教育

    鄭勤華,陳 麗①,柴喚友,王 磊,王懷波

    (1.北京師范大學(xué) 遠(yuǎn)程教育研究中心,北京 100875;2.北京師范大學(xué) 系統(tǒng)科學(xué)學(xué)院,北京 100875)

    一、引言

    隨著素質(zhì)教育的不斷發(fā)展和新課改的深入推進(jìn),表現(xiàn)性評價作為一種超越傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗的新型評價方法[1],已在當(dāng)前教育領(lǐng)域中獲得越來越多的關(guān)注。相比傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗只能考察低水平知識和孤立技能,表現(xiàn)性評價不僅能夠測量學(xué)生在解決真實任務(wù)或復(fù)雜問題時的復(fù)雜成就與情意表現(xiàn),而且還能夠兼顧學(xué)習(xí)過程與結(jié)果[2],因此其甚至被一些研究者認(rèn)為是傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗的良好替代品[3]。目前,表現(xiàn)性評價已被廣泛應(yīng)用于考察綜合素質(zhì)、復(fù)雜能力和高階思維等跨學(xué)科素質(zhì)[4]以及人工智能教育[5]、創(chuàng)客教育[6]和中高考考試科目[7]等學(xué)科教學(xué)中的學(xué)業(yè)成就。然而,總體而言,現(xiàn)有表現(xiàn)性評價在實踐層面上普遍存在非紙筆形式的表現(xiàn)性任務(wù)相對較少、測評任務(wù)真實性不夠、評分規(guī)則可操作性欠缺、實施成本相對較大等問題[8],從而造成其使用效果難達(dá)預(yù)期。2020年10月,中共中央、國務(wù)院《深化新時代教育評價改革總體方案》明確指出應(yīng)充分利用信息技術(shù),創(chuàng)新評價工具,提高教育評價的科學(xué)性、專業(yè)性和客觀性。大量研究者也從宏觀層面指出,信息技術(shù)能夠增強與創(chuàng)新教育評價工具,優(yōu)化教育評價管理,助力教育評價實施,改進(jìn)教育評價質(zhì)量[9][10]。鑒于此,本文提出一個新的研究話題——基于信息技術(shù)的表現(xiàn)性評價,從當(dāng)前表現(xiàn)性評價的特點及其存在的問題出發(fā),系統(tǒng)探討基于信息技術(shù)的表現(xiàn)性評價的內(nèi)涵、作用點與發(fā)展路向,旨在采用信息技術(shù)變革當(dāng)前表現(xiàn)性評價實踐,以克服其諸多不足,并最終服務(wù)于新時代中國特色的教育評價改革與創(chuàng)新發(fā)展。

    二、表現(xiàn)性評價概述

    (一)表現(xiàn)性評價的內(nèi)涵與特點

    盡管表現(xiàn)性評價已在當(dāng)前教育領(lǐng)域獲得廣泛應(yīng)用,但研究者并未對其定義達(dá)成一致意見。例如,Appleseed(美國一家以倡導(dǎo)表現(xiàn)性評價而聞名的非營利性組織)將表現(xiàn)性評價理解為一種允許學(xué)生展示知識、技能以及問題解決過程的測驗方法。Oberg將其描述為衡量學(xué)生進(jìn)步、技能和成就的一種或多種方法[11]。最近,有研究者通過對表現(xiàn)性評價的多種定義進(jìn)行分析和綜合,指出表現(xiàn)性評價能夠以一種提供超出實際分?jǐn)?shù)的價值、興趣和動機的方式,通過對任務(wù)執(zhí)行過程或產(chǎn)品制作過程進(jìn)行主觀評判來衡量學(xué)生真實展示知識、技能和過程的能力[12]。通俗而言,表現(xiàn)性評價往往要求學(xué)生在特定的真實或模擬情境中,運用先驗知識完成任務(wù)或解決問題,然后通過人工評判方式考察學(xué)生知識與技能的掌握程度或者問題解決、交流合作和批判性思考等多種復(fù)雜能力的發(fā)展?fàn)顩r[13]。

    基于其內(nèi)涵可知,表現(xiàn)性評價主要包含表現(xiàn)性目標(biāo)、表現(xiàn)性任務(wù)和表現(xiàn)性評分規(guī)則三大要素,而表現(xiàn)性評價的設(shè)計流程即是逐一確定三大要素[14][15]。第一,確定表現(xiàn)性目標(biāo)旨在分析并描述所要評價的目標(biāo)內(nèi)容及其理論模型。第二,確定表現(xiàn)性任務(wù)是指為評價目標(biāo)內(nèi)容而選擇表現(xiàn)性評價類型并設(shè)計真實或模擬情景下的任務(wù)或問題。綜合來看,除表現(xiàn)性紙筆測驗外,表現(xiàn)性評價的常見類型還包括制造/創(chuàng)造、設(shè)計、寫作、口頭表述、實驗與調(diào)查、模擬表現(xiàn)等。第三,確定表現(xiàn)性評分規(guī)則是指基于表現(xiàn)性任務(wù)確定測評目標(biāo)理論模型中具體指標(biāo)的評分標(biāo)準(zhǔn)并確認(rèn)評價方式與評價主體。常見的表現(xiàn)性評價方式包括等級量表(為具體指標(biāo)進(jìn)行等級賦分)、核查表(考察指向具體指標(biāo)的特定表現(xiàn)是否出現(xiàn))、軼事記錄(直接記錄學(xué)生的具體行為表現(xiàn))等,而評價主體通常由教師、同伴或家長構(gòu)成。

    大量研究者指出,相比傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗,表現(xiàn)性評價的優(yōu)勢主要體現(xiàn)在[16][17]:(1)兼顧任務(wù)完成或問題解決的過程(動態(tài)數(shù)據(jù))與結(jié)果(靜態(tài)數(shù)據(jù)),能夠最大化保證評價的全面性、客觀性和真實性;(2)注重知識的轉(zhuǎn)化與應(yīng)用,適用于考察學(xué)生的實際任務(wù)完成或問題解決能力,尤其是協(xié)作問題解決、決策力、批判性思維等高階思維能力;(3)踐行學(xué)評融合理念[18],即強調(diào)評價的學(xué)習(xí)性和診斷性的融合,支持學(xué)生可持續(xù)發(fā)展。

    (二)當(dāng)前表現(xiàn)性評價亟待解決的問題

    如上所述,針對傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗僅僅關(guān)注靜態(tài)、低階和孤立知識或技能的弊端,表現(xiàn)性評價提倡通過分析測評活動所產(chǎn)生的所有信息以考察高階思維能力。但在實施過程中,當(dāng)前表現(xiàn)性評價存在如下問題亟待解決。第一,設(shè)計與開發(fā)范式相對滯后,缺乏先進(jìn)的理論體系指引。當(dāng)前表現(xiàn)性評價無法跳脫“試題-反應(yīng)”的傳統(tǒng)測評話語體系,其設(shè)計思維仍受限于傳統(tǒng)的“試題”與“答案”模式,拘囿于紙筆測驗的傳統(tǒng)評價設(shè)計范式。由此導(dǎo)致的后果是,非紙筆形式的表現(xiàn)性任務(wù)數(shù)量無法滿足多類別多主體評價實踐的需求[19]。第二,測驗任務(wù)脫離現(xiàn)實,難以支持多樣化評價數(shù)據(jù)采集。當(dāng)前表現(xiàn)性評價所創(chuàng)設(shè)的任務(wù)情景常常源自“生編硬造”,與學(xué)生的真實生活場景相對脫節(jié),因而難以切實反映其任務(wù)完成或問題解決的能力。此外,脫離真實場景的表現(xiàn)性任務(wù)往往導(dǎo)致學(xué)生的“作答”反應(yīng)相對受限,從而無法支撐來源廣泛、類型豐富的多樣化評價數(shù)據(jù)采集。第三,數(shù)據(jù)分析過程主觀耗力,缺欠實時準(zhǔn)確的評價結(jié)果輸出。當(dāng)前表現(xiàn)性評價主要采用人工評分方式對各類表現(xiàn)性數(shù)據(jù)(如課程學(xué)習(xí)記錄、協(xié)作活動視頻、溝通音頻等)進(jìn)行評分,因此評價質(zhì)量很大程度取決于評分人員的精通性和評分規(guī)則的可操作性。然而,評分過程極易受到個人主觀經(jīng)驗的干擾,同時人員培訓(xùn)和具體實施過程需要耗用大量人力成本,這將極大限制表現(xiàn)性評價的應(yīng)用和推廣。

    綜上所述,當(dāng)前表現(xiàn)性評價實踐亟需超出“試題-反應(yīng)”傳統(tǒng)的理論體系指引,設(shè)計融合真實情景且支持多樣化數(shù)據(jù)采集的測驗任務(wù),并開發(fā)客觀簡便且準(zhǔn)確的數(shù)據(jù)分析方法,以最大程度克服其現(xiàn)有不足并充分發(fā)揮其實質(zhì)作用。對此,“證據(jù)中心設(shè)計”(Evidence-centered Design,ECD)理論[20]強調(diào)“基于證據(jù)進(jìn)行推理”,主張通過構(gòu)建復(fù)雜的任務(wù)情景來獲取類型豐富的過程性數(shù)據(jù);多媒體技術(shù)、通信技術(shù)、計算機自適應(yīng)技術(shù)等傳統(tǒng)信息技術(shù)為呈現(xiàn)真實或模擬任務(wù)情景、支持大規(guī)模測評活動的組織和實施帶來了更多可能,物聯(lián)網(wǎng)、大數(shù)據(jù)和人工智能等智能技術(shù)為采集和分析多類型表現(xiàn)數(shù)據(jù)提供了技術(shù)支撐。因此,ECD理論和信息技術(shù)可被用于變革表現(xiàn)性評價實踐,并為解決其實踐問題提供切實可行的創(chuàng)新性解決方案。

    三、基于信息技術(shù)的表現(xiàn)性評價的提出背景與內(nèi)涵界定

    (一)ECD理論及其在教育評價中的應(yīng)用

    ECD理論[21]是一套系統(tǒng)化評價設(shè)計方法,強調(diào)“基于證據(jù)進(jìn)行推理”,由Mislevy等人于1999年提出初步概念框架,2003年形成完整的理論體系。后來,Shute將其概括為學(xué)生模型、任務(wù)模型和證據(jù)模型三個最為核心的組成成分,并以此來指導(dǎo)高階思維能力的測評設(shè)計工作[22]。第一,定義測評目標(biāo)的理論結(jié)構(gòu),即建立學(xué)生模型(回答“測量什么”),旨在確定期望測量的知識、技能或者能力、態(tài)度,并根據(jù)已有理論框架確定其測量模型(包含各個子成分及其相互關(guān)系)。第二,確定反映測評目標(biāo)的指標(biāo)及計分規(guī)則,即建立證據(jù)模型(回答“如何測量”)。證據(jù)模型分為證據(jù)規(guī)則和證據(jù)模型,前者旨在確定測評任務(wù)中與學(xué)生模型相聯(lián)系的可觀察指標(biāo)及其評分規(guī)則,后者旨在構(gòu)建可觀察指標(biāo)與學(xué)生模型之間的關(guān)系。第三,設(shè)計測評任務(wù)或情境以支持測評指標(biāo)的獲取,即建立任務(wù)模型(回答“用什么測量”),旨在通過構(gòu)建復(fù)雜任務(wù)情景誘發(fā)受測者特定行為表現(xiàn)而支持測評證據(jù)的獲得。需要指出的是,三個模型的構(gòu)建并非簡單的線性結(jié)構(gòu),而是一個不斷完善、迭代的環(huán)形結(jié)構(gòu)[23]。依據(jù)袁建林等的總結(jié),基于ECD理論的測評設(shè)計邏輯主要在于:一是建構(gòu)情境任務(wù)誘發(fā)個體行為表現(xiàn),二是依據(jù)行為表現(xiàn)抽取反映個體測評目標(biāo)水平的可靠證據(jù),三是依據(jù)證據(jù)對個體測評目標(biāo)水平進(jìn)行有效推理[24]。

    目前,ECD理論已被廣泛應(yīng)用于多種國際大型教育測評項目中,如PISA、ATC21S、NAEP等。例如,ATC21S開發(fā)的基于ECD理論的在線測評系統(tǒng)可用于評價13—15歲學(xué)生的協(xié)作解決問題能力[25];美國教師資格認(rèn)證標(biāo)準(zhǔn)提倡基于ECD理論指導(dǎo)全國范圍內(nèi)教師數(shù)據(jù)素養(yǎng)測評工具的開發(fā)工作[26]。此外,ECD理論也被國內(nèi)外學(xué)者廣泛應(yīng)用于核心素養(yǎng)、信息素養(yǎng)和21世紀(jì)技能等高階思維能力[27][28]的評價。

    (二)信息技術(shù)對于教育評價改革的支撐作用

    信息技術(shù)(尤其是物聯(lián)網(wǎng)、大數(shù)據(jù)和人工智能等智能技術(shù))為教育評價改革提供了支撐引領(lǐng),對于表現(xiàn)性評價而言亦是如此。在針對一般教育評價的宏觀層面上,大量研究者分別從不同視角(如技術(shù)視角、技術(shù)驅(qū)動教育評價手段變革的視角、傳統(tǒng)教育評價向技術(shù)驅(qū)動教育評價觀念轉(zhuǎn)變的視角、技術(shù)革新和發(fā)展傳統(tǒng)教育評價的視角、技術(shù)增強和創(chuàng)新教育評價工具以及優(yōu)化教育評價管理的視角、技術(shù)驅(qū)動教育評價數(shù)字化轉(zhuǎn)型的視角)論述了信息技術(shù)(主要是智能技術(shù))對于教育評價改革的重要意義[29-32]。綜合來看,智能技術(shù)能夠增強與創(chuàng)新教育評價工具(即催生新型評價工具,促進(jìn)數(shù)據(jù)采集的多樣性、快捷性和準(zhǔn)確性),優(yōu)化教育評價管理(即簡化教育評價的開發(fā)—實施—反饋流程),助力教育評價實施(尤其針對大規(guī)模教育評價的組織和實施),改進(jìn)教育評價質(zhì)量(確保教育評價的科學(xué)性、倫理性等)。

    在針對表現(xiàn)性評價的微觀層面上,有學(xué)者從技術(shù)視角提出可穿戴技術(shù)、物聯(lián)網(wǎng)等信息技術(shù)可支持表現(xiàn)性評價的多樣化數(shù)據(jù)采集[33],也有學(xué)者提出增強/混合現(xiàn)實技術(shù)能夠通過復(fù)現(xiàn)表現(xiàn)性任務(wù)的完成過程而提升數(shù)據(jù)分析的客觀性和信效度,并降低其評價成本[34],還有學(xué)者指出電子檔案袋有利于采集學(xué)生學(xué)習(xí)的過程和結(jié)果數(shù)據(jù)[35]。袁建林等從技術(shù)革新核心素養(yǎng)測量的視角入手,指出借助信息技術(shù)能建構(gòu)復(fù)雜多元的任務(wù)情景,能獲取學(xué)生解決真實任務(wù)過程的復(fù)雜交互表現(xiàn),能記錄復(fù)雜動態(tài)的過程流數(shù)據(jù)[36]。

    (三)基于信息技術(shù)的表現(xiàn)性評價的內(nèi)涵

    綜合國內(nèi)外學(xué)者對信息技術(shù)運用于宏觀教育評價和微觀表現(xiàn)性評價的理解,可以看到信息技術(shù)具有變革當(dāng)前表現(xiàn)性評價中任務(wù)呈現(xiàn)、數(shù)據(jù)采集與分析、活動組織和實施的潛力。同時,基于前文提到的當(dāng)前表現(xiàn)性評價實踐的不足并借鑒ECD理論的優(yōu)勢,本文認(rèn)為“基于信息技術(shù)的表現(xiàn)性評價”是在教育信息化背景下,以ECD理論為指引,充分利用多種信息技術(shù)變革當(dāng)前表現(xiàn)性評價實踐中表現(xiàn)性任務(wù)的呈現(xiàn)方式、表現(xiàn)性數(shù)據(jù)的采集和分析過程、表現(xiàn)性活動的組織和實施方式,提升表現(xiàn)性評價的數(shù)字化、智能化和信息化水平,以實現(xiàn)科學(xué)、全面、客觀、高效和真實的評價與反饋。

    究其本質(zhì),基于信息技術(shù)的表現(xiàn)性評價是對當(dāng)前表現(xiàn)性評價實踐的反思和創(chuàng)新,旨在通過變革評價活動全流程而形成新的教育評價新范式,而其關(guān)鍵在于以ECD理論為指導(dǎo),充分運用各類信息技術(shù)助力評價活動全流程的數(shù)字化、智能化和信息化。具體而言,充分利用多媒體技術(shù)、通信技術(shù)、沉浸式技術(shù)等傳統(tǒng)信息技術(shù)呈現(xiàn)貼近生活的真實或模擬任務(wù)情景和支持大規(guī)模評價活動的組織和實施,利用物聯(lián)網(wǎng)、大數(shù)據(jù)和人工智能等智能技術(shù)采集和分析多樣化過程性數(shù)據(jù)并獲得表現(xiàn)性目標(biāo)推論證據(jù)(即過程性數(shù)據(jù)與表現(xiàn)性目標(biāo)指標(biāo)之間的關(guān)聯(lián)機制),以實現(xiàn)表現(xiàn)性評價的現(xiàn)代化和專業(yè)化。

    四、基于信息技術(shù)的表現(xiàn)性評價的作用點

    基于信息技術(shù)的表現(xiàn)性評價需在實踐中克服當(dāng)前表現(xiàn)性評價的諸多不足并找到適宜的技術(shù)作用點,因此本文從測評任務(wù)呈現(xiàn)、測評數(shù)據(jù)采集、測評數(shù)據(jù)分析和測評活動實施四個環(huán)節(jié)出發(fā),結(jié)合相關(guān)典型案例,深入探討基于信息技術(shù)的表現(xiàn)性評價的具體實踐。

    (一)創(chuàng)新測評任務(wù)呈現(xiàn)

    表現(xiàn)性任務(wù)是表現(xiàn)性評價的基礎(chǔ),關(guān)乎能否誘發(fā)預(yù)期行為表現(xiàn)以獲得有效推論證據(jù)。目前,信息技術(shù)主要被用于從以下三個方面來創(chuàng)新表現(xiàn)性任務(wù)的呈現(xiàn)方式:一是采用數(shù)字化技術(shù)來展示表現(xiàn)性任務(wù)。一些復(fù)雜表現(xiàn)性任務(wù)常常涉及大量任務(wù)材料(如化學(xué)實驗任務(wù)需要準(zhǔn)備試劑、量杯等)的獲取和使用,這無疑會給表現(xiàn)性任務(wù)場景的構(gòu)建帶來難度和挑戰(zhàn)。借助最新的數(shù)字化技術(shù),評價設(shè)計者可以依托網(wǎng)絡(luò)環(huán)境將任務(wù)場景進(jìn)行數(shù)字化,從而易化任務(wù)場景的構(gòu)建方式。二是采用增強/混合現(xiàn)實技術(shù)來豐富表現(xiàn)性任務(wù)。雖然評價設(shè)計人員試圖極力構(gòu)建真實的表現(xiàn)性任務(wù)場景,但囿于真實場景的復(fù)雜性、任務(wù)材料的可及性等因素,最終呈現(xiàn)的任務(wù)場景往往難及預(yù)期。對此,增強/混合現(xiàn)實技術(shù)可通過向現(xiàn)實物理環(huán)境增添一些虛擬物件(如圖標(biāo)、音頻、視頻等)而增強任務(wù)場景的真實性。三是采用計算機自適應(yīng)技術(shù)來定制表現(xiàn)性任務(wù)。特定受測者能否準(zhǔn)確被測很大程度上依賴于其能力與表現(xiàn)性任務(wù)難度的匹配程度,當(dāng)其能力水平與(尤其是表現(xiàn)性紙筆測驗的)任務(wù)難度不相匹配時,測評結(jié)果極易失真失效。對此,計算機自適應(yīng)技術(shù)可通過測試自行適應(yīng)受測者能力水平,靈活施測與被試能力水平相匹配的測驗項目,從而實現(xiàn)測評的科學(xué)、準(zhǔn)確與高效。例如,有研究者在線開發(fā)了一個可考察學(xué)生科學(xué)探究能力的虛擬表現(xiàn)性任務(wù)場景[37];美國教育考試中心開發(fā)了計算機自適應(yīng)版本的研究生入學(xué)考試(GRE)和iSkills評價項目[38]??傮w而言,以上三種應(yīng)用均采用特別設(shè)計的表現(xiàn)性任務(wù)來支持誘發(fā)受測者的相關(guān)行為表現(xiàn),這主要是因為自然條件下的相關(guān)行為表現(xiàn)相對稀疏且難以采集,從而導(dǎo)致評價者只能借助抽樣方法來獲取有代表性的樣本數(shù)據(jù)。最近,蓬勃發(fā)展的大數(shù)據(jù)思維為新時代表現(xiàn)性評價變革提供了重要契機。在大數(shù)據(jù)視角下,針對特定測評目標(biāo)的表現(xiàn)性任務(wù)不再局限于評價設(shè)計者預(yù)先創(chuàng)設(shè)的有限任務(wù)類型,而是囊括受測者在自然條件下參與的所有相關(guān)任務(wù)類型,從而可以在最大程度上實現(xiàn)測評任務(wù)呈現(xiàn)的真實性。然而,現(xiàn)有研究僅從理論上探討了這類新型表現(xiàn)性任務(wù)的潛在可能性,鮮有可供借鑒的典型實踐案例。

    (二)拓展測評數(shù)據(jù)采集

    表現(xiàn)性數(shù)據(jù)是表現(xiàn)性評價的核心,只有全面真實的測評數(shù)據(jù)才能促成測評目標(biāo)的有效達(dá)成。借助視頻監(jiān)控、智能錄播、物聯(lián)網(wǎng)、平臺自動記錄、網(wǎng)絡(luò)爬蟲等數(shù)據(jù)采集類信息技術(shù),表現(xiàn)性評價可實現(xiàn)全面采集測評數(shù)據(jù)的目標(biāo),其技術(shù)邏輯主要體現(xiàn)在下列三個方面:一是技術(shù)驅(qū)動數(shù)據(jù)來源的多樣性。表現(xiàn)性數(shù)據(jù)的來源不僅包括受測者本身,還包括周圍的測評場景,如與受測者開展多類型交互的同伴、實體材料或虛擬平臺等。多樣化數(shù)據(jù)抓取可以支撐測評數(shù)據(jù)的交叉驗證,確保評價結(jié)果的無偏性、真實性和有效性。二是技術(shù)驅(qū)動數(shù)據(jù)類型的繁雜性。表現(xiàn)性評價活動一方面能夠產(chǎn)生頻次、時長、數(shù)量等可存儲于數(shù)據(jù)庫的結(jié)構(gòu)化數(shù)據(jù),另一方面也能產(chǎn)生語音、視頻、文本和圖片等非結(jié)構(gòu)化數(shù)據(jù)。多模態(tài)數(shù)據(jù)采集能夠豐富評價內(nèi)容的充實性,確保準(zhǔn)確、完整地反映受測者的各類活動表現(xiàn)。三是技術(shù)驅(qū)動數(shù)據(jù)分布的全時性。整個表現(xiàn)性任務(wù)執(zhí)行期間,表現(xiàn)性評價活動能夠產(chǎn)生關(guān)于受測者及其周圍測評場景的海量動態(tài)數(shù)據(jù)流。動態(tài)數(shù)據(jù)流捕獲有助于銜接受測者參與任務(wù)期間的前后狀態(tài)信息,達(dá)成對其表現(xiàn)的實時理解、因果分析和未來預(yù)測。例如,Stewart等創(chuàng)建了一個計算機三人協(xié)作編程任務(wù)來考察受測者的協(xié)作問題解決能力。為了全面捕獲可反映受測者任務(wù)表現(xiàn)的相關(guān)信息,研究者采用視頻記錄法和平臺自動記錄法綜合采集了受測者的面部表情數(shù)據(jù)、語音討論數(shù)據(jù)和計算機編程界面變化數(shù)據(jù)[39]。

    (三)優(yōu)化測評數(shù)據(jù)分析

    測評數(shù)據(jù)分析是表現(xiàn)性評價的靈魂,極大程度上制約著證據(jù)推論的質(zhì)量和評價目標(biāo)達(dá)成的效果。最開始,信息技術(shù)主要被應(yīng)用于輔助表現(xiàn)性評價中的主觀評判。兩種常見做法是:第一,基于視頻記錄法完整記錄受測者在執(zhí)行表現(xiàn)性任務(wù)時的各類表現(xiàn),然后將活動視頻發(fā)送給評分專家由其完成評分過程。該做法一方面可以降低召集評分專家所帶來的時間和金錢成本,另一方面有助于評分專家通過多次查看而提升主觀評判的準(zhǔn)確性。第二,采用增強/混合現(xiàn)實技術(shù)為評分專家實時呈現(xiàn)評分標(biāo)準(zhǔn),方便其隨時查看和參考。很明顯,該做法可通過提升評分專家對于評分標(biāo)準(zhǔn)的熟悉度而助力主觀評判的準(zhǔn)確性和可信性。例如,有研究者開發(fā)了一個基于手機的增強現(xiàn)實表現(xiàn)評價系統(tǒng)(其顯著特征是可實時記錄任務(wù)執(zhí)行過程和呈現(xiàn)評分標(biāo)準(zhǔn)),針對其使用效果的研究發(fā)現(xiàn):該系統(tǒng)能夠有效提升主觀評分的準(zhǔn)確性[40]。最近,研究者開始嘗試采用融合高級統(tǒng)計測量模型的數(shù)據(jù)分析技術(shù)來驅(qū)動測評數(shù)據(jù)分析的智能化、自動化和準(zhǔn)確性。目前主流的數(shù)據(jù)分析方法有兩大類:一是依據(jù)證據(jù)規(guī)則編寫算法程序,如ATC21S編寫的算法程序可以有效識別與協(xié)作問題解決能力理論模型中具體成分相關(guān)聯(lián)的行為模式,然后通過對其呈現(xiàn)的有無進(jìn)行不同賦值以實現(xiàn)受測者表現(xiàn)的自動化評分;二是“機器學(xué)習(xí)”評分,即采用多種統(tǒng)計模型(如人工神經(jīng)網(wǎng)絡(luò)、貝葉斯網(wǎng)絡(luò)和潛在語義分析模型等)進(jìn)行數(shù)據(jù)特征提取或關(guān)鍵模式識別,如Ronald和Adrian應(yīng)用“人工神經(jīng)網(wǎng)絡(luò)”對科學(xué)問題解決過程進(jìn)行評分[41]。

    (四)促進(jìn)測評活動實施

    測評活動實施是表現(xiàn)性評價的根本,如果實施乏力,尤其是大規(guī)模測評項目,表現(xiàn)性評價難以取得預(yù)期效果。綜合來看,信息技術(shù)可在測評活動的前、中、后三個不同階段基于差異化措施促進(jìn)其正常開展。第一,在測評活動前期,測評實施者可借助視頻錄播、視頻會議、動畫演示、電子文檔等技術(shù)平臺幫助受測者了解測評任務(wù)、熟悉測評流程、明晰測評反應(yīng)以及練習(xí)測評操作,以打消其參與測評時的陌生感、無助感和焦慮感,支持其在正式測試時真實展現(xiàn)自身的技能、能力、思維等。第二,在測評(尤其是在線測評)活動期間,測評實施者可借助視頻監(jiān)控、視頻分析、面部表情識別等技術(shù)實時追蹤并分析受測者的行為表現(xiàn)和心理狀態(tài),并利用個性化干預(yù)技術(shù)在必要時(如動機不足、反應(yīng)不當(dāng))為其提供適宜的測評支架,以協(xié)助其克服相關(guān)問題并順利完成測評任務(wù)。第三,在測評活動后期,測評實施者可借助可視化技術(shù)直觀呈現(xiàn)受測者的測評過程和結(jié)果表現(xiàn),通過對比個體與整體的表現(xiàn)差異分析受測者的優(yōu)勢和劣勢,并利用個性化推送技術(shù)為受測者提供定制化的評價反饋與差異化的發(fā)展建議。例如,我國最新開展的“大規(guī)模學(xué)生跨學(xué)段成長研究”項目組在其試測工作中充分利用了信息技術(shù)來促進(jìn)表現(xiàn)性測評活動的一系列實施工作,如試測前的在線操作演示、試測中的問題解答和試測后的建議反饋[42]。

    五、基于信息技術(shù)的表現(xiàn)性評價的發(fā)展路向

    整體而言,目前基于信息技術(shù)的表現(xiàn)性評價的應(yīng)用和推廣仍處于初級階段,未來需要從以下四個方面入手合力推進(jìn)其大規(guī)模應(yīng)用和推廣。

    (一)樹牢改革理念,正確認(rèn)識表現(xiàn)性評價的內(nèi)容、形式與方法

    推進(jìn)基于信息技術(shù)的表現(xiàn)性評價,第一要務(wù)是確立科學(xué)合理的評價理念。首先,在測驗內(nèi)容上,不應(yīng)只局限于孤立的知識或技能,而應(yīng)聚焦于協(xié)作問題解決能力、決策力、批判性思維等高階思維能力。這些高階思維能力才是人才綜合素質(zhì)的核心成分,蘊含著智力、情感、態(tài)度和品德等多種要素[43]。正如孫宏志等[44]所言,“對學(xué)生高階思維發(fā)展的評價是核心素養(yǎng)指向下學(xué)業(yè)質(zhì)量評價改革的訴求,也是高階思維課堂構(gòu)建的指揮棒”。其次,在測驗形式上,需要超越傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗甚至表現(xiàn)性紙筆測驗,更多關(guān)注富含動態(tài)性、交互性和真實性的表現(xiàn)性任務(wù)場景。在這些場景下,受測者可以相對不受限制地通過多種形式(如面部表情、肢體動作等)展示自身的特定高階思維能力,因此在測評結(jié)果上更為科學(xué)可信。再次,在評價方法上,需要正確看待技術(shù)的賦能作用,適時適度將信息技術(shù)融入表現(xiàn)性評價場景。一方面,信息技術(shù)能夠給表現(xiàn)性評價的任務(wù)呈現(xiàn)、數(shù)據(jù)采集與分析、活動實施等帶來便利;但是另一方面,如果使用不當(dāng),受測者就會面臨數(shù)字分心、技術(shù)負(fù)載或技術(shù)倦怠等一系列問題。

    (二)優(yōu)化技術(shù)服務(wù),持續(xù)改進(jìn)表現(xiàn)性評價的可用性、易用性與實用性

    技術(shù)服務(wù)的好壞,直接制約著基于信息技術(shù)的表現(xiàn)性評價的應(yīng)用效果。因此,需要全面優(yōu)化服務(wù)于測評全流程的各類信息技術(shù)。第一,針對測評任務(wù)呈現(xiàn),可依據(jù)測評目標(biāo)特點科學(xué)識別支持測評數(shù)據(jù)采集的自然任務(wù)場景或結(jié)合特定技術(shù)參數(shù)和具體任務(wù)內(nèi)容合理搭建模擬任務(wù)場景,以確保任務(wù)呈現(xiàn)的真實性、可行性和可信性。第二,針對測評數(shù)據(jù)采集,可基于測評場景本身選用、配置或增添適宜的數(shù)據(jù)采集技術(shù),以確保數(shù)據(jù)采集的非侵入性、全面性和準(zhǔn)確性。第三,針對測評數(shù)據(jù)分析,可基于測評數(shù)據(jù)類型選用、升級或開發(fā)適宜的數(shù)據(jù)分析技術(shù),以確保數(shù)據(jù)分析的準(zhǔn)確性、穩(wěn)健性和智能性。第四,針對測評活動實施,可依據(jù)評價活動特點并結(jié)合相關(guān)信息技術(shù)精心設(shè)計測評前培訓(xùn)、測評中支架和測評后反饋,以確?;顒訉嵤┑母咝?、科學(xué)性和可操作性。此外,需要在總體上借鑒國際、國家和地區(qū)技術(shù)標(biāo)準(zhǔn)以構(gòu)建服務(wù)于表現(xiàn)性評價的重要技術(shù)標(biāo)準(zhǔn)和規(guī)范,并通過不斷迭代和更新信息技術(shù)來降低服務(wù)于表現(xiàn)性評價的技術(shù)成本和操作難度,以切實推進(jìn)基于信息技術(shù)的表現(xiàn)性評價的大規(guī)模應(yīng)用和推廣。

    (三)完善數(shù)據(jù)標(biāo)準(zhǔn),穩(wěn)步提高表現(xiàn)性評價的規(guī)范性、統(tǒng)一性和效率性

    構(gòu)建規(guī)范的數(shù)據(jù)標(biāo)準(zhǔn)體系,是確保基于信息技術(shù)的表現(xiàn)性評價得以順利開展的重要一環(huán)。第一,加快推進(jìn)數(shù)據(jù)標(biāo)準(zhǔn)化建設(shè),實現(xiàn)針對不同來源、類型、結(jié)構(gòu)表現(xiàn)性數(shù)據(jù)的標(biāo)準(zhǔn)化處理規(guī)則體系?;跀?shù)據(jù)標(biāo)準(zhǔn),使得相關(guān)數(shù)據(jù)能夠在信息技術(shù)迭代更新后仍可保持優(yōu)異兼容性,且能在必要時實現(xiàn)相互之間的交換和集成[45]。第二,加強推介數(shù)據(jù)標(biāo)準(zhǔn),實現(xiàn)中小學(xué)校長、教師和家長等表現(xiàn)性評價利益相關(guān)者對數(shù)據(jù)標(biāo)準(zhǔn)的重要性認(rèn)識和含義理解,并推動其對表現(xiàn)性數(shù)據(jù)采集和分析的認(rèn)可和配合。與此同時,廣大表現(xiàn)性評價開發(fā)者能夠由此在設(shè)計任務(wù)場景時自覺遵守數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范,從而推動表現(xiàn)性數(shù)據(jù)采集和分析流程的規(guī)范化和科學(xué)化。第三,大力深化國際交流合作,扎實推進(jìn)數(shù)據(jù)標(biāo)準(zhǔn)的國際化工作。通過承辦或參加相關(guān)國際化交流活動,我國學(xué)者可以深度學(xué)習(xí)其他國家的數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)經(jīng)驗,加強我國與國際數(shù)據(jù)標(biāo)準(zhǔn)化組織的聯(lián)系,并立足我國實際以豐富完善數(shù)據(jù)標(biāo)準(zhǔn)[46]。

    (四)建強人才隊伍,大力推動表現(xiàn)性評價的專業(yè)性、科學(xué)性和可靠性

    推動基于信息技術(shù)的表現(xiàn)性評價的高效開展,亟需開展專項培訓(xùn)并組建一支多元化專業(yè)化的評價隊伍。一方面,政府部門可以組織教師群體進(jìn)行表現(xiàn)性評價的網(wǎng)絡(luò)課程學(xué)習(xí),教育部門可以結(jié)合中小學(xué)表現(xiàn)性評價工作的實際開展情況進(jìn)行專門指導(dǎo)和具體培訓(xùn),第三方機構(gòu)可以給評價人員提供任務(wù)呈現(xiàn)、數(shù)據(jù)采集與分析、活動實施等方面的專題培訓(xùn)[47]。而且,可充分利用信息技術(shù)(尤其是智能技術(shù))對教師群體參與培訓(xùn)時的多模態(tài)、全息數(shù)據(jù)進(jìn)行全過程采集與分析,以明晰其實際需求和能力短板,從而支持為其提供更具針對性的培訓(xùn)服務(wù)[48]。另一方面,表現(xiàn)性評價隊伍不僅需要涵蓋一線校長、學(xué)科教師、家長、學(xué)生或同伴、社會人員等多個利益相關(guān)主體,而且需要納入學(xué)科教學(xué)、心理與教育測量學(xué)、信息技術(shù)、教育管理等領(lǐng)域的人才儲備力量。此外,需要整合教育學(xué)、心理學(xué)和信息技術(shù)學(xué)等基礎(chǔ)學(xué)科的力量培養(yǎng)新型教育評價專門人才,增強其利用跨學(xué)科知識開展表現(xiàn)性評價及解決傳統(tǒng)評價難題的能力[49]。

    六、結(jié)語

    針對傳統(tǒng)標(biāo)準(zhǔn)化紙筆測驗的不足,表現(xiàn)性評價具有兼顧測評過程與結(jié)果、注重知識的轉(zhuǎn)化與應(yīng)用、踐行學(xué)評融合理念等優(yōu)勢。尤其是對于批判性思維、協(xié)作問題解決能力、創(chuàng)造力等面向21世紀(jì)的高階思維能力,表現(xiàn)性評價展現(xiàn)出得天獨厚的優(yōu)勢。然而,當(dāng)前表現(xiàn)性評價實踐因為設(shè)計與開發(fā)范式相對滯后、測驗任務(wù)脫離現(xiàn)實、數(shù)據(jù)分析過程主觀耗力,并未取得預(yù)期效果。《深化新時代教育評價改革總體方案》強調(diào)充分利用信息技術(shù)創(chuàng)新評價工具,為表現(xiàn)性評價變革提供了科學(xué)方向。隨著人工智能、虛擬現(xiàn)實、物聯(lián)網(wǎng)等新興信息技術(shù)以及多媒體、通信、計算機自適應(yīng)等傳統(tǒng)信息技術(shù)為被日益廣泛地應(yīng)用于教育領(lǐng)域,這些技術(shù)正成為推動和加速教育評價變革的關(guān)鍵力量。表現(xiàn)性評價也不例外,勢必會受到這些術(shù)的強力賦能和深刻影響。未來應(yīng)大力推動各類信息技術(shù)與表現(xiàn)性評價實踐的深度融合,切實變革表現(xiàn)性評價的任務(wù)呈現(xiàn)、數(shù)據(jù)采集和分析、活動實施等環(huán)節(jié),真正助力表現(xiàn)性評價驅(qū)動素質(zhì)教育變革和立德樹人目標(biāo)達(dá)成潛能的實現(xiàn)。

    猜你喜歡
    信息技術(shù)評價教育
    國外教育奇趣
    華人時刊(2022年13期)2022-10-27 08:55:52
    題解教育『三問』
    新一代信息技術(shù)征稿啟示
    SBR改性瀝青的穩(wěn)定性評價
    石油瀝青(2021年4期)2021-10-14 08:50:44
    新一代信息技術(shù)征稿啟示
    新一代信息技術(shù)征稿啟示
    信息技術(shù)在幼兒教育中的有效應(yīng)用
    甘肅教育(2020年2期)2020-09-11 08:00:44
    教育有道——關(guān)于閩派教育的一點思考
    辦好人民滿意的首都教育
    基于Moodle的學(xué)習(xí)評價
    街头女战士在线观看网站| 久久亚洲国产成人精品v| 国产伦精品一区二区三区视频9| 日韩视频在线欧美| 两个人视频免费观看高清| 日韩国内少妇激情av| 视频中文字幕在线观看| 在线a可以看的网站| 欧美日韩国产mv在线观看视频 | av国产免费在线观看| 成年女人在线观看亚洲视频 | 国产免费视频播放在线视频 | 嫩草影院入口| 免费电影在线观看免费观看| 亚洲av日韩在线播放| 免费av观看视频| av线在线观看网站| 亚洲精品久久午夜乱码| ponron亚洲| 又爽又黄无遮挡网站| 夫妻午夜视频| 国产精品一区二区性色av| 天堂网av新在线| 国产亚洲av片在线观看秒播厂 | 亚洲精品成人久久久久久| 啦啦啦韩国在线观看视频| 成年人午夜在线观看视频 | 亚洲欧洲日产国产| 亚洲av国产av综合av卡| 中文资源天堂在线| av线在线观看网站| 99热这里只有是精品在线观看| 国产在视频线精品| 嫩草影院入口| 亚洲高清免费不卡视频| 免费av毛片视频| 精品少妇黑人巨大在线播放| 国产综合懂色| 亚洲国产色片| 久久人人爽人人爽人人片va| 欧美最新免费一区二区三区| 中文字幕免费在线视频6| 日韩av在线大香蕉| 免费不卡的大黄色大毛片视频在线观看 | 日韩三级伦理在线观看| 精品一区二区三区人妻视频| 丝袜喷水一区| 亚洲va在线va天堂va国产| 亚洲国产精品专区欧美| 九九在线视频观看精品| 在线观看人妻少妇| 五月天丁香电影| 观看美女的网站| 97超视频在线观看视频| 人妻夜夜爽99麻豆av| 免费黄频网站在线观看国产| 精品欧美国产一区二区三| 日韩av在线大香蕉| 一级毛片 在线播放| 精品国产三级普通话版| 欧美日韩精品成人综合77777| 日韩欧美 国产精品| 欧美变态另类bdsm刘玥| 日韩伦理黄色片| 男女啪啪激烈高潮av片| 免费观看a级毛片全部| 国产av在哪里看| 91aial.com中文字幕在线观看| 国产免费福利视频在线观看| 天天一区二区日本电影三级| 人妻一区二区av| kizo精华| 熟妇人妻久久中文字幕3abv| 亚洲在久久综合| 免费无遮挡裸体视频| 三级国产精品欧美在线观看| 日产精品乱码卡一卡2卡三| 免费播放大片免费观看视频在线观看| 久久久久久伊人网av| 亚洲怡红院男人天堂| av免费观看日本| 街头女战士在线观看网站| 神马国产精品三级电影在线观看| 一区二区三区高清视频在线| 两个人的视频大全免费| www.av在线官网国产| 亚洲三级黄色毛片| 国产 一区 欧美 日韩| 国产乱来视频区| 毛片一级片免费看久久久久| 丝袜美腿在线中文| 亚洲国产欧美人成| 久久久久久伊人网av| 精品国产三级普通话版| 少妇被粗大猛烈的视频| 亚洲欧美一区二区三区黑人 | 久久久久久久亚洲中文字幕| 久久久久九九精品影院| 国产av国产精品国产| 久久久精品欧美日韩精品| 少妇丰满av| 神马国产精品三级电影在线观看| 三级国产精品欧美在线观看| 国产午夜福利久久久久久| 一区二区三区高清视频在线| 国产精品综合久久久久久久免费| 亚洲精品aⅴ在线观看| 国产精品综合久久久久久久免费| h日本视频在线播放| 日韩国内少妇激情av| 大又大粗又爽又黄少妇毛片口| videos熟女内射| 免费看日本二区| 啦啦啦啦在线视频资源| 嘟嘟电影网在线观看| 人妻少妇偷人精品九色| 一个人观看的视频www高清免费观看| 床上黄色一级片| 91av网一区二区| 午夜福利在线观看免费完整高清在| 国产伦在线观看视频一区| 色尼玛亚洲综合影院| 欧美日韩亚洲高清精品| 亚洲国产成人一精品久久久| 国产中年淑女户外野战色| 美女cb高潮喷水在线观看| 久久综合国产亚洲精品| 亚洲综合色惰| 日韩国内少妇激情av| 寂寞人妻少妇视频99o| 亚洲精品,欧美精品| 日韩中字成人| 亚洲精品日韩av片在线观看| 亚洲第一区二区三区不卡| 中国美白少妇内射xxxbb| 日日摸夜夜添夜夜添av毛片| 国产色爽女视频免费观看| 免费黄频网站在线观看国产| 18禁动态无遮挡网站| 国产视频内射| 国产片特级美女逼逼视频| 人妻少妇偷人精品九色| 日韩欧美精品免费久久| 国模一区二区三区四区视频| 性色avwww在线观看| 国产老妇伦熟女老妇高清| 美女cb高潮喷水在线观看| 久99久视频精品免费| 亚洲四区av| 嫩草影院新地址| 在线观看美女被高潮喷水网站| 丰满乱子伦码专区| 精品久久国产蜜桃| 免费观看a级毛片全部| 国产成人精品福利久久| 亚洲精品日韩在线中文字幕| 亚洲伊人久久精品综合| 在线免费观看的www视频| www.色视频.com| 91aial.com中文字幕在线观看| 久久热精品热| 国产永久视频网站| 中文字幕av成人在线电影| 99久久九九国产精品国产免费| 伦精品一区二区三区| 91狼人影院| 看免费成人av毛片| 十八禁国产超污无遮挡网站| 天堂网av新在线| 晚上一个人看的免费电影| 国产中年淑女户外野战色| 国产老妇伦熟女老妇高清| 日本一二三区视频观看| 久久韩国三级中文字幕| 国产精品久久视频播放| 国产精品女同一区二区软件| 欧美性感艳星| 两个人视频免费观看高清| 午夜免费激情av| 国产人妻一区二区三区在| 国产麻豆成人av免费视频| 免费观看的影片在线观看| 日韩 亚洲 欧美在线| 超碰97精品在线观看| 少妇熟女欧美另类| 亚洲成人一二三区av| 欧美3d第一页| 女人被狂操c到高潮| 高清毛片免费看| 99热这里只有精品一区| 直男gayav资源| 中文字幕久久专区| 大又大粗又爽又黄少妇毛片口| 日韩欧美一区视频在线观看 | 久久精品久久精品一区二区三区| 成人无遮挡网站| 国产亚洲一区二区精品| 精品人妻一区二区三区麻豆| 18+在线观看网站| 久久鲁丝午夜福利片| 亚洲电影在线观看av| 成人亚洲欧美一区二区av| 纵有疾风起免费观看全集完整版 | 国产午夜精品久久久久久一区二区三区| 亚洲av成人精品一二三区| 国精品久久久久久国模美| 国产视频内射| 99re6热这里在线精品视频| 亚洲成人中文字幕在线播放| 精品久久久久久久久av| 亚洲国产色片| 一级爰片在线观看| 色网站视频免费| 国产精品福利在线免费观看| 国产成年人精品一区二区| 偷拍熟女少妇极品色| 高清欧美精品videossex| 亚洲图色成人| 亚洲精品一二三| 亚洲av日韩在线播放| 久久99热这里只有精品18| 国产精品久久久久久av不卡| 久久久久久久国产电影| 国产午夜精品论理片| 日韩精品青青久久久久久| 亚洲欧美日韩无卡精品| 国产成人免费观看mmmm| 夫妻午夜视频| 亚洲欧洲日产国产| a级毛片免费高清观看在线播放| 校园人妻丝袜中文字幕| 日韩欧美精品免费久久| 久久人人爽人人片av| 极品少妇高潮喷水抽搐| 久久久久免费精品人妻一区二区| 午夜福利在线观看免费完整高清在| 国产精品福利在线免费观看| 一边亲一边摸免费视频| 两个人视频免费观看高清| 日本欧美国产在线视频| 亚洲不卡免费看| 日日摸夜夜添夜夜添av毛片| 亚洲第一区二区三区不卡| 日韩欧美精品v在线| 国产精品一区二区三区四区久久| 国产亚洲最大av| 一本久久精品| 韩国高清视频一区二区三区| 国产日韩欧美在线精品| 国产精品人妻久久久久久| 亚洲av中文字字幕乱码综合| 欧美日本视频| 免费观看av网站的网址| 亚洲精品成人久久久久久| 亚洲av男天堂| 久久综合国产亚洲精品| 国语对白做爰xxxⅹ性视频网站| 亚洲精品一二三| 国产综合懂色| 秋霞伦理黄片| 国产成人一区二区在线| 国产一级毛片七仙女欲春2| 汤姆久久久久久久影院中文字幕 | 国产毛片a区久久久久| 男女啪啪激烈高潮av片| 亚洲国产av新网站| 在线观看美女被高潮喷水网站| 乱系列少妇在线播放| 真实男女啪啪啪动态图| 成人亚洲精品一区在线观看 | 欧美区成人在线视频| 久久99精品国语久久久| 国产国拍精品亚洲av在线观看| 美女xxoo啪啪120秒动态图| 能在线免费看毛片的网站| 成年免费大片在线观看| 欧美潮喷喷水| 麻豆成人av视频| 欧美三级亚洲精品| 久久精品国产自在天天线| xxx大片免费视频| videossex国产| 午夜激情福利司机影院| 久久久久久久亚洲中文字幕| 大陆偷拍与自拍| 草草在线视频免费看| 亚洲精品国产成人久久av| 国模一区二区三区四区视频| 特大巨黑吊av在线直播| 赤兔流量卡办理| 国产免费福利视频在线观看| av国产免费在线观看| 亚洲av一区综合| 国产精品一二三区在线看| 可以在线观看毛片的网站| 精品国产露脸久久av麻豆 | 日韩人妻高清精品专区| 亚洲国产av新网站| 卡戴珊不雅视频在线播放| 在线免费观看不下载黄p国产| 青春草视频在线免费观看| .国产精品久久| 最近最新中文字幕免费大全7| 国产精品久久久久久av不卡| 成人亚洲精品av一区二区| 人妻一区二区av| av播播在线观看一区| 18禁在线播放成人免费| 亚洲人与动物交配视频| 午夜视频国产福利| 肉色欧美久久久久久久蜜桃 | 亚洲成色77777| 中文欧美无线码| 嫩草影院精品99| 亚洲欧美一区二区三区国产| 黄色欧美视频在线观看| 全区人妻精品视频| 欧美日韩精品成人综合77777| 一夜夜www| 久久精品国产亚洲网站| 联通29元200g的流量卡| av.在线天堂| av又黄又爽大尺度在线免费看| 少妇猛男粗大的猛烈进出视频 | 久久午夜福利片| 久久久久久久大尺度免费视频| 99re6热这里在线精品视频| 91久久精品电影网| 久久久精品94久久精品| 午夜激情福利司机影院| 亚洲精品一二三| 国产三级在线视频| 激情 狠狠 欧美| 美女高潮的动态| 中国美白少妇内射xxxbb| 汤姆久久久久久久影院中文字幕 | 日韩欧美精品免费久久| 亚洲av在线观看美女高潮| 18+在线观看网站| 亚洲真实伦在线观看| 嫩草影院精品99| 蜜桃久久精品国产亚洲av| .国产精品久久| 少妇丰满av| 天天躁日日操中文字幕| 成人亚洲精品av一区二区| 黄色配什么色好看| 欧美日韩精品成人综合77777| 天美传媒精品一区二区| 91精品国产九色| 内射极品少妇av片p| 搡女人真爽免费视频火全软件| 久久97久久精品| av线在线观看网站| 亚洲成人av在线免费| 又粗又硬又长又爽又黄的视频| 国产精品蜜桃在线观看| 熟女电影av网| 亚洲精品乱久久久久久| 美女内射精品一级片tv| 午夜福利成人在线免费观看| 亚洲性久久影院| av在线观看视频网站免费| 亚洲精品乱码久久久久久按摩| 国产欧美另类精品又又久久亚洲欧美| 亚洲欧美日韩卡通动漫| 久久久久久国产a免费观看| 嫩草影院入口| 啦啦啦啦在线视频资源| 国产黄色小视频在线观看| 2021少妇久久久久久久久久久| 国产一级毛片在线| 国产又色又爽无遮挡免| 免费看a级黄色片| 亚洲国产欧美在线一区| 一级毛片我不卡| 午夜福利成人在线免费观看| 国产伦理片在线播放av一区| 午夜日本视频在线| 麻豆国产97在线/欧美| 美女内射精品一级片tv| 国产精品伦人一区二区| 国产一区有黄有色的免费视频 | www.色视频.com| 在线观看美女被高潮喷水网站| 中文字幕免费在线视频6| 18+在线观看网站| 高清毛片免费看| 蜜桃久久精品国产亚洲av| 一级毛片黄色毛片免费观看视频| 国产成人精品婷婷| 一级毛片久久久久久久久女| 免费黄网站久久成人精品| 少妇的逼水好多| 国产午夜福利久久久久久| xxx大片免费视频| 六月丁香七月| 九九爱精品视频在线观看| 日日摸夜夜添夜夜添av毛片| 亚洲伊人久久精品综合| 午夜爱爱视频在线播放| 特级一级黄色大片| 99久久中文字幕三级久久日本| 非洲黑人性xxxx精品又粗又长| 在线播放无遮挡| 神马国产精品三级电影在线观看| 男女边吃奶边做爰视频| 久久精品久久久久久久性| 一个人看视频在线观看www免费| 国产av在哪里看| 两个人视频免费观看高清| 男女那种视频在线观看| 一个人看的www免费观看视频| 亚洲怡红院男人天堂| 亚洲国产精品成人综合色| 蜜桃久久精品国产亚洲av| 欧美潮喷喷水| 2021天堂中文幕一二区在线观| 国产高清国产精品国产三级 | 欧美日韩亚洲高清精品| www.av在线官网国产| 日韩中字成人| av国产久精品久网站免费入址| 国产精品麻豆人妻色哟哟久久 | 日韩视频在线欧美| 男人舔奶头视频| 少妇裸体淫交视频免费看高清| videos熟女内射| 天堂中文最新版在线下载 | 男女边吃奶边做爰视频| 欧美成人午夜免费资源| 不卡视频在线观看欧美| 丰满人妻一区二区三区视频av| 禁无遮挡网站| 真实男女啪啪啪动态图| 三级男女做爰猛烈吃奶摸视频| 最近最新中文字幕免费大全7| 国产中年淑女户外野战色| 午夜精品一区二区三区免费看| 你懂的网址亚洲精品在线观看| 免费电影在线观看免费观看| 春色校园在线视频观看| av线在线观看网站| 国产av码专区亚洲av| 久久99热这里只有精品18| 毛片一级片免费看久久久久| 午夜久久久久精精品| 久久久午夜欧美精品| 一个人免费在线观看电影| 中文字幕久久专区| 久久久亚洲精品成人影院| 美女内射精品一级片tv| 最近最新中文字幕大全电影3| 只有这里有精品99| 日本av手机在线免费观看| 中文字幕免费在线视频6| 男的添女的下面高潮视频| 噜噜噜噜噜久久久久久91| 尤物成人国产欧美一区二区三区| 久久久久久久亚洲中文字幕| 午夜福利高清视频| 一级a做视频免费观看| 97精品久久久久久久久久精品| 免费看光身美女| 蜜臀久久99精品久久宅男| 国国产精品蜜臀av免费| 麻豆乱淫一区二区| 久久久久国产网址| 精华霜和精华液先用哪个| 日韩av在线大香蕉| 激情 狠狠 欧美| 天美传媒精品一区二区| 麻豆乱淫一区二区| 亚洲成人av在线免费| 色吧在线观看| 久久国内精品自在自线图片| 亚洲三级黄色毛片| 美女脱内裤让男人舔精品视频| 久久久久久久久大av| 国产老妇伦熟女老妇高清| 日韩欧美一区视频在线观看 | 亚洲人成网站高清观看| 内射极品少妇av片p| 午夜激情久久久久久久| 亚洲国产欧美人成| 五月天丁香电影| av专区在线播放| 国产永久视频网站| 乱人视频在线观看| 熟妇人妻不卡中文字幕| 国产在线一区二区三区精| 免费高清在线观看视频在线观看| 久久久久久久久中文| ponron亚洲| av在线播放精品| 亚洲久久久久久中文字幕| 亚洲av国产av综合av卡| 舔av片在线| 最近2019中文字幕mv第一页| 少妇熟女aⅴ在线视频| 日日撸夜夜添| 精品久久久精品久久久| 看免费成人av毛片| 又粗又硬又长又爽又黄的视频| 蜜桃久久精品国产亚洲av| 精品一区二区三区人妻视频| 在线观看一区二区三区| 嫩草影院新地址| av黄色大香蕉| 国产不卡一卡二| 日本欧美国产在线视频| 赤兔流量卡办理| 精品午夜福利在线看| 亚洲人与动物交配视频| 日日摸夜夜添夜夜添av毛片| 国产av不卡久久| 建设人人有责人人尽责人人享有的 | 狠狠精品人妻久久久久久综合| 肉色欧美久久久久久久蜜桃 | 波多野结衣巨乳人妻| 天堂中文最新版在线下载 | 网址你懂的国产日韩在线| 国产精品日韩av在线免费观看| 亚洲精品成人av观看孕妇| 伦理电影大哥的女人| 只有这里有精品99| 国产精品久久视频播放| 日本熟妇午夜| 精品久久久久久电影网| 中文字幕制服av| 日产精品乱码卡一卡2卡三| 国产精品久久久久久av不卡| 在线播放无遮挡| 我的女老师完整版在线观看| 人妻少妇偷人精品九色| 精品国产露脸久久av麻豆 | 国产精品av视频在线免费观看| 啦啦啦中文免费视频观看日本| 色视频www国产| 男女啪啪激烈高潮av片| or卡值多少钱| 亚洲精品成人av观看孕妇| 国产精品一区二区性色av| 亚洲最大成人av| 亚洲不卡免费看| 亚洲成人中文字幕在线播放| 好男人视频免费观看在线| 国产探花在线观看一区二区| 少妇被粗大猛烈的视频| 性色avwww在线观看| 91精品一卡2卡3卡4卡| 男女边吃奶边做爰视频| 欧美日韩亚洲高清精品| 三级男女做爰猛烈吃奶摸视频| 天美传媒精品一区二区| 又黄又爽又刺激的免费视频.| 免费av毛片视频| 直男gayav资源| 婷婷六月久久综合丁香| 婷婷色av中文字幕| 日韩欧美精品v在线| 国产精品久久久久久精品电影小说 | 高清午夜精品一区二区三区| 日韩av免费高清视频| 国产精品久久视频播放| 成人一区二区视频在线观看| 亚洲精品成人久久久久久| 成人性生交大片免费视频hd| 国产永久视频网站| 美女内射精品一级片tv| 亚洲经典国产精华液单| 色哟哟·www| 午夜激情欧美在线| 亚洲成人av在线免费| 一级毛片我不卡| 成年女人看的毛片在线观看| 亚洲婷婷狠狠爱综合网| 黄色日韩在线| 亚洲av成人av| 免费黄频网站在线观看国产| 久久久久久九九精品二区国产| 亚洲av免费在线观看| 亚洲欧美一区二区三区国产| 午夜日本视频在线| 最近手机中文字幕大全| 国产熟女欧美一区二区| 美女xxoo啪啪120秒动态图| 欧美成人午夜免费资源| 国产不卡一卡二| 国产中年淑女户外野战色| ponron亚洲| 亚洲婷婷狠狠爱综合网| 精品国内亚洲2022精品成人| 99久久中文字幕三级久久日本| 又爽又黄无遮挡网站| 高清午夜精品一区二区三区| 国产一级毛片七仙女欲春2| 国产精品久久久久久精品电影| 嘟嘟电影网在线观看| 在线观看一区二区三区| 欧美丝袜亚洲另类| 久久久亚洲精品成人影院| 美女cb高潮喷水在线观看| 大话2 男鬼变身卡| 午夜老司机福利剧场| 午夜福利在线观看免费完整高清在| 性插视频无遮挡在线免费观看| 色网站视频免费| 女人十人毛片免费观看3o分钟| 国产成人午夜福利电影在线观看| 中国国产av一级| 成人一区二区视频在线观看| 狂野欧美激情性xxxx在线观看| 老女人水多毛片| 国产 亚洲一区二区三区 |