• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)研究現(xiàn)狀及趨勢(shì)

    2020-07-28 07:19:02胡祥恩蔣卓軒
    開(kāi)放教育研究 2020年4期
    關(guān)鍵詞:深度智能系統(tǒng)

    屈 靜 劉 凱 胡祥恩 楊 釙 蔣卓軒

    (1.北京大學(xué) 教育學(xué)院,北京100871;2.華中師范大學(xué) 心理學(xué)院,湖北武漢 430079;3.渤海大學(xué) 教育科學(xué)學(xué)院,遼寧錦州121007;4.京東AI研究院,上海 200001)

    一、引 言

    深度學(xué)習(xí)能力已被學(xué)界廣泛認(rèn)可為21世紀(jì)公民的核心素養(yǎng)。區(qū)別于淺層學(xué)習(xí)的簡(jiǎn)單記憶和淺層理解,深度學(xué)習(xí)指向應(yīng)用、分析、評(píng)價(jià)和創(chuàng)造等高階思維能力,其內(nèi)涵是對(duì)知識(shí)的批判性理解和遷移(何克抗,2018)?!?017地平線報(bào)告(高等教育版)》強(qiáng)調(diào),未來(lái)五年乃至更長(zhǎng)時(shí)間,深度學(xué)習(xí)都將是教育質(zhì)量提升的主要改革方向(沈霞娟等, 2019)。信息技術(shù)的日新月異,令模擬對(duì)話輔導(dǎo)這種深度學(xué)習(xí)的教學(xué)策略得以實(shí)現(xiàn)——對(duì)話式智能導(dǎo)學(xué)系統(tǒng)(Conversation-Based Intelligent Tutoring System,CBITS)應(yīng)運(yùn)而生。作為智能導(dǎo)學(xué)系統(tǒng)的升級(jí)版,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)突破計(jì)算機(jī)輔助教學(xué)系統(tǒng)(Computer Assisted Instruction, CAI)重復(fù)記憶、機(jī)械練習(xí)的局限,能有效提升學(xué)生概念綜合、定性推斷等深度學(xué)習(xí)能力(Graesser et al., 2001a)。

    自2004年自然語(yǔ)言與話語(yǔ)分析首次成為智能導(dǎo)學(xué)系統(tǒng)國(guó)際大會(huì)專題以來(lái),對(duì)話式智能導(dǎo)學(xué)系統(tǒng)迅速成為人工智能、學(xué)習(xí)科學(xué)、教育技術(shù)、心理學(xué)乃至腦科學(xué)共同關(guān)注的研究領(lǐng)域。在我國(guó)教育學(xué)界,對(duì)話仍囿于傳統(tǒng)教學(xué)情境。而主流智能導(dǎo)學(xué)系統(tǒng)的學(xué)理探討或應(yīng)用實(shí)踐不僅鮮有深度學(xué)習(xí)之蹤更難覓對(duì)話之跡。因此,將對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的研究現(xiàn)狀進(jìn)行整理的必要性和緊迫性不言而喻。鑒于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的高度跨學(xué)科特點(diǎn),只有抽取和整合不同學(xué)科的相關(guān)研究,從工程結(jié)構(gòu)層面,才能探析深度學(xué)習(xí)的發(fā)生機(jī)理和實(shí)現(xiàn)機(jī)制。此外,諸多實(shí)證研究已驗(yàn)證了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的學(xué)習(xí)效果。分類歸納形成的成果,有利于理解對(duì)話式智能導(dǎo)學(xué)系統(tǒng)支持的深度學(xué)習(xí)發(fā)展水平,以及客觀判斷其發(fā)展趨勢(shì)。

    事實(shí)上,深度學(xué)習(xí)可定義為知識(shí)遷移的過(guò)程,分認(rèn)知領(lǐng)域、個(gè)人領(lǐng)域和人際領(lǐng)域三個(gè)維度(National Research Council, 2012)。其中,認(rèn)知領(lǐng)域指知識(shí)的推理、批判和問(wèn)題解決;個(gè)人領(lǐng)域關(guān)注情感,如學(xué)習(xí)動(dòng)機(jī)、元認(rèn)知和自我調(diào)節(jié)學(xué)習(xí);人際領(lǐng)域指用語(yǔ)言和非語(yǔ)言的表達(dá),向他人解釋信息并作出適當(dāng)反應(yīng)的能力,如團(tuán)隊(duì)溝通與協(xié)作。基于以上三個(gè)維度,本文用文獻(xiàn)分析法梳理了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的概念定義、理論基礎(chǔ)、系統(tǒng)架構(gòu)和學(xué)習(xí)效果,剖析現(xiàn)有不足并展望未來(lái)前景。

    二、概念定義和理論基礎(chǔ)

    從計(jì)算機(jī)輔助教學(xué)系統(tǒng)到智能導(dǎo)學(xué)系統(tǒng)的演進(jìn),是知識(shí)和技能傳授逐漸深化,從淺層學(xué)習(xí)向深度學(xué)習(xí)發(fā)展的過(guò)程(Fletcher & Sottilare,2018)。智能導(dǎo)學(xué)系統(tǒng)多以本體為基礎(chǔ),對(duì)領(lǐng)域知識(shí)及學(xué)習(xí)者狀態(tài)變化建模(Graesser et al., 2005)。不同于計(jì)算機(jī)輔助教學(xué)系統(tǒng)千人一面的反饋和練習(xí),智能導(dǎo)學(xué)系統(tǒng)在人工智能、學(xué)習(xí)科學(xué)、計(jì)算機(jī)語(yǔ)言學(xué)等多學(xué)科的助力下,嘗試為學(xué)生提供接近人類教師的個(gè)性化指導(dǎo)(劉清堂等, 2016)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)是以對(duì)話輔導(dǎo)作為教學(xué)方式的智能導(dǎo)學(xué)系統(tǒng)(D’Mello & Graesser, 2013)。它有內(nèi)外兩個(gè)循環(huán)(Vanlehn, 2006)。外循環(huán)幫助學(xué)生選擇后續(xù)任務(wù)或者問(wèn)題。內(nèi)循環(huán)采用預(yù)期—誤解定制式對(duì)話(Expectation & Misconception Tailored Dialogue, EMT),以探究性問(wèn)答給予學(xué)生個(gè)性化的反饋和提示,完成對(duì)學(xué)生知識(shí)掌握和教學(xué)質(zhì)量的評(píng)估,并提升學(xué)生反思和推理等深度學(xué)習(xí)能力(Graesser, 2016)。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的理論基石為建構(gòu)主義下的自我解釋學(xué)習(xí)理論(Chi et al.,1989;Chi et al.,1994)。作為重要的元認(rèn)知策略和探尋問(wèn)題深層結(jié)構(gòu)的學(xué)習(xí)活動(dòng),自我解釋讓學(xué)習(xí)者在對(duì)話中自我反思,將認(rèn)知結(jié)構(gòu)從孤立、零散變得整合而系統(tǒng),使個(gè)人心智模型達(dá)到高階思維的水平(Ainsworth & Th Loizou, 2003; Chi, 1997)。自從SCHOLAR系統(tǒng)開(kāi)創(chuàng)了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的先河,SE Coach系統(tǒng)成為第一個(gè)以自我解釋理論為基礎(chǔ)的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)以來(lái),技術(shù)領(lǐng)域涌現(xiàn)出了大量類似的系統(tǒng),如CIRCSIM-Tutor、Geometry Explanation Tutor、Cordillera、AutoTutor和BEETLE Ⅱ等。其中,最具代表性者當(dāng)屬AutoTutor。自1997年至今,AutoTutor系統(tǒng)已有30多個(gè)系列產(chǎn)品,包含大量深度推理性問(wèn)題和元認(rèn)知學(xué)習(xí)策略,被廣泛應(yīng)用于大學(xué)物理、生物、計(jì)算機(jī)、閱讀理解等科目(Nye et al., 2014)。然而,從1970年至今,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)已走過(guò)半個(gè)世紀(jì)的歷程,卻仍以一對(duì)一輔導(dǎo)為主,側(cè)重于認(rèn)知領(lǐng)域和個(gè)人領(lǐng)域能力的提升。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)通過(guò)腳手架和對(duì)話,能夠?yàn)閷W(xué)生提供詳細(xì)的反饋來(lái)彌補(bǔ)其缺失的信息和錯(cuò)誤的理解,因此也被稱為微步式智能導(dǎo)學(xué)系統(tǒng)(Micro-Step Based Intelligent Tutoring System,MBITS)(Chi et al., 2014)或子步式智能導(dǎo)學(xué)系統(tǒng)(Substep-Based Intelligent Tutoring System, SSBITS)(VanLehn, 2011)。需要區(qū)分的是,不具有對(duì)話輔導(dǎo)功能的智能導(dǎo)學(xué)系統(tǒng)被稱為步式智能導(dǎo)學(xué)系統(tǒng)(Step-Based Intelligent Tutoring System, SBITS),如卡耐基梅隆大學(xué)開(kāi)發(fā)的認(rèn)知導(dǎo)師 (Anderson et al., 1995)。某些步式智能導(dǎo)學(xué)系統(tǒng)(如COVE系統(tǒng))也可能具有自然語(yǔ)言輸入界面,但無(wú)法對(duì)自然語(yǔ)言話輪進(jìn)行推理和反饋,故不屬于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)(VanLehn, 2011)。下文所有對(duì)話式智能導(dǎo)學(xué)系統(tǒng)均符合以上對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的定義及內(nèi)涵。

    三、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的系統(tǒng)架構(gòu)

    本世紀(jì)初,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的架構(gòu)漸趨成熟。其中,迪梅洛和格雷澤(D’Mello & Graesser, 2013)提出的六組件模型受到廣泛認(rèn)可。它包括輸入轉(zhuǎn)換(input transforming)、言語(yǔ)行為分類(speech act classification)、學(xué)習(xí)者建模(learner modeling)、領(lǐng)域模型(domain model)、對(duì)話管理(dialog management)和輸出呈現(xiàn)(output rendering)六個(gè)部分。目前,該模型已被整合至通用智能導(dǎo)學(xué)框架(Generalized Intelligent Framework for Tutoring,GIFT)中。作為智能導(dǎo)學(xué)系統(tǒng)架構(gòu)的構(gòu)建標(biāo)準(zhǔn),通用智能導(dǎo)學(xué)框架旨在提升智能導(dǎo)學(xué)系統(tǒng)的兼容性,降低搭建門(mén)檻,同時(shí)持續(xù)評(píng)估技術(shù)對(duì)學(xué)習(xí)效果、系統(tǒng)性能、知識(shí)遷移和保留率的影響。它在領(lǐng)域模塊、學(xué)習(xí)者模塊、教學(xué)模塊和交互模塊四個(gè)基本模塊的基礎(chǔ)上,增設(shè)了傳感器模塊(Sottilare et al., 2017a)。這些模塊遵循共享標(biāo)準(zhǔn),能在通用智能導(dǎo)學(xué)框架內(nèi)進(jìn)行消息發(fā)送、接收、編碼與解析時(shí),仍保持運(yùn)行的獨(dú)立性。考慮到未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的擴(kuò)展性和兼容性,本文在通用智能導(dǎo)學(xué)框架下(見(jiàn)圖1),具體探析對(duì)話式智能導(dǎo)學(xué)系統(tǒng)各個(gè)模塊促成深度學(xué)習(xí)的原理和機(jī)制。

    圖1 通用智能導(dǎo)學(xué)框架下的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)架構(gòu)

    (一)領(lǐng)域模塊

    領(lǐng)域模塊由概念、規(guī)則和解決問(wèn)題策略組成。作為支持深度學(xué)習(xí)的基石,領(lǐng)域模塊通常包含專家知識(shí)、易犯錯(cuò)誤、判錯(cuò)規(guī)則和誤解。通用智能導(dǎo)學(xué)框架的領(lǐng)域模塊還決定內(nèi)容的呈現(xiàn)順序及反饋類型(如支持性、指導(dǎo)性的提示或問(wèn)題),同時(shí)評(píng)估并保存學(xué)生的課業(yè)表現(xiàn),最后將評(píng)價(jià)結(jié)果反饋給教學(xué)模塊和學(xué)習(xí)者模塊,保證領(lǐng)域模塊的獨(dú)立性(Sottilare et al., 2017a)。知識(shí)表征、計(jì)算和構(gòu)建推理是領(lǐng)域模塊的核心機(jī)制。早期的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)用產(chǎn)生式、語(yǔ)義網(wǎng)絡(luò)和概念圖建立領(lǐng)域模塊,后期開(kāi)始采用句子和短語(yǔ)組成的腳本,形成深度推理性問(wèn)題①、正確答案、錯(cuò)誤回答、提示和暗示(Graesser & Person, 1994)。輔導(dǎo)過(guò)程中,AutoTutor系統(tǒng)常會(huì)提出“為什么”“如果……然后呢?”“這是如何造成的?”等深度問(wèn)題,并要求學(xué)生在系統(tǒng)幫助下形成深度解釋(高紅麗等, 2016)。不僅如此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)對(duì)答案的評(píng)估除“對(duì)”和“錯(cuò)”外,也允許“半對(duì)半錯(cuò)”。例如,BEETLE Ⅱ系統(tǒng)會(huì)診斷學(xué)生回答是否存在矛盾或缺失(Dzikovska et al., 2014)。不正確的回答將激活不同的教學(xué)策略,從而引發(fā)新一輪深度問(wèn)答。

    (二)學(xué)習(xí)者模塊

    學(xué)習(xí)者模塊是依據(jù)個(gè)體差異定制輔導(dǎo)并支持深度學(xué)習(xí)的核心模塊。它包含領(lǐng)域特定(domain specific)和領(lǐng)域獨(dú)立(domain independent)兩類信息。前者對(duì)應(yīng)深度學(xué)習(xí)的認(rèn)知領(lǐng)域能力,反映學(xué)習(xí)者特定領(lǐng)域知識(shí)或能力的狀態(tài)和水平,如課程進(jìn)度、易犯錯(cuò)誤、成績(jī)表現(xiàn)等;后者指不依賴于具體學(xué)科的學(xué)習(xí)者個(gè)人特征,如學(xué)習(xí)動(dòng)機(jī)、個(gè)性偏好、學(xué)習(xí)風(fēng)格、自我效能感等(Sottilare et al., 2013)。因此,學(xué)習(xí)者模塊能進(jìn)行認(rèn)知領(lǐng)域和個(gè)人領(lǐng)域建模,并按狀態(tài)或其變化的歷史以及傳感器數(shù)據(jù),對(duì)學(xué)生進(jìn)行評(píng)估與分類(Sottilare et al., 2017a)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)通常需要完成兩個(gè)顆粒度上的建模,一個(gè)是本地建模,用來(lái)判斷學(xué)習(xí)者的回答是否正確,再提供反饋并做出教學(xué)決策,比如是否給予提示、暗示或者跟進(jìn)提問(wèn)等;另一個(gè)為全局建模,用以評(píng)估學(xué)習(xí)者對(duì)知識(shí)的掌握程度(D’Mello & Graesser, 2013)。需要指出的是,深度學(xué)習(xí)發(fā)生在本地而非全局建模中。以AutoTutor系統(tǒng)為例,其本地建模采用預(yù)期-誤解定制式對(duì)話機(jī)制,將已存儲(chǔ)的正確和錯(cuò)誤答案與學(xué)生回答進(jìn)行語(yǔ)義對(duì)比?;卮鸩煌耆_時(shí),系統(tǒng)將給予提示,鼓勵(lì)更多的自我解釋,直至學(xué)生完成自我知識(shí)建構(gòu)并形成正確理解。實(shí)際上,學(xué)習(xí)者模塊中沖突解決的過(guò)程,也正是深度學(xué)習(xí)發(fā)生的過(guò)程(殷常鴻等, 2019)。此外,AutoTutor家族的MetaTutor系統(tǒng)還在學(xué)習(xí)者模型中加入對(duì)學(xué)生元認(rèn)知的關(guān)注,進(jìn)一步培養(yǎng)學(xué)生的自我調(diào)節(jié)學(xué)習(xí)能力(Nye et al., 2014) 。

    (三)教學(xué)模塊

    基于領(lǐng)域模塊和學(xué)習(xí)者模塊,教學(xué)模塊能夠完成認(rèn)知診斷并提供輔導(dǎo)策略②。目前,輔導(dǎo)行為多被視為系統(tǒng)與學(xué)生的雙向交互(Graesser et al., 2001a)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)教學(xué)模塊的顯著特點(diǎn)是以對(duì)話交互為中心,利用言語(yǔ)行為分類和對(duì)話管理模塊,處理復(fù)雜的自然語(yǔ)言對(duì)話(D’Mello & Graesser, 2013)。其中,言語(yǔ)行為分類的作用是對(duì)凍結(jié)表達(dá)③、學(xué)生問(wèn)題及學(xué)生貢獻(xiàn)進(jìn)行分類;其次,對(duì)話管理模塊通過(guò)模擬人類導(dǎo)師的教學(xué)對(duì)話分析并精準(zhǔn)匹配學(xué)習(xí)狀態(tài),保持學(xué)習(xí)者認(rèn)知與情感維度的平衡(Boyer et al., 2008)。對(duì)話管理的對(duì)話策略包含主導(dǎo)策略和控制策略兩種。主導(dǎo)策略分系統(tǒng)主導(dǎo)、學(xué)生主導(dǎo)和混合主導(dǎo)三類。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的主導(dǎo)策略多為系統(tǒng)主導(dǎo)或混合主導(dǎo)。主導(dǎo)策略直接關(guān)注學(xué)生認(rèn)知層面深度學(xué)習(xí)能力的發(fā)展?;旌现鲗?dǎo)下的教學(xué)則充分考慮到學(xué)生學(xué)習(xí)的自我調(diào)節(jié)和元認(rèn)知策略。在控制策略實(shí)現(xiàn)上,對(duì)話式智能導(dǎo)學(xué)早期系統(tǒng)是基于模板或規(guī)則的。盡管所實(shí)現(xiàn)的對(duì)話靈活性尚有局限,但正因解釋性反饋更能促使外部信息從工作記憶轉(zhuǎn)為長(zhǎng)時(shí)記憶,形成信息加工的自動(dòng)化,才令深度認(rèn)知得以激發(fā)(National Research Council, 2012)。20世紀(jì)90年代后,基于統(tǒng)計(jì)原理的機(jī)器學(xué)習(xí)和自然語(yǔ)言處理迅速成為構(gòu)建對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的主流技術(shù)。這種運(yùn)用統(tǒng)計(jì)模型預(yù)測(cè)后續(xù)狀態(tài)的方式,極大地增強(qiáng)了對(duì)話系統(tǒng)的魯棒性。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的教學(xué)模塊還具有多輪對(duì)話管理功能,系統(tǒng)與學(xué)生圍繞知識(shí)點(diǎn)進(jìn)行層層遞進(jìn)而非發(fā)散討論。若學(xué)生偏離主題,會(huì)被拉回主線,以促進(jìn)反思,增進(jìn)深度思考。

    (四)交互模塊

    交互模塊是驅(qū)動(dòng)學(xué)習(xí)者模塊的人機(jī)接口。在對(duì)話式智能導(dǎo)學(xué)系統(tǒng)中,交互形式主要是文本和語(yǔ)音,包含輸入轉(zhuǎn)換和輸出呈現(xiàn)兩個(gè)組件。輸入轉(zhuǎn)換組件將輸入轉(zhuǎn)換為系統(tǒng)可理解的形式。以對(duì)話式智能導(dǎo)學(xué)系統(tǒng)SOPHIE為例,它在用戶輸入為文本時(shí),會(huì)進(jìn)行大小寫(xiě)轉(zhuǎn)換、拼寫(xiě)錯(cuò)誤糾正和單詞時(shí)態(tài)轉(zhuǎn)換(Burton, 1977);若輸入為語(yǔ)音,則通過(guò)自動(dòng)語(yǔ)音識(shí)別技術(shù)轉(zhuǎn)化成文本,再做處理。文本的輸出,目前常采用基于自然語(yǔ)言生成的文本自動(dòng)生成技術(shù),如模板生成技術(shù)、管道技術(shù)、規(guī)劃技術(shù)或統(tǒng)計(jì)技術(shù)(商雄偉, 張志祥, 2015);語(yǔ)音的輸出,則使用文本轉(zhuǎn)語(yǔ)音技術(shù)。有的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)運(yùn)用能夠綜合文本、語(yǔ)音和圖像的動(dòng)畫(huà)代理技術(shù)增進(jìn)交互。當(dāng)然,研究表明,采用對(duì)話教學(xué)方式比采用其它交互方式,更能影響深層知識(shí)的學(xué)習(xí)效果(Graesser et al., 2003)。因此,對(duì)話智能導(dǎo)學(xué)系統(tǒng)的交互模塊構(gòu)建的核心在于如何有效推進(jìn)對(duì)話。

    (五)傳感器模塊

    作為交互模塊的延伸,傳感器模塊專門(mén)負(fù)責(zé)接收來(lái)自傳感器的學(xué)生行為和生理信息等多模態(tài)的原始數(shù)據(jù),并對(duì)數(shù)據(jù)進(jìn)行過(guò)濾、分段和特征提取。處理后的數(shù)據(jù)被發(fā)至學(xué)習(xí)者模塊,以此幫助對(duì)話式智能導(dǎo)學(xué)系統(tǒng)完成學(xué)生認(rèn)知和情感狀態(tài)的分析,實(shí)現(xiàn)更準(zhǔn)確和細(xì)顆粒度的學(xué)習(xí)者建模。

    四、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)應(yīng)用效果

    經(jīng)過(guò)近五十年的發(fā)展,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)已形成支持深度學(xué)習(xí)的完整架構(gòu)并步入教學(xué)一線,對(duì)其應(yīng)用效果的檢視成為確保對(duì)話式智能導(dǎo)學(xué)系統(tǒng)科學(xué)性和有效性不可或缺的環(huán)節(jié)。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)帶來(lái)的學(xué)習(xí)成績(jī)提升,雖不及人類教師的一對(duì)一輔導(dǎo),卻優(yōu)于計(jì)算機(jī)輔助教學(xué)系統(tǒng)。元分析結(jié)果表明,智能導(dǎo)學(xué)系統(tǒng)輔導(dǎo)效應(yīng)值為0.66(Kulik & Fletcher, 2016),計(jì)算機(jī)輔助教學(xué)系統(tǒng)輔導(dǎo)的效應(yīng)值僅為0.3(Kulik & Kulik, 1991),而人類輔導(dǎo)最佳——介于0.79至2.0之間(Bloom, 1984;VanLehn, 2011)。盡管效果不如人類,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)仍體現(xiàn)出提升認(rèn)知水平的顯著優(yōu)勢(shì)。實(shí)證研究表明,考慮到控制組實(shí)驗(yàn)方法和測(cè)試科目的差異,AutoTutor系統(tǒng)的效應(yīng)值在0.4至1.5之間,平均可達(dá)0.8 (Nye et al., 2014),屬中等偏上水平(Cohen, 2013),并非常接近人類輔導(dǎo)(Bloom, 1984)。其中,依據(jù)布魯姆教學(xué)目標(biāo)分類理論,將測(cè)試問(wèn)題按認(rèn)知水平分成淺層問(wèn)題和深層問(wèn)題后的研究結(jié)果發(fā)現(xiàn),對(duì)比文本閱讀和無(wú)輔導(dǎo),AutoTutor系統(tǒng)在計(jì)算機(jī)基礎(chǔ)課的深層學(xué)習(xí)方面帶來(lái)的效應(yīng)值為0.49,遠(yuǎn)高于淺層學(xué)習(xí)的0.05(Graesser et al., 2004)??突仿〈髮W(xué)的實(shí)驗(yàn)顯示,Geometry Explanation Tutor系統(tǒng)在輔導(dǎo)學(xué)生學(xué)習(xí)幾何時(shí),能形成更有效的學(xué)習(xí)策略(Aleven et al., 2004)。研究人員對(duì)學(xué)生對(duì)話輔導(dǎo)中的學(xué)習(xí)策略進(jìn)行了分類編碼,將關(guān)于角的名稱和角的測(cè)量的回答,標(biāo)注為只針對(duì)具體問(wèn)題的“特定問(wèn)題”學(xué)習(xí)策略。若學(xué)生回答角的特征,并用最小代價(jià)獲得“正確答案的范圍”,然后擴(kuò)展至答案正確,則標(biāo)注為“增量”學(xué)習(xí)策略。后者多被學(xué)業(yè)表現(xiàn)好的學(xué)生使用。研究結(jié)果發(fā)現(xiàn),Geometry Explanation Tutor的“師生對(duì)話”能夠促進(jìn)增量學(xué)習(xí)策略的形成,并帶來(lái)較高的長(zhǎng)期學(xué)習(xí)收益。

    若與步式智能導(dǎo)學(xué)系統(tǒng)相比,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)也能產(chǎn)生更好的深度學(xué)習(xí)效果。新西蘭兩位學(xué)者開(kāi)發(fā)了KERMIT-SE系統(tǒng),用以檢測(cè)對(duì)話交互引起的自我解釋能否提升學(xué)習(xí)成績(jī)。對(duì)125名大學(xué)生兩個(gè)小時(shí)前后測(cè)及實(shí)驗(yàn)干預(yù)后的結(jié)果表明,使用對(duì)話式智能導(dǎo)學(xué)系統(tǒng)KERMIT-SE的學(xué)生獲得的學(xué)業(yè)成績(jī)整體優(yōu)于使用步式智能導(dǎo)學(xué)系統(tǒng)KERMIT 的學(xué)生(Weerasinghe & Mitrovic, 2003)。類似的結(jié)果,也來(lái)自對(duì)話式智能導(dǎo)學(xué)系統(tǒng)Cordillera和步式智能導(dǎo)學(xué)系統(tǒng)ANDES的對(duì)比。無(wú)論定量或是定性問(wèn)題,Cordillera系統(tǒng)都具有顯著提升學(xué)習(xí)成績(jī)的作用。相比ANDES系統(tǒng),Cordillera系統(tǒng)平均效應(yīng)值高達(dá)0.82(Chi et al., 2014)。當(dāng)然,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)輔導(dǎo)效果優(yōu)于步式智能導(dǎo)學(xué)系統(tǒng),其原因通常被歸結(jié)于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)提供輔導(dǎo)的及時(shí)性和精細(xì)度。然而,范萊恩(VanLehn, 2011)的研究發(fā)現(xiàn),按交互顆粒度從密到疏,將輔導(dǎo)分為人類輔導(dǎo)、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)、步式智能導(dǎo)學(xué)系統(tǒng)、計(jì)算機(jī)輔助教學(xué)系統(tǒng)以及無(wú)輔導(dǎo)后,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與步式智能導(dǎo)學(xué)系統(tǒng)效應(yīng)值相當(dāng),均為0.76并接近人類輔導(dǎo)的0.79。這種現(xiàn)象被稱為交互平原,它意味著交互顆粒度的增加,并不必然導(dǎo)致輔導(dǎo)效果線性增加。

    五、總結(jié)及展望

    (一)研究總結(jié)

    雖然班級(jí)授課在提升教育效率和降低成本上“一舉兩得”,但教學(xué)效果“打了折扣”。與人類教師的一對(duì)一輔導(dǎo)相比,二者差距達(dá)2個(gè)標(biāo)準(zhǔn)差(Bloom, 1984)。而且,學(xué)生對(duì)知識(shí)的連貫性解釋、問(wèn)題解決和推理的深度學(xué)習(xí)能力也難得以得到提高(Graesser et al., 2001a)。在教育質(zhì)量與成本之間的矛盾日益尖銳的背景下,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)登上歷史舞臺(tái)。受益于自我解釋理論和人工智能技術(shù)的發(fā)展,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)突破機(jī)械重復(fù)的淺層學(xué)習(xí),采用預(yù)期—誤解定制式對(duì)話模仿人類對(duì)話輔導(dǎo)實(shí)現(xiàn)學(xué)生的自我建構(gòu)。ICAP(interative,constuetive,active,passive) 理論認(rèn)為,被激發(fā)的互動(dòng)性認(rèn)知投入,更有可能引發(fā)深度學(xué)習(xí)(Chi et al., 2018)。以AutoTutor系統(tǒng)為代表的大量實(shí)證研究表明,除人類教師輔導(dǎo)外,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)帶來(lái)的學(xué)習(xí)效果優(yōu)于包括步式智能導(dǎo)學(xué)系統(tǒng)在內(nèi)的其他輔導(dǎo)方式,并有助于深層知識(shí)的掌握和學(xué)習(xí)策略的形成。通用智能導(dǎo)學(xué)框架下整合的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)體系架構(gòu),進(jìn)一步夯實(shí)了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的工程基礎(chǔ),令深度學(xué)習(xí)的規(guī)模化和彈性化成為現(xiàn)實(shí)。然而,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)仍存在不足:

    首先,學(xué)習(xí)效率有待提高?,F(xiàn)有對(duì)話式智能導(dǎo)學(xué)系統(tǒng)多以文本交互為主,學(xué)習(xí)時(shí)間的經(jīng)濟(jì)性差。研究發(fā)現(xiàn),完成同樣任務(wù),對(duì)話式智能導(dǎo)學(xué)系統(tǒng)所需時(shí)間高于步式智能導(dǎo)學(xué)系統(tǒng)(Chi et al., 2014)。有實(shí)驗(yàn)顯示,這種導(dǎo)學(xué)系統(tǒng)耗時(shí)幾乎是文本閱讀的兩倍(Rosé et al., 2003)。這意味著,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)有效提高學(xué)習(xí)成績(jī)、促進(jìn)知識(shí)深度理解和掌握,從某種程度上是以降低學(xué)習(xí)效率為代價(jià)的。

    其次,對(duì)認(rèn)知以外的深度學(xué)習(xí)能力支持不足。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)主要聚焦于核心學(xué)科知識(shí)的掌握,及批判性思維形成和復(fù)雜問(wèn)題理解的認(rèn)知領(lǐng)域能力提升,而對(duì)團(tuán)隊(duì)協(xié)作和有效溝通等人際能力支持尚存不足。團(tuán)隊(duì)協(xié)作要求學(xué)生為實(shí)現(xiàn)團(tuán)隊(duì)共同目標(biāo),制定步驟,合作解決問(wèn)題(卜彩麗等, 2016)。故而,學(xué)生需組織和利用資源,促成觀點(diǎn)的有效溝通。但目前對(duì)話式智能導(dǎo)學(xué)系統(tǒng)大多以人機(jī)一對(duì)一輔導(dǎo)為主,較少支持團(tuán)隊(duì)學(xué)習(xí)環(huán)境。此外,非智力因素的表征和建模技術(shù)還存在一定困難,因而對(duì)話式智能導(dǎo)學(xué)系統(tǒng)對(duì)涉及個(gè)人領(lǐng)域的學(xué)習(xí)監(jiān)控能力和學(xué)習(xí)意志的支持也有待加強(qiáng)。

    再次,開(kāi)發(fā)成本過(guò)高,規(guī)?;瘧?yīng)用困難。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與其他智能導(dǎo)學(xué)系統(tǒng)一樣,開(kāi)發(fā)成本居高不下。據(jù)估算,200-300小時(shí)的開(kāi)發(fā)工程量才能產(chǎn)生1小時(shí)的輔導(dǎo)量(Chang et al., 2018)。即使在領(lǐng)域模塊著作工具(Authoring Tool)的協(xié)助下,開(kāi)發(fā)時(shí)間和輔導(dǎo)時(shí)間比仍高達(dá)200∶1(Koedinger et al., 1997)。IBM創(chuàng)建的名為Watson Tutor的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)可借助內(nèi)容自動(dòng)生成技術(shù)(Automatic Content Extraction Techniques),可將問(wèn)答對(duì)、概念圖、被標(biāo)注的內(nèi)容塊和案例在內(nèi)的非結(jié)構(gòu)化信息自動(dòng)標(biāo)簽并提取語(yǔ)料,繼而生成可驅(qū)動(dòng)對(duì)話的結(jié)構(gòu)化信息,以此降低開(kāi)發(fā)投入產(chǎn)出至40∶1(Chang et al., 2018)。但此種構(gòu)建方式能否保證對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的輔導(dǎo)效果,尚無(wú)確鑿證據(jù)??傊?,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)應(yīng)用開(kāi)發(fā)成本偏高,是其在真實(shí)教學(xué)場(chǎng)景落地的瓶頸,也阻礙了對(duì)它的評(píng)估和改進(jìn)。

    (二)趨勢(shì)展望

    1.微觀層面

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)微觀層面?zhèn)戎赜陉P(guān)注教育技術(shù)和教學(xué)法,從多模態(tài)、多維度、多代理三方面推動(dòng)發(fā)展。

    1) 多模態(tài)的人機(jī)交互

    可穿戴傳感器、生物傳感器(皮電、心電和腦電等信號(hào))、手勢(shì)傳感、紅外成像和眼球跟蹤等數(shù)據(jù)收集和傳感技術(shù)的進(jìn)步,使多模態(tài)數(shù)據(jù)的捕獲成為可能。心理、行為和生理的多模態(tài)數(shù)據(jù)全方位整合,能夠幫助我們判斷深度學(xué)習(xí)發(fā)生的程度,解釋深度學(xué)習(xí)的作用機(jī)制(劉哲雨等,2018)。因此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)發(fā)展的多模態(tài)趨勢(shì)與深度學(xué)習(xí)具有同步性和一致性。未來(lái)的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將融合文本、語(yǔ)音、面部表情、眼神交流、手勢(shì)等的多模態(tài)交互方式來(lái)提升教學(xué)效率和效果。交叉驗(yàn)證傳感器模塊收集的多模態(tài)數(shù)據(jù)能降低各模態(tài)的噪聲和不確定性,動(dòng)態(tài)捕捉學(xué)生涉及情感和社會(huì)學(xué)習(xí)的全過(guò)程(Yang et al,2020)。實(shí)驗(yàn)證明,多模態(tài)數(shù)據(jù),如音頻和心理測(cè)量的結(jié)合,比單模態(tài)數(shù)據(jù)能更準(zhǔn)確地評(píng)估學(xué)習(xí)者狀態(tài)(Cukurova et al., 2019)。未來(lái)研究將聚焦于更精細(xì)的多模態(tài)表征建模、多模態(tài)學(xué)習(xí)分析、多模態(tài)融合引擎(Fusion Engine)、多模態(tài)與認(rèn)知負(fù)荷之間的關(guān)系(Turk,2014)和不同模態(tài)之間是否等價(jià)等問(wèn)題。

    2) 多維度的情感計(jì)算

    教育學(xué)和心理學(xué)研究表明,情感對(duì)學(xué)習(xí)起著重要作用,學(xué)習(xí)者的認(rèn)知能力取決于情感狀態(tài)(Frasson & Chalfoun, 2010)。情感狀態(tài)也是深度學(xué)習(xí)考量的三個(gè)維度之一,但情感的測(cè)量和分析通常需要攝像頭、傳感器等設(shè)備,不僅成本高,且無(wú)法確認(rèn)哪些數(shù)據(jù)與學(xué)習(xí)直接相關(guān)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的優(yōu)勢(shì)在于,教學(xué)交互產(chǎn)生的大量對(duì)話與教學(xué)目標(biāo)聯(lián)系緊密。這些對(duì)話也被證明可有效預(yù)測(cè)學(xué)生者情感狀態(tài)(D’Mello & Graesser, 2012)。對(duì)文本進(jìn)行話語(yǔ)分析是有效判斷深度學(xué)習(xí)發(fā)生與否的方式(殷常鴻等, 2019),因此基于交互文本進(jìn)行情感分析值得深入研究和關(guān)注。鑒于目前多數(shù)情感計(jì)算只停留在情感與其前因后果的線性關(guān)系層面,未來(lái)研究的主攻方向是引入更復(fù)雜的多維度情感計(jì)算模型,考慮情感組合、持續(xù)時(shí)間及其轉(zhuǎn)換等問(wèn)題,充分挖掘變量間的非線性關(guān)系 (Graesser, 2019)。此外,如何借助學(xué)習(xí)分析和教育大數(shù)據(jù)挖掘技術(shù),進(jìn)行情感調(diào)節(jié)策略識(shí)別和反饋干預(yù),建立具有情感調(diào)節(jié)功能的對(duì)話式智能導(dǎo)學(xué)系統(tǒng),也是此領(lǐng)域的重要研究課題。

    3) 多代理的團(tuán)隊(duì)學(xué)習(xí)

    以團(tuán)隊(duì)溝通與協(xié)作為核心的人際領(lǐng)域,是促進(jìn)深度學(xué)習(xí)的重要評(píng)估維度。未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將從一對(duì)一的傳統(tǒng)輔導(dǎo)模式中解放出來(lái),使用會(huì)話代理建立定制化的團(tuán)隊(duì)學(xué)習(xí)環(huán)境。例如,AutoTutor家族的Operation ARIES系統(tǒng)在教師代理、同伴代理和真人學(xué)生之間實(shí)現(xiàn)了三方對(duì)話。學(xué)生除與教師代理對(duì)話溝通外,還能觀察兩個(gè)代理之間的交互,亦可幫助同伴代理解決問(wèn)題。實(shí)驗(yàn)結(jié)果顯示,三方對(duì)話比傳統(tǒng)一對(duì)一輔導(dǎo)模式能更有效地提升學(xué)習(xí)效果并改善學(xué)習(xí)情感(Graesser et al., 2017)。通用智能導(dǎo)學(xué)框架目前已納入團(tuán)隊(duì)行為(如溝通、合作、認(rèn)知、領(lǐng)導(dǎo)/指導(dǎo)和沖突)和團(tuán)隊(duì)產(chǎn)出(績(jī)效、滿意度和生存能力)之間關(guān)系的元分析研究成果(Sottilare et al., 2017b),并在模塊里增加對(duì)團(tuán)隊(duì)學(xué)習(xí)的支持(Sottilare et al.,2018)。未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將以多會(huì)話代理為基礎(chǔ)進(jìn)行團(tuán)隊(duì)建模,培養(yǎng)學(xué)習(xí)者的溝通協(xié)作和問(wèn)題解決能力。研究重點(diǎn)是共享心智模型(shared mental model)、團(tuán)隊(duì)學(xué)習(xí)曲線、動(dòng)態(tài)任務(wù)選擇和多代理間的協(xié)調(diào)。當(dāng)然,會(huì)話代理的發(fā)展還面臨著創(chuàng)作工具、自然語(yǔ)言處理技術(shù)和腳本自動(dòng)生成方面的挑戰(zhàn)。

    2.宏觀層面

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)宏觀層面則基于學(xué)科、范式及倫理視角,關(guān)注合作、標(biāo)準(zhǔn)及倫理三方面問(wèn)題。

    1) 增進(jìn)學(xué)科合作

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)具有高度跨學(xué)科性。設(shè)計(jì)需要學(xué)習(xí)科學(xué)的理論指導(dǎo),構(gòu)建需要計(jì)算機(jī)科學(xué)的技術(shù)支持,應(yīng)用則需要教育學(xué)和心理學(xué)的操作把控。既往歷史也印證了人工智能技術(shù)和學(xué)習(xí)理論是對(duì)話式智能導(dǎo)學(xué)系統(tǒng)發(fā)展的兩大主要制約因素。我國(guó)學(xué)科協(xié)作與互助不充分是對(duì)話式智能導(dǎo)學(xué)系統(tǒng)領(lǐng)域研究數(shù)量少、質(zhì)量低的重要原因,因而打破學(xué)科壁壘,搭建多學(xué)科融合創(chuàng)新平臺(tái),推進(jìn)人工智能下的深度教學(xué)變革勢(shì)在必行。

    2) 遵從國(guó)際標(biāo)準(zhǔn)

    高開(kāi)發(fā)成本是阻礙對(duì)話式智能導(dǎo)學(xué)系統(tǒng)走進(jìn)課堂的主要原因之一。通用智能導(dǎo)學(xué)框架提供的可重用模塊和標(biāo)準(zhǔn)化組件,為加速構(gòu)建對(duì)話式智能導(dǎo)學(xué)系統(tǒng)掃清了障礙。AutoTutor作為對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的典型系統(tǒng),已將主要模塊整合進(jìn)通用智能導(dǎo)學(xué)框架,并支持多樣化的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)開(kāi)發(fā)。遺憾的是,國(guó)內(nèi)學(xué)者對(duì)此了解較少。本研究建議了解、遵行和利用這一標(biāo)準(zhǔn)化智能導(dǎo)學(xué)系統(tǒng)框架,加速研發(fā)對(duì)話式智能導(dǎo)學(xué)系統(tǒng),促進(jìn)我國(guó)真實(shí)教育場(chǎng)景中“智適應(yīng)”產(chǎn)品的落地和迭代發(fā)展(劉凱等, 2019)。

    3) 重視倫理問(wèn)題

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的倫理問(wèn)題不容小覷。一項(xiàng)名為“旁觀者圖靈測(cè)試”(by-stander turing test)的實(shí)驗(yàn)發(fā)現(xiàn),AutoTuto在對(duì)話輔導(dǎo)上與人類教師無(wú)顯著差異(Nye et al., 2014)。然而,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與人類教學(xué)相似度越大,欺騙性就越大。其代入感會(huì)令學(xué)生與系統(tǒng)之間產(chǎn)生依賴和情緒鏈接,從而可能導(dǎo)致學(xué)生社交能力的缺失(劉瑞娜等, 2019)。因此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)適合用于哪些學(xué)生群體,值得從AI倫理層面加以研究和探討。

    [注釋]

    ① 格雷澤和珀森(Person)將人類老師對(duì)話輔導(dǎo)的提問(wèn)分為深度、中級(jí)和淺層三類。其中,屬于深層問(wèn)題的是原因性問(wèn)題(為什么?這是如何造成的?)、結(jié)果性問(wèn)題(如果……然后呢?)、目標(biāo)導(dǎo)向性問(wèn)題(為什么有人這樣做?)、可行性問(wèn)題(發(fā)生的條件是什么?)、詮釋性問(wèn)題(這意味著什么?)和預(yù)期性問(wèn)題(為什么不這樣呢?)。

    ② 對(duì)話式導(dǎo)學(xué)系統(tǒng)的輔導(dǎo)策略包含給予提示、給予信息補(bǔ)充、提供完型填空和給予結(jié)論四類。

    ③ 在基本對(duì)話循環(huán)外的學(xué)生反饋,包含凍結(jié)表達(dá)(frozen expression)和學(xué)生問(wèn)題。凍結(jié)表達(dá)指那些與內(nèi)容無(wú)關(guān),或者對(duì)于問(wèn)題沒(méi)有貢獻(xiàn)的學(xué)生回答,如對(duì)話的致謝(如“好”),簡(jiǎn)短的回復(fù)(如“是”或“不是”),元認(rèn)知語(yǔ)句(如“我需要幫助”“我不知道”),或者抱怨?;狙h(huán)內(nèi)的學(xué)生反饋包括導(dǎo)師提問(wèn),學(xué)生的貢獻(xiàn)(針對(duì)問(wèn)題的回答)和導(dǎo)師反饋。

    猜你喜歡
    深度智能系統(tǒng)
    Smartflower POP 一體式光伏系統(tǒng)
    WJ-700無(wú)人機(jī)系統(tǒng)
    ZC系列無(wú)人機(jī)遙感系統(tǒng)
    深度理解一元一次方程
    深度觀察
    深度觀察
    智能前沿
    文苑(2018年23期)2018-12-14 01:06:06
    智能前沿
    文苑(2018年19期)2018-11-09 01:30:14
    智能前沿
    文苑(2018年17期)2018-11-09 01:29:26
    智能前沿
    文苑(2018年21期)2018-11-09 01:22:32
    久久久国产欧美日韩av| 欧美变态另类bdsm刘玥| 精品人妻一区二区三区麻豆| 韩国精品一区二区三区 | 亚洲国产成人一精品久久久| 一二三四在线观看免费中文在 | 亚洲成人手机| 亚洲人成77777在线视频| 久久久精品免费免费高清| 久久久a久久爽久久v久久| 中文字幕亚洲精品专区| 国产精品久久久久久精品电影小说| 国产在视频线精品| 一本—道久久a久久精品蜜桃钙片| 亚洲欧美一区二区三区黑人 | 中文字幕制服av| a 毛片基地| 日本猛色少妇xxxxx猛交久久| 国产熟女午夜一区二区三区| 精品国产露脸久久av麻豆| 九草在线视频观看| 亚洲国产精品999| 免费人成在线观看视频色| 亚洲精品国产av蜜桃| 亚洲av综合色区一区| av女优亚洲男人天堂| 热re99久久国产66热| 国产综合精华液| 亚洲欧洲日产国产| 久久久国产一区二区| 搡女人真爽免费视频火全软件| 国产一区二区三区av在线| 亚洲精品视频女| 91aial.com中文字幕在线观看| 69精品国产乱码久久久| av播播在线观看一区| 国产一区二区在线观看日韩| 亚洲av成人精品一二三区| 日韩大片免费观看网站| 久久久久久伊人网av| 国产亚洲午夜精品一区二区久久| 国产精品人妻久久久影院| 中国国产av一级| 中国国产av一级| 国产综合精华液| 亚洲色图综合在线观看| 久久综合国产亚洲精品| 日韩中文字幕视频在线看片| 国产欧美日韩综合在线一区二区| 国产精品国产三级专区第一集| a级毛片在线看网站| 美女国产视频在线观看| 中文天堂在线官网| 高清黄色对白视频在线免费看| videosex国产| 人妻一区二区av| 国产不卡av网站在线观看| 日本欧美视频一区| 国产一区有黄有色的免费视频| 久久久久久久大尺度免费视频| 九色亚洲精品在线播放| 亚洲欧美清纯卡通| 天美传媒精品一区二区| 日本猛色少妇xxxxx猛交久久| 大码成人一级视频| 我的女老师完整版在线观看| 国产麻豆69| 亚洲一区中文字幕在线| 日韩欧美一区二区三区在线观看 | 欧美午夜高清在线| 美女高潮喷水抽搐中文字幕| 国产一区二区激情短视频| 性色av乱码一区二区三区2| 中亚洲国语对白在线视频| 1024视频免费在线观看| 久久性视频一级片| 成年人黄色毛片网站| 精品国产一区二区久久| 国产单亲对白刺激| 在线播放国产精品三级| 成年女人毛片免费观看观看9 | e午夜精品久久久久久久| 黄色片一级片一级黄色片| 久久香蕉激情| 欧美日韩视频精品一区| 最新的欧美精品一区二区| av超薄肉色丝袜交足视频| 国产精品99久久99久久久不卡| 制服人妻中文乱码| 真人做人爱边吃奶动态| 人人澡人人妻人| 人妻久久中文字幕网| 久久久精品国产亚洲av高清涩受| 成人手机av| 日韩人妻精品一区2区三区| 久久久久久久精品吃奶| а√天堂www在线а√下载 | 大型av网站在线播放| 国产免费现黄频在线看| 十八禁网站免费在线| 久久天堂一区二区三区四区| 国产真人三级小视频在线观看| 久久精品国产a三级三级三级| 一边摸一边做爽爽视频免费| 又紧又爽又黄一区二区| 一区二区三区激情视频| 亚洲专区国产一区二区| 水蜜桃什么品种好| 成年版毛片免费区| 久久精品亚洲精品国产色婷小说| 欧美最黄视频在线播放免费 | 嫩草影视91久久| 麻豆成人av在线观看| 在线观看舔阴道视频| 看片在线看免费视频| 中文字幕精品免费在线观看视频| 99国产精品一区二区三区| 中文字幕高清在线视频| 一级毛片女人18水好多| 日韩欧美在线二视频 | 麻豆乱淫一区二区| 9热在线视频观看99| 777久久人妻少妇嫩草av网站| 亚洲专区国产一区二区| 97人妻天天添夜夜摸| av电影中文网址| 亚洲国产精品合色在线| 亚洲自偷自拍图片 自拍| 久久 成人 亚洲| 日日爽夜夜爽网站| 国产精品 欧美亚洲| 女人精品久久久久毛片| 一进一出抽搐动态| 免费在线观看黄色视频的| 久久天躁狠狠躁夜夜2o2o| 欧美日韩乱码在线| 天堂√8在线中文| 99热只有精品国产| 国产一区二区三区综合在线观看| 国产av一区二区精品久久| 国产又爽黄色视频| 亚洲五月色婷婷综合| 超碰成人久久| 久久国产精品影院| 午夜视频精品福利| 搡老岳熟女国产| 亚洲成人国产一区在线观看| a级片在线免费高清观看视频| 99re在线观看精品视频| 午夜福利欧美成人| 一区福利在线观看| 国产又色又爽无遮挡免费看| 日本欧美视频一区| 亚洲精品一二三| a级片在线免费高清观看视频| 99在线人妻在线中文字幕 | 国产伦人伦偷精品视频| 亚洲精品中文字幕一二三四区| а√天堂www在线а√下载 | 窝窝影院91人妻| 啦啦啦在线免费观看视频4| 日日夜夜操网爽| 色综合婷婷激情| 咕卡用的链子| 国产精品98久久久久久宅男小说| 岛国在线观看网站| 久久婷婷成人综合色麻豆| 新久久久久国产一级毛片| 一二三四在线观看免费中文在| 亚洲国产欧美日韩在线播放| 黑人巨大精品欧美一区二区mp4| 777久久人妻少妇嫩草av网站| 亚洲一区中文字幕在线| 国产乱人伦免费视频| 国产99白浆流出| 亚洲美女黄片视频| 日韩欧美三级三区| 精品国产一区二区三区久久久樱花| 亚洲国产精品一区二区三区在线| 成年人黄色毛片网站| 老司机午夜十八禁免费视频| 丰满迷人的少妇在线观看| 色婷婷久久久亚洲欧美| 老司机亚洲免费影院| 亚洲精品成人av观看孕妇| 天天躁狠狠躁夜夜躁狠狠躁| 一级a爱片免费观看的视频| 国产单亲对白刺激| 女人被躁到高潮嗷嗷叫费观| 电影成人av| 高潮久久久久久久久久久不卡| 欧美日韩亚洲高清精品| 国产精品亚洲av一区麻豆| 欧美精品av麻豆av| 在线国产一区二区在线| 精品少妇久久久久久888优播| 欧美激情久久久久久爽电影 | 国产不卡一卡二| 大香蕉久久网| 丝袜人妻中文字幕| 很黄的视频免费| 久久影院123| 久久精品国产综合久久久| 欧美成人午夜精品| 涩涩av久久男人的天堂| 亚洲男人天堂网一区| 男女之事视频高清在线观看| 国产av又大| www.熟女人妻精品国产| 亚洲一区二区三区不卡视频| 精品国产美女av久久久久小说| 一个人免费在线观看的高清视频| 又大又爽又粗| 狂野欧美激情性xxxx| 精品一区二区三区av网在线观看| 国产精品一区二区精品视频观看| 麻豆乱淫一区二区| tube8黄色片| 国产av一区二区精品久久| 色94色欧美一区二区| 母亲3免费完整高清在线观看| 国产极品粉嫩免费观看在线| 欧洲精品卡2卡3卡4卡5卡区| 亚洲欧美一区二区三区久久| 涩涩av久久男人的天堂| 精品国产一区二区三区久久久樱花| 亚洲欧美激情综合另类| 一本综合久久免费| 老熟女久久久| 午夜福利免费观看在线| 两人在一起打扑克的视频| 美国免费a级毛片| 国产xxxxx性猛交| 久久久久久久精品吃奶| 黄色丝袜av网址大全| 美女国产高潮福利片在线看| 日韩欧美一区二区三区在线观看 | 自拍欧美九色日韩亚洲蝌蚪91| 丝袜美足系列| 女人被躁到高潮嗷嗷叫费观| 美女高潮喷水抽搐中文字幕| 男女下面插进去视频免费观看| 国产午夜精品久久久久久| 国产免费现黄频在线看| 高清毛片免费观看视频网站 | 久久人妻熟女aⅴ| 欧美亚洲 丝袜 人妻 在线| 日本vs欧美在线观看视频| 中文字幕最新亚洲高清| 香蕉久久夜色| 久久国产精品影院| 天天躁狠狠躁夜夜躁狠狠躁| 午夜福利在线免费观看网站| 亚洲一卡2卡3卡4卡5卡精品中文| 男女高潮啪啪啪动态图| 黄色怎么调成土黄色| 丰满饥渴人妻一区二区三| 天天影视国产精品| 午夜福利,免费看| 久久久久国内视频| 久99久视频精品免费| 两个人看的免费小视频| 午夜91福利影院| 欧美日韩黄片免| 丰满的人妻完整版| 精品免费久久久久久久清纯 | 欧美日韩瑟瑟在线播放| 亚洲精品在线观看二区| 女人久久www免费人成看片| 丝袜人妻中文字幕| 欧美成人免费av一区二区三区 | 法律面前人人平等表现在哪些方面| 真人做人爱边吃奶动态| 高清欧美精品videossex| 12—13女人毛片做爰片一| 国产一区在线观看成人免费| 中文字幕人妻丝袜一区二区| 国产黄色免费在线视频| 欧美中文综合在线视频| 两性午夜刺激爽爽歪歪视频在线观看 | 午夜成年电影在线免费观看| 搡老熟女国产l中国老女人| 亚洲国产欧美日韩在线播放| 热99久久久久精品小说推荐| 午夜福利,免费看| 亚洲熟妇熟女久久| 久久人妻福利社区极品人妻图片| 国产亚洲欧美精品永久| 亚洲欧美日韩高清在线视频| 色婷婷久久久亚洲欧美| 欧美日韩黄片免| av在线播放免费不卡| 露出奶头的视频| 丝袜美腿诱惑在线| 老司机午夜十八禁免费视频| 久久国产亚洲av麻豆专区| 老司机靠b影院| 亚洲精品一二三| 免费人成视频x8x8入口观看| x7x7x7水蜜桃| 99精品在免费线老司机午夜| 一区二区三区激情视频| 757午夜福利合集在线观看| 村上凉子中文字幕在线| 精品久久久久久久毛片微露脸| 国产国语露脸激情在线看| 黄色怎么调成土黄色| 亚洲中文字幕日韩| 一级a爱片免费观看的视频| 露出奶头的视频| 夜夜夜夜夜久久久久| 一级毛片女人18水好多| 亚洲国产欧美日韩在线播放| 精品人妻熟女毛片av久久网站| 免费观看a级毛片全部| 欧美一级毛片孕妇| 午夜91福利影院| av中文乱码字幕在线| 亚洲精品国产精品久久久不卡| 亚洲精品自拍成人| 亚洲成国产人片在线观看| 日韩免费高清中文字幕av| 亚洲少妇的诱惑av| 丝袜美腿诱惑在线| 国产单亲对白刺激| 不卡av一区二区三区| 亚洲伊人色综图| 国产成人精品在线电影| 欧美人与性动交α欧美精品济南到| 国产在视频线精品| 色老头精品视频在线观看| 国产av一区二区精品久久| 国产精华一区二区三区| 高潮久久久久久久久久久不卡| 超碰97精品在线观看| 国产一区二区激情短视频| 精品久久久久久电影网| 在线观看日韩欧美| 国产激情欧美一区二区| 精品人妻1区二区| 人人妻人人澡人人爽人人夜夜| 69精品国产乱码久久久| 久久 成人 亚洲| 麻豆成人av在线观看| 日韩精品免费视频一区二区三区| av超薄肉色丝袜交足视频| 国产aⅴ精品一区二区三区波| 国产精品欧美亚洲77777| 亚洲av片天天在线观看| 欧美亚洲日本最大视频资源| 亚洲精品美女久久av网站| 99热国产这里只有精品6| 久久人妻av系列| 亚洲成人免费电影在线观看| 人人妻人人爽人人添夜夜欢视频| 久久久精品国产亚洲av高清涩受| 成年人午夜在线观看视频| 亚洲精品美女久久av网站| 亚洲av美国av| 免费在线观看视频国产中文字幕亚洲| 国产免费av片在线观看野外av| 国产成人一区二区三区免费视频网站| 9热在线视频观看99| 国产午夜精品久久久久久| 亚洲第一欧美日韩一区二区三区| 激情视频va一区二区三区| 老司机影院毛片| 午夜成年电影在线免费观看| 亚洲专区中文字幕在线| 亚洲av日韩在线播放| 亚洲欧美日韩高清在线视频| 精品亚洲成国产av| 男人的好看免费观看在线视频 | 日韩免费av在线播放| 51午夜福利影视在线观看| xxxhd国产人妻xxx| 婷婷精品国产亚洲av在线 | 又紧又爽又黄一区二区| 亚洲精品一二三| 91麻豆av在线| 久久久久久人人人人人| 大型av网站在线播放| av天堂久久9| 色在线成人网| 欧美成狂野欧美在线观看| 亚洲成人手机| 80岁老熟妇乱子伦牲交| 久久精品亚洲av国产电影网| 国产成+人综合+亚洲专区| 欧美日本中文国产一区发布| 午夜久久久在线观看| 好男人电影高清在线观看| 最近最新免费中文字幕在线| 免费在线观看日本一区| av在线播放免费不卡| 99热网站在线观看| 在线观看www视频免费| 99国产综合亚洲精品| 亚洲精品久久午夜乱码| 午夜影院日韩av| 91国产中文字幕| 九色亚洲精品在线播放| 日韩熟女老妇一区二区性免费视频| 精品第一国产精品| 午夜福利乱码中文字幕| 99热网站在线观看| 动漫黄色视频在线观看| 大型av网站在线播放| 色综合婷婷激情| a级片在线免费高清观看视频| 欧美丝袜亚洲另类 | www日本在线高清视频| 久久久水蜜桃国产精品网| √禁漫天堂资源中文www| 成人av一区二区三区在线看| 国产成人精品久久二区二区91| 在线国产一区二区在线| 无遮挡黄片免费观看| 久久性视频一级片| 亚洲国产精品合色在线| 国产免费现黄频在线看| 久久久久久久久免费视频了| 美女午夜性视频免费| 国产精品美女特级片免费视频播放器 | av国产精品久久久久影院| 91成人精品电影| 午夜精品在线福利| 91在线观看av| 亚洲精品美女久久av网站| 校园春色视频在线观看| 黑人巨大精品欧美一区二区蜜桃| 国产成人影院久久av| 一本大道久久a久久精品| 久久精品国产清高在天天线| 极品人妻少妇av视频| 久久婷婷成人综合色麻豆| 极品人妻少妇av视频| 免费不卡黄色视频| 侵犯人妻中文字幕一二三四区| 91成年电影在线观看| 伦理电影免费视频| 亚洲第一av免费看| bbb黄色大片| 在线观看66精品国产| 免费高清在线观看日韩| 久久人妻av系列| 99re在线观看精品视频| 日本一区二区免费在线视频| 777久久人妻少妇嫩草av网站| 俄罗斯特黄特色一大片| 午夜免费鲁丝| 国产精品香港三级国产av潘金莲| 日本一区二区免费在线视频| 手机成人av网站| 国产免费现黄频在线看| 亚洲情色 制服丝袜| 亚洲欧美色中文字幕在线| 欧美人与性动交α欧美精品济南到| 手机成人av网站| 国产伦人伦偷精品视频| 丁香六月欧美| a级片在线免费高清观看视频| 人人妻人人澡人人看| 亚洲欧美激情在线| 性色av乱码一区二区三区2| 亚洲成人手机| 中文字幕人妻丝袜一区二区| 欧美日韩亚洲国产一区二区在线观看 | 少妇 在线观看| 18禁美女被吸乳视频| 午夜日韩欧美国产| 亚洲久久久国产精品| 久久午夜综合久久蜜桃| 国产淫语在线视频| 国产成人欧美在线观看 | 国产极品粉嫩免费观看在线| 黄色 视频免费看| 欧美日韩成人在线一区二区| 午夜激情av网站| 久久亚洲真实| 亚洲一区二区三区不卡视频| 亚洲精品国产精品久久久不卡| 国产日韩一区二区三区精品不卡| 久久精品熟女亚洲av麻豆精品| 91麻豆av在线| 国产深夜福利视频在线观看| 国产av又大| 建设人人有责人人尽责人人享有的| 久久久久久久久久久久大奶| 久久精品亚洲熟妇少妇任你| 俄罗斯特黄特色一大片| 色综合婷婷激情| 一个人免费在线观看的高清视频| 国产1区2区3区精品| 国产一区二区激情短视频| av国产精品久久久久影院| 亚洲精品美女久久av网站| 国产激情欧美一区二区| 成年人免费黄色播放视频| 久久久久久久久免费视频了| 亚洲,欧美精品.| 正在播放国产对白刺激| 91av网站免费观看| 日日摸夜夜添夜夜添小说| 在线永久观看黄色视频| 亚洲avbb在线观看| 搡老岳熟女国产| 国产国语露脸激情在线看| 大型黄色视频在线免费观看| 中文欧美无线码| 久久国产精品影院| 欧美日韩乱码在线| 一区二区三区国产精品乱码| 亚洲精品美女久久久久99蜜臀| 久久午夜综合久久蜜桃| av视频免费观看在线观看| e午夜精品久久久久久久| 老熟妇仑乱视频hdxx| 十八禁人妻一区二区| 欧美乱色亚洲激情| 国产精品一区二区在线观看99| 啦啦啦视频在线资源免费观看| a级片在线免费高清观看视频| √禁漫天堂资源中文www| 亚洲片人在线观看| 午夜久久久在线观看| 精品视频人人做人人爽| 欧美成人免费av一区二区三区 | 黑丝袜美女国产一区| 国产1区2区3区精品| 国产三级黄色录像| av国产精品久久久久影院| 精品人妻熟女毛片av久久网站| 黄色怎么调成土黄色| 天堂动漫精品| 黄色怎么调成土黄色| 天堂动漫精品| 精品少妇久久久久久888优播| 国产欧美日韩精品亚洲av| 黑人欧美特级aaaaaa片| 美女高潮喷水抽搐中文字幕| √禁漫天堂资源中文www| 日韩欧美一区视频在线观看| 如日韩欧美国产精品一区二区三区| 国产精品乱码一区二三区的特点 | 亚洲午夜精品一区,二区,三区| 国产精品.久久久| 久久久久久久久免费视频了| 亚洲视频免费观看视频| 欧洲精品卡2卡3卡4卡5卡区| 好男人电影高清在线观看| 亚洲一码二码三码区别大吗| 好看av亚洲va欧美ⅴa在| 男女免费视频国产| 激情在线观看视频在线高清 | 欧美激情久久久久久爽电影 | 三上悠亚av全集在线观看| 老司机午夜十八禁免费视频| 久久国产乱子伦精品免费另类| 一级片'在线观看视频| 欧美av亚洲av综合av国产av| 校园春色视频在线观看| 欧美老熟妇乱子伦牲交| 国产高清国产精品国产三级| 亚洲成av片中文字幕在线观看| 日日夜夜操网爽| 黄色视频不卡| 久久 成人 亚洲| 久久精品人人爽人人爽视色| 黑人操中国人逼视频| 黄频高清免费视频| 美女国产高潮福利片在线看| 色精品久久人妻99蜜桃| 国产视频一区二区在线看| 亚洲色图 男人天堂 中文字幕| 每晚都被弄得嗷嗷叫到高潮| 青草久久国产| 欧美亚洲日本最大视频资源| 久久性视频一级片| 999久久久国产精品视频| 成人国语在线视频| 国产真人三级小视频在线观看| 成熟少妇高潮喷水视频| 国产在线观看jvid| 亚洲第一欧美日韩一区二区三区| 国产不卡一卡二| 欧美精品av麻豆av| 亚洲精品美女久久久久99蜜臀| 少妇猛男粗大的猛烈进出视频| 免费高清在线观看日韩| 又黄又粗又硬又大视频| 69av精品久久久久久| 中文亚洲av片在线观看爽 | 一级a爱视频在线免费观看| 母亲3免费完整高清在线观看| 亚洲五月色婷婷综合| 久9热在线精品视频| 亚洲av成人不卡在线观看播放网| 狂野欧美激情性xxxx| av视频免费观看在线观看| 欧美最黄视频在线播放免费 | 精品国产一区二区三区四区第35| 久久久国产一区二区| 国产欧美日韩一区二区三| 窝窝影院91人妻| 国产亚洲精品久久久久5区| 热99国产精品久久久久久7| 99国产综合亚洲精品| 一本综合久久免费| 亚洲aⅴ乱码一区二区在线播放 | 午夜老司机福利片| 免费黄频网站在线观看国产| 国产成人啪精品午夜网站| 亚洲av美国av| 王馨瑶露胸无遮挡在线观看|