• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)研究現(xiàn)狀及趨勢(shì)

    2020-07-28 07:19:02胡祥恩蔣卓軒
    開(kāi)放教育研究 2020年4期
    關(guān)鍵詞:深度智能系統(tǒng)

    屈 靜 劉 凱 胡祥恩 楊 釙 蔣卓軒

    (1.北京大學(xué) 教育學(xué)院,北京100871;2.華中師范大學(xué) 心理學(xué)院,湖北武漢 430079;3.渤海大學(xué) 教育科學(xué)學(xué)院,遼寧錦州121007;4.京東AI研究院,上海 200001)

    一、引 言

    深度學(xué)習(xí)能力已被學(xué)界廣泛認(rèn)可為21世紀(jì)公民的核心素養(yǎng)。區(qū)別于淺層學(xué)習(xí)的簡(jiǎn)單記憶和淺層理解,深度學(xué)習(xí)指向應(yīng)用、分析、評(píng)價(jià)和創(chuàng)造等高階思維能力,其內(nèi)涵是對(duì)知識(shí)的批判性理解和遷移(何克抗,2018)?!?017地平線報(bào)告(高等教育版)》強(qiáng)調(diào),未來(lái)五年乃至更長(zhǎng)時(shí)間,深度學(xué)習(xí)都將是教育質(zhì)量提升的主要改革方向(沈霞娟等, 2019)。信息技術(shù)的日新月異,令模擬對(duì)話輔導(dǎo)這種深度學(xué)習(xí)的教學(xué)策略得以實(shí)現(xiàn)——對(duì)話式智能導(dǎo)學(xué)系統(tǒng)(Conversation-Based Intelligent Tutoring System,CBITS)應(yīng)運(yùn)而生。作為智能導(dǎo)學(xué)系統(tǒng)的升級(jí)版,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)突破計(jì)算機(jī)輔助教學(xué)系統(tǒng)(Computer Assisted Instruction, CAI)重復(fù)記憶、機(jī)械練習(xí)的局限,能有效提升學(xué)生概念綜合、定性推斷等深度學(xué)習(xí)能力(Graesser et al., 2001a)。

    自2004年自然語(yǔ)言與話語(yǔ)分析首次成為智能導(dǎo)學(xué)系統(tǒng)國(guó)際大會(huì)專題以來(lái),對(duì)話式智能導(dǎo)學(xué)系統(tǒng)迅速成為人工智能、學(xué)習(xí)科學(xué)、教育技術(shù)、心理學(xué)乃至腦科學(xué)共同關(guān)注的研究領(lǐng)域。在我國(guó)教育學(xué)界,對(duì)話仍囿于傳統(tǒng)教學(xué)情境。而主流智能導(dǎo)學(xué)系統(tǒng)的學(xué)理探討或應(yīng)用實(shí)踐不僅鮮有深度學(xué)習(xí)之蹤更難覓對(duì)話之跡。因此,將對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的研究現(xiàn)狀進(jìn)行整理的必要性和緊迫性不言而喻。鑒于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的高度跨學(xué)科特點(diǎn),只有抽取和整合不同學(xué)科的相關(guān)研究,從工程結(jié)構(gòu)層面,才能探析深度學(xué)習(xí)的發(fā)生機(jī)理和實(shí)現(xiàn)機(jī)制。此外,諸多實(shí)證研究已驗(yàn)證了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的學(xué)習(xí)效果。分類歸納形成的成果,有利于理解對(duì)話式智能導(dǎo)學(xué)系統(tǒng)支持的深度學(xué)習(xí)發(fā)展水平,以及客觀判斷其發(fā)展趨勢(shì)。

    事實(shí)上,深度學(xué)習(xí)可定義為知識(shí)遷移的過(guò)程,分認(rèn)知領(lǐng)域、個(gè)人領(lǐng)域和人際領(lǐng)域三個(gè)維度(National Research Council, 2012)。其中,認(rèn)知領(lǐng)域指知識(shí)的推理、批判和問(wèn)題解決;個(gè)人領(lǐng)域關(guān)注情感,如學(xué)習(xí)動(dòng)機(jī)、元認(rèn)知和自我調(diào)節(jié)學(xué)習(xí);人際領(lǐng)域指用語(yǔ)言和非語(yǔ)言的表達(dá),向他人解釋信息并作出適當(dāng)反應(yīng)的能力,如團(tuán)隊(duì)溝通與協(xié)作。基于以上三個(gè)維度,本文用文獻(xiàn)分析法梳理了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的概念定義、理論基礎(chǔ)、系統(tǒng)架構(gòu)和學(xué)習(xí)效果,剖析現(xiàn)有不足并展望未來(lái)前景。

    二、概念定義和理論基礎(chǔ)

    從計(jì)算機(jī)輔助教學(xué)系統(tǒng)到智能導(dǎo)學(xué)系統(tǒng)的演進(jìn),是知識(shí)和技能傳授逐漸深化,從淺層學(xué)習(xí)向深度學(xué)習(xí)發(fā)展的過(guò)程(Fletcher & Sottilare,2018)。智能導(dǎo)學(xué)系統(tǒng)多以本體為基礎(chǔ),對(duì)領(lǐng)域知識(shí)及學(xué)習(xí)者狀態(tài)變化建模(Graesser et al., 2005)。不同于計(jì)算機(jī)輔助教學(xué)系統(tǒng)千人一面的反饋和練習(xí),智能導(dǎo)學(xué)系統(tǒng)在人工智能、學(xué)習(xí)科學(xué)、計(jì)算機(jī)語(yǔ)言學(xué)等多學(xué)科的助力下,嘗試為學(xué)生提供接近人類教師的個(gè)性化指導(dǎo)(劉清堂等, 2016)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)是以對(duì)話輔導(dǎo)作為教學(xué)方式的智能導(dǎo)學(xué)系統(tǒng)(D’Mello & Graesser, 2013)。它有內(nèi)外兩個(gè)循環(huán)(Vanlehn, 2006)。外循環(huán)幫助學(xué)生選擇后續(xù)任務(wù)或者問(wèn)題。內(nèi)循環(huán)采用預(yù)期—誤解定制式對(duì)話(Expectation & Misconception Tailored Dialogue, EMT),以探究性問(wèn)答給予學(xué)生個(gè)性化的反饋和提示,完成對(duì)學(xué)生知識(shí)掌握和教學(xué)質(zhì)量的評(píng)估,并提升學(xué)生反思和推理等深度學(xué)習(xí)能力(Graesser, 2016)。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的理論基石為建構(gòu)主義下的自我解釋學(xué)習(xí)理論(Chi et al.,1989;Chi et al.,1994)。作為重要的元認(rèn)知策略和探尋問(wèn)題深層結(jié)構(gòu)的學(xué)習(xí)活動(dòng),自我解釋讓學(xué)習(xí)者在對(duì)話中自我反思,將認(rèn)知結(jié)構(gòu)從孤立、零散變得整合而系統(tǒng),使個(gè)人心智模型達(dá)到高階思維的水平(Ainsworth & Th Loizou, 2003; Chi, 1997)。自從SCHOLAR系統(tǒng)開(kāi)創(chuàng)了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的先河,SE Coach系統(tǒng)成為第一個(gè)以自我解釋理論為基礎(chǔ)的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)以來(lái),技術(shù)領(lǐng)域涌現(xiàn)出了大量類似的系統(tǒng),如CIRCSIM-Tutor、Geometry Explanation Tutor、Cordillera、AutoTutor和BEETLE Ⅱ等。其中,最具代表性者當(dāng)屬AutoTutor。自1997年至今,AutoTutor系統(tǒng)已有30多個(gè)系列產(chǎn)品,包含大量深度推理性問(wèn)題和元認(rèn)知學(xué)習(xí)策略,被廣泛應(yīng)用于大學(xué)物理、生物、計(jì)算機(jī)、閱讀理解等科目(Nye et al., 2014)。然而,從1970年至今,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)已走過(guò)半個(gè)世紀(jì)的歷程,卻仍以一對(duì)一輔導(dǎo)為主,側(cè)重于認(rèn)知領(lǐng)域和個(gè)人領(lǐng)域能力的提升。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)通過(guò)腳手架和對(duì)話,能夠?yàn)閷W(xué)生提供詳細(xì)的反饋來(lái)彌補(bǔ)其缺失的信息和錯(cuò)誤的理解,因此也被稱為微步式智能導(dǎo)學(xué)系統(tǒng)(Micro-Step Based Intelligent Tutoring System,MBITS)(Chi et al., 2014)或子步式智能導(dǎo)學(xué)系統(tǒng)(Substep-Based Intelligent Tutoring System, SSBITS)(VanLehn, 2011)。需要區(qū)分的是,不具有對(duì)話輔導(dǎo)功能的智能導(dǎo)學(xué)系統(tǒng)被稱為步式智能導(dǎo)學(xué)系統(tǒng)(Step-Based Intelligent Tutoring System, SBITS),如卡耐基梅隆大學(xué)開(kāi)發(fā)的認(rèn)知導(dǎo)師 (Anderson et al., 1995)。某些步式智能導(dǎo)學(xué)系統(tǒng)(如COVE系統(tǒng))也可能具有自然語(yǔ)言輸入界面,但無(wú)法對(duì)自然語(yǔ)言話輪進(jìn)行推理和反饋,故不屬于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)(VanLehn, 2011)。下文所有對(duì)話式智能導(dǎo)學(xué)系統(tǒng)均符合以上對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的定義及內(nèi)涵。

    三、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的系統(tǒng)架構(gòu)

    本世紀(jì)初,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的架構(gòu)漸趨成熟。其中,迪梅洛和格雷澤(D’Mello & Graesser, 2013)提出的六組件模型受到廣泛認(rèn)可。它包括輸入轉(zhuǎn)換(input transforming)、言語(yǔ)行為分類(speech act classification)、學(xué)習(xí)者建模(learner modeling)、領(lǐng)域模型(domain model)、對(duì)話管理(dialog management)和輸出呈現(xiàn)(output rendering)六個(gè)部分。目前,該模型已被整合至通用智能導(dǎo)學(xué)框架(Generalized Intelligent Framework for Tutoring,GIFT)中。作為智能導(dǎo)學(xué)系統(tǒng)架構(gòu)的構(gòu)建標(biāo)準(zhǔn),通用智能導(dǎo)學(xué)框架旨在提升智能導(dǎo)學(xué)系統(tǒng)的兼容性,降低搭建門(mén)檻,同時(shí)持續(xù)評(píng)估技術(shù)對(duì)學(xué)習(xí)效果、系統(tǒng)性能、知識(shí)遷移和保留率的影響。它在領(lǐng)域模塊、學(xué)習(xí)者模塊、教學(xué)模塊和交互模塊四個(gè)基本模塊的基礎(chǔ)上,增設(shè)了傳感器模塊(Sottilare et al., 2017a)。這些模塊遵循共享標(biāo)準(zhǔn),能在通用智能導(dǎo)學(xué)框架內(nèi)進(jìn)行消息發(fā)送、接收、編碼與解析時(shí),仍保持運(yùn)行的獨(dú)立性。考慮到未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的擴(kuò)展性和兼容性,本文在通用智能導(dǎo)學(xué)框架下(見(jiàn)圖1),具體探析對(duì)話式智能導(dǎo)學(xué)系統(tǒng)各個(gè)模塊促成深度學(xué)習(xí)的原理和機(jī)制。

    圖1 通用智能導(dǎo)學(xué)框架下的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)架構(gòu)

    (一)領(lǐng)域模塊

    領(lǐng)域模塊由概念、規(guī)則和解決問(wèn)題策略組成。作為支持深度學(xué)習(xí)的基石,領(lǐng)域模塊通常包含專家知識(shí)、易犯錯(cuò)誤、判錯(cuò)規(guī)則和誤解。通用智能導(dǎo)學(xué)框架的領(lǐng)域模塊還決定內(nèi)容的呈現(xiàn)順序及反饋類型(如支持性、指導(dǎo)性的提示或問(wèn)題),同時(shí)評(píng)估并保存學(xué)生的課業(yè)表現(xiàn),最后將評(píng)價(jià)結(jié)果反饋給教學(xué)模塊和學(xué)習(xí)者模塊,保證領(lǐng)域模塊的獨(dú)立性(Sottilare et al., 2017a)。知識(shí)表征、計(jì)算和構(gòu)建推理是領(lǐng)域模塊的核心機(jī)制。早期的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)用產(chǎn)生式、語(yǔ)義網(wǎng)絡(luò)和概念圖建立領(lǐng)域模塊,后期開(kāi)始采用句子和短語(yǔ)組成的腳本,形成深度推理性問(wèn)題①、正確答案、錯(cuò)誤回答、提示和暗示(Graesser & Person, 1994)。輔導(dǎo)過(guò)程中,AutoTutor系統(tǒng)常會(huì)提出“為什么”“如果……然后呢?”“這是如何造成的?”等深度問(wèn)題,并要求學(xué)生在系統(tǒng)幫助下形成深度解釋(高紅麗等, 2016)。不僅如此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)對(duì)答案的評(píng)估除“對(duì)”和“錯(cuò)”外,也允許“半對(duì)半錯(cuò)”。例如,BEETLE Ⅱ系統(tǒng)會(huì)診斷學(xué)生回答是否存在矛盾或缺失(Dzikovska et al., 2014)。不正確的回答將激活不同的教學(xué)策略,從而引發(fā)新一輪深度問(wèn)答。

    (二)學(xué)習(xí)者模塊

    學(xué)習(xí)者模塊是依據(jù)個(gè)體差異定制輔導(dǎo)并支持深度學(xué)習(xí)的核心模塊。它包含領(lǐng)域特定(domain specific)和領(lǐng)域獨(dú)立(domain independent)兩類信息。前者對(duì)應(yīng)深度學(xué)習(xí)的認(rèn)知領(lǐng)域能力,反映學(xué)習(xí)者特定領(lǐng)域知識(shí)或能力的狀態(tài)和水平,如課程進(jìn)度、易犯錯(cuò)誤、成績(jī)表現(xiàn)等;后者指不依賴于具體學(xué)科的學(xué)習(xí)者個(gè)人特征,如學(xué)習(xí)動(dòng)機(jī)、個(gè)性偏好、學(xué)習(xí)風(fēng)格、自我效能感等(Sottilare et al., 2013)。因此,學(xué)習(xí)者模塊能進(jìn)行認(rèn)知領(lǐng)域和個(gè)人領(lǐng)域建模,并按狀態(tài)或其變化的歷史以及傳感器數(shù)據(jù),對(duì)學(xué)生進(jìn)行評(píng)估與分類(Sottilare et al., 2017a)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)通常需要完成兩個(gè)顆粒度上的建模,一個(gè)是本地建模,用來(lái)判斷學(xué)習(xí)者的回答是否正確,再提供反饋并做出教學(xué)決策,比如是否給予提示、暗示或者跟進(jìn)提問(wèn)等;另一個(gè)為全局建模,用以評(píng)估學(xué)習(xí)者對(duì)知識(shí)的掌握程度(D’Mello & Graesser, 2013)。需要指出的是,深度學(xué)習(xí)發(fā)生在本地而非全局建模中。以AutoTutor系統(tǒng)為例,其本地建模采用預(yù)期-誤解定制式對(duì)話機(jī)制,將已存儲(chǔ)的正確和錯(cuò)誤答案與學(xué)生回答進(jìn)行語(yǔ)義對(duì)比?;卮鸩煌耆_時(shí),系統(tǒng)將給予提示,鼓勵(lì)更多的自我解釋,直至學(xué)生完成自我知識(shí)建構(gòu)并形成正確理解。實(shí)際上,學(xué)習(xí)者模塊中沖突解決的過(guò)程,也正是深度學(xué)習(xí)發(fā)生的過(guò)程(殷常鴻等, 2019)。此外,AutoTutor家族的MetaTutor系統(tǒng)還在學(xué)習(xí)者模型中加入對(duì)學(xué)生元認(rèn)知的關(guān)注,進(jìn)一步培養(yǎng)學(xué)生的自我調(diào)節(jié)學(xué)習(xí)能力(Nye et al., 2014) 。

    (三)教學(xué)模塊

    基于領(lǐng)域模塊和學(xué)習(xí)者模塊,教學(xué)模塊能夠完成認(rèn)知診斷并提供輔導(dǎo)策略②。目前,輔導(dǎo)行為多被視為系統(tǒng)與學(xué)生的雙向交互(Graesser et al., 2001a)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)教學(xué)模塊的顯著特點(diǎn)是以對(duì)話交互為中心,利用言語(yǔ)行為分類和對(duì)話管理模塊,處理復(fù)雜的自然語(yǔ)言對(duì)話(D’Mello & Graesser, 2013)。其中,言語(yǔ)行為分類的作用是對(duì)凍結(jié)表達(dá)③、學(xué)生問(wèn)題及學(xué)生貢獻(xiàn)進(jìn)行分類;其次,對(duì)話管理模塊通過(guò)模擬人類導(dǎo)師的教學(xué)對(duì)話分析并精準(zhǔn)匹配學(xué)習(xí)狀態(tài),保持學(xué)習(xí)者認(rèn)知與情感維度的平衡(Boyer et al., 2008)。對(duì)話管理的對(duì)話策略包含主導(dǎo)策略和控制策略兩種。主導(dǎo)策略分系統(tǒng)主導(dǎo)、學(xué)生主導(dǎo)和混合主導(dǎo)三類。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的主導(dǎo)策略多為系統(tǒng)主導(dǎo)或混合主導(dǎo)。主導(dǎo)策略直接關(guān)注學(xué)生認(rèn)知層面深度學(xué)習(xí)能力的發(fā)展?;旌现鲗?dǎo)下的教學(xué)則充分考慮到學(xué)生學(xué)習(xí)的自我調(diào)節(jié)和元認(rèn)知策略。在控制策略實(shí)現(xiàn)上,對(duì)話式智能導(dǎo)學(xué)早期系統(tǒng)是基于模板或規(guī)則的。盡管所實(shí)現(xiàn)的對(duì)話靈活性尚有局限,但正因解釋性反饋更能促使外部信息從工作記憶轉(zhuǎn)為長(zhǎng)時(shí)記憶,形成信息加工的自動(dòng)化,才令深度認(rèn)知得以激發(fā)(National Research Council, 2012)。20世紀(jì)90年代后,基于統(tǒng)計(jì)原理的機(jī)器學(xué)習(xí)和自然語(yǔ)言處理迅速成為構(gòu)建對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的主流技術(shù)。這種運(yùn)用統(tǒng)計(jì)模型預(yù)測(cè)后續(xù)狀態(tài)的方式,極大地增強(qiáng)了對(duì)話系統(tǒng)的魯棒性。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的教學(xué)模塊還具有多輪對(duì)話管理功能,系統(tǒng)與學(xué)生圍繞知識(shí)點(diǎn)進(jìn)行層層遞進(jìn)而非發(fā)散討論。若學(xué)生偏離主題,會(huì)被拉回主線,以促進(jìn)反思,增進(jìn)深度思考。

    (四)交互模塊

    交互模塊是驅(qū)動(dòng)學(xué)習(xí)者模塊的人機(jī)接口。在對(duì)話式智能導(dǎo)學(xué)系統(tǒng)中,交互形式主要是文本和語(yǔ)音,包含輸入轉(zhuǎn)換和輸出呈現(xiàn)兩個(gè)組件。輸入轉(zhuǎn)換組件將輸入轉(zhuǎn)換為系統(tǒng)可理解的形式。以對(duì)話式智能導(dǎo)學(xué)系統(tǒng)SOPHIE為例,它在用戶輸入為文本時(shí),會(huì)進(jìn)行大小寫(xiě)轉(zhuǎn)換、拼寫(xiě)錯(cuò)誤糾正和單詞時(shí)態(tài)轉(zhuǎn)換(Burton, 1977);若輸入為語(yǔ)音,則通過(guò)自動(dòng)語(yǔ)音識(shí)別技術(shù)轉(zhuǎn)化成文本,再做處理。文本的輸出,目前常采用基于自然語(yǔ)言生成的文本自動(dòng)生成技術(shù),如模板生成技術(shù)、管道技術(shù)、規(guī)劃技術(shù)或統(tǒng)計(jì)技術(shù)(商雄偉, 張志祥, 2015);語(yǔ)音的輸出,則使用文本轉(zhuǎn)語(yǔ)音技術(shù)。有的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)運(yùn)用能夠綜合文本、語(yǔ)音和圖像的動(dòng)畫(huà)代理技術(shù)增進(jìn)交互。當(dāng)然,研究表明,采用對(duì)話教學(xué)方式比采用其它交互方式,更能影響深層知識(shí)的學(xué)習(xí)效果(Graesser et al., 2003)。因此,對(duì)話智能導(dǎo)學(xué)系統(tǒng)的交互模塊構(gòu)建的核心在于如何有效推進(jìn)對(duì)話。

    (五)傳感器模塊

    作為交互模塊的延伸,傳感器模塊專門(mén)負(fù)責(zé)接收來(lái)自傳感器的學(xué)生行為和生理信息等多模態(tài)的原始數(shù)據(jù),并對(duì)數(shù)據(jù)進(jìn)行過(guò)濾、分段和特征提取。處理后的數(shù)據(jù)被發(fā)至學(xué)習(xí)者模塊,以此幫助對(duì)話式智能導(dǎo)學(xué)系統(tǒng)完成學(xué)生認(rèn)知和情感狀態(tài)的分析,實(shí)現(xiàn)更準(zhǔn)確和細(xì)顆粒度的學(xué)習(xí)者建模。

    四、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)應(yīng)用效果

    經(jīng)過(guò)近五十年的發(fā)展,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)已形成支持深度學(xué)習(xí)的完整架構(gòu)并步入教學(xué)一線,對(duì)其應(yīng)用效果的檢視成為確保對(duì)話式智能導(dǎo)學(xué)系統(tǒng)科學(xué)性和有效性不可或缺的環(huán)節(jié)。

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)帶來(lái)的學(xué)習(xí)成績(jī)提升,雖不及人類教師的一對(duì)一輔導(dǎo),卻優(yōu)于計(jì)算機(jī)輔助教學(xué)系統(tǒng)。元分析結(jié)果表明,智能導(dǎo)學(xué)系統(tǒng)輔導(dǎo)效應(yīng)值為0.66(Kulik & Fletcher, 2016),計(jì)算機(jī)輔助教學(xué)系統(tǒng)輔導(dǎo)的效應(yīng)值僅為0.3(Kulik & Kulik, 1991),而人類輔導(dǎo)最佳——介于0.79至2.0之間(Bloom, 1984;VanLehn, 2011)。盡管效果不如人類,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)仍體現(xiàn)出提升認(rèn)知水平的顯著優(yōu)勢(shì)。實(shí)證研究表明,考慮到控制組實(shí)驗(yàn)方法和測(cè)試科目的差異,AutoTutor系統(tǒng)的效應(yīng)值在0.4至1.5之間,平均可達(dá)0.8 (Nye et al., 2014),屬中等偏上水平(Cohen, 2013),并非常接近人類輔導(dǎo)(Bloom, 1984)。其中,依據(jù)布魯姆教學(xué)目標(biāo)分類理論,將測(cè)試問(wèn)題按認(rèn)知水平分成淺層問(wèn)題和深層問(wèn)題后的研究結(jié)果發(fā)現(xiàn),對(duì)比文本閱讀和無(wú)輔導(dǎo),AutoTutor系統(tǒng)在計(jì)算機(jī)基礎(chǔ)課的深層學(xué)習(xí)方面帶來(lái)的效應(yīng)值為0.49,遠(yuǎn)高于淺層學(xué)習(xí)的0.05(Graesser et al., 2004)??突仿〈髮W(xué)的實(shí)驗(yàn)顯示,Geometry Explanation Tutor系統(tǒng)在輔導(dǎo)學(xué)生學(xué)習(xí)幾何時(shí),能形成更有效的學(xué)習(xí)策略(Aleven et al., 2004)。研究人員對(duì)學(xué)生對(duì)話輔導(dǎo)中的學(xué)習(xí)策略進(jìn)行了分類編碼,將關(guān)于角的名稱和角的測(cè)量的回答,標(biāo)注為只針對(duì)具體問(wèn)題的“特定問(wèn)題”學(xué)習(xí)策略。若學(xué)生回答角的特征,并用最小代價(jià)獲得“正確答案的范圍”,然后擴(kuò)展至答案正確,則標(biāo)注為“增量”學(xué)習(xí)策略。后者多被學(xué)業(yè)表現(xiàn)好的學(xué)生使用。研究結(jié)果發(fā)現(xiàn),Geometry Explanation Tutor的“師生對(duì)話”能夠促進(jìn)增量學(xué)習(xí)策略的形成,并帶來(lái)較高的長(zhǎng)期學(xué)習(xí)收益。

    若與步式智能導(dǎo)學(xué)系統(tǒng)相比,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)也能產(chǎn)生更好的深度學(xué)習(xí)效果。新西蘭兩位學(xué)者開(kāi)發(fā)了KERMIT-SE系統(tǒng),用以檢測(cè)對(duì)話交互引起的自我解釋能否提升學(xué)習(xí)成績(jī)。對(duì)125名大學(xué)生兩個(gè)小時(shí)前后測(cè)及實(shí)驗(yàn)干預(yù)后的結(jié)果表明,使用對(duì)話式智能導(dǎo)學(xué)系統(tǒng)KERMIT-SE的學(xué)生獲得的學(xué)業(yè)成績(jī)整體優(yōu)于使用步式智能導(dǎo)學(xué)系統(tǒng)KERMIT 的學(xué)生(Weerasinghe & Mitrovic, 2003)。類似的結(jié)果,也來(lái)自對(duì)話式智能導(dǎo)學(xué)系統(tǒng)Cordillera和步式智能導(dǎo)學(xué)系統(tǒng)ANDES的對(duì)比。無(wú)論定量或是定性問(wèn)題,Cordillera系統(tǒng)都具有顯著提升學(xué)習(xí)成績(jī)的作用。相比ANDES系統(tǒng),Cordillera系統(tǒng)平均效應(yīng)值高達(dá)0.82(Chi et al., 2014)。當(dāng)然,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)輔導(dǎo)效果優(yōu)于步式智能導(dǎo)學(xué)系統(tǒng),其原因通常被歸結(jié)于對(duì)話式智能導(dǎo)學(xué)系統(tǒng)提供輔導(dǎo)的及時(shí)性和精細(xì)度。然而,范萊恩(VanLehn, 2011)的研究發(fā)現(xiàn),按交互顆粒度從密到疏,將輔導(dǎo)分為人類輔導(dǎo)、對(duì)話式智能導(dǎo)學(xué)系統(tǒng)、步式智能導(dǎo)學(xué)系統(tǒng)、計(jì)算機(jī)輔助教學(xué)系統(tǒng)以及無(wú)輔導(dǎo)后,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與步式智能導(dǎo)學(xué)系統(tǒng)效應(yīng)值相當(dāng),均為0.76并接近人類輔導(dǎo)的0.79。這種現(xiàn)象被稱為交互平原,它意味著交互顆粒度的增加,并不必然導(dǎo)致輔導(dǎo)效果線性增加。

    五、總結(jié)及展望

    (一)研究總結(jié)

    雖然班級(jí)授課在提升教育效率和降低成本上“一舉兩得”,但教學(xué)效果“打了折扣”。與人類教師的一對(duì)一輔導(dǎo)相比,二者差距達(dá)2個(gè)標(biāo)準(zhǔn)差(Bloom, 1984)。而且,學(xué)生對(duì)知識(shí)的連貫性解釋、問(wèn)題解決和推理的深度學(xué)習(xí)能力也難得以得到提高(Graesser et al., 2001a)。在教育質(zhì)量與成本之間的矛盾日益尖銳的背景下,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)登上歷史舞臺(tái)。受益于自我解釋理論和人工智能技術(shù)的發(fā)展,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)突破機(jī)械重復(fù)的淺層學(xué)習(xí),采用預(yù)期—誤解定制式對(duì)話模仿人類對(duì)話輔導(dǎo)實(shí)現(xiàn)學(xué)生的自我建構(gòu)。ICAP(interative,constuetive,active,passive) 理論認(rèn)為,被激發(fā)的互動(dòng)性認(rèn)知投入,更有可能引發(fā)深度學(xué)習(xí)(Chi et al., 2018)。以AutoTutor系統(tǒng)為代表的大量實(shí)證研究表明,除人類教師輔導(dǎo)外,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)帶來(lái)的學(xué)習(xí)效果優(yōu)于包括步式智能導(dǎo)學(xué)系統(tǒng)在內(nèi)的其他輔導(dǎo)方式,并有助于深層知識(shí)的掌握和學(xué)習(xí)策略的形成。通用智能導(dǎo)學(xué)框架下整合的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)體系架構(gòu),進(jìn)一步夯實(shí)了對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的工程基礎(chǔ),令深度學(xué)習(xí)的規(guī)模化和彈性化成為現(xiàn)實(shí)。然而,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)仍存在不足:

    首先,學(xué)習(xí)效率有待提高?,F(xiàn)有對(duì)話式智能導(dǎo)學(xué)系統(tǒng)多以文本交互為主,學(xué)習(xí)時(shí)間的經(jīng)濟(jì)性差。研究發(fā)現(xiàn),完成同樣任務(wù),對(duì)話式智能導(dǎo)學(xué)系統(tǒng)所需時(shí)間高于步式智能導(dǎo)學(xué)系統(tǒng)(Chi et al., 2014)。有實(shí)驗(yàn)顯示,這種導(dǎo)學(xué)系統(tǒng)耗時(shí)幾乎是文本閱讀的兩倍(Rosé et al., 2003)。這意味著,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)有效提高學(xué)習(xí)成績(jī)、促進(jìn)知識(shí)深度理解和掌握,從某種程度上是以降低學(xué)習(xí)效率為代價(jià)的。

    其次,對(duì)認(rèn)知以外的深度學(xué)習(xí)能力支持不足。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)主要聚焦于核心學(xué)科知識(shí)的掌握,及批判性思維形成和復(fù)雜問(wèn)題理解的認(rèn)知領(lǐng)域能力提升,而對(duì)團(tuán)隊(duì)協(xié)作和有效溝通等人際能力支持尚存不足。團(tuán)隊(duì)協(xié)作要求學(xué)生為實(shí)現(xiàn)團(tuán)隊(duì)共同目標(biāo),制定步驟,合作解決問(wèn)題(卜彩麗等, 2016)。故而,學(xué)生需組織和利用資源,促成觀點(diǎn)的有效溝通。但目前對(duì)話式智能導(dǎo)學(xué)系統(tǒng)大多以人機(jī)一對(duì)一輔導(dǎo)為主,較少支持團(tuán)隊(duì)學(xué)習(xí)環(huán)境。此外,非智力因素的表征和建模技術(shù)還存在一定困難,因而對(duì)話式智能導(dǎo)學(xué)系統(tǒng)對(duì)涉及個(gè)人領(lǐng)域的學(xué)習(xí)監(jiān)控能力和學(xué)習(xí)意志的支持也有待加強(qiáng)。

    再次,開(kāi)發(fā)成本過(guò)高,規(guī)?;瘧?yīng)用困難。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與其他智能導(dǎo)學(xué)系統(tǒng)一樣,開(kāi)發(fā)成本居高不下。據(jù)估算,200-300小時(shí)的開(kāi)發(fā)工程量才能產(chǎn)生1小時(shí)的輔導(dǎo)量(Chang et al., 2018)。即使在領(lǐng)域模塊著作工具(Authoring Tool)的協(xié)助下,開(kāi)發(fā)時(shí)間和輔導(dǎo)時(shí)間比仍高達(dá)200∶1(Koedinger et al., 1997)。IBM創(chuàng)建的名為Watson Tutor的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)可借助內(nèi)容自動(dòng)生成技術(shù)(Automatic Content Extraction Techniques),可將問(wèn)答對(duì)、概念圖、被標(biāo)注的內(nèi)容塊和案例在內(nèi)的非結(jié)構(gòu)化信息自動(dòng)標(biāo)簽并提取語(yǔ)料,繼而生成可驅(qū)動(dòng)對(duì)話的結(jié)構(gòu)化信息,以此降低開(kāi)發(fā)投入產(chǎn)出至40∶1(Chang et al., 2018)。但此種構(gòu)建方式能否保證對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的輔導(dǎo)效果,尚無(wú)確鑿證據(jù)??傊?,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)應(yīng)用開(kāi)發(fā)成本偏高,是其在真實(shí)教學(xué)場(chǎng)景落地的瓶頸,也阻礙了對(duì)它的評(píng)估和改進(jìn)。

    (二)趨勢(shì)展望

    1.微觀層面

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)微觀層面?zhèn)戎赜陉P(guān)注教育技術(shù)和教學(xué)法,從多模態(tài)、多維度、多代理三方面推動(dòng)發(fā)展。

    1) 多模態(tài)的人機(jī)交互

    可穿戴傳感器、生物傳感器(皮電、心電和腦電等信號(hào))、手勢(shì)傳感、紅外成像和眼球跟蹤等數(shù)據(jù)收集和傳感技術(shù)的進(jìn)步,使多模態(tài)數(shù)據(jù)的捕獲成為可能。心理、行為和生理的多模態(tài)數(shù)據(jù)全方位整合,能夠幫助我們判斷深度學(xué)習(xí)發(fā)生的程度,解釋深度學(xué)習(xí)的作用機(jī)制(劉哲雨等,2018)。因此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)發(fā)展的多模態(tài)趨勢(shì)與深度學(xué)習(xí)具有同步性和一致性。未來(lái)的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將融合文本、語(yǔ)音、面部表情、眼神交流、手勢(shì)等的多模態(tài)交互方式來(lái)提升教學(xué)效率和效果。交叉驗(yàn)證傳感器模塊收集的多模態(tài)數(shù)據(jù)能降低各模態(tài)的噪聲和不確定性,動(dòng)態(tài)捕捉學(xué)生涉及情感和社會(huì)學(xué)習(xí)的全過(guò)程(Yang et al,2020)。實(shí)驗(yàn)證明,多模態(tài)數(shù)據(jù),如音頻和心理測(cè)量的結(jié)合,比單模態(tài)數(shù)據(jù)能更準(zhǔn)確地評(píng)估學(xué)習(xí)者狀態(tài)(Cukurova et al., 2019)。未來(lái)研究將聚焦于更精細(xì)的多模態(tài)表征建模、多模態(tài)學(xué)習(xí)分析、多模態(tài)融合引擎(Fusion Engine)、多模態(tài)與認(rèn)知負(fù)荷之間的關(guān)系(Turk,2014)和不同模態(tài)之間是否等價(jià)等問(wèn)題。

    2) 多維度的情感計(jì)算

    教育學(xué)和心理學(xué)研究表明,情感對(duì)學(xué)習(xí)起著重要作用,學(xué)習(xí)者的認(rèn)知能力取決于情感狀態(tài)(Frasson & Chalfoun, 2010)。情感狀態(tài)也是深度學(xué)習(xí)考量的三個(gè)維度之一,但情感的測(cè)量和分析通常需要攝像頭、傳感器等設(shè)備,不僅成本高,且無(wú)法確認(rèn)哪些數(shù)據(jù)與學(xué)習(xí)直接相關(guān)。對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的優(yōu)勢(shì)在于,教學(xué)交互產(chǎn)生的大量對(duì)話與教學(xué)目標(biāo)聯(lián)系緊密。這些對(duì)話也被證明可有效預(yù)測(cè)學(xué)生者情感狀態(tài)(D’Mello & Graesser, 2012)。對(duì)文本進(jìn)行話語(yǔ)分析是有效判斷深度學(xué)習(xí)發(fā)生與否的方式(殷常鴻等, 2019),因此基于交互文本進(jìn)行情感分析值得深入研究和關(guān)注。鑒于目前多數(shù)情感計(jì)算只停留在情感與其前因后果的線性關(guān)系層面,未來(lái)研究的主攻方向是引入更復(fù)雜的多維度情感計(jì)算模型,考慮情感組合、持續(xù)時(shí)間及其轉(zhuǎn)換等問(wèn)題,充分挖掘變量間的非線性關(guān)系 (Graesser, 2019)。此外,如何借助學(xué)習(xí)分析和教育大數(shù)據(jù)挖掘技術(shù),進(jìn)行情感調(diào)節(jié)策略識(shí)別和反饋干預(yù),建立具有情感調(diào)節(jié)功能的對(duì)話式智能導(dǎo)學(xué)系統(tǒng),也是此領(lǐng)域的重要研究課題。

    3) 多代理的團(tuán)隊(duì)學(xué)習(xí)

    以團(tuán)隊(duì)溝通與協(xié)作為核心的人際領(lǐng)域,是促進(jìn)深度學(xué)習(xí)的重要評(píng)估維度。未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將從一對(duì)一的傳統(tǒng)輔導(dǎo)模式中解放出來(lái),使用會(huì)話代理建立定制化的團(tuán)隊(duì)學(xué)習(xí)環(huán)境。例如,AutoTutor家族的Operation ARIES系統(tǒng)在教師代理、同伴代理和真人學(xué)生之間實(shí)現(xiàn)了三方對(duì)話。學(xué)生除與教師代理對(duì)話溝通外,還能觀察兩個(gè)代理之間的交互,亦可幫助同伴代理解決問(wèn)題。實(shí)驗(yàn)結(jié)果顯示,三方對(duì)話比傳統(tǒng)一對(duì)一輔導(dǎo)模式能更有效地提升學(xué)習(xí)效果并改善學(xué)習(xí)情感(Graesser et al., 2017)。通用智能導(dǎo)學(xué)框架目前已納入團(tuán)隊(duì)行為(如溝通、合作、認(rèn)知、領(lǐng)導(dǎo)/指導(dǎo)和沖突)和團(tuán)隊(duì)產(chǎn)出(績(jī)效、滿意度和生存能力)之間關(guān)系的元分析研究成果(Sottilare et al., 2017b),并在模塊里增加對(duì)團(tuán)隊(duì)學(xué)習(xí)的支持(Sottilare et al.,2018)。未來(lái)對(duì)話式智能導(dǎo)學(xué)系統(tǒng)將以多會(huì)話代理為基礎(chǔ)進(jìn)行團(tuán)隊(duì)建模,培養(yǎng)學(xué)習(xí)者的溝通協(xié)作和問(wèn)題解決能力。研究重點(diǎn)是共享心智模型(shared mental model)、團(tuán)隊(duì)學(xué)習(xí)曲線、動(dòng)態(tài)任務(wù)選擇和多代理間的協(xié)調(diào)。當(dāng)然,會(huì)話代理的發(fā)展還面臨著創(chuàng)作工具、自然語(yǔ)言處理技術(shù)和腳本自動(dòng)生成方面的挑戰(zhàn)。

    2.宏觀層面

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)宏觀層面則基于學(xué)科、范式及倫理視角,關(guān)注合作、標(biāo)準(zhǔn)及倫理三方面問(wèn)題。

    1) 增進(jìn)學(xué)科合作

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)具有高度跨學(xué)科性。設(shè)計(jì)需要學(xué)習(xí)科學(xué)的理論指導(dǎo),構(gòu)建需要計(jì)算機(jī)科學(xué)的技術(shù)支持,應(yīng)用則需要教育學(xué)和心理學(xué)的操作把控。既往歷史也印證了人工智能技術(shù)和學(xué)習(xí)理論是對(duì)話式智能導(dǎo)學(xué)系統(tǒng)發(fā)展的兩大主要制約因素。我國(guó)學(xué)科協(xié)作與互助不充分是對(duì)話式智能導(dǎo)學(xué)系統(tǒng)領(lǐng)域研究數(shù)量少、質(zhì)量低的重要原因,因而打破學(xué)科壁壘,搭建多學(xué)科融合創(chuàng)新平臺(tái),推進(jìn)人工智能下的深度教學(xué)變革勢(shì)在必行。

    2) 遵從國(guó)際標(biāo)準(zhǔn)

    高開(kāi)發(fā)成本是阻礙對(duì)話式智能導(dǎo)學(xué)系統(tǒng)走進(jìn)課堂的主要原因之一。通用智能導(dǎo)學(xué)框架提供的可重用模塊和標(biāo)準(zhǔn)化組件,為加速構(gòu)建對(duì)話式智能導(dǎo)學(xué)系統(tǒng)掃清了障礙。AutoTutor作為對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的典型系統(tǒng),已將主要模塊整合進(jìn)通用智能導(dǎo)學(xué)框架,并支持多樣化的對(duì)話式智能導(dǎo)學(xué)系統(tǒng)開(kāi)發(fā)。遺憾的是,國(guó)內(nèi)學(xué)者對(duì)此了解較少。本研究建議了解、遵行和利用這一標(biāo)準(zhǔn)化智能導(dǎo)學(xué)系統(tǒng)框架,加速研發(fā)對(duì)話式智能導(dǎo)學(xué)系統(tǒng),促進(jìn)我國(guó)真實(shí)教育場(chǎng)景中“智適應(yīng)”產(chǎn)品的落地和迭代發(fā)展(劉凱等, 2019)。

    3) 重視倫理問(wèn)題

    對(duì)話式智能導(dǎo)學(xué)系統(tǒng)的倫理問(wèn)題不容小覷。一項(xiàng)名為“旁觀者圖靈測(cè)試”(by-stander turing test)的實(shí)驗(yàn)發(fā)現(xiàn),AutoTuto在對(duì)話輔導(dǎo)上與人類教師無(wú)顯著差異(Nye et al., 2014)。然而,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)與人類教學(xué)相似度越大,欺騙性就越大。其代入感會(huì)令學(xué)生與系統(tǒng)之間產(chǎn)生依賴和情緒鏈接,從而可能導(dǎo)致學(xué)生社交能力的缺失(劉瑞娜等, 2019)。因此,對(duì)話式智能導(dǎo)學(xué)系統(tǒng)適合用于哪些學(xué)生群體,值得從AI倫理層面加以研究和探討。

    [注釋]

    ① 格雷澤和珀森(Person)將人類老師對(duì)話輔導(dǎo)的提問(wèn)分為深度、中級(jí)和淺層三類。其中,屬于深層問(wèn)題的是原因性問(wèn)題(為什么?這是如何造成的?)、結(jié)果性問(wèn)題(如果……然后呢?)、目標(biāo)導(dǎo)向性問(wèn)題(為什么有人這樣做?)、可行性問(wèn)題(發(fā)生的條件是什么?)、詮釋性問(wèn)題(這意味著什么?)和預(yù)期性問(wèn)題(為什么不這樣呢?)。

    ② 對(duì)話式導(dǎo)學(xué)系統(tǒng)的輔導(dǎo)策略包含給予提示、給予信息補(bǔ)充、提供完型填空和給予結(jié)論四類。

    ③ 在基本對(duì)話循環(huán)外的學(xué)生反饋,包含凍結(jié)表達(dá)(frozen expression)和學(xué)生問(wèn)題。凍結(jié)表達(dá)指那些與內(nèi)容無(wú)關(guān),或者對(duì)于問(wèn)題沒(méi)有貢獻(xiàn)的學(xué)生回答,如對(duì)話的致謝(如“好”),簡(jiǎn)短的回復(fù)(如“是”或“不是”),元認(rèn)知語(yǔ)句(如“我需要幫助”“我不知道”),或者抱怨?;狙h(huán)內(nèi)的學(xué)生反饋包括導(dǎo)師提問(wèn),學(xué)生的貢獻(xiàn)(針對(duì)問(wèn)題的回答)和導(dǎo)師反饋。

    猜你喜歡
    深度智能系統(tǒng)
    Smartflower POP 一體式光伏系統(tǒng)
    WJ-700無(wú)人機(jī)系統(tǒng)
    ZC系列無(wú)人機(jī)遙感系統(tǒng)
    深度理解一元一次方程
    深度觀察
    深度觀察
    智能前沿
    文苑(2018年23期)2018-12-14 01:06:06
    智能前沿
    文苑(2018年19期)2018-11-09 01:30:14
    智能前沿
    文苑(2018年17期)2018-11-09 01:29:26
    智能前沿
    文苑(2018年21期)2018-11-09 01:22:32
    国产精品99久久99久久久不卡| 丝袜美腿诱惑在线| 国产黄色免费在线视频| 极品人妻少妇av视频| 黄片播放在线免费| 少妇 在线观看| 精品人妻1区二区| 99精品欧美一区二区三区四区| 69av精品久久久久久 | 12—13女人毛片做爰片一| 国产成人系列免费观看| 国产有黄有色有爽视频| 日韩一卡2卡3卡4卡2021年| 久久国产精品人妻蜜桃| 热99国产精品久久久久久7| 日本五十路高清| 人人妻人人爽人人添夜夜欢视频| 汤姆久久久久久久影院中文字幕| 亚洲午夜精品一区,二区,三区| 黄色 视频免费看| 欧美激情 高清一区二区三区| 精品国产乱码久久久久久男人| 国产精品秋霞免费鲁丝片| 国产男女内射视频| 搡老熟女国产l中国老女人| 国产亚洲av高清不卡| 精品亚洲成国产av| 精品少妇黑人巨大在线播放| 大香蕉久久成人网| 国产精品一区二区免费欧美| 麻豆成人av在线观看| 国产精品麻豆人妻色哟哟久久| 日韩欧美一区二区三区在线观看 | 无遮挡黄片免费观看| 成人免费观看视频高清| 国产精品美女特级片免费视频播放器 | 黄网站色视频无遮挡免费观看| 少妇精品久久久久久久| 国产男女超爽视频在线观看| 国产极品粉嫩免费观看在线| 真人做人爱边吃奶动态| 精品一区二区三区视频在线观看免费 | 国产成人一区二区三区免费视频网站| 精品少妇久久久久久888优播| 一本综合久久免费| tube8黄色片| 国产三级黄色录像| 亚洲一卡2卡3卡4卡5卡精品中文| 国精品久久久久久国模美| 丰满饥渴人妻一区二区三| 亚洲精品久久成人aⅴ小说| 国产福利在线免费观看视频| 首页视频小说图片口味搜索| 免费在线观看视频国产中文字幕亚洲| 午夜福利视频在线观看免费| 国产有黄有色有爽视频| 少妇的丰满在线观看| 欧美日韩国产mv在线观看视频| 丝瓜视频免费看黄片| 亚洲久久久国产精品| 国产黄色免费在线视频| 成人影院久久| 热re99久久精品国产66热6| 欧美变态另类bdsm刘玥| 免费看十八禁软件| 夜夜夜夜夜久久久久| 欧美日韩视频精品一区| 久久久国产欧美日韩av| 婷婷成人精品国产| tube8黄色片| 日韩精品免费视频一区二区三区| 成人免费观看视频高清| 青草久久国产| 一级毛片电影观看| 午夜日韩欧美国产| 国产无遮挡羞羞视频在线观看| 国产精品久久久av美女十八| 无遮挡黄片免费观看| 国产高清激情床上av| 久久国产精品大桥未久av| 大香蕉久久成人网| 久久久久国产一级毛片高清牌| 啦啦啦中文免费视频观看日本| 国产精品久久久久久精品电影小说| 国产欧美日韩一区二区三区在线| 啦啦啦免费观看视频1| 人妻一区二区av| 精品国产乱码久久久久久男人| 欧美日韩成人在线一区二区| 波多野结衣一区麻豆| 久久这里只有精品19| 国产精品秋霞免费鲁丝片| 欧美日韩亚洲国产一区二区在线观看 | 久久精品亚洲精品国产色婷小说| av免费在线观看网站| 久久久久久久国产电影| 欧美激情 高清一区二区三区| 一个人免费在线观看的高清视频| 亚洲av日韩在线播放| 一区二区av电影网| 一本—道久久a久久精品蜜桃钙片| 久久影院123| 免费一级毛片在线播放高清视频 | 一边摸一边抽搐一进一出视频| 色综合婷婷激情| 国产精品一区二区精品视频观看| 亚洲专区国产一区二区| 亚洲伊人色综图| 日韩视频在线欧美| 国产精品九九99| 天天操日日干夜夜撸| 电影成人av| 久9热在线精品视频| aaaaa片日本免费| 啦啦啦在线免费观看视频4| 国产成+人综合+亚洲专区| 黑人巨大精品欧美一区二区mp4| 国产精品1区2区在线观看. | 99九九在线精品视频| 一级毛片女人18水好多| 色综合婷婷激情| 蜜桃国产av成人99| 日韩欧美一区二区三区在线观看 | 国产成人系列免费观看| 视频区欧美日本亚洲| 亚洲精品中文字幕一二三四区 | 欧美激情久久久久久爽电影 | 黑人巨大精品欧美一区二区mp4| 欧美成人午夜精品| 亚洲专区中文字幕在线| 国产在线一区二区三区精| 午夜福利一区二区在线看| 成年人免费黄色播放视频| 黄色视频不卡| 亚洲七黄色美女视频| 后天国语完整版免费观看| 麻豆国产av国片精品| 色尼玛亚洲综合影院| 日日摸夜夜添夜夜添小说| 9热在线视频观看99| www.自偷自拍.com| 80岁老熟妇乱子伦牲交| 99国产精品免费福利视频| 视频区欧美日本亚洲| 亚洲精品粉嫩美女一区| 国产伦人伦偷精品视频| 国产精品久久久久久人妻精品电影 | 亚洲天堂av无毛| www.熟女人妻精品国产| 欧美国产精品va在线观看不卡| 黄色视频在线播放观看不卡| 午夜免费成人在线视频| 国产av精品麻豆| 性少妇av在线| 一级毛片精品| 天堂俺去俺来也www色官网| 热99久久久久精品小说推荐| 一夜夜www| 欧美精品一区二区免费开放| 免费久久久久久久精品成人欧美视频| 夜夜骑夜夜射夜夜干| 纯流量卡能插随身wifi吗| 黄片小视频在线播放| 久久人妻福利社区极品人妻图片| 日韩大码丰满熟妇| 久久这里只有精品19| 我的亚洲天堂| 99九九在线精品视频| 亚洲精品成人av观看孕妇| 丁香欧美五月| 中文字幕人妻丝袜一区二区| 满18在线观看网站| 欧美日韩视频精品一区| 一区二区av电影网| 亚洲精品国产色婷婷电影| 精品国内亚洲2022精品成人 | 最近最新中文字幕大全电影3 | 欧美成狂野欧美在线观看| 国产单亲对白刺激| 真人做人爱边吃奶动态| 变态另类成人亚洲欧美熟女 | 999精品在线视频| 男女午夜视频在线观看| 国产又色又爽无遮挡免费看| 久久精品国产亚洲av高清一级| 操出白浆在线播放| 成人18禁在线播放| 热99国产精品久久久久久7| videos熟女内射| 亚洲成av片中文字幕在线观看| av网站免费在线观看视频| 亚洲第一欧美日韩一区二区三区 | 久久天堂一区二区三区四区| 日本黄色日本黄色录像| 嫁个100分男人电影在线观看| 极品人妻少妇av视频| 久久 成人 亚洲| 国产欧美日韩一区二区三区在线| 亚洲av美国av| 中国美女看黄片| 国产成人免费观看mmmm| 高潮久久久久久久久久久不卡| 激情在线观看视频在线高清 | 飞空精品影院首页| 精品人妻在线不人妻| 高清黄色对白视频在线免费看| 久9热在线精品视频| 黄片播放在线免费| 久久国产精品影院| 午夜福利视频在线观看免费| 美女高潮喷水抽搐中文字幕| 日本a在线网址| 大码成人一级视频| 我要看黄色一级片免费的| 久久久久久人人人人人| 欧美午夜高清在线| 俄罗斯特黄特色一大片| 两性夫妻黄色片| 午夜久久久在线观看| 亚洲欧美精品综合一区二区三区| 在线亚洲精品国产二区图片欧美| 热99久久久久精品小说推荐| 亚洲七黄色美女视频| 中文字幕人妻熟女乱码| 久久久久久久久免费视频了| 国产精品99久久99久久久不卡| 啦啦啦免费观看视频1| 菩萨蛮人人尽说江南好唐韦庄| 久久ye,这里只有精品| 精品福利观看| 麻豆成人av在线观看| 宅男免费午夜| 亚洲七黄色美女视频| 在线播放国产精品三级| 成年人午夜在线观看视频| 搡老岳熟女国产| 性色av乱码一区二区三区2| 自拍欧美九色日韩亚洲蝌蚪91| 久久久久网色| 80岁老熟妇乱子伦牲交| 国产色视频综合| 久久影院123| 久久久久久免费高清国产稀缺| 美女高潮喷水抽搐中文字幕| 免费观看a级毛片全部| 黄色怎么调成土黄色| 在线十欧美十亚洲十日本专区| 亚洲国产毛片av蜜桃av| 51午夜福利影视在线观看| 欧美日韩福利视频一区二区| 高潮久久久久久久久久久不卡| 老司机靠b影院| 美女高潮喷水抽搐中文字幕| 国产黄色免费在线视频| 高清在线国产一区| 热99国产精品久久久久久7| 天天影视国产精品| 狠狠狠狠99中文字幕| 国产激情久久老熟女| 五月天丁香电影| 午夜福利欧美成人| 国产在线免费精品| 久久九九热精品免费| 亚洲综合色网址| 国产av国产精品国产| 欧美亚洲日本最大视频资源| 日韩欧美一区视频在线观看| 日韩大码丰满熟妇| 夜夜夜夜夜久久久久| 在线观看舔阴道视频| 亚洲成人免费av在线播放| 高清黄色对白视频在线免费看| 国产亚洲午夜精品一区二区久久| 欧美日韩精品网址| 80岁老熟妇乱子伦牲交| 久久久久久久久久久久大奶| 国产一区二区 视频在线| 免费在线观看视频国产中文字幕亚洲| 久久久国产欧美日韩av| 一边摸一边抽搐一进一小说 | 在线av久久热| 国产精品熟女久久久久浪| 久热这里只有精品99| 免费观看人在逋| 午夜福利欧美成人| 免费人妻精品一区二区三区视频| 色播在线永久视频| 免费在线观看影片大全网站| 欧美激情 高清一区二区三区| 午夜福利在线观看吧| 亚洲欧洲日产国产| 九色亚洲精品在线播放| av欧美777| 亚洲国产精品一区二区三区在线| 国产亚洲午夜精品一区二区久久| www日本在线高清视频| 日韩视频在线欧美| 欧美在线一区亚洲| 亚洲欧洲日产国产| 黄色成人免费大全| 国产精品免费一区二区三区在线 | 狠狠婷婷综合久久久久久88av| 国产色视频综合| 国产精品一区二区免费欧美| 国产视频一区二区在线看| 午夜福利,免费看| 午夜精品久久久久久毛片777| 成人精品一区二区免费| 欧美黑人精品巨大| 成年女人毛片免费观看观看9 | tube8黄色片| 国产成人av教育| 久久久精品区二区三区| 黄片大片在线免费观看| 日韩中文字幕欧美一区二区| 亚洲国产精品一区二区三区在线| 欧美 亚洲 国产 日韩一| 女性生殖器流出的白浆| 中文字幕高清在线视频| 女性生殖器流出的白浆| 真人做人爱边吃奶动态| 国产欧美日韩精品亚洲av| 成人影院久久| 少妇被粗大的猛进出69影院| 午夜成年电影在线免费观看| 亚洲国产看品久久| 2018国产大陆天天弄谢| 少妇精品久久久久久久| 欧美一级毛片孕妇| 99re在线观看精品视频| 中文字幕色久视频| 亚洲国产毛片av蜜桃av| 亚洲精品乱久久久久久| 亚洲成人免费av在线播放| 在线观看免费午夜福利视频| 老司机靠b影院| 91国产中文字幕| 一二三四在线观看免费中文在| 在线看a的网站| 欧美人与性动交α欧美软件| 久久中文字幕一级| 精品久久久精品久久久| 欧美日韩亚洲综合一区二区三区_| 看免费av毛片| 涩涩av久久男人的天堂| 黑人巨大精品欧美一区二区蜜桃| 变态另类成人亚洲欧美熟女 | 涩涩av久久男人的天堂| 亚洲精品美女久久av网站| 女警被强在线播放| 欧美 亚洲 国产 日韩一| 欧美老熟妇乱子伦牲交| 三级毛片av免费| 欧美日韩av久久| 黄色视频,在线免费观看| 精品国产乱子伦一区二区三区| 在线永久观看黄色视频| www.熟女人妻精品国产| 国产伦理片在线播放av一区| 精品国产乱子伦一区二区三区| 亚洲国产看品久久| 国产成人啪精品午夜网站| 巨乳人妻的诱惑在线观看| 菩萨蛮人人尽说江南好唐韦庄| 国产精品电影一区二区三区 | 汤姆久久久久久久影院中文字幕| 欧美日韩av久久| 欧美精品人与动牲交sv欧美| 一二三四在线观看免费中文在| 电影成人av| 成年版毛片免费区| 午夜福利在线观看吧| 水蜜桃什么品种好| 大型av网站在线播放| 欧美性长视频在线观看| 91成年电影在线观看| 男男h啪啪无遮挡| 欧美日韩中文字幕国产精品一区二区三区 | 岛国在线观看网站| 精品免费久久久久久久清纯 | 在线观看一区二区三区激情| 午夜激情久久久久久久| 俄罗斯特黄特色一大片| 国精品久久久久久国模美| 十八禁网站免费在线| 50天的宝宝边吃奶边哭怎么回事| 免费在线观看完整版高清| 黄色丝袜av网址大全| 国产又色又爽无遮挡免费看| 熟女少妇亚洲综合色aaa.| 成年动漫av网址| 精品欧美一区二区三区在线| av欧美777| 亚洲国产中文字幕在线视频| 国产精品国产av在线观看| 美女扒开内裤让男人捅视频| 久久毛片免费看一区二区三区| 国产激情久久老熟女| 久久亚洲精品不卡| www.熟女人妻精品国产| 久久av网站| 免费在线观看日本一区| 成人免费观看视频高清| 一本大道久久a久久精品| 91av网站免费观看| 午夜激情av网站| 久久天躁狠狠躁夜夜2o2o| 国产精品国产高清国产av | 伦理电影免费视频| 一本一本久久a久久精品综合妖精| 精品国产乱子伦一区二区三区| 一本一本久久a久久精品综合妖精| 免费在线观看日本一区| 亚洲av日韩精品久久久久久密| 亚洲中文日韩欧美视频| 日韩欧美免费精品| 老司机亚洲免费影院| 亚洲国产精品一区二区三区在线| 757午夜福利合集在线观看| 国产有黄有色有爽视频| 美女国产高潮福利片在线看| 亚洲av欧美aⅴ国产| 亚洲精品成人av观看孕妇| 又大又爽又粗| 欧美激情高清一区二区三区| 9191精品国产免费久久| 精品国产一区二区三区久久久樱花| 美国免费a级毛片| 国产一区二区三区在线臀色熟女 | 国产aⅴ精品一区二区三区波| 少妇被粗大的猛进出69影院| 午夜免费鲁丝| 国产一区二区激情短视频| 亚洲欧美一区二区三区久久| 99国产综合亚洲精品| 香蕉久久夜色| 啪啪无遮挡十八禁网站| 久热爱精品视频在线9| 亚洲精华国产精华精| 麻豆乱淫一区二区| 日韩有码中文字幕| 国产男靠女视频免费网站| 欧美一级毛片孕妇| 日韩欧美一区二区三区在线观看 | av电影中文网址| 久久人妻熟女aⅴ| 激情在线观看视频在线高清 | 最近最新中文字幕大全电影3 | 免费高清在线观看日韩| 一本久久精品| 69av精品久久久久久 | 黄色片一级片一级黄色片| 丝瓜视频免费看黄片| 国产一区二区在线观看av| 日韩视频在线欧美| 高清在线国产一区| 啦啦啦 在线观看视频| 亚洲午夜理论影院| 亚洲七黄色美女视频| 曰老女人黄片| 色精品久久人妻99蜜桃| 曰老女人黄片| 日韩欧美免费精品| av免费在线观看网站| 欧美在线一区亚洲| 免费日韩欧美在线观看| 国内毛片毛片毛片毛片毛片| 久热爱精品视频在线9| 黄片大片在线免费观看| 国产精品影院久久| 欧美另类亚洲清纯唯美| 18禁国产床啪视频网站| 我的亚洲天堂| 久久久水蜜桃国产精品网| 国产真人三级小视频在线观看| 首页视频小说图片口味搜索| 考比视频在线观看| 色视频在线一区二区三区| 国产在线免费精品| 岛国在线观看网站| 99riav亚洲国产免费| 好男人电影高清在线观看| 亚洲免费av在线视频| 国产精品麻豆人妻色哟哟久久| 国产精品欧美亚洲77777| 欧美激情 高清一区二区三区| 亚洲色图综合在线观看| 国产亚洲精品久久久久5区| 久热爱精品视频在线9| 久久精品亚洲av国产电影网| 婷婷成人精品国产| 亚洲人成电影观看| 无限看片的www在线观看| 99国产精品一区二区三区| kizo精华| 成年女人毛片免费观看观看9 | 亚洲精品久久午夜乱码| 久久中文看片网| 久久人妻av系列| 精品一品国产午夜福利视频| 在线av久久热| 韩国精品一区二区三区| 久久午夜亚洲精品久久| 亚洲中文字幕日韩| 两性夫妻黄色片| 亚洲精品中文字幕在线视频| 一级片免费观看大全| 久久精品亚洲熟妇少妇任你| 久久国产精品大桥未久av| 久久人妻av系列| 亚洲欧美色中文字幕在线| 如日韩欧美国产精品一区二区三区| av免费在线观看网站| 男女免费视频国产| 精品国内亚洲2022精品成人 | 999久久久精品免费观看国产| 最新的欧美精品一区二区| 成年版毛片免费区| 满18在线观看网站| 欧美人与性动交α欧美软件| 国产精品.久久久| 国产免费视频播放在线视频| 十八禁网站网址无遮挡| 精品久久蜜臀av无| 精品亚洲成国产av| 国产成人欧美在线观看 | 老熟女久久久| 在线观看免费午夜福利视频| 成人特级黄色片久久久久久久 | 色综合欧美亚洲国产小说| 考比视频在线观看| 国产成人免费无遮挡视频| 亚洲国产精品一区二区三区在线| 精品国产超薄肉色丝袜足j| 亚洲一卡2卡3卡4卡5卡精品中文| 欧美+亚洲+日韩+国产| 美女扒开内裤让男人捅视频| 欧美激情极品国产一区二区三区| 大片免费播放器 马上看| 亚洲精华国产精华精| 美女视频免费永久观看网站| 色婷婷av一区二区三区视频| 国产精品国产av在线观看| 中文字幕高清在线视频| 中亚洲国语对白在线视频| 在线亚洲精品国产二区图片欧美| 777米奇影视久久| 深夜精品福利| 女性被躁到高潮视频| 大香蕉久久成人网| 日韩成人在线观看一区二区三区| 搡老乐熟女国产| 久久久水蜜桃国产精品网| 一区二区三区乱码不卡18| 18在线观看网站| 亚洲少妇的诱惑av| 国产高清国产精品国产三级| 国产有黄有色有爽视频| 国产亚洲一区二区精品| 日韩大片免费观看网站| 美女高潮喷水抽搐中文字幕| 五月天丁香电影| 久久九九热精品免费| 国产成人系列免费观看| 怎么达到女性高潮| 纵有疾风起免费观看全集完整版| 亚洲国产欧美日韩在线播放| 亚洲avbb在线观看| 国产精品二区激情视频| 99九九在线精品视频| 久久天躁狠狠躁夜夜2o2o| 日本五十路高清| 欧美日韩亚洲国产一区二区在线观看 | 亚洲专区中文字幕在线| 夫妻午夜视频| 日韩视频一区二区在线观看| 黑人巨大精品欧美一区二区mp4| 操美女的视频在线观看| 久久中文看片网| 国产精品熟女久久久久浪| 免费观看a级毛片全部| 日韩欧美一区视频在线观看| 真人做人爱边吃奶动态| 亚洲人成电影观看| tube8黄色片| 我的亚洲天堂| 男女之事视频高清在线观看| 亚洲精品中文字幕在线视频| 亚洲精品国产一区二区精华液| 亚洲av电影在线进入| 在线观看免费视频日本深夜| 欧美黄色淫秽网站| 午夜福利,免费看| 老司机亚洲免费影院| 操出白浆在线播放| 欧美午夜高清在线| 亚洲自偷自拍图片 自拍| 亚洲色图 男人天堂 中文字幕| 亚洲国产看品久久| 中文字幕高清在线视频| 嫁个100分男人电影在线观看| 欧美av亚洲av综合av国产av| 国产成人av激情在线播放| 欧美在线一区亚洲| 丝瓜视频免费看黄片| svipshipincom国产片| 国产精品自产拍在线观看55亚洲 | 亚洲成av片中文字幕在线观看| 757午夜福利合集在线观看| 日本一区二区免费在线视频| 两个人免费观看高清视频| 热re99久久国产66热| 香蕉国产在线看| 亚洲国产看品久久| 天天躁日日躁夜夜躁夜夜|