• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    人工智能教育應(yīng)用場(chǎng)景下的教師倫理價(jià)值研究

    2023-06-30 18:08:09沈苑汪瓊
    教學(xué)研究 2023年3期

    沈苑 汪瓊

    [摘要]隨著技術(shù)的發(fā)展,國(guó)內(nèi)外借助人工智能支持教學(xué)和校園管理的做法日漸普遍,也相應(yīng)地引發(fā)了諸多倫理討論。以教師的倫理價(jià)值為切入點(diǎn),提出思想實(shí)驗(yàn)方法可作為探究人工智能應(yīng)用于教育的倫理困境的創(chuàng)新手段,選取了人工智能教育應(yīng)用場(chǎng)景下典型的倫理價(jià)值沖突,對(duì)應(yīng)開(kāi)發(fā)了4個(gè)基于虛構(gòu)場(chǎng)景的思想實(shí)驗(yàn),通過(guò)問(wèn)卷調(diào)查探究了教師的倫理價(jià)值取向,為可信賴的人工智能教育應(yīng)用的發(fā)展提供了可參考的建議。結(jié)果表明,在角色期望方面,教師普遍希望人工智能作為教學(xué)輔助而并非直接代替他們完成教學(xué)任務(wù);在價(jià)值排序方面,教師最擔(dān)心人工智能教育應(yīng)用會(huì)引發(fā)隱私方面的風(fēng)險(xiǎn);在價(jià)值決策方面,教師傾向于強(qiáng)調(diào)自主以化解準(zhǔn)確和透明的沖突、愿意讓渡部分隱私換取教育福祉,以及在自主和公平內(nèi)部的平衡點(diǎn)上存在分歧。

    [關(guān)鍵詞]人工智能教育應(yīng)用;倫理價(jià)值;思想實(shí)驗(yàn);價(jià)值沖突;助教機(jī)器人

    [中圖分類(lèi)號(hào)]G434[文獻(xiàn)標(biāo)識(shí)碼]A[文章編號(hào)]1005-4634(2023)03-0044-09近年來(lái),隨著人工智能(Artificial Intelligence,AI)的發(fā)展,國(guó)內(nèi)外借助AI支持教學(xué)和校園管理的做法日漸普遍,也引發(fā)了諸多倫理討論?;厮菝妊坑?0世紀(jì)中期的計(jì)算機(jī)輔助教學(xué),一路上也經(jīng)歷了大量的倫理討論:隱私泄露、知識(shí)產(chǎn)權(quán)糾紛、網(wǎng)絡(luò)霸凌、網(wǎng)絡(luò)成癮等[1-2],即便是21世紀(jì)的今天,這些討論仍舊存在于人工智能教育應(yīng)用(AI in Education,AIED)的場(chǎng)景下。而且與一般的教育技術(shù)不同,AIED更聚焦于通過(guò)自我學(xué)習(xí)能力以實(shí)現(xiàn)原本人類(lèi)才能完成的任務(wù)[3],這種能力所帶來(lái)的不可預(yù)測(cè)性意味著其必將成為倫理問(wèn)題的多發(fā)地。如果AIED在設(shè)計(jì)或使用上忽視了教育場(chǎng)景下利益相關(guān)者的倫理價(jià)值訴求,非但可能無(wú)法達(dá)成預(yù)期效果,反而會(huì)致使教育異化——如“拍照搜題”“AI代寫(xiě)”“風(fēng)險(xiǎn)學(xué)生標(biāo)記”等應(yīng)用都飽受社會(huì)爭(zhēng)議[4]。從技術(shù)發(fā)展的歷史規(guī)律來(lái)看,一項(xiàng)新技術(shù)在興起時(shí)所受到的炒作吹捧常會(huì)暫時(shí)遮蔽其倫理和社會(huì)含義,從長(zhǎng)期來(lái)看因倫理問(wèn)題引發(fā)的后坐力可能會(huì)減慢甚至停止技術(shù)研發(fā)進(jìn)程,因此前瞻性地研判和規(guī)避AIED應(yīng)用場(chǎng)景下的倫理困境具有重要的現(xiàn)實(shí)意義[5]。為防范潛在風(fēng)險(xiǎn),多國(guó)政府都發(fā)布了相關(guān)白皮書(shū)和政策文件,對(duì)AI的開(kāi)發(fā)和應(yīng)用制定限度規(guī)范[6]。然而,單憑去情境化的抽象原則這種外在約束依賴行動(dòng)主體的自我規(guī)制最多也只能達(dá)到 “弱約束”的效果,對(duì)于實(shí)踐的指導(dǎo)具有明顯的局限性,利益相關(guān)者依舊會(huì)在技術(shù)應(yīng)用場(chǎng)景下面臨難以抉擇的價(jià)值沖突[7]。

    基于此,本研究以教師的倫理價(jià)值為切入點(diǎn),提出思想實(shí)驗(yàn)作為探究人工智能應(yīng)用于教育的倫理困境的創(chuàng)新手段,以人形助教機(jī)器人作為技術(shù)研究對(duì)象,采用實(shí)證手段重點(diǎn)探究了教師的倫理價(jià)值取向,包括3項(xiàng)研究問(wèn)題:在AIED應(yīng)用場(chǎng)景下,(1)教師希望AIED承擔(dān)的角色是什么?(2)教師心中的倫理價(jià)值優(yōu)先級(jí)是什么?(3)教師在面臨倫理價(jià)值沖突時(shí)會(huì)做出什么樣的價(jià)值決策?通過(guò)探究這些問(wèn)題,旨在為AIED的研究者和設(shè)計(jì)者開(kāi)展實(shí)證研究提供可參考的研究工具與操作范式,也為AIED相關(guān)政策和規(guī)范的制定提供依據(jù)與建議。

    1切入視角:AIED應(yīng)用場(chǎng)景下教師的倫理價(jià)值本研究以教師的倫理價(jià)值作為切入視角。教師作為AIED最直接的利益相關(guān)者,其主張的價(jià)值排序和決策極大地影響到技術(shù)應(yīng)該如何設(shè)計(jì)、部署和使用才能符合具體教學(xué)場(chǎng)景下的倫理要求。

    芭提雅·弗里德曼(Batya Friedman)在其著作《人類(lèi)價(jià)值與計(jì)算機(jī)技術(shù)設(shè)計(jì)》(Human Values and the Design of Computer Technology)中定義價(jià)值(value)是“聚焦于倫理范疇上人類(lèi)認(rèn)為重要的事物”[8]。哲學(xué)家們常說(shuō)的“倫理困境(ethical dilemma)” 是指人在實(shí)踐中面臨幾種不同的、相互矛盾的倫理價(jià)值,一時(shí)難以作出判斷或抉擇的情境[9]。AIED在發(fā)展過(guò)程中涉及到大量的利益相關(guān)者(如開(kāi)發(fā)團(tuán)隊(duì)、教師、校長(zhǎng)、學(xué)生、家長(zhǎng)等),正因?yàn)檫@些群體之間或群體內(nèi)部持有不同的倫理價(jià)值或?qū)r(jià)值持有不同的優(yōu)先排序?qū)е铝藗惱砝Ь车漠a(chǎn)生。

    AIED應(yīng)用場(chǎng)景下的教師倫理價(jià)值一方面涉及AI技術(shù)本身自帶的倫理屬性,另一方面也涉及教師角色本身的倫理特性。前者已有大量的政策文本和研究報(bào)告作出論述,通過(guò)對(duì)5篇AI倫理領(lǐng)域內(nèi)權(quán)威專家的綜述文章進(jìn)行主題編碼分析發(fā)現(xiàn),目前此領(lǐng)域的話語(yǔ)顯著收斂于“透明”“公平”“自主”“安全”“隱私”“責(zé)任”“福祉”這7個(gè)主題下[10-14]。而關(guān)于教師角色本身的倫理特性方面也得到大量研究者的論證,“教學(xué)本身包含了道德行動(dòng)……教師是道德主體,課堂互動(dòng)在本質(zhì)上不可避免地具有道德屬性?!盵15]有研究者分析了由189位教師提供的倫理觀點(diǎn),對(duì)于其中產(chǎn)生的223項(xiàng)價(jià)值沖突進(jìn)行聚類(lèi),提出5類(lèi)在具體教學(xué)場(chǎng)景下可能產(chǎn)生沖突的倫理規(guī)范,即“倫理人際規(guī)范”“內(nèi)部專業(yè)規(guī)范”“機(jī)構(gòu)規(guī)范”“社會(huì)一致性規(guī)范”“自我保護(hù)規(guī)范”[16]。

    上述倫理價(jià)值在AIED應(yīng)用場(chǎng)景下會(huì)如何表征,又是否存在潛在的價(jià)值沖突和調(diào)適路徑?本研究著重選取了4項(xiàng)典型的價(jià)值沖突,分別是準(zhǔn)確與透明的沖突、福祉與隱私的沖突、自主與支持的沖突、平等與包容的沖突,采用思想實(shí)驗(yàn)方法深入探究教師的倫理價(jià)值取向,旨在對(duì)AIED的合倫理設(shè)計(jì)和應(yīng)用提供現(xiàn)實(shí)關(guān)照,支持可信賴AIED生態(tài)系統(tǒng)的未來(lái)發(fā)展。

    2研究工具:基于虛構(gòu)場(chǎng)景的思想實(shí)驗(yàn)

    本研究將虛構(gòu)場(chǎng)景的思想實(shí)驗(yàn)作為主要研究工具,探測(cè)教師在AIED應(yīng)用場(chǎng)景下的倫理價(jià)值取向,包括教師對(duì)于AIED的角色期望、對(duì)于倫理價(jià)值的優(yōu)先排序以及在面臨價(jià)值沖突時(shí)的價(jià)值決策。

    2.1思想實(shí)驗(yàn)的特征與形式

    思想實(shí)驗(yàn)是一種按照實(shí)驗(yàn)的格式展開(kāi)的在人的頭腦中進(jìn)行的理性思維活動(dòng),研究者通過(guò)向自己或被試提出一系列“What if”問(wèn)題來(lái)討論假設(shè)情境下的事物發(fā)展和結(jié)果,以尋找某個(gè)問(wèn)題的答案[17]。比如:如果不存在摩擦,將會(huì)發(fā)生什么現(xiàn)象?如果一個(gè)人分裂為變形蟲(chóng),將會(huì)發(fā)生什么現(xiàn)象?思想實(shí)驗(yàn)最早是在恩斯特·馬赫(Ernst Mach)的《認(rèn)識(shí)與謬誤》中作為一種正規(guī)的學(xué)術(shù)研究方法提出的[18]。自然科學(xué)領(lǐng)域的“自由落體”“薛定諤的貓”“麥克斯韋妖”“時(shí)鐘佯謬”,經(jīng)濟(jì)學(xué)領(lǐng)域的“囚徒困境”,哲學(xué)認(rèn)識(shí)論領(lǐng)域的“特修斯之船”“空地上的奶?!薄案字兄X”“孿生地球”等都屬于思想實(shí)驗(yàn)。在AI領(lǐng)域最典型的思想實(shí)驗(yàn)是麻省理工大學(xué)媒體實(shí)驗(yàn)室開(kāi)發(fā)的“道德機(jī)器(Moral Machine)”大規(guī)模在線實(shí)驗(yàn),通過(guò)“嚴(yán)肅游戲”的方式來(lái)探索自動(dòng)駕駛汽車(chē)面臨的道德困境。

    思想實(shí)驗(yàn)一般是由虛構(gòu)場(chǎng)景(vignette)的方式來(lái)呈現(xiàn)的。虛構(gòu)場(chǎng)景是指用書(shū)面或口語(yǔ)形式描述特定情況,模擬真實(shí)事件或問(wèn)題,通過(guò)邀請(qǐng)回應(yīng)、鼓勵(lì)討論和探測(cè)理解來(lái)獲取信息,以深入了解參與者對(duì)研究核心的特定現(xiàn)象的信念、情感、判斷、態(tài)度和價(jià)值[19-20]。如肯尼斯·斯特賴克(Kenneth Strike)和喬納斯·索爾蒂斯(Jones Soltis)在其經(jīng)典著作《教學(xué)倫理》中,通過(guò)一系列虛構(gòu)案例來(lái)闡明教師在倫理困境下可能經(jīng)歷的思考過(guò)程和背后起作用的倫理系統(tǒng)[21]。書(shū)中的虛構(gòu)案例包含大段場(chǎng)景和細(xì)節(jié)的描述,其中的道德困境十分具體和棘手,可謂是“各種倫理原則互相矛盾抵觸的世紀(jì)難題”。他們把這些案例設(shè)計(jì)得如此棘手,是有意地讓這些道德?tīng)?zhēng)議夾雜不清,這種模糊性有助于增加思考的趣味性并且使其成為有效的教育工具。虛擬案例的難解并不證明教學(xué)中的倫理問(wèn)題是無(wú)解的,也不證明思考倫理議題是無(wú)意義的。在參與者對(duì)于這些復(fù)雜案例進(jìn)行充分思考后,如果在現(xiàn)實(shí)生活中遇到較為簡(jiǎn)單的困境,就有能力更迅速地做出倫理上恰當(dāng)?shù)倪x擇。

    較之于真實(shí)實(shí)驗(yàn),思想實(shí)驗(yàn)最大的特點(diǎn)在于條件理想化,可以借助虛構(gòu)場(chǎng)景避開(kāi)實(shí)際的技術(shù)困難來(lái)開(kāi)展前瞻性的分析與預(yù)測(cè),降低教育情境下的試錯(cuò)風(fēng)險(xiǎn)[22]。雖然思想實(shí)驗(yàn)是基于虛構(gòu)情境,但被試的作答依舊是以事實(shí)經(jīng)驗(yàn)和普遍規(guī)律為來(lái)源的,因此所收集到的實(shí)驗(yàn)數(shù)據(jù)和研究結(jié)論是具備一定可靠性和推廣性的[23]?!八枷雽?shí)驗(yàn)是在想象中操作模型時(shí)形成的”[24],并非脫離實(shí)際的主觀臆想。換言之,思想實(shí)驗(yàn)的條件是不同于事實(shí)的,但之所以能夠進(jìn)行思想實(shí)驗(yàn),是因?yàn)橥评怼盎蚨嗷蛏贉?zhǔn)確地、非任意地反映了事實(shí)”[18]。

    倫理學(xué)研究常借助思想實(shí)驗(yàn)來(lái)突出某種“倫理困境”,大多是研究者的自問(wèn)自答,是為了提出某種觀點(diǎn)而有意設(shè)計(jì)出的困境表達(dá),可能最后指向幾種理論的矛盾爭(zhēng)論之中,陷入非此即彼的理論抉擇[25]。為規(guī)避這種局限性,本研究并不將思想實(shí)驗(yàn)作為一種分析工具,而是以開(kāi)放的觀點(diǎn)將思想實(shí)驗(yàn)作為一種收集教師觀點(diǎn)的工具,通過(guò)為教師提供4個(gè)虛構(gòu)的價(jià)值沖突場(chǎng)景,以探測(cè)教師在AIED應(yīng)用場(chǎng)景下的價(jià)值取向。

    2.2思想實(shí)驗(yàn)的倫理學(xué)基礎(chǔ)

    在本研究中運(yùn)用思想實(shí)驗(yàn)方法是以描述倫理學(xué)為基礎(chǔ)的。經(jīng)典的倫理學(xué)論文經(jīng)常論述的是一個(gè)具有“健全”觀點(diǎn)的人的想法,即采用規(guī)范倫理學(xué)視角審視某項(xiàng)價(jià)值決策。然而在實(shí)際情況中,不同群體和個(gè)體對(duì)于一件事情自己會(huì)怎么做有著不同的想法和觀點(diǎn)。描述倫理學(xué)是“對(duì)道德規(guī)范和相伴隨的一個(gè)人或一群人的道德觀念所作的調(diào)查,該理論認(rèn)為,對(duì)道德觀點(diǎn)的描述是人們?cè)谔囟〞r(shí)間和特定的共同體內(nèi)所持的道德原則”[26],其目的在于如實(shí)地呈現(xiàn)人們現(xiàn)實(shí)或歷史的、內(nèi)在或外在的道德?tīng)顩r,其研究對(duì)象不是社會(huì)的道德價(jià)值和行為規(guī)范,而是社會(huì)的道德事實(shí)及其規(guī)律,其任務(wù)在于記錄與再現(xiàn)社會(huì)道德實(shí)際和揭示社會(huì)道德發(fā)展的科學(xué)規(guī)律[27]。

    如果說(shuō)規(guī)范倫理學(xué)關(guān)注的是“人們應(yīng)該如何行動(dòng)?”那么描述倫理學(xué)則更關(guān)注“人們覺(jué)得怎么做是正確的?”描述倫理學(xué)能夠幫助診斷出社會(huì)的偏見(jiàn),預(yù)測(cè)某個(gè)新的社會(huì)干預(yù)可能會(huì)帶來(lái)的公眾反應(yīng)。比如“電車(chē)難題”就經(jīng)常被用于描述倫理學(xué)研究中來(lái)提取公眾的道德決策。有研究發(fā)現(xiàn),雖然大多數(shù)人愿意拉下杠桿來(lái)救5個(gè)人,但大多數(shù)不愿意將胖子推下鐵軌來(lái)救下5個(gè)人,這種取向差異有助于更加細(xì)微地探究人們內(nèi)心衡量倫理價(jià)值的標(biāo)準(zhǔn)[28]?;诿枋鰝惱韺W(xué)的立場(chǎng),開(kāi)放程度較高的思想實(shí)驗(yàn)有助于揭示教師內(nèi)心的價(jià)值排序與態(tài)度觀點(diǎn),站在用戶的立場(chǎng)上尋求更加可靠的規(guī)范AIED設(shè)計(jì)與使用的方式。

    3實(shí)驗(yàn)設(shè)計(jì):助教機(jī)器人的應(yīng)用場(chǎng)景

    3.1助教機(jī)器人作為技術(shù)主體

    目前AIED有著多種運(yùn)作方式(如軟件/硬件)和多種用途(如輔助學(xué)習(xí)/教學(xué)/管理),而且收集的數(shù)據(jù)類(lèi)型、規(guī)模、有效性、滲入師生生活的程度都有所不同。在本次思想實(shí)驗(yàn)中,研究者選擇以一個(gè)能夠預(yù)測(cè)學(xué)情和輔助學(xué)習(xí)的人形助教機(jī)器人“小波”作為技術(shù)研究對(duì)象,因?yàn)檫@類(lèi)產(chǎn)品很大程度上代表了一種未來(lái)AI與教育深度融合的重要形式。

    目前,國(guó)內(nèi)外各教育階段都開(kāi)始嘗試使用助教機(jī)器人輔助教學(xué),如國(guó)內(nèi)用于學(xué)前教育的Keeko、德國(guó)用于高校教學(xué)的Yuki、美國(guó)用于STEM教育的NAO等。即便國(guó)內(nèi)的學(xué)校目前還沒(méi)有這類(lèi)助教機(jī)器人,也有學(xué)校已經(jīng)開(kāi)始借助AI軟件來(lái)預(yù)測(cè)學(xué)情和輔助學(xué)習(xí)。虛構(gòu)這樣的人形助教機(jī)器人符合未來(lái)教育技術(shù)的發(fā)展趨勢(shì),研究過(guò)程和結(jié)果也能一定程度上推廣到其他具有類(lèi)似功能的AIED的設(shè)計(jì)和使用上。此外,選擇人形機(jī)器人的原因是因?yàn)橐延姓{(diào)查發(fā)現(xiàn),雖然學(xué)生更喜歡動(dòng)物形態(tài)的機(jī)器人,但是他們心目中最適合作為助教的機(jī)器人是人形的[29]。

    3.2虛構(gòu)場(chǎng)景的價(jià)值沖突設(shè)計(jì)

    使用思想實(shí)驗(yàn)方法最關(guān)鍵的是要虛構(gòu)出高質(zhì)量的倫理困境,本研究虛構(gòu)了4個(gè)有助教機(jī)器人參與的教學(xué)場(chǎng)景,確保場(chǎng)景簡(jiǎn)潔、易懂、不完整和開(kāi)放[19]。

    AIED應(yīng)用場(chǎng)景中有諸多潛在的價(jià)值沖突,本研究的4個(gè)場(chǎng)景分別對(duì)應(yīng)了4項(xiàng)較為典型的價(jià)值沖突(見(jiàn)表1)。第1個(gè)場(chǎng)景關(guān)注的是準(zhǔn)確與透明的沖突,重點(diǎn)探究當(dāng)助教機(jī)器人給出一個(gè)不透明但準(zhǔn)確的預(yù)測(cè)時(shí)教師會(huì)如何行動(dòng);第2個(gè)場(chǎng)景關(guān)注的是福祉與隱私的沖突,重點(diǎn)探究當(dāng)助教機(jī)器人通過(guò)收集隱私數(shù)據(jù)能做出更準(zhǔn)確的預(yù)測(cè)時(shí)教師是否愿意為了效果而犧牲隱私;第3個(gè)場(chǎng)景關(guān)注的是自主與干預(yù)的沖突,重點(diǎn)探究的是當(dāng)助教機(jī)器人對(duì)課堂上的學(xué)生討論進(jìn)行干預(yù)時(shí)教師是否認(rèn)為這種干預(yù)損害了學(xué)生自主學(xué)習(xí);第4個(gè)場(chǎng)景關(guān)注的是平等與包容的沖突,重點(diǎn)探究的是當(dāng)助教機(jī)器人對(duì)特需學(xué)生“一視同仁”時(shí)是否會(huì)引發(fā)包容性上的爭(zhēng)議。參與調(diào)查的教師需要分別針對(duì)4個(gè)場(chǎng)景給出自己的選擇并闡明原因。本研究將“小波”預(yù)設(shè)為一個(gè)自動(dòng)化程度較高且質(zhì)量較好的機(jī)器人,其預(yù)測(cè)的準(zhǔn)確度高且受到學(xué)生喜愛(ài),以此來(lái)增強(qiáng)倫理價(jià)值沖突的復(fù)雜程度。

    此外,由于每個(gè)場(chǎng)景都需要教師花費(fèi)時(shí)間和精力去理解和思考,因此本研究將4個(gè)場(chǎng)景都置于某所學(xué)校的初二某班期中考試之后的一周內(nèi)陸續(xù)發(fā)生,要求被試扮演班主任角色來(lái)選擇自己在這個(gè)情境下會(huì)作出的判斷和行動(dòng),以保持場(chǎng)景的連貫性,教師不需要在每讀一個(gè)新的場(chǎng)景時(shí)就去轉(zhuǎn)變自己的視角和角色,從而一定程度上規(guī)避故事背景、角色轉(zhuǎn)變等因素對(duì)倫理價(jià)值取向產(chǎn)生的未知影響。具體見(jiàn)表1。

    4研究發(fā)現(xiàn):教師對(duì)AIED的倫理價(jià)值取向

    本研究面向全國(guó)范圍內(nèi)的201位教師發(fā)放了調(diào)查問(wèn)卷,參與填寫(xiě)問(wèn)卷的被試是全國(guó)范圍內(nèi)主動(dòng)報(bào)名2022年度某個(gè)以教師專業(yè)發(fā)展為主題的工作坊的教師。問(wèn)卷以線上報(bào)名問(wèn)卷形式發(fā)放。在調(diào)查開(kāi)始前,研究者通過(guò)微信群通知詳細(xì)說(shuō)明了問(wèn)卷的填寫(xiě)方法和起始時(shí)間,并且說(shuō)明4道思想實(shí)驗(yàn)題是工作坊的熱身活動(dòng),避免教師不愿意閱讀長(zhǎng)段文字而隨便回答的情況,以提高數(shù)據(jù)回收的質(zhì)量。調(diào)查問(wèn)卷共包含5個(gè)部分:(1)基本人口學(xué)信息(包括姓名、年齡、學(xué)校、學(xué)段、學(xué)科、地區(qū));(2)工作坊相關(guān)信息(包括報(bào)名目的、分享意愿、參與合作研究意愿);(3)學(xué)校AIED部署情況(產(chǎn)品名稱、用途、使用頻率、教師期望);(4)對(duì)于AIED倫理問(wèn)題的擔(dān)憂程度排序;(5)基于4個(gè)虛構(gòu)場(chǎng)景的思想實(shí)驗(yàn)(教師行動(dòng)、背后原因)。

    被試教師涵蓋學(xué)前教育、基礎(chǔ)教育、高等教育、特殊教育、教師教育等領(lǐng)域,共回收問(wèn)卷201份,在對(duì)問(wèn)卷進(jìn)行有效性篩選后(刪除重復(fù)問(wèn)卷和測(cè)試問(wèn)卷共9份),獲得有效問(wèn)卷共計(jì)192份(見(jiàn)表2)。

    有70位教師(36.46%)表示目前學(xué)校里已經(jīng)部署了相關(guān)的AI產(chǎn)品,具體用途分布主要集中在輔助學(xué)習(xí)和教學(xué)方面,最多的是用在信息技術(shù)/人工智能/創(chuàng)客課堂教學(xué)中,較少用于學(xué)生心理疏導(dǎo)、校園安防等方面(見(jiàn)圖1)。

    4.1教師期望AIED承擔(dān)的角色

    問(wèn)卷中詢問(wèn)了教師是否支持學(xué)校進(jìn)一步部署AIED以及希望的應(yīng)用場(chǎng)景,以了解教師對(duì)于AIED的角色期望。通過(guò)NVivo12對(duì)本題的開(kāi)放式回答進(jìn)行編碼(見(jiàn)表3)。發(fā)現(xiàn)支持部署AIED的教師主要希望通過(guò)AI來(lái)支持學(xué)科教學(xué)、備課教研、學(xué)情監(jiān)測(cè),以減少重復(fù)勞動(dòng)或者幫助他們突破自身原有的困境。在“雙減”政策背景下,使用AI技術(shù)支持課后服務(wù)也成為一些教師的期望點(diǎn)??梢园l(fā)現(xiàn),教師并不期待AI替代他們完成教學(xué)任務(wù),而是更希望借助AI手段來(lái)提高自己的工作效率,使得他們能有更多的時(shí)間精力來(lái)改進(jìn)和創(chuàng)新自己的教學(xué)。而不支持未來(lái)部署AIED的教師觀點(diǎn)主要集中于3個(gè)方面:第一是因?yàn)閭€(gè)人對(duì)于AI的不了解、不習(xí)慣以及對(duì)于未來(lái)教育變革的不確定;第二是覺(jué)得AI具有局限性,而且可能會(huì)對(duì)學(xué)生學(xué)習(xí)造成干擾;第三是考慮到外部條件的有限性。

    4.2教師對(duì)AIED的倫理價(jià)值排序

    為考察教師的價(jià)值排序,問(wèn)卷要求教師按照他們對(duì)于AIED的風(fēng)險(xiǎn)擔(dān)憂程度進(jìn)行排序。問(wèn)卷中列舉了5項(xiàng)價(jià)值相關(guān)的風(fēng)險(xiǎn):自主(損害學(xué)生學(xué)習(xí)和教師教學(xué)的自主性)、公平(造成偏見(jiàn)、歧視或不公平)、隱私(侵犯數(shù)據(jù)隱私和安全)、福祉(對(duì)實(shí)現(xiàn)教育目標(biāo)沒(méi)有顯著效果)、可用(不容易掌握使用方法或用起來(lái)不方便)。從結(jié)果來(lái)看(見(jiàn)表4),教師的價(jià)值排序呈現(xiàn)出“隱私>自主>公平>福祉>可用”的特征,隱私成為教師普遍最擔(dān)憂的問(wèn)題。而可用是教師最不擔(dān)憂的問(wèn)題,這一方面可能是源于被試教師普遍在技術(shù)方面具有一定的素養(yǎng)和自信,另一方面也可能是因?yàn)樗麄儗?duì)于技術(shù)發(fā)展持相信態(tài)度。

    4.3教師對(duì)價(jià)值沖突的行動(dòng)決策

    4.3.1強(qiáng)調(diào)自主以化解準(zhǔn)確與透明的沖突

    根據(jù)結(jié)果顯示(見(jiàn)表5),在第1個(gè)思想實(shí)驗(yàn)中,絕大多數(shù)教師(91.2%)都選擇了參考小波的預(yù)測(cè),不會(huì)因?yàn)槠涓邷?zhǔn)確度就全然相信,也不會(huì)因?yàn)槠涞屯该鞫榷徊恍???梢园l(fā)現(xiàn)教師在教學(xué)中使用AI的時(shí)候主張要保持作出決策的自主性,不愿意讓AI代替自己作出某些決定。

    在第4個(gè)開(kāi)放選項(xiàng)中,教師大多都提出要用數(shù)據(jù)或其他證據(jù)來(lái)驗(yàn)證AI預(yù)測(cè),如找其他教師了解情況、調(diào)取學(xué)習(xí)數(shù)據(jù)進(jìn)行分析,幾位教師都提到自己會(huì)和王菲凡溝通交流來(lái)了解他近期是否經(jīng)歷了某些特殊事件或者遇到什么難處,以找出反常的原因??梢园l(fā)現(xiàn),AI在這個(gè)場(chǎng)景中對(duì)于教師的作用是給予一種提醒,教師會(huì)借助它的預(yù)測(cè)發(fā)現(xiàn)可能處于學(xué)習(xí)或生活困境的學(xué)生。在這種場(chǎng)景下,技術(shù)發(fā)現(xiàn)這個(gè)學(xué)生的過(guò)程顯得并不重要,因?yàn)榻處煵⒉粫?huì)完全聽(tīng)信系統(tǒng)預(yù)測(cè),而是會(huì)在實(shí)際工作中進(jìn)一步自行去檢驗(yàn)。因此,如果系統(tǒng)只是給教師提出建議,并不帶有任何的決策和行動(dòng)強(qiáng)制性,其實(shí)準(zhǔn)確和透明這兩項(xiàng)價(jià)值并非必要價(jià)值,而相較之下教師始終選擇保留的是自主價(jià)值。

    4.3.2愿意讓渡部分隱私以換取教育福祉

    第2個(gè)思想實(shí)驗(yàn)試圖探究的是實(shí)現(xiàn)教育福祉和隱私保護(hù)這兩項(xiàng)價(jià)值沖突下的教師取向。在這個(gè)場(chǎng)景下,不僅僅是常規(guī)的教學(xué)數(shù)據(jù)被收集,還涉及到學(xué)生和教師的個(gè)人敏感數(shù)據(jù)。結(jié)果顯示,多數(shù)教師(71.3%)都對(duì)于此類(lèi)數(shù)據(jù)收集表示理解,為了教育福祉的實(shí)現(xiàn)愿意一定程度上讓渡自己和學(xué)生的隱私(見(jiàn)表5)。這種傾向性也是因?yàn)槟壳皣?guó)內(nèi)學(xué)校的信息化建設(shè)逐漸成熟,數(shù)據(jù)收集成為常態(tài)。與排序題所得到的結(jié)果比較可以發(fā)現(xiàn),教師在隱私問(wèn)題上存在著矛盾的心態(tài):大多教師可以理解AI需要足夠的數(shù)據(jù)才能更加準(zhǔn)確,但隱私風(fēng)險(xiǎn)仍舊是教師擔(dān)心的首位。

    在開(kāi)放回答中,有教師呈現(xiàn)出矛盾的心理動(dòng)態(tài),如“既希望能通過(guò)采集數(shù)據(jù)使預(yù)判更精準(zhǔn)地為教學(xué)服務(wù),又擔(dān)心因?yàn)榇髷?shù)據(jù)大家沒(méi)有了隱私而被動(dòng)。”“既感慨技術(shù)可以利用數(shù)據(jù)分析預(yù)測(cè),又擔(dān)心隱私泄露,同時(shí)會(huì)懷疑量化分析扁平化豐富的內(nèi)在情感、心理等生命活動(dòng)?!币灿薪處熣宫F(xiàn)出對(duì)于AI角色的反思審視,如“技術(shù)是服務(wù)生活,技術(shù)不是罔顧法律、凌駕于生活。”“科技手段只能用作參考,不能太過(guò)依賴?!庇薪處熃ㄗh設(shè)立一定的限制或篩選機(jī)制,如根據(jù)實(shí)際需要選擇性地收集數(shù)據(jù)、要經(jīng)過(guò)學(xué)校和教師的同意等。如果學(xué)?;蛘咂髽I(yè)能夠提前將數(shù)據(jù)類(lèi)型、收集流程、審批過(guò)程進(jìn)行透明化公開(kāi)化的處理,來(lái)征得學(xué)校、師生和家長(zhǎng)等利益相關(guān)者的同意,允許他們質(zhì)疑、反對(duì)或退出,能夠更好地減少教師關(guān)于隱私問(wèn)題的困擾。

    4.3.3自主與公平內(nèi)部的平衡點(diǎn)存在分歧

    教師在第3個(gè)思想實(shí)驗(yàn)中出現(xiàn)了明顯的觀點(diǎn)分歧(見(jiàn)表5)。有30.7%的教師贊成小波作為助教應(yīng)當(dāng)及時(shí)糾正討論方向并引導(dǎo)學(xué)生參與討論,有55.7%的教師則認(rèn)為小波過(guò)多地干預(yù)學(xué)生討論,影響學(xué)生自主探索學(xué)習(xí)。說(shuō)明在自主與支持這兩項(xiàng)價(jià)值之間如何取得平衡尚不明確。這種分歧的形成與教師對(duì)于教學(xué)和技術(shù)的理解有關(guān)。當(dāng)教師更多地將助教機(jī)器人當(dāng)作“同事”般的教師角色時(shí),他們更多贊成小波的行為;而當(dāng)教師將助教機(jī)器人當(dāng)作“工具”時(shí),則傾向于認(rèn)為小波的行為越界。從開(kāi)放回答來(lái)看,與諸多學(xué)者所擔(dān)憂的“技術(shù)崇拜”相反,教師并沒(méi)有“神化”機(jī)器人,而是都能較為清楚地認(rèn)識(shí)到AI的功能限制,如“畢竟是虛擬人,不能用有問(wèn)題或者沒(méi)問(wèn)題來(lái)解釋”。在人機(jī)交互的過(guò)程中,教師始終強(qiáng)調(diào)人類(lèi)自身的自主性和能動(dòng)性,普遍不會(huì)將課堂完全交給機(jī)器人主導(dǎo),如“機(jī)器的判斷是根據(jù)大量數(shù)據(jù)而來(lái)的,它永遠(yuǎn)不能替代現(xiàn)實(shí)中教師充滿溫度的教學(xué)”。教師提出助教機(jī)器人在設(shè)計(jì)上應(yīng)當(dāng)增強(qiáng)人性化設(shè)計(jì)、豐富訓(xùn)練集、向教師及時(shí)反饋并允許教師干預(yù)等,在使用方面教師要積極地干預(yù),以避免學(xué)生在與技術(shù)的交互過(guò)程中受到傷害。

    同樣,教師在第4個(gè)思想實(shí)驗(yàn)中出現(xiàn)了明顯的觀點(diǎn)分歧(見(jiàn)表5)。除了有很小一部分教師(4.2%)在面臨這種沖突時(shí)選擇不再繼續(xù)使用小波之外,有將近一半的教師(42.2%)選擇以后仍舊會(huì)讓小波對(duì)每位學(xué)生進(jìn)行輔導(dǎo),還有27.1%的教師選擇以后會(huì)讓小波輔導(dǎo)除了張毅可之外的學(xué)生。前者所陳述的理由如“要平等,不能讓張毅可感到差別”“這個(gè)屬于正常情況,教師也會(huì)出現(xiàn)這種情況”“機(jī)器人需要適應(yīng)”“多接觸,多適應(yīng),就會(huì)有進(jìn)步”,說(shuō)明他們?cè)谶@種沖突下更傾向于用“一視同仁”來(lái)實(shí)現(xiàn)公平,并且愿意AI技術(shù)有更多的學(xué)習(xí)和自我優(yōu)化的機(jī)會(huì)。后者所陳述的理由如“特殊學(xué)生特殊對(duì)待”“因材施教”“因?yàn)閺堃憧杀旧砭褪且粋€(gè)有閱讀障礙的孩子,這時(shí)候就需要教師出馬解決個(gè)性化的問(wèn)題,給學(xué)生更多情感方面的關(guān)懷”“尊重學(xué)生個(gè)體差異”,說(shuō)明他們?cè)谶@種沖突下更傾向于為特殊學(xué)生群體提供差異化的支持來(lái)實(shí)現(xiàn)公平。還有26.5%的教師補(bǔ)充了其他做法,主要是通過(guò)建議改進(jìn)技術(shù)設(shè)計(jì)、增加教師干預(yù)、增強(qiáng)自己對(duì)技術(shù)的了解、改進(jìn)教學(xué)策略等方式來(lái)調(diào)適平等和包容之間的價(jià)值沖突。

    5總結(jié)

    本研究討論了教師倫理價(jià)值對(duì)于可信賴的AIED建設(shè)的重要作用,將思想實(shí)驗(yàn)作為探測(cè)教師倫理價(jià)值的創(chuàng)新手段,并以一項(xiàng)問(wèn)卷調(diào)查研究為例展示了如何設(shè)計(jì)相應(yīng)的工具來(lái)開(kāi)展實(shí)證研究,在研究視角、研究方法和研究發(fā)現(xiàn)等維度上為AIED的相關(guān)從業(yè)者開(kāi)展倫理實(shí)證研究提供了啟示。

    在研究視角方面,將教師的倫理價(jià)值作為切入點(diǎn)有助于深入剖析AIED的倫理困境。技術(shù)在人與世界的關(guān)系中起著中介作用,不但影響著人對(duì)外在世界的感知,還影響著人的行為方式[30],因此倫理困境是處于動(dòng)態(tài)之中的,隨著技術(shù)、情景、利益相關(guān)者的價(jià)值觀點(diǎn)與排序的變化而變化。AIED的相關(guān)從業(yè)者都應(yīng)當(dāng)深刻意識(shí)到這種動(dòng)態(tài)性,采用發(fā)展和包容的觀點(diǎn)來(lái)看待一項(xiàng)技術(shù)從設(shè)計(jì)到落地會(huì)經(jīng)歷的倫理困境。

    在研究方法方面,由于當(dāng)前AI在我國(guó)教育中的應(yīng)用還處于初步探索階段,很多潛在的倫理問(wèn)題尚未浮出水面。采用思想實(shí)驗(yàn)方法能夠前瞻性地關(guān)注到“利益相關(guān)者認(rèn)為怎么做是正確的”來(lái)探測(cè)出潛在的價(jià)值沖突,有助于及時(shí)采取價(jià)值敏感設(shè)計(jì)等方式提前規(guī)避倫理困境。本研究所開(kāi)發(fā)的4個(gè)虛擬場(chǎng)景也為AIED相關(guān)從業(yè)者在未來(lái)開(kāi)展類(lèi)似的實(shí)證研究提供了工具上的支持。

    在研究發(fā)現(xiàn)方面,問(wèn)卷調(diào)查結(jié)果顯示教師希望AI在教學(xué)中更多地承擔(dān)起提升教學(xué)效率的角色,幫助他們從日常繁瑣、重復(fù)性的工作中解脫出來(lái),能更多地致力于創(chuàng)造性的工作內(nèi)容,尤其強(qiáng)調(diào)保障教學(xué)中的自主性作為化解倫理價(jià)值沖突的手段。另外,也發(fā)現(xiàn)了教師們?cè)诙囗?xiàng)價(jià)值上體現(xiàn)出矛盾的觀點(diǎn)。本研究是采用思想實(shí)驗(yàn)對(duì)教師倫理價(jià)值的創(chuàng)新探索,通過(guò)問(wèn)卷形式只能部分探測(cè)到在助教機(jī)器人這一特定AIED應(yīng)用場(chǎng)景下的教師價(jià)值傾向,未來(lái)可以進(jìn)一步挖掘其他類(lèi)型的AIED應(yīng)用場(chǎng)景下的教師價(jià)值、影響教師倫理價(jià)值取向的具體因素,以及關(guān)于隱私、個(gè)性、公平等價(jià)值內(nèi)部的平衡點(diǎn),以更加深刻、全面地理解AIED的倫理維度。

    參考文獻(xiàn)

    [1] 孫濤,陳紅兵,劉煒.網(wǎng)絡(luò)技術(shù)異化的主體根源與重構(gòu)[J].東北大學(xué)學(xué)報(bào)(社會(huì)科學(xué)版),2013,15(5): 453-458.

    [2] LIN P,ABNEY K,JENKINS R.Robot ethics 2.0:from autonomous cars to artificial intelligence[M].Oxford:Oxford University Press,2017.

    [3] NAZARETSKY T,ARIELY M,CUKUROVA M,et al.Teachers′ trust in AI-powered educational technology and a professional development program to improve it[J].British journal of educational technology,2022,53(4): 914-931.

    [4] 謝娟,劉成新,張婷.我國(guó)教育技術(shù)研究之倫理缺位與分析[J].開(kāi)放教育研究,2014,20 (2): 26-33.

    [5] TIMMERMANS J,ZHAO Y,VAN DEN HOVEN J.Ethics and Nanopharmacy:value sensitive design of new drugs[J].NanoEthics,2011,5(3): 269-283.

    [6] AI HLEG.Ethics guidelines for trustworthy AI[EB/OL].(2019-04-08)[2022-10-24].https://digital-strategy.ec.europa.eu/en/library/ethics-guidelines-trustworthy-ai.

    [7] KITTO K,KNIGHT S.Practical ethics for building learning analytics[J].British Journal of Educational Technology,2019,50(6): 2855-2870.

    [8] FRIEDMAN B.Human values and the design of computer technology[M].Cambridge: Cambridge University Press,1997.

    [9] SLADE S,PRINSLOO P.Learning analytics:ethical issues and dilemmas[J].American Behavioral Scientist,SAGE Publications Inc,2013,57(10): 1510-1529.

    [10] FJELD J,ACHTEN N,HILLIGOSS H,et al.Principled artificial intelligence: mapping consensus in ethical and rights-based approaches to principles for AI [EB/OL].(2020-02-14)[2022-10-24].https://dash.harvard.edu/handle/1/42160420.

    [11] HAGENDORFF T.The ethics of AI ethics:an evaluation of guidelines[J].Minds and Machines,2020,30(1): 99-120.

    [12] JOBIN A,IENCA M,VAYENA E.The global landscape of AI ethics guidelines[J].Nature Machine Intelligence,2019(1): 389-399.

    [13] SCHIFF D,BORENSTEIN J,BIDDLE J,et al.AI ethics in the public,private,and NGO sectors:a review of a global document collection[J].IEEE Transactions on Technology and Society,2021,2(1): 31-42.

    [14] ZENG Y,LU E,HUANGFU C.Linking artificial intelligence principles [EB/OL].(2018-12-12)[2022-10-24].https://arxiv.org/abs/1812.04814.

    [15] BUZZELLI C,JOHNSTON B.Authority,power,and morality in classroom discourse[J].Teaching and teacher education,2001,17(8): 873-884.

    [16] COLNERUD G.Ethical conflicts in teaching[J].Teaching and Teacher Education,1997,13(6): 627-635.

    [17] COOPER R.Thought experiments[J].Metaphilosophy,2005,36(3): 328-347.

    [18] MACH E.Knowledge and error:sketches on the psychology of enquiry[M].Boston : Reidel,1975.

    [19] SKILLING K,STYLIANIDES G J.Using vignettes in educational research: a framework for vignette construction[J].International Journal of Research & Method in Education,Routledge,2020,43(5): 541-556.

    [20] TORRES S.Vignette methodology and culture-relevance: lessons learned through a project on successful aging with Iranian immigrants to Sweden[J].Journal of cross-cultural gerontology,Netherlands: 2009,24(1): 93-114.

    [21] STRIKE K,SOLTIS J F.The ethics of teaching,5th edition[M].New York:Teachers College Press,2015.

    [22] NORTON,J.Thought experiments in Einstein′s work[J].Thought experiments in science and philosophy,1991:129-144.

    [23] 白倩,于偉.馬修斯兒童哲學(xué)的要旨與用境——對(duì)兒童哲學(xué) “工具主義”的反思[J].全球教育展望,2017,46(12): 3-11.

    [24] HARRé R.The philosophies of science an introductory survey[M].Oxford:Oxford University Press,1972.

    [25] 李依貝.思想實(shí)驗(yàn)方法在倫理學(xué)研究中的應(yīng)用考察[J].長(zhǎng)春師范大學(xué)學(xué)報(bào),2014,33(7): 20-22.

    [26] 何懷宏.倫理學(xué)是什么[M].北京: 北京大學(xué)出版社,2021.

    [27] 李曄.事實(shí)與價(jià)值關(guān)系視域下的描述倫理學(xué)——描述倫理學(xué)的問(wèn)題及其視域[J].河南師范大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版),2003(5): 22-25.

    [28] AWAD E,DSOUZA S,KIM R,et al.The moral machine experiment[J].Nature,2018(563): 59-64.

    [29] Ryu H J,Kwak S S,Kim M S.A study on external form design factors for robots as elementary school teaching assistants[C]//RO-MAN 2007-The 16th IEEE International Symposium on Robot and Human Interactive Communication.IEEE,2007: 1046-1051.

    [30] 張衛(wèi),王前.道德可以被物化嗎?——維貝克“道德物化”思想評(píng)介[J].哲學(xué)動(dòng)態(tài),2013(3): 70-75.

    Research on teachers′ ethical value of Artificial Intelligence in education

    SHEN Yuan,WANG Qiong

    (Graduation School of Education,Peking University,Beijing 100871,China)

    AbstractWith the development of technology,the practice of using artificial intelligence to support teaching and management has become common at home and abroad,which has also triggered a lot of ethical issues.Taking the ethical value of teachers as the starting point,this paper proposes that thought experiment can be used as an innovative way to explore the ethical dilemma of applying artificial intelligence to education.Four thought experiments based on vignettes were developed,and teachers' ethical value orientation was explored through teacher questionnaires.The results show that teachers worry about privacy the most,generally hope that AI should be used as a tool for improving teaching instead of replacing human teacher.Also,teachers tend to stress human agency to resolve conflicts of accuracy and transparency,be willing to trade part of privacy for educational wellbeing and disagreement on the balance between autonomy and fairness are found in this research.

    Keywordsartificial intelligence in education; ethical value; thought experiment; value conflict; robot tutor

    [責(zé)任編輯劉冰]

    日日啪夜夜撸| 国产精品伦人一区二区| 国产日韩欧美亚洲二区| 十八禁网站网址无遮挡 | 大香蕉久久网| 亚洲精品久久久久久婷婷小说| xxx大片免费视频| av卡一久久| 国产精品国产三级国产专区5o| 精品亚洲成国产av| 国产精品一区二区三区四区免费观看| 国产精品福利在线免费观看| 成人特级av手机在线观看| 2021少妇久久久久久久久久久| 亚洲国产精品国产精品| av福利片在线观看| 黄片wwwwww| 国产男人的电影天堂91| 国模一区二区三区四区视频| 中文字幕亚洲精品专区| 欧美+日韩+精品| 寂寞人妻少妇视频99o| 亚洲美女视频黄频| 午夜福利视频精品| 特大巨黑吊av在线直播| 日韩在线高清观看一区二区三区| 亚洲精品亚洲一区二区| 婷婷色综合大香蕉| 精品午夜福利在线看| 嫩草影院入口| 99久久人妻综合| 午夜视频国产福利| 我的老师免费观看完整版| 日本wwww免费看| 97在线视频观看| 中文字幕精品免费在线观看视频 | 久久久久久久久大av| 啦啦啦中文免费视频观看日本| 国产精品久久久久久精品电影小说 | 熟妇人妻不卡中文字幕| 在线播放无遮挡| 亚洲精品aⅴ在线观看| 丰满人妻一区二区三区视频av| 六月丁香七月| 老女人水多毛片| 亚洲色图av天堂| 观看av在线不卡| 国产综合精华液| 国产乱来视频区| 国产精品国产av在线观看| 永久免费av网站大全| 日韩三级伦理在线观看| 国产精品嫩草影院av在线观看| 国产深夜福利视频在线观看| 国产av码专区亚洲av| 日韩制服骚丝袜av| 性色avwww在线观看| 亚洲精品一区蜜桃| 久久国产精品大桥未久av | 好男人视频免费观看在线| 午夜精品国产一区二区电影| 高清视频免费观看一区二区| 26uuu在线亚洲综合色| 最近中文字幕高清免费大全6| 啦啦啦啦在线视频资源| 99国产精品免费福利视频| 2022亚洲国产成人精品| 老女人水多毛片| 99精国产麻豆久久婷婷| 99热网站在线观看| 2021少妇久久久久久久久久久| 在线观看一区二区三区激情| 永久网站在线| 国产成人精品婷婷| 51国产日韩欧美| 国产在线男女| 久久99精品国语久久久| 久久 成人 亚洲| 久久精品国产亚洲av天美| 三级经典国产精品| 十分钟在线观看高清视频www | 在线免费观看不下载黄p国产| 成人美女网站在线观看视频| 亚洲av日韩在线播放| 大码成人一级视频| 成年人午夜在线观看视频| 亚洲精品456在线播放app| videos熟女内射| 三级经典国产精品| av又黄又爽大尺度在线免费看| 一区二区三区四区激情视频| 亚洲国产精品成人久久小说| 人人妻人人爽人人添夜夜欢视频 | 国产av码专区亚洲av| 各种免费的搞黄视频| 国精品久久久久久国模美| 午夜精品国产一区二区电影| 肉色欧美久久久久久久蜜桃| 免费av中文字幕在线| 亚洲人与动物交配视频| 80岁老熟妇乱子伦牲交| 国产午夜精品久久久久久一区二区三区| 激情 狠狠 欧美| a级毛色黄片| 亚洲精品一二三| 国产亚洲5aaaaa淫片| 偷拍熟女少妇极品色| 免费看av在线观看网站| 人妻制服诱惑在线中文字幕| 欧美bdsm另类| 插阴视频在线观看视频| 观看免费一级毛片| 久久精品人妻少妇| 一区二区三区四区激情视频| 99热这里只有是精品50| 男人舔奶头视频| 欧美性感艳星| 久久精品国产鲁丝片午夜精品| 夜夜看夜夜爽夜夜摸| 国产精品国产三级国产av玫瑰| av不卡在线播放| 精品一区二区三卡| 日本与韩国留学比较| 天美传媒精品一区二区| 精品亚洲成a人片在线观看 | 欧美丝袜亚洲另类| 久久av网站| 亚洲天堂av无毛| 高清不卡的av网站| 成人一区二区视频在线观看| 国产一区二区三区av在线| 啦啦啦中文免费视频观看日本| 精品亚洲乱码少妇综合久久| 国产爱豆传媒在线观看| 久久久久久久精品精品| 欧美丝袜亚洲另类| 国产有黄有色有爽视频| 我要看日韩黄色一级片| 国产久久久一区二区三区| 人体艺术视频欧美日本| 伦理电影免费视频| 18禁动态无遮挡网站| .国产精品久久| 亚洲一级一片aⅴ在线观看| 色婷婷久久久亚洲欧美| 在线精品无人区一区二区三 | 精品一区二区三卡| 3wmmmm亚洲av在线观看| 欧美日韩国产mv在线观看视频 | 18禁在线播放成人免费| 亚洲国产精品国产精品| 婷婷色麻豆天堂久久| 中国国产av一级| 蜜桃亚洲精品一区二区三区| 欧美区成人在线视频| 七月丁香在线播放| 97精品久久久久久久久久精品| 亚洲精华国产精华液的使用体验| www.色视频.com| 亚洲四区av| 欧美变态另类bdsm刘玥| 亚洲av成人精品一二三区| av不卡在线播放| 欧美老熟妇乱子伦牲交| 亚洲欧洲国产日韩| 97精品久久久久久久久久精品| 亚洲最大成人中文| 国产男人的电影天堂91| 欧美丝袜亚洲另类| 亚洲欧美精品自产自拍| 噜噜噜噜噜久久久久久91| 香蕉精品网在线| 一级毛片黄色毛片免费观看视频| 亚洲精品久久午夜乱码| 老女人水多毛片| 国产黄色免费在线视频| 六月丁香七月| 亚洲无线观看免费| 啦啦啦在线观看免费高清www| 在线免费十八禁| 18+在线观看网站| 亚洲精品,欧美精品| 久久午夜福利片| 免费人成在线观看视频色| 日韩一本色道免费dvd| 久久综合国产亚洲精品| 国产 一区 欧美 日韩| 亚洲av欧美aⅴ国产| 在线观看美女被高潮喷水网站| 新久久久久国产一级毛片| 亚洲av欧美aⅴ国产| 久久精品久久精品一区二区三区| 黄色欧美视频在线观看| 亚洲美女视频黄频| 韩国av在线不卡| 女人久久www免费人成看片| 日韩三级伦理在线观看| 亚洲人成网站在线播| 寂寞人妻少妇视频99o| 综合色丁香网| 男人添女人高潮全过程视频| 亚洲成人中文字幕在线播放| 下体分泌物呈黄色| 亚洲av二区三区四区| 大码成人一级视频| 九九爱精品视频在线观看| 久久久久久九九精品二区国产| 亚洲欧洲日产国产| 老司机影院成人| 国产精品国产av在线观看| 国产精品秋霞免费鲁丝片| 国产人妻一区二区三区在| 日韩国内少妇激情av| 777米奇影视久久| 久热久热在线精品观看| 男的添女的下面高潮视频| 91精品国产国语对白视频| 成人综合一区亚洲| 久久久成人免费电影| 亚洲人与动物交配视频| h日本视频在线播放| 欧美少妇被猛烈插入视频| 亚洲精品国产av蜜桃| 两个人的视频大全免费| 毛片一级片免费看久久久久| 日韩成人伦理影院| 一级片'在线观看视频| 国产一级毛片在线| 99视频精品全部免费 在线| 久久ye,这里只有精品| 中文字幕人妻熟人妻熟丝袜美| 久久久亚洲精品成人影院| 国产成人免费无遮挡视频| 一级毛片aaaaaa免费看小| 欧美日韩精品成人综合77777| 亚洲欧美中文字幕日韩二区| 欧美区成人在线视频| 欧美日韩视频高清一区二区三区二| 在线观看一区二区三区激情| 3wmmmm亚洲av在线观看| 久久精品国产亚洲网站| 高清黄色对白视频在线免费看 | 欧美极品一区二区三区四区| 国产精品偷伦视频观看了| 久久国内精品自在自线图片| 女人久久www免费人成看片| 国产精品爽爽va在线观看网站| 精品亚洲乱码少妇综合久久| 99热国产这里只有精品6| av女优亚洲男人天堂| 国产在线免费精品| 久久人人爽av亚洲精品天堂 | 成人漫画全彩无遮挡| 极品少妇高潮喷水抽搐| 街头女战士在线观看网站| 亚洲四区av| 国产精品.久久久| 我要看日韩黄色一级片| 久热这里只有精品99| 亚洲综合色惰| 欧美极品一区二区三区四区| 少妇人妻一区二区三区视频| 国产中年淑女户外野战色| 99精国产麻豆久久婷婷| 美女福利国产在线 | 国产男女内射视频| 国产日韩欧美亚洲二区| 五月伊人婷婷丁香| 国产精品久久久久久精品古装| 成人毛片a级毛片在线播放| 午夜福利视频精品| www.av在线官网国产| 日日撸夜夜添| 国产爽快片一区二区三区| 久久99精品国语久久久| 99热6这里只有精品| 国产男女超爽视频在线观看| 国产av国产精品国产| 国产在线男女| 夫妻午夜视频| 黄色欧美视频在线观看| 亚洲精品乱久久久久久| av在线app专区| 欧美精品一区二区免费开放| 99热这里只有是精品在线观看| 纵有疾风起免费观看全集完整版| 春色校园在线视频观看| 熟女电影av网| 欧美xxxx黑人xx丫x性爽| 免费看光身美女| 久久久精品94久久精品| 久久久精品免费免费高清| 少妇人妻 视频| 青春草国产在线视频| 国产免费一级a男人的天堂| 亚洲高清免费不卡视频| 人人妻人人澡人人爽人人夜夜| 欧美性感艳星| 国产毛片在线视频| 成人影院久久| 久久这里有精品视频免费| 一本色道久久久久久精品综合| 中文字幕亚洲精品专区| 少妇被粗大猛烈的视频| 久久精品久久久久久久性| 永久免费av网站大全| 一本久久精品| 亚洲成人av在线免费| 一二三四中文在线观看免费高清| 国产探花极品一区二区| 黑人猛操日本美女一级片| 国产免费又黄又爽又色| 黑人高潮一二区| 亚洲av在线观看美女高潮| 欧美日韩视频精品一区| 韩国av在线不卡| 91久久精品电影网| 熟女人妻精品中文字幕| 男女边摸边吃奶| 在现免费观看毛片| 成年美女黄网站色视频大全免费 | 视频中文字幕在线观看| 18+在线观看网站| 麻豆国产97在线/欧美| 最近最新中文字幕大全电影3| 久久久成人免费电影| 午夜精品国产一区二区电影| 又大又黄又爽视频免费| 中文字幕制服av| 久久99蜜桃精品久久| 最近2019中文字幕mv第一页| 久久热精品热| 亚洲欧美一区二区三区国产| 男人舔奶头视频| 国产精品99久久99久久久不卡 | 国产成人精品福利久久| 青青草视频在线视频观看| 亚洲精品一二三| 激情五月婷婷亚洲| 成年女人在线观看亚洲视频| 午夜激情久久久久久久| 成人综合一区亚洲| 日本猛色少妇xxxxx猛交久久| 国产色爽女视频免费观看| 亚洲怡红院男人天堂| 国产爽快片一区二区三区| 欧美bdsm另类| 久久精品国产a三级三级三级| 成人国产麻豆网| 国产v大片淫在线免费观看| 欧美日韩在线观看h| 少妇熟女欧美另类| 亚洲欧美精品专区久久| 97精品久久久久久久久久精品| 在线观看av片永久免费下载| 国产成人aa在线观看| 国产爱豆传媒在线观看| 亚洲精品第二区| 国产黄色免费在线视频| 欧美丝袜亚洲另类| 一区二区三区精品91| 亚洲精品第二区| 亚洲精品自拍成人| 国产黄色视频一区二区在线观看| 天天躁夜夜躁狠狠久久av| 欧美精品亚洲一区二区| 国产乱人视频| 亚洲精品第二区| freevideosex欧美| 少妇 在线观看| 亚洲精品乱码久久久久久按摩| 亚洲欧美中文字幕日韩二区| 久久久久久久久久人人人人人人| 视频中文字幕在线观看| 亚洲国产日韩一区二区| 青青草视频在线视频观看| 久久久久久久亚洲中文字幕| 久久国产乱子免费精品| 亚洲国产成人一精品久久久| 欧美xxxx黑人xx丫x性爽| 国产黄片美女视频| 一区二区三区乱码不卡18| 美女脱内裤让男人舔精品视频| 一级毛片我不卡| 亚洲色图av天堂| 久久午夜福利片| 美女脱内裤让男人舔精品视频| 一本久久精品| 天堂中文最新版在线下载| 久久久色成人| 在线看a的网站| 亚洲国产精品成人久久小说| 22中文网久久字幕| 最近的中文字幕免费完整| 在线观看av片永久免费下载| 国产精品一二三区在线看| 欧美精品一区二区免费开放| 久久久久久人妻| 亚洲国产精品专区欧美| 国产乱人偷精品视频| 日本vs欧美在线观看视频 | 亚洲欧美一区二区三区黑人 | 一个人免费看片子| 国产男人的电影天堂91| 国产精品国产av在线观看| 成人漫画全彩无遮挡| 99国产精品免费福利视频| 亚洲欧美日韩卡通动漫| 久久女婷五月综合色啪小说| 热99国产精品久久久久久7| 身体一侧抽搐| 狂野欧美激情性bbbbbb| 自拍偷自拍亚洲精品老妇| 99热6这里只有精品| 久久99蜜桃精品久久| 久热久热在线精品观看| 少妇人妻久久综合中文| 亚洲三级黄色毛片| 久久久久人妻精品一区果冻| 欧美激情国产日韩精品一区| 99久久综合免费| .国产精品久久| 高清欧美精品videossex| 亚洲精品aⅴ在线观看| 亚洲欧美日韩另类电影网站 | 久久久久国产精品人妻一区二区| 精品人妻视频免费看| 午夜精品国产一区二区电影| 亚洲一级一片aⅴ在线观看| 联通29元200g的流量卡| 狂野欧美激情性xxxx在线观看| 在线精品无人区一区二区三 | 男的添女的下面高潮视频| 久久人人爽人人片av| 免费观看a级毛片全部| 99久久人妻综合| 精品午夜福利在线看| 赤兔流量卡办理| 视频中文字幕在线观看| 国产男女超爽视频在线观看| 麻豆成人午夜福利视频| 亚洲美女黄色视频免费看| 晚上一个人看的免费电影| 视频区图区小说| 少妇精品久久久久久久| 亚洲国产欧美人成| 人人妻人人爽人人添夜夜欢视频 | 简卡轻食公司| 精品人妻视频免费看| 国产深夜福利视频在线观看| 一级片'在线观看视频| 亚洲精品一二三| 久久97久久精品| 99视频精品全部免费 在线| 亚洲国产精品成人久久小说| 欧美日韩在线观看h| 久久精品国产a三级三级三级| 亚洲一级一片aⅴ在线观看| 久久这里有精品视频免费| 久久人人爽av亚洲精品天堂 | 五月天丁香电影| 纵有疾风起免费观看全集完整版| 国产69精品久久久久777片| 最黄视频免费看| 精品人妻一区二区三区麻豆| 免费av中文字幕在线| 99re6热这里在线精品视频| 卡戴珊不雅视频在线播放| 人体艺术视频欧美日本| 最近的中文字幕免费完整| 观看av在线不卡| 国产亚洲av片在线观看秒播厂| 国产亚洲午夜精品一区二区久久| 日本黄色日本黄色录像| 性色avwww在线观看| 久久热精品热| 欧美极品一区二区三区四区| 777米奇影视久久| 亚洲国产精品999| 亚洲aⅴ乱码一区二区在线播放| 亚洲国产高清在线一区二区三| 少妇 在线观看| 国产一区二区在线观看日韩| 欧美一级a爱片免费观看看| 久久久久人妻精品一区果冻| av福利片在线观看| 黄色视频在线播放观看不卡| 黄片wwwwww| 国产日韩欧美在线精品| 超碰av人人做人人爽久久| 网址你懂的国产日韩在线| 国内精品宾馆在线| 黄片无遮挡物在线观看| 丝袜喷水一区| 国产精品女同一区二区软件| 久久久久久久久久人人人人人人| 51国产日韩欧美| 久久精品久久久久久噜噜老黄| 日本欧美视频一区| 成人18禁高潮啪啪吃奶动态图 | av在线老鸭窝| 深爱激情五月婷婷| 老司机影院毛片| 国产黄色视频一区二区在线观看| 又大又黄又爽视频免费| 精品一品国产午夜福利视频| 最近中文字幕高清免费大全6| 亚洲电影在线观看av| 久久精品夜色国产| 国产伦精品一区二区三区视频9| av专区在线播放| 高清不卡的av网站| 永久免费av网站大全| 蜜桃亚洲精品一区二区三区| 777米奇影视久久| 99re6热这里在线精品视频| 嫩草影院入口| 久久热精品热| 丝瓜视频免费看黄片| 国产精品欧美亚洲77777| 免费看光身美女| 在现免费观看毛片| 精华霜和精华液先用哪个| tube8黄色片| 成人18禁高潮啪啪吃奶动态图 | 最近最新中文字幕大全电影3| 我要看日韩黄色一级片| 久久国产精品大桥未久av | h视频一区二区三区| 校园人妻丝袜中文字幕| 日日摸夜夜添夜夜添av毛片| 欧美日韩国产mv在线观看视频 | 久久久久久久大尺度免费视频| 亚洲av福利一区| 亚洲,欧美,日韩| 亚洲va在线va天堂va国产| 亚洲精品自拍成人| 97在线人人人人妻| 成人漫画全彩无遮挡| 亚洲成人av在线免费| 国产亚洲精品久久久com| 久久久午夜欧美精品| 免费黄网站久久成人精品| 九色成人免费人妻av| 日本黄色日本黄色录像| 麻豆成人午夜福利视频| 久久久久精品久久久久真实原创| 在线观看免费视频网站a站| 91精品国产国语对白视频| 日韩一本色道免费dvd| 久久久久久久久久久丰满| 欧美精品国产亚洲| 99国产精品免费福利视频| 99久久精品国产国产毛片| 亚洲欧美精品专区久久| 国产色婷婷99| 在线观看美女被高潮喷水网站| 欧美xxⅹ黑人| 嘟嘟电影网在线观看| 一边亲一边摸免费视频| 国产在线视频一区二区| 久久久久网色| 日本wwww免费看| 久久毛片免费看一区二区三区| 成人无遮挡网站| 汤姆久久久久久久影院中文字幕| av黄色大香蕉| 国产精品三级大全| 精品酒店卫生间| 乱系列少妇在线播放| 亚洲欧美成人综合另类久久久| 久久久欧美国产精品| 亚洲精品国产av成人精品| 亚洲美女黄色视频免费看| 欧美97在线视频| 高清不卡的av网站| 亚洲精品自拍成人| av黄色大香蕉| 日本av手机在线免费观看| 国产av码专区亚洲av| 美女视频免费永久观看网站| 又粗又硬又长又爽又黄的视频| 亚洲色图av天堂| 麻豆精品久久久久久蜜桃| 少妇人妻久久综合中文| 国产精品99久久久久久久久| 老司机影院成人| 国产精品av视频在线免费观看| 午夜日本视频在线| 亚洲国产精品国产精品| 少妇裸体淫交视频免费看高清| 永久免费av网站大全| 99久久人妻综合| 久久综合国产亚洲精品| 日本黄大片高清| 热re99久久精品国产66热6| 777米奇影视久久| 一个人看的www免费观看视频| 麻豆乱淫一区二区| 最近最新中文字幕免费大全7| 国产精品99久久久久久久久| 男人爽女人下面视频在线观看| 最新中文字幕久久久久| 人人妻人人看人人澡| 大香蕉97超碰在线| 黄片wwwwww| 91精品一卡2卡3卡4卡| av不卡在线播放| 一区二区av电影网| 欧美老熟妇乱子伦牲交| 国内精品宾馆在线| 亚洲美女视频黄频| 伦精品一区二区三区| 亚洲国产精品成人久久小说| 色婷婷av一区二区三区视频|