• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    構(gòu)建可信賴機(jī)器翻譯系統(tǒng)的基本原則
    ——一種基于工程倫理的觀點(diǎn)

    2021-03-07 16:27:22張霄軍邵璐
    外國語文 2021年1期
    關(guān)鍵詞:譯文倫理人工智能

    張霄軍 邵璐

    (1.西交利物浦大學(xué) 翻譯系,江蘇 蘇州 215123;2. 中山大學(xué) 外國語學(xué)院,廣東 廣州 510275)

    0 問題的產(chǎn)生

    近年來,面對人工智能和機(jī)器翻譯所取得的突出進(jìn)步,尤其是神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯在機(jī)器翻譯譯文的可讀性方面大幅提高,這就使得高校翻譯專業(yè)不得不面對這樣一個問題:人工智能時代翻譯專業(yè)該怎么辦?其實(shí),這是一個市場“倒逼”的提問,比這個問題更加尖銳的問題是:翻譯專業(yè)會不會消亡?機(jī)器翻譯是否會取代人工翻譯?

    “機(jī)器翻譯與人工翻譯”的問題在2014年德國柏林召開的第20屆世界翻譯大會上得以顯化,該屆大會的主題就是“人工翻譯還是機(jī)器翻譯?翻譯工作者與術(shù)語學(xué)家的未來”(Man vs. Machine? The Future of Translators, Interpreters and Terminologists),自此拉開了翻譯研究技術(shù)轉(zhuǎn)向的序幕(張霄軍 等,2014)。之后機(jī)器翻譯甚囂塵上,翻譯“大事件”層出不窮,如百度機(jī)器翻譯2015年正式上線神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯系統(tǒng)并獲得國家科學(xué)技術(shù)進(jìn)步獎二等獎、谷歌于2016年發(fā)布神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯引擎、2017年微軟翻譯發(fā)布神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯系統(tǒng)、2018年博鰲論壇騰訊同傳登臺亮相、科大訊飛宣稱2019年其語音翻譯將達(dá)到“專業(yè)八級”水平,等等。然而,我們發(fā)現(xiàn),引領(lǐng)上述“大事件”的大都是機(jī)器翻譯公司或者人工智能企業(yè),韓林濤(2019)認(rèn)為由于商業(yè)炒作而產(chǎn)生的斷言“以偏概全、夸大事實(shí)”,但不得不承認(rèn)我們已經(jīng)來到一個“無技術(shù)不翻譯”的時代(任文,2019)。這也引發(fā)了學(xué)術(shù)界對該論題的憂思與爭論。蔡基剛(2020)認(rèn)為“隨著機(jī)器翻譯時代的到來,高校翻譯專業(yè)必然走向消亡”,他認(rèn)為“技術(shù)文本和政治文獻(xiàn)的機(jī)器翻譯替代人工翻譯在未來幾年就可以實(shí)現(xiàn)”;李長栓(2019)則認(rèn)為“要想通過機(jī)器翻譯,實(shí)現(xiàn)自然語言的處理,恐怕還有很長的路要走;也許永遠(yuǎn)沒有實(shí)現(xiàn)的一天”;祝朝偉(2018)直接斷言“機(jī)器取代人不過是不證自明的偽命題”。陳偉(2020)從機(jī)器翻譯對譯者主體性結(jié)構(gòu)說明“機(jī)器翻譯無法完全取代人工翻譯”;劉和平和梁爽(2019)則提出翻譯的教與學(xué)應(yīng)該“擁抱技術(shù)”,而不是畏懼和排斥技術(shù)。

    其實(shí),無論是“人工智能時代翻譯專業(yè)最終走向消亡”還是“機(jī)器翻譯會取代人工翻譯”,真正從事機(jī)器翻譯研發(fā)的科學(xué)家很少提出這樣的論斷。對于機(jī)器翻譯研發(fā)者而言,機(jī)器翻譯系統(tǒng)的開發(fā)與應(yīng)用是一項系統(tǒng)工程,任何未經(jīng)檢驗(yàn)的論斷都會涉及人工智能和機(jī)器翻譯技術(shù)的工程倫理問題。正如王華樹(2020)在回答《翻譯技術(shù)100問》中“機(jī)器翻譯是否會取代人類譯員?”這個問題時所言:“機(jī)器翻譯目前還存在著許多技術(shù)和倫理層面的問題,同時也給人類帶來了新的機(jī)遇?!蹦壳坝懻撊斯しg能否被“取代”為時尚早,我們應(yīng)該盡快厘清的是機(jī)器翻譯的工程倫理問題。

    1 人工智能和機(jī)器翻譯技術(shù)的工程倫理問題

    工程倫理是對在工程實(shí)踐中涉及的道德價值、問題和決策的研究(李世新,2010)。也就是研究如何開發(fā)對人類有用卻不會傷害人類的系統(tǒng),系統(tǒng)開發(fā)過程中如何保護(hù)隱私,如何確保系統(tǒng)安全性和魯棒性,等等。機(jī)器翻譯技術(shù)是用計算機(jī)來模擬人的翻譯能力,是人工智能技術(shù)的一個重要分支,兩者“本是同根生,在發(fā)展過程中幾經(jīng)浮沉,同甘苦共命運(yùn),它們之間存在著密切的聯(lián)系”(馮志偉,2018)。因此,人工智能從業(yè)者所面臨的工程倫理問題同時也是機(jī)器翻譯研發(fā)者所面臨的工程倫理問題,兩者并無二致。鑒于機(jī)器翻譯和人工智能在各自發(fā)展歷程中具有相似的特征以及人工智能專家和機(jī)器翻譯工程師在職業(yè)發(fā)展中的雷同性,我們將這兩者的工程倫理問題歸并到一起進(jìn)行討論。人工智能和機(jī)器翻譯技術(shù)的工程倫理指的是人工智能和機(jī)器翻譯系統(tǒng)或者產(chǎn)品在設(shè)計、研發(fā)過程中所產(chǎn)生的倫理問題。

    1.1 工程倫理的制度化建設(shè)問題

    在制度化建設(shè)方面,一個直接相關(guān)的就是職業(yè)注冊制度問題。人工智能行業(yè)從業(yè)者和機(jī)器翻譯研發(fā)者應(yīng)不應(yīng)該注冊某種職業(yè)資格,要獲得何種職業(yè)資格證,目前尚無討論。在美國和英國,目前推行的是職業(yè)工程師執(zhí)照制度,要求工程師申請職業(yè)工程師執(zhí)照(professional engineer,簡稱P.E.執(zhí)照)。在我國推行的是國家職業(yè)資格證書制度,規(guī)定“對從事技術(shù)復(fù)雜、通用性廣、涉及國家財產(chǎn)、人民生命安全和消費(fèi)者利益的職業(yè)(工種)的勞動者,必須經(jīng)過培訓(xùn),并取得職業(yè)資格證書后,方可就業(yè)上崗”。然而,在人力資源社會保障部印發(fā)的《關(guān)于公布國家職業(yè)資格目錄的通知》公布的140項國家職業(yè)資格目錄中,對人工智能從業(yè)者和機(jī)器翻譯研發(fā)者并無明確規(guī)定。這意味著大多數(shù)人工智能和機(jī)器翻譯工程師無法以可能會被吊銷資格證的方式來抵制參與不遵守倫理道德的行為。

    制度化建設(shè)的第二個方面是工程社團(tuán)和社團(tuán)倫理章程的制定。在促進(jìn)工程倫理的建設(shè)中,工程社團(tuán)應(yīng)起怎樣的作用?對此,學(xué)術(shù)界有不同的看法。比較一致的觀點(diǎn):(1)社團(tuán)是探討技術(shù)爭論和倫理紛爭的最好的場所;(2)職業(yè)社團(tuán)應(yīng)當(dāng)促進(jìn)而不是實(shí)施工程倫理建設(shè)。工程社團(tuán)通常會制定行業(yè)的倫理章程來確立工程師應(yīng)關(guān)注的主要的倫理領(lǐng)域。然而,對于章程的性質(zhì)和功能卻存在著爭議。中國人工智能學(xué)會、中國中文信息學(xué)會和中國翻譯協(xié)會是三個在民政部注冊的一級學(xué)會,也就是我國人工智能從業(yè)者和機(jī)器翻譯研發(fā)者賴以解決倫理紛爭和制定倫理章程的工程社團(tuán)。然而,對于并不隸屬于上述任何一家社團(tuán)的從業(yè)者,倫理章程所包含的標(biāo)準(zhǔn)、規(guī)則、原則和理念是否同樣適用呢?

    制度化建設(shè)的第三個方面是工程倫理教育問題,即工程倫理在學(xué)科體系中的地位問題,目前能夠達(dá)成共識的是工程倫理教育是工程教育的一部分。此外,馮志偉(2005)論證了自然語言處理是一個多邊緣的交叉學(xué)科,機(jī)器翻譯是自然語言處理的一個任務(wù)。那么人工智能和機(jī)器翻譯技術(shù)的工程倫理應(yīng)該納入工程學(xué)工科學(xué)科體系還是語言學(xué)/翻譯學(xué)文科學(xué)科體系?如何將工程倫理的內(nèi)容融入現(xiàn)有的教育體系中?有無開設(shè)相應(yīng)必修課或者選修課的必要,還是不單獨(dú)開設(shè)倫理課程而要求在授課內(nèi)容中包含倫理的內(nèi)容?

    1.2工程師的責(zé)任和義務(wù)問題

    20世紀(jì)70年代之前,大多數(shù)的工程倫理章程認(rèn)為,工程師的首要義務(wù)是對客戶或雇主的忠誠,而很少提到對公眾所承擔(dān)的義務(wù)。1974年,美國職業(yè)發(fā)展工程理事會(Engineering Council on Professional Development,ECPD)采用了一項新的倫理章程,該章程認(rèn)為,工程師的最高義務(wù)是公眾的健康、福祉與安全?,F(xiàn)在,幾乎所有的章程都把這一觀點(diǎn)視為工程師的首要義務(wù),并稱之為“首要條款”。當(dāng)工程師發(fā)現(xiàn)首要條款被違反時,舉報在道德上應(yīng)該是必需的,或至少是允許的。這其中當(dāng)然有商業(yè)利益的考量,利益沖突是近年來頗受關(guān)注的話題。某些職業(yè)利益會威脅一個人的職業(yè)判斷從而使其判斷變得不可靠,或者與人們所期待的相比變得不容易讓人們信服。盡管機(jī)器翻譯研發(fā)者不能確定其研發(fā)的系統(tǒng)能否實(shí)用,可一旦資本涌入想要商業(yè)化其系統(tǒng),很難有研發(fā)者拒絕如此豐厚的商業(yè)利潤,甚至?xí)橄到y(tǒng)商業(yè)化而沾沾自喜,并以此高估其系統(tǒng)性能。

    1.3工程活動與社會政策問題

    工程活動對環(huán)境的影響已得到普遍認(rèn)同,但對于工程師對環(huán)境是否應(yīng)承擔(dān)責(zé)任以及這種責(zé)任的基礎(chǔ)和范圍是什么,仍存爭議。其中一個核心問題是,是否只有當(dāng)人類的健康和福祉受到明顯威脅的時候接受對環(huán)境的責(zé)任才是充分的,或者說,是否應(yīng)該出自環(huán)境自身的原因而關(guān)注環(huán)境。人工智能和機(jī)器翻譯等信息技術(shù)產(chǎn)業(yè)看起來貌似是對環(huán)境不會產(chǎn)生太大影響的綠色產(chǎn)業(yè),然而隨著人們駕馭信息技術(shù)能力的增強(qiáng)和公眾對人工智能產(chǎn)品的依賴,人類賴以生存的生態(tài)環(huán)境、工作環(huán)境和家庭環(huán)境都在發(fā)生深刻的變化。以機(jī)器翻譯為例,隨著語音識別技術(shù)和機(jī)器翻譯質(zhì)量的提高,一種全新的會議口譯新模式正在形成。新模式下,口譯員更加“隱身”,取而代之的要么是口譯員語音即時轉(zhuǎn)寫后以字幕的形式投射到會場的大屏幕上或者聽眾席的小屏幕上,要么是發(fā)言者語音即時轉(zhuǎn)寫后經(jīng)機(jī)器翻譯將翻譯結(jié)果以字幕的形式投射到屏幕上。這就需要給會場增加投影和屏幕,聽眾席上也要增加可視設(shè)備,如此會議口譯會場的生態(tài)環(huán)境就會發(fā)生了改變。隨著5G網(wǎng)絡(luò)的普及,互聯(lián)網(wǎng)數(shù)據(jù)傳輸?shù)娜萘吭絹碓酱?,傳輸速度越來越快,這就使得遠(yuǎn)程即時翻譯,尤其是遠(yuǎn)程口譯成為現(xiàn)實(shí),口譯員的工作環(huán)境發(fā)生變化。借助自動口譯設(shè)備和機(jī)器翻譯系統(tǒng),不同國度交流越來越便利,國際家庭的組建也越來越多,家庭成員之間的溝通也越來越依賴自動口譯設(shè)備,家庭環(huán)境也在悄然發(fā)生變化。同時,人工智能驅(qū)動翻譯模式轉(zhuǎn)向眾包,基于網(wǎng)絡(luò)的眾包翻譯模式的興起也“重寫”了翻譯倫理。上述因機(jī)器翻譯技術(shù)而發(fā)生變化所帶來的環(huán)境倫理問題鮮有討論。

    馬丁(M. W. Martin)和欣津格(R. Schinzinger)認(rèn)為工程是一種“社會實(shí)驗(yàn)”,這種實(shí)驗(yàn)給“實(shí)驗(yàn)”的對象(公眾)帶來了一定的風(fēng)險(李世新,2010)。然而,什么是可接受的風(fēng)險?誰來確定這種風(fēng)險?翻譯客戶能否接受機(jī)器翻譯系統(tǒng)所產(chǎn)生的譯文?在多大程度上采用機(jī)器的譯文?機(jī)器翻譯譯文質(zhì)量到底如何?如果因機(jī)器翻譯的譯文質(zhì)量造成了交際失誤或者交易失敗,機(jī)器翻譯譯文提供者和機(jī)器翻譯譯文使用者誰該承擔(dān)主要責(zé)任?供應(yīng)商傾向于功利主義,通過可能性的產(chǎn)物和傷害的大小來定義風(fēng)險,他們認(rèn)為,如果潛在的收益超過了潛在的危害,那么這種風(fēng)險就是可接受的。但是,公眾卻試圖將可接受風(fēng)險、自由和知情同意以及風(fēng)險和收益的合理分配聯(lián)系起來。在這種實(shí)驗(yàn)性的社會活動中,工程師們又該如何去確定和規(guī)避實(shí)驗(yàn)風(fēng)險?

    工程活動是一種職業(yè)行為,什么樣的職業(yè)行為是社會所期待和所信賴的?我們之所以會向醫(yī)生毫無隱瞞地坦陳病情是因?yàn)槲覀冃刨囜t(yī)生;我們之所以會心安理得地住在高樓大廈中是因?yàn)槲覀冃刨嚱ㄔ旃こ處?。那么,公眾會像信賴醫(yī)生和建造師那樣信賴人工智能產(chǎn)品和機(jī)器翻譯系統(tǒng)嗎?怎樣的職業(yè)倫理準(zhǔn)則才能滿足(或符合)這種社會所給予的信賴呢?對社會而言的職業(yè)信賴對于建設(shè)和諧社會是必不可少的。遺憾的是,這些問題至今尚未得到充分研究。

    2 人工智能技術(shù)的倫理原則

    2018年6月7日,谷歌(Google)發(fā)布了七條人工智能應(yīng)用的“倫理原則”(1)https:∥ai.google/principles.,包括:(1)對社會有益(Be socially beneficial);(2)避免制造或強(qiáng)加不公平的偏見 (Avoid creating or reinforcing unfair bias);(3)提前測試安全性(Be built and tested for safety);(4)對人類負(fù)責(zé)(Be accountable to people);(5)保證隱私(Incorporate privacy design principles);(6)堅持科學(xué)高標(biāo)準(zhǔn)(Uphold high standards of scientific excellence);(7)從主要用途、技術(shù)獨(dú)特性發(fā)展(Be made available for uses that accord with these principles)。

    無獨(dú)有偶,2019年4月8日,歐盟委員會發(fā)布了《可信賴人工智能的倫理準(zhǔn)則》(EthicsGuidelinesforTrustworthyAI)(2)https:∥ec.europa.eu/digital-single-market/en/news/ethics-guidelines-trustworthy-ai.,報告提出了四項倫理準(zhǔn)則:

    (1)尊重人的自主性(Respect for human autonomy)。人工智能系統(tǒng)不應(yīng)該脅迫、欺騙和操縱人類。相反,人工智能系統(tǒng)的設(shè)計應(yīng)該以增強(qiáng)、補(bǔ)充人類的認(rèn)知、社會和文化技能為目的。人類和人工智能系統(tǒng)之間的功能分配應(yīng)遵循以人為中心的設(shè)計原則,而且人工智能系統(tǒng)的工作過程中要確保人的監(jiān)督。人工智能系統(tǒng)也可能從根本上改變工作領(lǐng)域。它應(yīng)該在工作環(huán)境中支持人類并致力于創(chuàng)造有意義的工作。

    (2)預(yù)防傷害(Prevention of harm)。人工智能系統(tǒng)不應(yīng)該引發(fā)、加重傷害,或?qū)θ祟惍a(chǎn)生不好的影響。因此需要保護(hù)人類的尊嚴(yán)和身心健康。人工智能系統(tǒng)和運(yùn)行的環(huán)境必須是安全的。因此要求技術(shù)上必須是魯棒的,而且要確保人工智能技術(shù)不會被惡意使用。尤其要注意可能會惡意使用該技術(shù)的人和可能會造成不良影響的應(yīng)用場景。

    (3)公平性(Fairness)。人工智能系統(tǒng)的開發(fā)、實(shí)現(xiàn)和應(yīng)用必須是公平的。雖然對公平性可能會有不同的解讀,但是應(yīng)當(dāng)確保個人和組織不會受到不公平的偏見、歧視等。如果人工智能系統(tǒng)可以避免不公平的偏見,就可以增加社會公平性。為此,人工智能系統(tǒng)做出的決策以及做決策的過程應(yīng)該是可解釋的。

    (4)可解釋性(Explicability)??山忉屝詫?gòu)建用戶對人工智能系統(tǒng)的信任非常關(guān)鍵。也就是說整個決策的過程、輸入和輸出的關(guān)系都應(yīng)該是可解釋的。但目前的人工智能算法和模型都是以黑盒(black box)的形式運(yùn)行。

    谷歌公司和歐盟委員會發(fā)布的上述人工智能倫理準(zhǔn)則為突飛猛進(jìn)的機(jī)器翻譯技術(shù)發(fā)展提供了工程倫理借鑒?;诖?,我們總結(jié)了實(shí)現(xiàn)可信賴的機(jī)器翻譯系統(tǒng)的七個關(guān)鍵原則。

    3 可信賴的機(jī)器翻譯系統(tǒng)的七個原則

    3.1人本性(Human Centricity)

    人工智能系統(tǒng)應(yīng)通過支持人的能動性和基本權(quán)利以實(shí)現(xiàn)公平社會,而不是減少、限制或錯誤地指導(dǎo)人類自治。機(jī)器翻譯也不可以脫離人的監(jiān)督直接去實(shí)現(xiàn)語碼自由轉(zhuǎn)換。事實(shí)上,ALPAC報告之后,機(jī)器翻譯研究已經(jīng)放棄了“全自動高質(zhì)量機(jī)器翻譯(Fully Automatic High Quality Machine Translation, FAHQMT)”的企圖,轉(zhuǎn)而向“人助機(jī)譯(Human-aided Machine Translation, HAMT)”或“機(jī)助人譯(Machine-aided Human Translation, MAHT)”方向發(fā)展。近年來,隨著統(tǒng)計機(jī)器學(xué)習(xí)和深度學(xué)習(xí)技術(shù)在機(jī)器翻譯中的廣泛應(yīng)用,系統(tǒng)運(yùn)算能力的增強(qiáng)和訓(xùn)練語料的不斷豐富,機(jī)器翻譯質(zhì)量得到了大幅提升,“機(jī)器翻譯替代人工翻譯”的論斷才有了傳播的基礎(chǔ)。然而,此類武斷的說法大多來自市場宣傳而非出自系統(tǒng)研發(fā)人員之口,但普通用戶并不知其所以然,所以在一定程度上迷惑了消費(fèi)者,造成大眾對機(jī)器翻譯不切實(shí)際的期望,產(chǎn)生了不良后果。人類的監(jiān)督可以幫助確保機(jī)器翻譯系統(tǒng)不影響人類自主或產(chǎn)生不良后果。監(jiān)督可以通過不同的管理機(jī)制來實(shí)現(xiàn),包括human-in-the-loop(HITL)、human-on-the-loop(HOTL)、human-in-command(HIC)等方法(3)人機(jī)協(xié)同的方式,按照機(jī)器的自主權(quán)限從低到高,分為“人在環(huán)中(in the loop)”“人在環(huán)上(on the loop)”“人在環(huán)外(in command)”三種。。根據(jù)機(jī)器翻譯系統(tǒng)應(yīng)用領(lǐng)域和潛在的風(fēng)險,可以實(shí)現(xiàn)不同程度的監(jiān)督機(jī)制以支持不同的安全和控制措施。

    3.2魯棒性 (Robustness)

    可信賴的人工智能系統(tǒng)的關(guān)鍵部分就是技術(shù)魯棒性,這與歐盟委員會發(fā)布的《可信賴人工智能的倫理準(zhǔn)則》中的預(yù)防傷害原則是緊密相關(guān)的。技術(shù)魯棒性要求算法足夠安全、可靠和穩(wěn)健,以克服人工智能系統(tǒng)所有生命周期階段的錯誤或者不一致。機(jī)器翻譯系統(tǒng)應(yīng)該防止被黑客攻擊或出現(xiàn)可以被攻擊的漏洞。黑客攻擊可能是針對翻譯或者語言模型的、也可能是針對訓(xùn)練數(shù)據(jù)的、也可能是針對底層基礎(chǔ)設(shè)施的,包括軟件和硬件。如果機(jī)器翻譯系統(tǒng)被攻擊,其中的數(shù)據(jù)和系統(tǒng)行為可能會被修改,導(dǎo)致系統(tǒng)產(chǎn)生不同的翻譯結(jié)果。機(jī)器翻譯系統(tǒng)應(yīng)該有出現(xiàn)緊急情況的備用方案——機(jī)器翻譯系統(tǒng)可能從基于統(tǒng)計的決策轉(zhuǎn)為基于規(guī)則的決策,或者要求詢問人工譯員才可以繼續(xù)(計算機(jī)輔助翻譯或者交互式機(jī)器翻譯),必須保證系統(tǒng)所做的一切都不會對用戶造成傷害。良好的機(jī)器翻譯系統(tǒng)開發(fā)和譯文質(zhì)量評估過程可以支持、緩解和糾正出現(xiàn)不準(zhǔn)確的機(jī)器譯文及其所帶來的潛在風(fēng)險。如果偶爾不準(zhǔn)確的譯文不可避免,那么系統(tǒng)應(yīng)該要能計算這種錯誤情況發(fā)生的概率。在可能會對人類生命安全帶來影響的機(jī)器翻譯系統(tǒng)中,譯文準(zhǔn)確度的要求是非常重要的,比如在衛(wèi)生健康領(lǐng)域和刑事司法領(lǐng)域的應(yīng)用。

    3.3私密性(Confidentiality)

    人工智能系統(tǒng)必須確保系統(tǒng)的整個生命周期內(nèi)部都要確保隱私和數(shù)據(jù)保護(hù),這既包括用戶提供的信息,也包括用戶在和系統(tǒng)交互過程中生成的信息。用于機(jī)器翻譯系統(tǒng)訓(xùn)練和測試所用的數(shù)據(jù)不會被用來傷害或歧視數(shù)據(jù)的所有者和用戶,同時要確保收集的數(shù)據(jù)不會用于非法地或不公平地歧視用戶的行為。訓(xùn)練語料(數(shù)據(jù)集)的質(zhì)量對機(jī)器翻譯系統(tǒng)的性能非常關(guān)鍵(劉群,2003),但特定機(jī)器翻譯系統(tǒng)開發(fā)(如對話機(jī)器翻譯)收集的數(shù)據(jù)可能是含有偏見的、不準(zhǔn)確的、有錯誤的。這些數(shù)據(jù)在訓(xùn)練之前要進(jìn)行清洗,去除這些有偏見的、不準(zhǔn)確的、有錯誤的數(shù)據(jù),但同時又要確保數(shù)據(jù)的完整性,如在對話機(jī)器翻譯系統(tǒng)中,就要完整保留說話者信息(Wang et al., 2017)。如果說話者信息必須保密,那就需要對語料進(jìn)行脫敏處理,比如用特定標(biāo)記標(biāo)注說話者信息等。如果給機(jī)器翻譯系統(tǒng)的訓(xùn)練數(shù)據(jù)是低質(zhì)量的甚至是惡意的,就可能會改變機(jī)器翻譯系統(tǒng)的整體性能。因此,在規(guī)劃、訓(xùn)練、測試和實(shí)現(xiàn)的整個過程中都要對數(shù)據(jù)集進(jìn)行測試和處理。系統(tǒng)在處理數(shù)據(jù)時,都會用到管理數(shù)據(jù)訪問的數(shù)據(jù)協(xié)議,該協(xié)議應(yīng)該列出誰以及什么情況下可以訪問數(shù)據(jù)。

    3.4可解釋性(Explicability)

    人工智能系統(tǒng)應(yīng)確保相關(guān)元素的可追溯性,包括數(shù)據(jù)、系統(tǒng)和商業(yè)模型。因此,機(jī)器翻譯系統(tǒng)產(chǎn)生決策使用的數(shù)據(jù)集和過程也都應(yīng)該記錄下來以備追溯,并且應(yīng)增加透明性,具體包括收集的數(shù)據(jù)和算法使用的數(shù)據(jù)標(biāo)記??勺匪菪栽跈C(jī)器翻譯系統(tǒng)中通常被稱為可解釋性??山忉屝跃褪且忉寵C(jī)器翻譯系統(tǒng)的技術(shù)過程和相關(guān)的決策過程。技術(shù)可解釋性要求機(jī)器翻譯所產(chǎn)生的譯文是可以被人們所理解的。在機(jī)器翻譯系統(tǒng)會對人類的生活造成重大影響時,就需要機(jī)器翻譯系統(tǒng)的決策過程有一個合理的解釋。此外,人類有權(quán)知道與其直接進(jìn)行對外交流的是譯員還是機(jī)器翻譯系統(tǒng),這就要求機(jī)器翻譯系統(tǒng)可以被識別。出現(xiàn)譯文質(zhì)量糾紛時,要能明確權(quán)責(zé),讓客戶知曉誰該為翻譯服務(wù)負(fù)責(zé),誰又該為譯文質(zhì)量負(fù)責(zé)。

    3.5公平性 (Fairness)

    人工智能系統(tǒng)應(yīng)考慮人類能力、技能和要求的總體范圍,并確??山咏?。該要素與歐盟委員會發(fā)布的《可信賴人工智能的倫理準(zhǔn)則》中的公平性原則是緊密相關(guān)的。因此,機(jī)器翻譯系統(tǒng)所使用的數(shù)據(jù)集會不可避免地存在歧視、不完整和管理不當(dāng)?shù)葐栴}。這類數(shù)據(jù)集的歧視可能會造成機(jī)器翻譯系統(tǒng)的針對特定人群或個人的歧視。機(jī)器翻譯系統(tǒng)開發(fā)的方式也可能會出現(xiàn)不公平的歧視問題,可以通過一種明確的、透明的方式來分析和解決系統(tǒng)的目的、局限性、需求和決策。尤其在垂直領(lǐng)域,機(jī)器翻譯系統(tǒng)可能是以用戶為中心的,以一種允許所有人都平等地使用機(jī)器翻譯產(chǎn)品和服務(wù)的方式,即無論年齡、性別、能力和其他特征,因此針對殘障人士的輔助功能就顯得格外重要,特別是在口語機(jī)器翻譯系統(tǒng)研發(fā)中。因此,機(jī)器翻譯系統(tǒng)的設(shè)計不應(yīng)該采用一種通用的設(shè)計,為了開發(fā)出可信賴的機(jī)器翻譯系統(tǒng),建議對受系統(tǒng)直接或間接影響的利益相關(guān)方進(jìn)行咨詢。

    3.6可復(fù)現(xiàn)性(Replicability)

    可復(fù)現(xiàn)性指人工智能專家要能夠準(zhǔn)確地描述人工智能系統(tǒng)的行為和公開實(shí)驗(yàn)方法、算法和數(shù)據(jù),方便其他人工智能研發(fā)者進(jìn)行驗(yàn)證和再次實(shí)現(xiàn)。人工智能系統(tǒng)的結(jié)果必須是可復(fù)現(xiàn)的和可靠的,要對人工智能系統(tǒng)進(jìn)行詳細(xì)檢查以防產(chǎn)生意外。機(jī)器翻譯系統(tǒng)的復(fù)現(xiàn)依賴譯文評價機(jī)制和系統(tǒng)代碼與數(shù)據(jù)開源情況。評價可分為人工評價和機(jī)器自動評價,前者可解釋性強(qiáng)但耗時費(fèi)力花錢,后者快速方便但可解釋性較差。如何設(shè)計和開發(fā)一個客觀科學(xué)的機(jī)器翻譯譯文評價系統(tǒng)是目前制約機(jī)器翻譯發(fā)展的一個瓶頸。系統(tǒng)代碼和數(shù)據(jù)開源在機(jī)器翻譯研究中做得相對成熟,Github(4)https:∥github.com/.等平臺為代碼和數(shù)據(jù)開源提供了足夠的空間,arxiv(5)https:∥arxiv.org/.等網(wǎng)站為科研產(chǎn)出評價和共享提供了共享和同行評審的平臺。同行評審包括對研究算法、數(shù)據(jù)和設(shè)計過程的評估,也包括對研究實(shí)驗(yàn)的復(fù)現(xiàn)結(jié)果。

    3.7可持續(xù)性 (Sustainability)

    人工智能系統(tǒng)具有積極促進(jìn)社會變革、增強(qiáng)可持續(xù)性生態(tài)之責(zé)任。一般情況下,人工智能系統(tǒng)大都是為了解決一些迫在眉睫的社會難題,同時又要保證盡可能以環(huán)境友好型的方式出現(xiàn)。因此,機(jī)器翻譯系統(tǒng)的開發(fā)、實(shí)現(xiàn)和使用過程,以及整個供應(yīng)鏈都應(yīng)該進(jìn)行這方面的評估。同時,機(jī)器翻譯系統(tǒng)在社會生活各領(lǐng)域的應(yīng)用,可能會改變我們對社會機(jī)構(gòu)的理解,影響我們的社會關(guān)系。機(jī)器翻譯在增強(qiáng)我們的社交技能的同時,可能也會減弱我們的社交技能,會對人們的身心健康帶來影響。機(jī)器翻譯在翻譯教學(xué)和二語寫作教學(xué)領(lǐng)域也會產(chǎn)生爭議,并日漸影響學(xué)生的翻譯和寫作習(xí)慣。同時要考慮評估機(jī)器翻譯應(yīng)用對民生、社會的影響,因?yàn)闄C(jī)器翻譯系統(tǒng)極有可能應(yīng)用于政治決策和外交內(nèi)聯(lián)等的政治進(jìn)程之中(傅瑩,2019)。

    4 結(jié)語

    技術(shù)可以被理解為廣義的技術(shù)——一種旨在控制自然(和人類)的方法,這種方法奠基于一套嚴(yán)格、客觀中立的方法之上,將所處理的對象一律視為僵化的客體。然而,我們不能簡單地拒絕現(xiàn)代技術(shù)。首先這是不可能的,我們已然生活在現(xiàn)代技術(shù)之中,我們對生活的理解都深深地涉及技術(shù)。其次,這也是不可逆的,因?yàn)榉艞壖夹g(shù)意味著放棄技術(shù)為我們帶來的巨大福利。我們需要的首先是發(fā)展技術(shù),其次是遏制技術(shù)的發(fā)展。如何遏制?這就需要倫理學(xué)的規(guī)范和約束。工程倫理學(xué)的產(chǎn)生促進(jìn)了安全和有用的技術(shù)產(chǎn)品并給工程師的努力賦予意義,也直接地增強(qiáng)工程師在工程中有效地處理道德問題復(fù)雜性的能力,增進(jìn)工程師的道德自治,即理性地思考以道德關(guān)注為基礎(chǔ)的倫理問題之習(xí)俗與技能。越來越多的技術(shù)研究者和應(yīng)用者,尤其是人工智能技術(shù)應(yīng)用領(lǐng)域的專家開始意識到倫理的重要性。谷歌公司和歐盟委員會發(fā)布的準(zhǔn)則就是負(fù)責(zé)任的人工智能產(chǎn)業(yè)代表和有擔(dān)當(dāng)?shù)恼块T對此發(fā)出的積極響應(yīng)。在學(xué)術(shù)界,斯普林格出版社(Springer-Verlag)正在編輯出版“工程技術(shù)哲學(xué)”系列叢書(SeriesofPhilosophyofEngineeringandTechnology),目前已出版《技術(shù)的規(guī)范》(NormsinTechnology)、《技術(shù)為善》(DoingGoodwithTechnologies)等32部著作(6)https:∥www.springer.com/series/8657?detailsPage=titles.。在自然語言處理領(lǐng)域、技術(shù)倫理和工程倫理的探討也逐步深入。目前已經(jīng)連續(xù)召開了兩屆以“自然語言處理的倫理”(Ethics in Natural Language Processing,EthNLP)為主題的國際研討會,第一屆2017年在西班牙瓦倫西亞召開(7)http:∥www.ethicsinnlp.org/ethnlp-2017.,第二屆2018年在美國新奧爾良市召開(8)http:∥www.ethicsinnlp.org/.。

    在國內(nèi),對機(jī)器翻譯的過度宣傳一方面引發(fā)了行業(yè)對這一技術(shù)應(yīng)用的憂思,另一方面也催生了一些學(xué)者對機(jī)器翻譯技術(shù)倫理學(xué)的探討。討論人工翻譯能不能被機(jī)器翻譯所取代的基礎(chǔ)是機(jī)器翻譯的工程倫理,如果沒有厘清機(jī)器翻譯的技術(shù)和工程倫理的框架,任何與之相關(guān)的斷言都是不可信的。2018年在北京召開的“首屆語言智能與社會發(fā)展論壇”上,與會專家集體通過了《語言智能與外語教育協(xié)同發(fā)展宣言》。宣言稱:“機(jī)器翻譯等語言智能技術(shù)的發(fā)展和實(shí)踐,不應(yīng)也不可能謀求全面替代人類的外語能力,在公共宣傳、科普演示中,語言智能學(xué)界和產(chǎn)業(yè)界應(yīng)當(dāng)實(shí)事求是地報告語言智能的發(fā)展現(xiàn)實(shí),不夸大語言智能技術(shù)的現(xiàn)有性能,不做缺乏科學(xué)依據(jù)的展望,不能對人類的外語工作造成恐慌,不能對人類的外語事業(yè)規(guī)劃造成形勢誤判。”因此我們也呼吁更多的仁人志士加入機(jī)器翻譯/翻譯技術(shù)倫理探討之中,期盼語言智能界、倫理學(xué)界及社會有關(guān)學(xué)界能成立“語言智能倫理委員會”,保證語言智能在符合人類倫理的框架內(nèi)發(fā)展。

    猜你喜歡
    譯文倫理人工智能
    《心之死》的趣味與倫理焦慮
    Stem cell-based 3D brain organoids for mimicking,investigating,and challenging Alzheimer’s diseases
    譯文摘要
    護(hù)生眼中的倫理修養(yǎng)
    活力(2019年19期)2020-01-06 07:37:00
    2019:人工智能
    商界(2019年12期)2019-01-03 06:59:05
    人工智能與就業(yè)
    數(shù)讀人工智能
    小康(2017年16期)2017-06-07 09:00:59
    I Like Thinking
    下一幕,人工智能!
    醫(yī)改莫忘構(gòu)建倫理新機(jī)制
    熟女电影av网| 成年免费大片在线观看| 两性夫妻黄色片| 亚洲一卡2卡3卡4卡5卡精品中文| 三级毛片av免费| 亚洲成国产人片在线观看| 国内久久婷婷六月综合欲色啪| 亚洲av成人一区二区三| 亚洲人成网站在线播放欧美日韩| 午夜免费成人在线视频| 日韩精品免费视频一区二区三区| 久久久久久大精品| 1024视频免费在线观看| 禁无遮挡网站| 在线av久久热| 校园春色视频在线观看| 国内精品久久久久精免费| 少妇熟女aⅴ在线视频| 亚洲av五月六月丁香网| 国内少妇人妻偷人精品xxx网站 | 国内毛片毛片毛片毛片毛片| 欧美激情高清一区二区三区| 国产高清有码在线观看视频 | 天堂√8在线中文| 国产精品爽爽va在线观看网站 | 成年免费大片在线观看| 一本精品99久久精品77| 国产久久久一区二区三区| 国产亚洲精品综合一区在线观看 | 人人妻人人看人人澡| 亚洲中文日韩欧美视频| 国产高清videossex| 久久午夜综合久久蜜桃| 欧美乱码精品一区二区三区| 激情在线观看视频在线高清| 不卡一级毛片| 97人妻精品一区二区三区麻豆 | 欧美日韩乱码在线| 18禁美女被吸乳视频| 免费在线观看黄色视频的| 高潮久久久久久久久久久不卡| 中文亚洲av片在线观看爽| 色综合亚洲欧美另类图片| 免费女性裸体啪啪无遮挡网站| 欧美在线一区亚洲| videosex国产| 午夜免费观看网址| av在线天堂中文字幕| 日韩av在线大香蕉| 国产成人影院久久av| 国产亚洲av嫩草精品影院| 丝袜人妻中文字幕| 免费在线观看亚洲国产| 性欧美人与动物交配| 午夜久久久在线观看| 久久伊人香网站| 久久青草综合色| 亚洲一区二区三区不卡视频| 亚洲专区国产一区二区| 大型黄色视频在线免费观看| 久久国产乱子伦精品免费另类| ponron亚洲| 国产精品99久久99久久久不卡| 手机成人av网站| 国产精品99久久99久久久不卡| 久热爱精品视频在线9| 久久精品人妻少妇| 午夜福利一区二区在线看| 国内毛片毛片毛片毛片毛片| 欧美激情高清一区二区三区| av视频在线观看入口| 色播亚洲综合网| 淫秽高清视频在线观看| 久久中文字幕一级| 久久久久国内视频| 久久久久九九精品影院| 亚洲精品久久国产高清桃花| 一本一本综合久久| 精品欧美国产一区二区三| 黄色片一级片一级黄色片| 美女 人体艺术 gogo| 操出白浆在线播放| 中亚洲国语对白在线视频| 亚洲精品一区av在线观看| 白带黄色成豆腐渣| 黄色丝袜av网址大全| 成人18禁在线播放| 亚洲中文日韩欧美视频| 黑人巨大精品欧美一区二区mp4| 此物有八面人人有两片| 国产视频一区二区在线看| 一区二区三区激情视频| 国产精品1区2区在线观看.| 女同久久另类99精品国产91| 久久久久免费精品人妻一区二区 | 男女那种视频在线观看| 一级作爱视频免费观看| 日韩大码丰满熟妇| 精品欧美国产一区二区三| 99热6这里只有精品| 黑人欧美特级aaaaaa片| 老司机深夜福利视频在线观看| 国产亚洲av高清不卡| 欧美又色又爽又黄视频| 99re在线观看精品视频| 男人舔女人下体高潮全视频| 国产一卡二卡三卡精品| 中文字幕另类日韩欧美亚洲嫩草| 91国产中文字幕| 国产v大片淫在线免费观看| 可以在线观看毛片的网站| 一二三四在线观看免费中文在| 人人妻人人澡欧美一区二区| 亚洲男人天堂网一区| 日本a在线网址| 午夜老司机福利片| 亚洲欧洲精品一区二区精品久久久| 日本熟妇午夜| 国产精品二区激情视频| 欧美黄色淫秽网站| 少妇熟女aⅴ在线视频| 久久精品aⅴ一区二区三区四区| 又大又爽又粗| 黑人操中国人逼视频| 欧美av亚洲av综合av国产av| 免费观看人在逋| 亚洲精品国产一区二区精华液| av免费在线观看网站| 99精品欧美一区二区三区四区| 欧美日韩福利视频一区二区| 日本熟妇午夜| www.999成人在线观看| 国产麻豆成人av免费视频| 久久久久免费精品人妻一区二区 | 午夜福利在线观看吧| 成人18禁高潮啪啪吃奶动态图| 久久婷婷成人综合色麻豆| or卡值多少钱| 伦理电影免费视频| 99国产极品粉嫩在线观看| 搡老妇女老女人老熟妇| 50天的宝宝边吃奶边哭怎么回事| 亚洲欧美日韩无卡精品| 制服诱惑二区| 不卡av一区二区三区| 国产av一区二区精品久久| 两性夫妻黄色片| 人人妻人人看人人澡| 18禁黄网站禁片免费观看直播| 中亚洲国语对白在线视频| 人妻丰满熟妇av一区二区三区| 波多野结衣高清无吗| 成人午夜高清在线视频 | 亚洲精品国产精品久久久不卡| 亚洲免费av在线视频| 国产精品一区二区精品视频观看| 99热只有精品国产| 首页视频小说图片口味搜索| 色老头精品视频在线观看| 亚洲av美国av| 久久久久国产一级毛片高清牌| 亚洲五月色婷婷综合| 久久精品影院6| 亚洲免费av在线视频| 国产精品一区二区精品视频观看| or卡值多少钱| 两个人看的免费小视频| 美女大奶头视频| 久久精品成人免费网站| 欧美乱码精品一区二区三区| 亚洲精品色激情综合| 99久久精品国产亚洲精品| 手机成人av网站| 十八禁网站免费在线| 亚洲欧美激情综合另类| 久久精品91蜜桃| 久久久久久大精品| 久久国产精品人妻蜜桃| 国产精品久久久av美女十八| a在线观看视频网站| 亚洲中文日韩欧美视频| 亚洲,欧美精品.| 日韩一卡2卡3卡4卡2021年| 老熟妇乱子伦视频在线观看| a级毛片a级免费在线| 法律面前人人平等表现在哪些方面| 亚洲精品在线美女| 69av精品久久久久久| 中文字幕久久专区| 国产真人三级小视频在线观看| 久久久久久久精品吃奶| 色综合婷婷激情| 国产精品香港三级国产av潘金莲| 午夜老司机福利片| 亚洲精品在线美女| 一个人观看的视频www高清免费观看 | 日韩免费av在线播放| 日本a在线网址| 国内精品久久久久精免费| 人人妻人人澡欧美一区二区| 国产av又大| 搞女人的毛片| 视频区欧美日本亚洲| 欧洲精品卡2卡3卡4卡5卡区| 人人妻人人澡欧美一区二区| 久久久国产成人免费| 国产免费男女视频| 久久久国产精品麻豆| 亚洲av电影不卡..在线观看| 亚洲av成人不卡在线观看播放网| 国产成人精品无人区| 免费在线观看日本一区| 国产又色又爽无遮挡免费看| 非洲黑人性xxxx精品又粗又长| 精品福利观看| 黄色视频,在线免费观看| 高清在线国产一区| 国产一区在线观看成人免费| aaaaa片日本免费| 久久香蕉精品热| 久久人妻福利社区极品人妻图片| 国产成人啪精品午夜网站| 久久久久国产精品人妻aⅴ院| 亚洲欧美一区二区三区黑人| 可以在线观看的亚洲视频| 婷婷亚洲欧美| 极品教师在线免费播放| 国产精品野战在线观看| 深夜精品福利| 成人18禁在线播放| 亚洲美女黄片视频| 久99久视频精品免费| 国产精品一区二区精品视频观看| 一个人免费在线观看的高清视频| 国产精品一区二区免费欧美| 久久精品国产亚洲av香蕉五月| 老司机午夜十八禁免费视频| 亚洲国产欧美日韩在线播放| 久久久久国内视频| 老熟妇乱子伦视频在线观看| 性色av乱码一区二区三区2| 一级毛片女人18水好多| 国产一卡二卡三卡精品| 亚洲国产中文字幕在线视频| 亚洲国产精品sss在线观看| 麻豆国产av国片精品| 色老头精品视频在线观看| av有码第一页| 欧美久久黑人一区二区| 黄色女人牲交| 成人亚洲精品av一区二区| 欧美+亚洲+日韩+国产| www.www免费av| 亚洲自偷自拍图片 自拍| 久久精品影院6| 法律面前人人平等表现在哪些方面| 此物有八面人人有两片| 中文字幕人妻熟女乱码| 国产一级毛片七仙女欲春2 | 亚洲一区二区三区色噜噜| 中文字幕另类日韩欧美亚洲嫩草| 精品卡一卡二卡四卡免费| 免费电影在线观看免费观看| 国产激情久久老熟女| 嫩草影视91久久| 18禁裸乳无遮挡免费网站照片 | 成人免费观看视频高清| 人人澡人人妻人| 精品国产一区二区三区四区第35| 欧美丝袜亚洲另类 | 国产精品1区2区在线观看.| 国产精品自产拍在线观看55亚洲| 脱女人内裤的视频| 免费av毛片视频| 十分钟在线观看高清视频www| 悠悠久久av| 久久精品成人免费网站| 国产精品99久久99久久久不卡| 叶爱在线成人免费视频播放| 可以在线观看毛片的网站| 香蕉av资源在线| 欧美成人免费av一区二区三区| 此物有八面人人有两片| 18禁黄网站禁片午夜丰满| 日韩中文字幕欧美一区二区| а√天堂www在线а√下载| 看黄色毛片网站| 国产精品二区激情视频| 欧美久久黑人一区二区| 免费电影在线观看免费观看| 国产高清videossex| 巨乳人妻的诱惑在线观看| 黄色片一级片一级黄色片| 一区二区三区激情视频| 国产成人影院久久av| 色老头精品视频在线观看| 国产精品av久久久久免费| 免费在线观看日本一区| 一二三四社区在线视频社区8| 免费看日本二区| 韩国精品一区二区三区| 99精品久久久久人妻精品| 亚洲三区欧美一区| 久久精品91无色码中文字幕| 岛国在线观看网站| av视频在线观看入口| 欧美乱码精品一区二区三区| 亚洲狠狠婷婷综合久久图片| 中文字幕高清在线视频| 欧美日韩中文字幕国产精品一区二区三区| 精品国内亚洲2022精品成人| 99精品欧美一区二区三区四区| 在线播放国产精品三级| 精品国产美女av久久久久小说| 精品午夜福利视频在线观看一区| 国产又爽黄色视频| 久久精品国产99精品国产亚洲性色| 97碰自拍视频| 女警被强在线播放| 亚洲专区中文字幕在线| 欧美日韩福利视频一区二区| 18禁观看日本| 三级毛片av免费| 99久久久亚洲精品蜜臀av| 禁无遮挡网站| 妹子高潮喷水视频| 男人操女人黄网站| 亚洲精品国产区一区二| 99在线视频只有这里精品首页| 亚洲三区欧美一区| 中国美女看黄片| 精品福利观看| 欧美成人一区二区免费高清观看 | 搡老熟女国产l中国老女人| 国产精品日韩av在线免费观看| 欧美一级a爱片免费观看看 | bbb黄色大片| 麻豆久久精品国产亚洲av| 男人的好看免费观看在线视频 | 国产私拍福利视频在线观看| 中文字幕最新亚洲高清| 国产精品,欧美在线| 亚洲国产精品久久男人天堂| 他把我摸到了高潮在线观看| 制服人妻中文乱码| 国产精品,欧美在线| 亚洲欧洲精品一区二区精品久久久| 一区二区日韩欧美中文字幕| 国内久久婷婷六月综合欲色啪| 久久婷婷人人爽人人干人人爱| 人妻久久中文字幕网| 日本色播在线视频| 国产高清三级在线| 亚洲成人中文字幕在线播放| 毛片女人毛片| 午夜福利在线观看免费完整高清在 | 男人的好看免费观看在线视频| 亚洲成人av在线免费| 夜夜爽天天搞| 国产高清不卡午夜福利| 最近手机中文字幕大全| 国产极品精品免费视频能看的| 禁无遮挡网站| 国产女主播在线喷水免费视频网站 | 99久久成人亚洲精品观看| 精品国产三级普通话版| 国内久久婷婷六月综合欲色啪| 婷婷六月久久综合丁香| 国产av一区在线观看免费| 国产伦精品一区二区三区视频9| 一卡2卡三卡四卡精品乱码亚洲| 国产一区二区在线观看日韩| 欧美国产日韩亚洲一区| 亚洲一级一片aⅴ在线观看| 老师上课跳d突然被开到最大视频| 日韩制服骚丝袜av| 十八禁国产超污无遮挡网站| 国产精品一区二区三区四区久久| 国产精品野战在线观看| 亚洲最大成人av| 18+在线观看网站| 亚洲精品国产成人久久av| 成人精品一区二区免费| 美女xxoo啪啪120秒动态图| 国产成人一区二区在线| 最近中文字幕高清免费大全6| 欧美人与善性xxx| 国产一区亚洲一区在线观看| 又爽又黄无遮挡网站| 亚洲经典国产精华液单| 色综合站精品国产| 国产91av在线免费观看| 22中文网久久字幕| av卡一久久| 国产亚洲精品综合一区在线观看| 国产成人91sexporn| 在线看三级毛片| 你懂的网址亚洲精品在线观看 | 亚洲欧美日韩东京热| 精品一区二区免费观看| 韩国av在线不卡| 插逼视频在线观看| 欧美日韩乱码在线| 人妻丰满熟妇av一区二区三区| 国内揄拍国产精品人妻在线| 日本撒尿小便嘘嘘汇集6| 中文亚洲av片在线观看爽| 免费观看人在逋| 国产av麻豆久久久久久久| 国产欧美日韩精品亚洲av| 亚洲丝袜综合中文字幕| 欧美性感艳星| 色综合色国产| 午夜福利视频1000在线观看| 老熟妇仑乱视频hdxx| 久久精品夜色国产| 国产 一区精品| 午夜福利成人在线免费观看| av免费在线看不卡| 一边摸一边抽搐一进一小说| 国产伦一二天堂av在线观看| 一个人观看的视频www高清免费观看| 婷婷精品国产亚洲av| 男人的好看免费观看在线视频| 人妻夜夜爽99麻豆av| 国产美女午夜福利| 成人三级黄色视频| 欧美国产日韩亚洲一区| 免费高清视频大片| 欧美高清成人免费视频www| 免费观看人在逋| 国产精品一区二区三区四区免费观看 | 啦啦啦韩国在线观看视频| 国产一区二区亚洲精品在线观看| 亚洲国产日韩欧美精品在线观看| 亚洲aⅴ乱码一区二区在线播放| av天堂中文字幕网| 久久久午夜欧美精品| 国产日本99.免费观看| 日本色播在线视频| 日韩欧美国产在线观看| 色哟哟·www| 色5月婷婷丁香| а√天堂www在线а√下载| .国产精品久久| 给我免费播放毛片高清在线观看| 精品人妻偷拍中文字幕| 老司机午夜福利在线观看视频| 日本 av在线| 别揉我奶头 嗯啊视频| 国产成年人精品一区二区| 99久久精品一区二区三区| 美女xxoo啪啪120秒动态图| 黄色一级大片看看| 给我免费播放毛片高清在线观看| 神马国产精品三级电影在线观看| 成熟少妇高潮喷水视频| 亚洲精品色激情综合| 小蜜桃在线观看免费完整版高清| 狠狠狠狠99中文字幕| 国产精品亚洲一级av第二区| 久99久视频精品免费| 久久人人精品亚洲av| 在线免费观看不下载黄p国产| 国产精品综合久久久久久久免费| 亚洲国产精品成人久久小说 | 丝袜美腿在线中文| 欧美一级a爱片免费观看看| 一进一出好大好爽视频| 免费看av在线观看网站| 人妻夜夜爽99麻豆av| 欧美成人一区二区免费高清观看| 亚洲,欧美,日韩| 丰满乱子伦码专区| 国内精品久久久久精免费| www.色视频.com| 内地一区二区视频在线| 97人妻精品一区二区三区麻豆| 最近的中文字幕免费完整| 我的老师免费观看完整版| 99久久精品国产国产毛片| 成人亚洲欧美一区二区av| 18禁在线无遮挡免费观看视频 | 69人妻影院| 亚洲无线观看免费| 听说在线观看完整版免费高清| 18+在线观看网站| a级毛片a级免费在线| 精品一区二区三区av网在线观看| 我的女老师完整版在线观看| av黄色大香蕉| 久久99热这里只有精品18| 欧美高清性xxxxhd video| 亚洲欧美成人综合另类久久久 | 在线观看美女被高潮喷水网站| 免费看光身美女| 俺也久久电影网| 波多野结衣高清无吗| 国产精品国产高清国产av| 午夜福利视频1000在线观看| av在线观看视频网站免费| 日本在线视频免费播放| 色综合站精品国产| 网址你懂的国产日韩在线| 国产精品嫩草影院av在线观看| 最好的美女福利视频网| 级片在线观看| 最近视频中文字幕2019在线8| 老熟妇乱子伦视频在线观看| 成人av在线播放网站| 精华霜和精华液先用哪个| 丝袜喷水一区| 超碰av人人做人人爽久久| 亚洲人成网站在线播放欧美日韩| 在线看三级毛片| 国产成人91sexporn| 久久久久久久久中文| 色播亚洲综合网| 91久久精品电影网| 校园春色视频在线观看| 日本精品一区二区三区蜜桃| 精品一区二区三区av网在线观看| 一个人免费在线观看电影| av.在线天堂| a级毛色黄片| 久久久久久伊人网av| 波多野结衣巨乳人妻| 一个人免费在线观看电影| 白带黄色成豆腐渣| 99久国产av精品国产电影| 亚洲欧美日韩无卡精品| 成人美女网站在线观看视频| 一级毛片久久久久久久久女| 中文亚洲av片在线观看爽| 人妻少妇偷人精品九色| 久久精品国产自在天天线| 99热精品在线国产| 色播亚洲综合网| 大型黄色视频在线免费观看| 国内久久婷婷六月综合欲色啪| 久久久精品94久久精品| 变态另类成人亚洲欧美熟女| 久久久久性生活片| 久久中文看片网| 色5月婷婷丁香| 免费观看的影片在线观看| 欧美日韩在线观看h| 亚洲在线观看片| 中国国产av一级| 黄色配什么色好看| 毛片一级片免费看久久久久| 久久精品人妻少妇| 在线播放国产精品三级| 成人漫画全彩无遮挡| 亚洲电影在线观看av| 一级av片app| 亚洲熟妇中文字幕五十中出| 久久精品国产亚洲av涩爱 | 级片在线观看| 一级毛片久久久久久久久女| 日本黄大片高清| 午夜福利成人在线免费观看| 97在线视频观看| 日本成人三级电影网站| 97超级碰碰碰精品色视频在线观看| 高清日韩中文字幕在线| 国产精品亚洲美女久久久| 男人和女人高潮做爰伦理| 国产不卡一卡二| 少妇的逼水好多| 一个人观看的视频www高清免费观看| 欧美区成人在线视频| 久久久国产成人免费| 婷婷精品国产亚洲av在线| 人妻久久中文字幕网| 国产精品电影一区二区三区| 丰满的人妻完整版| 久久久a久久爽久久v久久| 久久久久久久久久黄片| 亚洲欧美日韩高清在线视频| 露出奶头的视频| 全区人妻精品视频| 如何舔出高潮| 欧美性猛交黑人性爽| 欧美区成人在线视频| 男人狂女人下面高潮的视频| 亚洲精品粉嫩美女一区| 日本成人三级电影网站| 免费在线观看成人毛片| 欧美日韩精品成人综合77777| 久久久久久久久久久丰满| 看非洲黑人一级黄片| 超碰av人人做人人爽久久| 黄色配什么色好看| 丝袜美腿在线中文| 国产精品久久久久久久电影| 熟女人妻精品中文字幕| 深夜a级毛片| 蜜桃久久精品国产亚洲av| 免费av毛片视频| 国产精品野战在线观看| 成年女人永久免费观看视频| 国产精品国产高清国产av| 99在线视频只有这里精品首页| 国产精品无大码| av在线老鸭窝| 舔av片在线| 欧美最新免费一区二区三区| 国产精品美女特级片免费视频播放器| av国产免费在线观看| 亚洲人成网站高清观看| 综合色av麻豆| 国产精品国产高清国产av| 给我免费播放毛片高清在线观看| 亚洲精品亚洲一区二区|