• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    機(jī)器翻譯錯(cuò)誤分析研究綜述

    2023-12-25 09:19:30裘白蓮
    關(guān)鍵詞:譯文人工錯(cuò)誤

    裘白蓮

    (華東交通大學(xué) 外國語學(xué)院,南昌 330013)

    一、引言

    近年來,隨著神經(jīng)機(jī)器翻譯(Neural Machine Translation,NMT)性能極大提升,機(jī)器翻譯從相對邊緣的地位逐漸成為翻譯研究中的熱點(diǎn)。為了解機(jī)器翻譯系統(tǒng)的性能,評估機(jī)器翻譯在多大程度上可用,需要對機(jī)器翻譯譯文質(zhì)量進(jìn)行評估。機(jī)器翻譯質(zhì)量評價(jià)主要有人工評價(jià)和自動(dòng)評價(jià)兩種方法。人工評價(jià)一般采用打分和排序的方法。自動(dòng)評價(jià)是使用自動(dòng)評價(jià)指標(biāo)對機(jī)器譯文進(jìn)行評價(jià),一般需要有參考譯文。也有不需要參考譯文的自動(dòng)評價(jià)方法,即機(jī)器翻譯質(zhì)量估計(jì),近年來有不少研究。常用的自動(dòng)評價(jià)指標(biāo)包括基于n元文法準(zhǔn)確率的BLEU、基于一元文法準(zhǔn)確率召回率和額外語言知識(shí)的METEOR、基于編輯距離的TER等。人工評價(jià)的優(yōu)點(diǎn)是準(zhǔn)確性好,但人力和時(shí)間成本較高,周期較長,不易獲得,不利于研究人員快速了解機(jī)器翻譯系統(tǒng)修改后質(zhì)量變化情況;此外,人工評價(jià)還存在評價(jià)者一致性不高的問題。自動(dòng)評價(jià)的優(yōu)點(diǎn)是速度快、成本低,但其準(zhǔn)確性依賴于參考譯文的質(zhì)量。

    人工評價(jià)和自動(dòng)評價(jià)都很重要,都為機(jī)器翻譯系統(tǒng)提供了有用的信息,幫助系統(tǒng)持續(xù)改善,但其都只是對機(jī)器翻譯系統(tǒng)的整體表現(xiàn)做整體評價(jià),無法反映機(jī)器翻譯系統(tǒng)存在的具體問題,無法提供機(jī)器譯文中不同錯(cuò)誤類型和錯(cuò)誤性質(zhì)等的具體信息。而這些信息對于了解和改善機(jī)器翻譯系統(tǒng)大有裨益。要了解這些信息,就需要進(jìn)行機(jī)器翻譯錯(cuò)誤分析。錯(cuò)誤分析可以找到機(jī)器翻譯系統(tǒng)存在的具體問題,了解其不足與短板,為其改進(jìn)找準(zhǔn)方向。近十幾年來,機(jī)器翻譯錯(cuò)誤分析在國外機(jī)器翻譯研究領(lǐng)域受到重視,出現(xiàn)很多相關(guān)研究。本文通過搜集和梳理自然語言處理、機(jī)器翻譯等相關(guān)領(lǐng)域的期刊和會(huì)議論文,介紹錯(cuò)誤分析相關(guān)研究的進(jìn)展情況。機(jī)器翻譯研究成果往往在相關(guān)國際會(huì)議上發(fā)表,主要包括ACL、EMNLP、WMT、EAMT、AMTA、LREC等。本文搜集的文獻(xiàn)主要來源于這些會(huì)議以及其他相關(guān)期刊。本文擬從以下三方面介紹錯(cuò)誤分析相關(guān)研究:錯(cuò)誤分類框架、自動(dòng)錯(cuò)誤標(biāo)注、錯(cuò)誤分析應(yīng)用。

    二、錯(cuò)誤分類

    錯(cuò)誤分析起源于20世紀(jì)60年代中介語相關(guān)研究,主要應(yīng)用于分析學(xué)習(xí)者語言,研究內(nèi)容包括錯(cuò)誤的分類、錯(cuò)誤的描述和解釋、錯(cuò)誤產(chǎn)生的原因等。在機(jī)器翻譯研究領(lǐng)域中,錯(cuò)誤分析指的是識(shí)別機(jī)器譯文中的錯(cuò)誤并對錯(cuò)誤進(jìn)行分類。

    錯(cuò)誤分析的過程一般包括定義錯(cuò)誤類型,識(shí)別錯(cuò)誤并進(jìn)行錯(cuò)誤標(biāo)注,依據(jù)錯(cuò)誤標(biāo)注結(jié)果進(jìn)行分析。定義錯(cuò)誤類型并不容易,原因在于:錯(cuò)誤類型需要反映機(jī)器翻譯系統(tǒng)的優(yōu)缺點(diǎn);需要考慮語言對,不同語言對機(jī)器翻譯的錯(cuò)誤類型有很大不同;錯(cuò)誤分類的粒度問題也很重要,粒度越細(xì),提供的信息越多,但細(xì)粒度錯(cuò)誤類型也更難區(qū)分;最后,錯(cuò)誤類型既要覆蓋語言層面的問題,又要覆蓋翻譯層面的問題。在錯(cuò)誤分類方面,研究者做了很多嘗試,定義了不同的錯(cuò)誤類型。以往的研究中,錯(cuò)誤分類主要基于三種方法:基于詞級別對比的分類、基于語言學(xué)知識(shí)的分類和基于譯后編輯操作的分類。

    (一)基于詞級別對比的錯(cuò)誤分類

    基于詞級別對比的錯(cuò)誤分類建立在機(jī)器譯文與參考譯文在詞級別對比的基礎(chǔ)上。Vilar等首次專門進(jìn)行錯(cuò)誤分析研究,提出一個(gè)人工錯(cuò)誤分類的框架,如表1。[1]該錯(cuò)誤分類影響廣泛,后來很多研究者或直接使用,或在此基礎(chǔ)上修改和擴(kuò)展。

    表1 Vilar等提出的錯(cuò)誤類型[1]

    (二)基于語言學(xué)知識(shí)的錯(cuò)誤分類

    基于語言學(xué)知識(shí)的錯(cuò)誤分類方法從語言學(xué)角度出發(fā),按照不同語言層次對錯(cuò)誤進(jìn)行分類。Farrús等提出語言學(xué)錯(cuò)誤分類,包括正字法、屈折、詞匯、語義和句法錯(cuò)誤,考察語言學(xué)質(zhì)量評價(jià)是否與感知質(zhì)量評價(jià)相一致。[2]Costa等按照錯(cuò)誤所在的語言層次將錯(cuò)誤分為五個(gè)級別:正字法、詞匯、語法、語義和語篇,提出一個(gè)基于語言學(xué)的細(xì)粒度錯(cuò)誤分類,如表2。[3]

    表2 Costa等提出的錯(cuò)誤類型[3]

    國內(nèi)錯(cuò)誤分類通常采用基于語言學(xué)的方法,關(guān)注語言學(xué)層面的錯(cuò)誤,包括詞匯、句法等。[4]羅季美、李梅通過華建英漢翻譯系統(tǒng)獲得汽車技術(shù)文獻(xiàn)的機(jī)器譯文,從近10萬個(gè)句對的機(jī)器譯文和人工譯文中,抽樣1000句,進(jìn)行錯(cuò)誤分類,分為詞匯、句法、符號三個(gè)一級錯(cuò)誤,下面細(xì)分二級錯(cuò)誤。[5]羅季美專門針對機(jī)器譯文中的句法錯(cuò)誤進(jìn)行標(biāo)注和統(tǒng)計(jì),包括名詞短語、動(dòng)詞短語、介詞短語等。[6]

    (三)基于譯后編輯操作的錯(cuò)誤分類

    譯后編輯和錯(cuò)誤分析是高度相關(guān)的工作,錯(cuò)誤分析是識(shí)別錯(cuò)誤,譯后編輯是糾正錯(cuò)誤。每個(gè)譯后編輯操作實(shí)際上都是在糾正錯(cuò)誤,因此可以把譯后編輯操作標(biāo)注為一種錯(cuò)誤類型或編輯類型。Blain等從譯后編輯實(shí)際操作的角度,將譯后編輯過程中所進(jìn)行的一套最小的邏輯編輯單位定義為譯后編輯行為(PEA),其錯(cuò)誤分類見表3,其研究發(fā)現(xiàn)大部分編輯操作產(chǎn)生于名詞意義。[7]

    表3 Blain等提出的錯(cuò)誤(編輯)類型[7]

    還有一些研究使用綜合的錯(cuò)誤分類,如崔啟亮、李聞等。[8]由于研究目的、分類基礎(chǔ)和應(yīng)用場景等不同,錯(cuò)誤分類也有很大的不同。目前還沒有統(tǒng)一的、可以適用于各種語言對和各種應(yīng)用場景的分類框架。

    三、自動(dòng)錯(cuò)誤標(biāo)注

    和機(jī)器翻譯人工評價(jià)一樣,人工錯(cuò)誤標(biāo)注也耗時(shí)耗力,且存在標(biāo)注者一致性不高的問題。因此不少研究者研究以自動(dòng)的方法對錯(cuò)誤進(jìn)行分類和標(biāo)注。自動(dòng)錯(cuò)誤標(biāo)注是按照一定的錯(cuò)誤分類,自動(dòng)識(shí)別和標(biāo)注錯(cuò)誤類型。已有的自動(dòng)錯(cuò)誤分類工具主要基于兩種方法,一種是基于單詞錯(cuò)誤率(WER)和位置無關(guān)單詞錯(cuò)誤率(PER)的自動(dòng)錯(cuò)誤分類,另一種是基于機(jī)器譯文和參考譯文對比的自動(dòng)錯(cuò)誤分類。

    Popovi?等通過WER和PER的差異獲得名詞、形容詞和動(dòng)詞的詞序和屈折錯(cuò)誤信息。[9]Popovi?&Ney 提出基于WER和PER的完全自動(dòng)的錯(cuò)誤分析框架,自動(dòng)識(shí)別屈折錯(cuò)誤、詞序錯(cuò)誤、漏詞、增詞、不正確選詞等五種錯(cuò)誤類型。[10]Popovi?開發(fā)自動(dòng)錯(cuò)誤分類和標(biāo)注工具Hjerson,可以自動(dòng)標(biāo)注五種錯(cuò)誤類型,屈折錯(cuò)誤、詞序錯(cuò)誤、漏詞、增詞和錯(cuò)詞。[11]

    將機(jī)器譯文和參考譯文在詞級別上對齊,將兩者做比較,可以自動(dòng)獲得機(jī)器譯文錯(cuò)誤的信息。Zemen等開發(fā)自動(dòng)錯(cuò)誤識(shí)別和標(biāo)注工具Addicter,將機(jī)器譯文和參考譯文詞對詞對齊,發(fā)現(xiàn)其不同之處。[12]該工具可以自動(dòng)檢測和標(biāo)注六種錯(cuò)誤類型,包括增詞、漏詞、形式錯(cuò)誤、詞匯錯(cuò)誤、標(biāo)點(diǎn)符號錯(cuò)誤、詞序錯(cuò)誤。

    還有一些從不同角度進(jìn)行的自動(dòng)錯(cuò)誤標(biāo)注的研究。Kirchhoff等提出半自動(dòng)錯(cuò)誤分析的方法,通過自動(dòng)或人工的方法提取源文特征,如來源、體裁、風(fēng)格、方言等,在篇章層面計(jì)算源文特征與HTER之間的互信息,研究哪些源文特征更容易引起翻譯問題。[13]Stymne開發(fā)工具BLAST,提供方便使用的圖形界面,輔助人工進(jìn)行錯(cuò)誤標(biāo)注。[14]其他用于錯(cuò)誤標(biāo)注的工具包括PET、Appraise、COSTA、MT-EQuAl等。

    早期的自動(dòng)錯(cuò)誤分類只能對一個(gè)詞給予一個(gè)錯(cuò)誤標(biāo)簽,但實(shí)際上有時(shí)很難判定一個(gè)詞到底屬于什么錯(cuò)誤類型,而且有時(shí)一個(gè)詞存在不止一種錯(cuò)誤,比如錯(cuò)詞可能同時(shí)也是詞序錯(cuò)誤。鑒于此,Popovi?等擴(kuò)展自動(dòng)錯(cuò)誤分類方法,對一個(gè)單詞標(biāo)注多個(gè)錯(cuò)誤類型標(biāo)簽,提高自動(dòng)錯(cuò)誤分類的準(zhǔn)確率。[15]

    自動(dòng)錯(cuò)誤標(biāo)注工具目前還不能識(shí)別細(xì)粒度的錯(cuò)誤類型,而且容易混淆錯(cuò)詞、漏詞和增詞錯(cuò)誤。盡管有這些缺點(diǎn),自動(dòng)標(biāo)注工具仍然很有用,使在短時(shí)間內(nèi)大規(guī)模地進(jìn)行錯(cuò)誤分析成為可能??梢姡詣?dòng)錯(cuò)誤標(biāo)注工具的研究具有很好的實(shí)用價(jià)值,在識(shí)別錯(cuò)誤類型的粒度、精度等方面,還有很大的進(jìn)步空間。

    除了對錯(cuò)誤的詞進(jìn)行分類和標(biāo)注,錯(cuò)誤分析還可以以其他方式進(jìn)行,如分析與參考譯文不匹配的詞、詞性或其他序列,對機(jī)器翻譯的時(shí)態(tài)、體和情態(tài)錯(cuò)誤進(jìn)行錯(cuò)誤分析,定義語言學(xué)范疇并專門針對這些語言學(xué)范疇進(jìn)行錯(cuò)誤分析等。

    四、錯(cuò)誤分析應(yīng)用

    錯(cuò)誤分析產(chǎn)生于機(jī)器翻譯質(zhì)量評價(jià),同時(shí)也被應(yīng)用于其他研究,如錯(cuò)誤類型與人工評價(jià)相關(guān)性研究,譯后編輯相關(guān)研究等。

    (一)評價(jià)機(jī)器翻譯質(zhì)量

    錯(cuò)誤分析最初就是用于診斷目的,在不同語言對和不同領(lǐng)域,對機(jī)器譯文進(jìn)行錯(cuò)誤標(biāo)注,根據(jù)錯(cuò)誤數(shù)量和錯(cuò)誤分布情況,評價(jià)機(jī)器翻譯系統(tǒng)的翻譯質(zhì)量。錯(cuò)誤分析可以用來評價(jià)某一個(gè)機(jī)器翻譯系統(tǒng),也可以對幾個(gè)不同的機(jī)器翻譯系統(tǒng)進(jìn)行對比和評價(jià)。

    2016 年NMT 出現(xiàn)使機(jī)器翻譯性能極大提升,相比傳統(tǒng)的RBMT 和SMT 在哪些方面有提升,NMT 在哪些方面存在不足,這些問題引起了研究者的興趣。Bentivogli 等發(fā)現(xiàn),與PBMT 相比,NMT 整體上需要的譯后編輯努力更少,在詞匯、形態(tài)和詞序錯(cuò)誤方面有了極大改進(jìn),但是其翻譯質(zhì)量隨著句長增加而快速下降。[16]Toral&Sanchez-Cartagena 使用WMT2016 的數(shù)據(jù),對NMT 和PBMT 進(jìn)行多方面的對比和評價(jià),包括六個(gè)語言對的九個(gè)翻譯方向。[17]他們在形態(tài)屈折和詞序方面得到類似的結(jié)論,發(fā)現(xiàn)隨著句長增加,NMT 性能急劇下降。Burchardt等通過人工構(gòu)建的、反映多種語言現(xiàn)象的測試集,對RBMT、PBMT和NMT進(jìn)行比較和評估,發(fā)現(xiàn)NMT 相比于PBMT 有顯著改進(jìn)。[18]Klubicka 等發(fā)現(xiàn),NMT 比表現(xiàn)最差的PBMT 系統(tǒng)錯(cuò)誤減少54%。[19]Calixto&Liu對基于圖像的多模態(tài)神經(jīng)機(jī)器翻譯進(jìn)行錯(cuò)誤分析,發(fā)現(xiàn)多模態(tài)神經(jīng)機(jī)器翻譯相比純文本神經(jīng)機(jī)器翻譯,各種類型的錯(cuò)誤都有減少。[20]Ye&Toral 針對英中翻譯方向,對基于Transformer 和RNN 兩種不同方法的NMT進(jìn)行比較,對WMT2019新聞測試集進(jìn)行細(xì)粒度錯(cuò)誤分析。其研究表明,基于Transformer的NMT比基于RNN的NMT錯(cuò)誤總數(shù)減少31%。[21]

    在錯(cuò)誤分析語料庫的建設(shè)方面也有不少進(jìn)展,出現(xiàn)了一些可公開獲得的錯(cuò)誤分析語料庫。例如,TRACE語料庫包含法英、英法譯后編輯譯文,其中有基本編輯距離錯(cuò)誤類型的標(biāo)注。還有Terra語料庫、TARAXü語料庫等。這些錯(cuò)誤分析語料庫為相關(guān)研究提供了數(shù)據(jù)基礎(chǔ)。

    錯(cuò)誤分析比人工評價(jià)和自動(dòng)評價(jià)提供更多細(xì)節(jié)的信息,能更直觀、準(zhǔn)確地評價(jià)機(jī)器翻譯質(zhì)量,對于深入了解機(jī)器翻譯系統(tǒng)的性能和不同機(jī)器翻譯系統(tǒng)的差異有重要作用。

    (二)錯(cuò)誤類型與人工評價(jià)相關(guān)性

    錯(cuò)誤分析豐富了傳統(tǒng)的機(jī)器翻譯質(zhì)量評價(jià)框架,也產(chǎn)生了一些有趣的研究問題,包括錯(cuò)誤類型與人工評價(jià)的關(guān)系,錯(cuò)誤類型與自動(dòng)評價(jià)指標(biāo)敏感性的關(guān)系。人工評價(jià)和自動(dòng)評價(jià)在很大程度上是“黑盒子”過程,人們對其評價(jià)的機(jī)制還不是很了解。比如,人工評價(jià)和自動(dòng)評價(jià)主要受什么因素的影響,錯(cuò)誤的頻率和錯(cuò)誤的類型哪個(gè)對其影響更大,不同錯(cuò)誤類型或各種錯(cuò)誤組合對其產(chǎn)生什么影響等。

    Farrús等將語言學(xué)質(zhì)量評價(jià)與傳統(tǒng)人工評價(jià)即感知質(zhì)量評價(jià)相比較,考察哪些語言錯(cuò)誤類型對感知質(zhì)量評價(jià)有更多影響。[2]Popovi?&Ney分析了單個(gè)或所有錯(cuò)誤頻率與自動(dòng)評價(jià)分?jǐn)?shù)之間的相關(guān)性。[10]這兩項(xiàng)研究使用兩種不同的錯(cuò)誤分類,兩者都表明錯(cuò)誤的總數(shù)與BLEU和TER值的相關(guān)性高。Kirchhoff等使用聯(lián)合分析法,將錯(cuò)誤類型及其頻率作為特征,研究使用者對機(jī)器翻譯不同類型錯(cuò)誤的直覺或情感偏好問題,研究結(jié)果發(fā)現(xiàn)詞序錯(cuò)誤是最不受喜歡的錯(cuò)誤類型,其次是詞義、形態(tài)和功能詞錯(cuò)誤。[22]

    Lommel 等(2014)從描述的角度探索了不同錯(cuò)誤類型、頻率與人工質(zhì)量判斷之間的關(guān)系。[23]這兩項(xiàng)研究都基于一個(gè)假設(shè),即出現(xiàn)頻率最高的錯(cuò)誤類型對人的質(zhì)量感知的影響最大,但是這種假設(shè)未經(jīng)證實(shí)。Federico等使用線性混合效應(yīng)模型,考察錯(cuò)誤類型與人工質(zhì)量判斷的相關(guān)性。[24]其研究發(fā)現(xiàn),某種特定錯(cuò)誤類型的頻率與人的偏好不相關(guān),漏詞對感知質(zhì)量評價(jià)的影響最大,每種自動(dòng)評價(jià)指標(biāo)對不同錯(cuò)誤類型的敏感性具有顯著差異。

    (三)譯后編輯

    隨著機(jī)器翻譯的發(fā)展,機(jī)器翻譯得到普遍應(yīng)用,對機(jī)器譯文進(jìn)行譯后編輯(MTPE)越來越成為人機(jī)合作翻譯的普遍形式。機(jī)器翻譯的質(zhì)量與譯后編輯努力直接相關(guān),一些研究試圖探究不同錯(cuò)誤類型與譯后編輯努力不同層面的關(guān)系。Krings將譯后編輯努力(post-editing effort)分為三個(gè)層面:(1)時(shí)間努力;(2)認(rèn)知努力;(3)技術(shù)努力。[25]時(shí)間是指譯后編輯所需的總時(shí)間。認(rèn)知努力包括識(shí)別機(jī)器譯文中的錯(cuò)誤、計(jì)劃如何改正錯(cuò)誤的必要步驟。技術(shù)努力即實(shí)際編輯操作,指產(chǎn)生譯后編輯譯文所需的擊鍵操作和復(fù)制粘貼操作。譯后編輯時(shí)間是認(rèn)知努力和技術(shù)努力的總和。這三者之間并不一定是一致的。有的錯(cuò)誤容易識(shí)別,需要的認(rèn)知努力少,但是需要較多技術(shù)努力才能改正。有的錯(cuò)誤需要極大的認(rèn)知努力,但需要的技術(shù)努力可能很少。Koponen使用編輯操作分類,考察各種錯(cuò)誤類型所需譯后編輯技術(shù)努力和認(rèn)知努力不一致的情況,研究發(fā)現(xiàn)句長影響認(rèn)知努力,詞序錯(cuò)誤更難修改,屈折錯(cuò)誤容易修改。[26]

    Popovi?等考察五種編輯操作類型(修改詞形錯(cuò)誤、修改詞序錯(cuò)誤、增加漏詞、刪除增詞、修改選詞錯(cuò)誤)與認(rèn)知努力和譯后編輯時(shí)間的關(guān)系。[27]研究發(fā)現(xiàn),修改錯(cuò)詞和詞序錯(cuò)誤的編輯操作需要的認(rèn)知努力最多,修改錯(cuò)詞所需要的譯后編輯時(shí)間最多,刪除增詞對譯后編輯認(rèn)知努力和時(shí)間影響都很少。Zaretskaya等研究哪些錯(cuò)誤類型更難進(jìn)行譯后編輯,帶給譯后編輯者更多挑戰(zhàn)。[28]Daems 等使用基于產(chǎn)品的譯后編輯工作量指標(biāo)HTER和基于過程的指標(biāo)如注視時(shí)長、注視點(diǎn)數(shù)、(平均)停頓率、譯后編輯時(shí)長、產(chǎn)出單元,識(shí)別對譯后編輯努力影響最大的機(jī)器翻譯錯(cuò)誤類型,發(fā)現(xiàn)不同錯(cuò)誤類型影響不同的譯后編輯努力指標(biāo)。[29]

    還有一些研究關(guān)注到譯后編輯教學(xué)方面。Koponen&Salmi 分析翻譯專業(yè)學(xué)生在沒有源文情況下,對英芬機(jī)器翻譯進(jìn)行譯后編輯的譯文,就PE譯文意思的正確性和語言的正確性進(jìn)行分析。[30]Koponen&Salmi使用五位翻譯專業(yè)學(xué)生對英芬機(jī)器翻譯譯后編輯的譯文,分析譯后編輯操作的正確性和必要性,研究發(fā)現(xiàn),大部分編輯操作是正確的,但是34%的編輯操作是不必要的。[31]Koponen 等分析翻譯專業(yè)學(xué)生對NMT、SMT、RBMT 三種機(jī)器翻譯系統(tǒng)的機(jī)器譯文進(jìn)行譯后編輯的譯文,考察不同機(jī)器翻譯系統(tǒng)所需的編輯操作的差異。[32]Yamada研究谷歌神經(jīng)機(jī)器翻譯對學(xué)生譯員譯后編輯的影響。[33]這些研究有助于了解學(xué)生譯員進(jìn)行譯后編輯時(shí)面臨的問題和困難,提高譯后編輯教學(xué)的針對性。目前這方面的研究還不多,有必要進(jìn)行更多、更深入的探討。

    五、總結(jié)和展望

    通過綜述近十幾年來國外機(jī)器翻譯錯(cuò)誤分析相關(guān)研究成果,相關(guān)研究已經(jīng)初步形成了基本的分析框架,并在這些框架下對相關(guān)問題有了一定程度的研究。整體來看,相關(guān)研究角度多樣,研究內(nèi)容豐富,研究方法新穎,有諸多可借鑒之處,為進(jìn)一步研究提供了很好的參考。但就錯(cuò)誤分析的復(fù)雜性和多樣性而言,當(dāng)前的相關(guān)研究整體上仍然處于探索階段,仍然存在一些不足之處:錯(cuò)誤分析的數(shù)據(jù)有限導(dǎo)致其結(jié)論無法一般化,自動(dòng)錯(cuò)誤標(biāo)注還無法識(shí)別細(xì)粒度錯(cuò)誤類別,錯(cuò)誤分析結(jié)合譯后編輯研究還不夠,對于翻譯教學(xué)的關(guān)注還遠(yuǎn)遠(yuǎn)不夠。通過比較思考,并聯(lián)系當(dāng)下問題的特點(diǎn),筆者認(rèn)為,我們可以從以下四個(gè)方面做出新的探索和突破。

    (一)驗(yàn)證已有研究成果

    由于不同語言之間差異大小不同、雙語資源不均衡,不同語言對機(jī)器翻譯系統(tǒng)發(fā)展程度不同,導(dǎo)致不同語言對機(jī)器翻譯錯(cuò)誤情況存在很大的差異,因此某一個(gè)語言對的錯(cuò)誤分析結(jié)果不一定適用于其他語言對。此外,錯(cuò)誤分析的數(shù)據(jù)通常比較有限,可能無法代表普遍性的問題。因此,后續(xù)研究需要在更豐富的語言對、更大數(shù)據(jù)上進(jìn)行多方驗(yàn)證。機(jī)器翻譯研究發(fā)展迅速,翻譯模型、翻譯技術(shù)更新很快,錯(cuò)誤分析需要緊跟機(jī)器翻譯研究的發(fā)展,以提供及時(shí)、有效的反饋。

    (二)自動(dòng)錯(cuò)誤分析

    錯(cuò)誤分析要及時(shí)為機(jī)器翻譯提供診斷和反饋,就需要提高效率,因此,自動(dòng)錯(cuò)誤識(shí)別和標(biāo)注的研究很有必要。自動(dòng)錯(cuò)誤標(biāo)注工具可以代替或輔助人工來進(jìn)行錯(cuò)誤標(biāo)注,極大提高錯(cuò)誤分析的效率。目前自動(dòng)錯(cuò)誤分析的研究還較少,自動(dòng)識(shí)別和標(biāo)注的錯(cuò)誤類型比較有限,而且局限于對少數(shù)語言對機(jī)器翻譯的錯(cuò)誤分析。未來在自動(dòng)錯(cuò)誤標(biāo)注的粒度、語言對等方面的研究仍然有很大的發(fā)展空間。

    (三)錯(cuò)誤分析與譯后編輯相結(jié)合

    錯(cuò)誤分析和譯后編輯是高度相關(guān)的工作,譯后編輯所需的工作量與MT系統(tǒng)所產(chǎn)生的翻譯錯(cuò)誤之間有明顯關(guān)聯(lián)。不同的MT錯(cuò)誤類型對譯后編輯努力產(chǎn)生什么影響,其對譯后編輯時(shí)間、認(rèn)知努力、技術(shù)努力的影響是否存在差異,不同錯(cuò)誤類型對譯后編輯認(rèn)知資源分配產(chǎn)生什么影響,哪些錯(cuò)誤類型更難進(jìn)行譯后編輯,MT錯(cuò)誤對譯后編輯努力具有多大預(yù)測能力,等等。目前對于這些問題還沒有很充分的研究。

    (四)錯(cuò)誤分析成果應(yīng)用于教學(xué)

    錯(cuò)誤分析能找出機(jī)器譯文存在的問題,發(fā)現(xiàn)錯(cuò)誤類型的數(shù)量和分布情況,有助于譯后編輯人員熟悉和了解機(jī)器翻譯系統(tǒng),總結(jié)錯(cuò)誤模式,總結(jié)改正錯(cuò)誤的技巧和方法,提高譯后編輯工作的效率。其同樣可以為譯后編輯教學(xué)提供參考,培養(yǎng)更了解機(jī)器翻譯的翻譯人員。目前的錯(cuò)誤分析研究很少結(jié)合翻譯教學(xué),很少關(guān)注譯后編輯人員的培養(yǎng),而高校也鮮有專門的譯后編輯課程,造成譯后編輯人才培養(yǎng)與市場需求脫節(jié)。將錯(cuò)誤分析研究的成果應(yīng)用于教學(xué)意義重大,對于培養(yǎng)譯后編輯人員具有很好的指導(dǎo)性,未來需要加強(qiáng)這方面的研究。

    本文旨在通過對機(jī)器翻譯錯(cuò)誤分析研究現(xiàn)狀的總結(jié)和發(fā)展趨勢的展望,為相關(guān)研究提供新視角新方法。與國外機(jī)器翻譯錯(cuò)誤分析研究相比,國內(nèi)的錯(cuò)誤分析研究的范圍和內(nèi)容相對較窄,具有以下幾個(gè)特點(diǎn):通常采用基于語言學(xué)的錯(cuò)誤分類方法;獨(dú)立于機(jī)器翻譯系統(tǒng);以實(shí)例分析、糾錯(cuò)方法探討為主要內(nèi)容;數(shù)據(jù)量較小,觀察的樣本有限。錯(cuò)誤分析是一種重要的機(jī)器翻譯質(zhì)量評價(jià)方法,為機(jī)器翻譯系統(tǒng)開發(fā)提供反饋,推動(dòng)機(jī)器翻譯研究的發(fā)展,并在其他相關(guān)研究中具有很好的應(yīng)用價(jià)值。由于其復(fù)雜性和多樣性,錯(cuò)誤分析研究存在多種發(fā)展和創(chuàng)新的可能,在機(jī)器翻譯研究和應(yīng)用中仍將發(fā)揮重要作用。

    猜你喜歡
    譯文人工錯(cuò)誤
    人工3D脊髓能幫助癱瘓者重新行走?
    軍事文摘(2022年8期)2022-11-03 14:22:01
    Stem cell-based 3D brain organoids for mimicking,investigating,and challenging Alzheimer’s diseases
    在錯(cuò)誤中成長
    人工,天然,合成
    人工“美顏”
    譯文摘要
    I Like Thinking
    新型多孔鉭人工種植牙
    不犯同樣錯(cuò)誤
    《錯(cuò)誤》:怎一個(gè)“美”字了得
    短篇小說(2014年11期)2014-02-27 08:32:41
    国产精品久久久久久久电影| 国产又色又爽无遮挡免| 久久99热这里只频精品6学生| 精品一区二区免费观看| 日本免费在线观看一区| 91精品三级在线观看| 欧美 日韩 精品 国产| 亚洲精品日本国产第一区| 午夜福利视频精品| 欧美精品国产亚洲| 免费在线观看黄色视频的| 久久久亚洲精品成人影院| 成人亚洲精品一区在线观看| 国产伦理片在线播放av一区| 亚洲精品一区蜜桃| 9热在线视频观看99| 午夜免费鲁丝| 欧美精品国产亚洲| 一区二区三区精品91| 亚洲av电影在线进入| 80岁老熟妇乱子伦牲交| 啦啦啦啦在线视频资源| 亚洲四区av| 欧美人与性动交α欧美精品济南到 | 亚洲国产日韩一区二区| 免费人成在线观看视频色| 一级黄片播放器| 国产老妇伦熟女老妇高清| 嫩草影院入口| 亚洲色图综合在线观看| 有码 亚洲区| 日本wwww免费看| 26uuu在线亚洲综合色| 日本av免费视频播放| 国产精品久久久久久久电影| 色94色欧美一区二区| 90打野战视频偷拍视频| 成人免费观看视频高清| 国产一区二区激情短视频 | 国产一区二区在线观看av| 国产一区二区三区av在线| 高清黄色对白视频在线免费看| 人妻一区二区av| 日韩电影二区| 极品少妇高潮喷水抽搐| 亚洲少妇的诱惑av| 欧美变态另类bdsm刘玥| 一个人免费看片子| 97人妻天天添夜夜摸| 午夜久久久在线观看| 久久99蜜桃精品久久| 中文字幕免费在线视频6| 色哟哟·www| av有码第一页| 在线观看人妻少妇| 美女福利国产在线| 欧美精品一区二区大全| 久久精品国产亚洲av天美| 久久久精品94久久精品| 亚洲人成77777在线视频| 一级毛片我不卡| 搡老乐熟女国产| 久久久久视频综合| 亚洲精品日韩在线中文字幕| 免费观看av网站的网址| 精品酒店卫生间| 夜夜爽夜夜爽视频| 男人舔女人的私密视频| 国产成人aa在线观看| 午夜91福利影院| 一二三四中文在线观看免费高清| 亚洲av免费高清在线观看| 亚洲欧洲国产日韩| av播播在线观看一区| 满18在线观看网站| 午夜福利在线观看免费完整高清在| 色94色欧美一区二区| 伦精品一区二区三区| 亚洲丝袜综合中文字幕| 亚洲丝袜综合中文字幕| 巨乳人妻的诱惑在线观看| 亚洲精品中文字幕在线视频| 国产精品久久久久久精品电影小说| 国产精品一区二区在线不卡| 777米奇影视久久| 蜜臀久久99精品久久宅男| 免费观看av网站的网址| 国产av码专区亚洲av| 少妇被粗大的猛进出69影院 | 成人午夜精彩视频在线观看| 亚洲美女搞黄在线观看| 高清毛片免费看| 国产深夜福利视频在线观看| 欧美成人午夜精品| 欧美日韩国产mv在线观看视频| 亚洲,一卡二卡三卡| 国产成人精品婷婷| 日韩三级伦理在线观看| 午夜激情久久久久久久| 极品人妻少妇av视频| 国产精品国产三级国产av玫瑰| 一区二区av电影网| 看非洲黑人一级黄片| 免费人妻精品一区二区三区视频| 午夜福利网站1000一区二区三区| 亚洲国产精品一区二区三区在线| 久久久久久久久久人人人人人人| 国产高清不卡午夜福利| 免费在线观看完整版高清| 日本91视频免费播放| 国产精品久久久av美女十八| 高清在线视频一区二区三区| 亚洲美女搞黄在线观看| 久久精品国产亚洲av天美| 激情视频va一区二区三区| 啦啦啦啦在线视频资源| 蜜桃国产av成人99| 乱人伦中国视频| 国产乱人偷精品视频| 一个人免费看片子| 欧美97在线视频| 亚洲第一av免费看| 国产午夜精品一二区理论片| 亚洲欧美成人精品一区二区| 日韩成人伦理影院| 欧美+日韩+精品| 国产毛片在线视频| 久久鲁丝午夜福利片| 九草在线视频观看| 欧美日韩综合久久久久久| 日本免费在线观看一区| 亚洲国产日韩一区二区| 国产高清不卡午夜福利| 国产高清不卡午夜福利| 夫妻性生交免费视频一级片| videosex国产| 色94色欧美一区二区| 国产白丝娇喘喷水9色精品| 免费看光身美女| 黑丝袜美女国产一区| 午夜福利在线观看免费完整高清在| 男女下面插进去视频免费观看 | 欧美日韩视频高清一区二区三区二| 夫妻午夜视频| 国产亚洲最大av| 国产精品三级大全| 亚洲国产精品一区三区| 午夜免费鲁丝| 一级毛片我不卡| 美国免费a级毛片| 午夜精品国产一区二区电影| 亚洲国产成人一精品久久久| 伊人久久国产一区二区| 日韩成人伦理影院| 精品少妇黑人巨大在线播放| 免费看光身美女| 国产白丝娇喘喷水9色精品| 精品国产一区二区三区久久久樱花| 插逼视频在线观看| 成人毛片a级毛片在线播放| av在线观看视频网站免费| 18在线观看网站| 日韩一本色道免费dvd| 国产精品成人在线| av免费观看日本| 色吧在线观看| 有码 亚洲区| 国产亚洲最大av| 黑人欧美特级aaaaaa片| 一区二区三区四区激情视频| 久久毛片免费看一区二区三区| 亚洲精品美女久久久久99蜜臀 | 大香蕉久久网| 日韩精品免费视频一区二区三区 | 肉色欧美久久久久久久蜜桃| 免费观看在线日韩| 亚洲精品自拍成人| 国产麻豆69| 国产一区亚洲一区在线观看| 亚洲精品色激情综合| 国国产精品蜜臀av免费| 激情五月婷婷亚洲| 亚洲,一卡二卡三卡| 亚洲,一卡二卡三卡| 亚洲高清免费不卡视频| 18禁在线无遮挡免费观看视频| 午夜福利视频精品| 老司机影院成人| 欧美 亚洲 国产 日韩一| 亚洲欧美一区二区三区国产| 另类精品久久| 欧美成人午夜免费资源| 亚洲精品久久成人aⅴ小说| 考比视频在线观看| 日韩,欧美,国产一区二区三区| 免费看不卡的av| 国产免费现黄频在线看| 免费高清在线观看日韩| 丝袜人妻中文字幕| 亚洲一区二区三区欧美精品| 国产一区二区三区av在线| 超色免费av| 久久99精品国语久久久| 看非洲黑人一级黄片| 中国国产av一级| 9191精品国产免费久久| 青春草国产在线视频| 在线观看人妻少妇| 成年女人在线观看亚洲视频| 中文天堂在线官网| 国产精品人妻久久久影院| 国产av国产精品国产| 国产精品久久久久久精品电影小说| 婷婷色av中文字幕| 久久久国产欧美日韩av| 国产精品人妻久久久久久| 中文字幕另类日韩欧美亚洲嫩草| 欧美精品人与动牲交sv欧美| 久久99蜜桃精品久久| 观看av在线不卡| 9色porny在线观看| 国产片特级美女逼逼视频| 高清视频免费观看一区二区| 久久韩国三级中文字幕| 一本久久精品| 久久久久国产精品人妻一区二区| 国产欧美日韩一区二区三区在线| 国产一级毛片在线| 亚洲精品一二三| 中文天堂在线官网| 黑人高潮一二区| 国产男人的电影天堂91| 制服人妻中文乱码| 精品国产国语对白av| 麻豆乱淫一区二区| 晚上一个人看的免费电影| 两个人免费观看高清视频| 国产福利在线免费观看视频| 菩萨蛮人人尽说江南好唐韦庄| 日本av手机在线免费观看| 在线 av 中文字幕| 婷婷成人精品国产| 男人舔女人的私密视频| 黄色 视频免费看| 国产又爽黄色视频| 久久女婷五月综合色啪小说| 国产极品粉嫩免费观看在线| 亚洲国产精品一区三区| 精品一区在线观看国产| 久久久精品94久久精品| 综合色丁香网| 一本久久精品| 建设人人有责人人尽责人人享有的| 国产欧美日韩一区二区三区在线| tube8黄色片| 蜜桃在线观看..| 久久精品人人爽人人爽视色| 中文字幕人妻熟女乱码| 青青草视频在线视频观看| 99久久精品国产国产毛片| 国产片特级美女逼逼视频| 亚洲精品中文字幕在线视频| 女的被弄到高潮叫床怎么办| 一级爰片在线观看| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 国产精品久久久久久精品古装| av视频免费观看在线观看| 免费女性裸体啪啪无遮挡网站| 国产一区二区三区av在线| 日韩伦理黄色片| 亚洲精品色激情综合| 伦理电影免费视频| 国产精品一二三区在线看| 在线精品无人区一区二区三| 国产精品 国内视频| √禁漫天堂资源中文www| 熟女人妻精品中文字幕| 午夜视频国产福利| 婷婷色麻豆天堂久久| 日韩制服骚丝袜av| 九色成人免费人妻av| 一本久久精品| 极品少妇高潮喷水抽搐| 香蕉丝袜av| 国产一区亚洲一区在线观看| 99九九在线精品视频| 欧美精品亚洲一区二区| 欧美 日韩 精品 国产| 国产日韩欧美在线精品| 考比视频在线观看| 成人亚洲精品一区在线观看| 蜜臀久久99精品久久宅男| 少妇的逼好多水| 国产黄色视频一区二区在线观看| 夜夜爽夜夜爽视频| 亚洲国产精品999| 你懂的网址亚洲精品在线观看| 国产一区二区三区av在线| 亚洲内射少妇av| 美女内射精品一级片tv| 亚洲精品456在线播放app| 亚洲国产精品999| 男人操女人黄网站| 免费观看性生交大片5| 国产精品久久久久久久久免| av视频免费观看在线观看| 国产精品.久久久| 男人操女人黄网站| 热re99久久国产66热| 欧美亚洲日本最大视频资源| 在线观看免费视频网站a站| 在线看a的网站| 少妇的逼好多水| 97精品久久久久久久久久精品| 国产爽快片一区二区三区| 宅男免费午夜| av有码第一页| 观看av在线不卡| 大话2 男鬼变身卡| 欧美xxⅹ黑人| 日本与韩国留学比较| 男女高潮啪啪啪动态图| 麻豆精品久久久久久蜜桃| 欧美激情极品国产一区二区三区 | 在线 av 中文字幕| 人妻 亚洲 视频| 国产一区二区激情短视频 | 九草在线视频观看| 边亲边吃奶的免费视频| 精品午夜福利在线看| 中文字幕精品免费在线观看视频 | 精品一区二区免费观看| 亚洲av免费高清在线观看| 在线观看一区二区三区激情| 久久鲁丝午夜福利片| 午夜福利网站1000一区二区三区| 久久久久久伊人网av| 午夜福利视频精品| 国产成人欧美| 日韩成人伦理影院| 纵有疾风起免费观看全集完整版| 亚洲国产av影院在线观看| 最近中文字幕高清免费大全6| 国产乱来视频区| 宅男免费午夜| 男女啪啪激烈高潮av片| 国产欧美另类精品又又久久亚洲欧美| 国产亚洲精品久久久com| 亚洲丝袜综合中文字幕| 欧美日韩精品成人综合77777| 亚洲精品国产av成人精品| 欧美老熟妇乱子伦牲交| 少妇被粗大猛烈的视频| 精品久久久精品久久久| 在线观看免费视频网站a站| 天天躁夜夜躁狠狠久久av| 日本wwww免费看| 亚洲 欧美一区二区三区| 麻豆精品久久久久久蜜桃| 人妻一区二区av| 精品国产一区二区久久| 欧美 亚洲 国产 日韩一| 午夜福利乱码中文字幕| 大香蕉久久成人网| 免费大片18禁| 人妻系列 视频| 亚洲久久久国产精品| av免费在线看不卡| 九色亚洲精品在线播放| 精品酒店卫生间| 国产成人精品婷婷| 性色av一级| 九九在线视频观看精品| 一边亲一边摸免费视频| 中文乱码字字幕精品一区二区三区| 国产又爽黄色视频| 在线天堂最新版资源| 一区二区av电影网| 国产精品国产三级专区第一集| 日韩大片免费观看网站| 狂野欧美激情性bbbbbb| 欧美激情极品国产一区二区三区 | 在现免费观看毛片| 精品亚洲成a人片在线观看| 日本-黄色视频高清免费观看| 成人国语在线视频| 女性被躁到高潮视频| 免费少妇av软件| 国产成人精品久久久久久| 男女边吃奶边做爰视频| 国产精品久久久久久久久免| 狠狠婷婷综合久久久久久88av| 国国产精品蜜臀av免费| 久久99热6这里只有精品| 九草在线视频观看| 精品一区二区免费观看| 国产精品99久久99久久久不卡 | 中文精品一卡2卡3卡4更新| 最近的中文字幕免费完整| 97超碰精品成人国产| 亚洲美女视频黄频| 在现免费观看毛片| 亚洲精品美女久久av网站| 亚洲成国产人片在线观看| 97人妻天天添夜夜摸| 久热这里只有精品99| 中文字幕另类日韩欧美亚洲嫩草| 一级片'在线观看视频| 国产成人一区二区在线| 亚洲精品一二三| 两性夫妻黄色片 | 国精品久久久久久国模美| 亚洲精品一区蜜桃| 成年美女黄网站色视频大全免费| 国产国拍精品亚洲av在线观看| 亚洲精品第二区| 久久人妻熟女aⅴ| 亚洲色图综合在线观看| 精品亚洲成国产av| 亚洲精品久久久久久婷婷小说| 男女国产视频网站| 久久久久久久国产电影| 久久久久久久大尺度免费视频| 中文字幕另类日韩欧美亚洲嫩草| 在线观看国产h片| 亚洲欧美色中文字幕在线| 五月伊人婷婷丁香| 国产亚洲精品久久久com| 女人久久www免费人成看片| 精品一区在线观看国产| 91成人精品电影| 成人毛片a级毛片在线播放| 日本猛色少妇xxxxx猛交久久| 最近2019中文字幕mv第一页| 91精品三级在线观看| 亚洲国产欧美在线一区| 国产乱来视频区| 插逼视频在线观看| 精品第一国产精品| 日韩视频在线欧美| 日韩不卡一区二区三区视频在线| 亚洲精品第二区| 狠狠婷婷综合久久久久久88av| 国产高清国产精品国产三级| 国产深夜福利视频在线观看| 狠狠婷婷综合久久久久久88av| 亚洲高清免费不卡视频| 国产毛片在线视频| 大片电影免费在线观看免费| 国产69精品久久久久777片| 亚洲国产精品一区二区三区在线| 精品少妇内射三级| 18+在线观看网站| 久久这里只有精品19| 免费黄色在线免费观看| 尾随美女入室| 最新中文字幕久久久久| 国产亚洲精品久久久com| 伦精品一区二区三区| 2018国产大陆天天弄谢| 亚洲精品一区蜜桃| 欧美人与性动交α欧美精品济南到 | 久久久国产一区二区| 日本黄大片高清| 久久 成人 亚洲| 人人妻人人爽人人添夜夜欢视频| 国产国拍精品亚洲av在线观看| 日本欧美国产在线视频| 丝瓜视频免费看黄片| 成人手机av| 狂野欧美激情性bbbbbb| 狠狠婷婷综合久久久久久88av| 久久韩国三级中文字幕| 国产午夜精品一二区理论片| 亚洲av.av天堂| 青春草国产在线视频| 你懂的网址亚洲精品在线观看| 精品一区二区三区四区五区乱码 | 日韩,欧美,国产一区二区三区| 一级片'在线观看视频| 亚洲精品一区蜜桃| 五月伊人婷婷丁香| 亚洲欧美一区二区三区国产| 成人免费观看视频高清| 午夜久久久在线观看| 18禁观看日本| 国产精品 国内视频| 精品国产国语对白av| 国产精品人妻久久久久久| 女人精品久久久久毛片| 成人二区视频| 免费观看av网站的网址| 丰满迷人的少妇在线观看| 在线观看人妻少妇| av免费观看日本| 99热6这里只有精品| 亚洲国产精品一区二区三区在线| 丰满少妇做爰视频| 久久国产精品大桥未久av| 亚洲精品久久午夜乱码| 人妻 亚洲 视频| 十分钟在线观看高清视频www| 妹子高潮喷水视频| 国产免费一级a男人的天堂| 久久97久久精品| 秋霞伦理黄片| 久久这里只有精品19| 日韩一区二区三区影片| 熟女电影av网| 人人妻人人添人人爽欧美一区卜| 成人综合一区亚洲| 亚洲欧洲国产日韩| 建设人人有责人人尽责人人享有的| 免费观看av网站的网址| 国产av国产精品国产| 久久精品aⅴ一区二区三区四区 | 人人妻人人添人人爽欧美一区卜| 精品一区二区三卡| 国产精品秋霞免费鲁丝片| 丰满饥渴人妻一区二区三| 狠狠婷婷综合久久久久久88av| 高清不卡的av网站| 国产精品不卡视频一区二区| 一本色道久久久久久精品综合| 女人被躁到高潮嗷嗷叫费观| 亚洲精品视频女| 99久国产av精品国产电影| 看十八女毛片水多多多| www.熟女人妻精品国产 | 国产熟女午夜一区二区三区| 性色avwww在线观看| 亚洲成色77777| av卡一久久| videosex国产| 99久久综合免费| 免费av不卡在线播放| 久久99热这里只频精品6学生| 午夜影院在线不卡| 中文字幕精品免费在线观看视频 | 啦啦啦在线观看免费高清www| 国产色爽女视频免费观看| 一区在线观看完整版| 熟女人妻精品中文字幕| 狠狠婷婷综合久久久久久88av| av卡一久久| 国产伦理片在线播放av一区| 我的女老师完整版在线观看| 精品亚洲成a人片在线观看| 日本wwww免费看| 一个人免费看片子| 各种免费的搞黄视频| 精品一品国产午夜福利视频| 一级片'在线观看视频| 亚洲丝袜综合中文字幕| tube8黄色片| 久久精品国产a三级三级三级| 国产精品成人在线| 欧美精品亚洲一区二区| 男的添女的下面高潮视频| 国产精品一区www在线观看| 一级,二级,三级黄色视频| 国产精品国产三级国产专区5o| 日产精品乱码卡一卡2卡三| 亚洲国产欧美在线一区| 精品人妻在线不人妻| 搡老乐熟女国产| 色5月婷婷丁香| 美女xxoo啪啪120秒动态图| 久久久欧美国产精品| 91久久精品国产一区二区三区| 80岁老熟妇乱子伦牲交| 2018国产大陆天天弄谢| 少妇的逼水好多| 久久ye,这里只有精品| 另类亚洲欧美激情| 狂野欧美激情性xxxx在线观看| av视频免费观看在线观看| 精品久久国产蜜桃| av视频免费观看在线观看| 国产日韩一区二区三区精品不卡| 久久av网站| 久久热在线av| 亚洲成av片中文字幕在线观看 | 精品少妇黑人巨大在线播放| 校园人妻丝袜中文字幕| 99国产精品免费福利视频| 国产精品一区二区在线不卡| 久久婷婷青草| 狂野欧美激情性xxxx在线观看| 蜜桃在线观看..| 久久综合国产亚洲精品| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 国产一区二区激情短视频 | 久久国产精品男人的天堂亚洲 | 男女午夜视频在线观看 | 高清毛片免费看| 日韩伦理黄色片| 99久久人妻综合| 国产成人91sexporn| 精品亚洲成a人片在线观看| 七月丁香在线播放| 精品亚洲成国产av| 亚洲成国产人片在线观看| 日本欧美视频一区| 男女边吃奶边做爰视频| 91精品三级在线观看| 91精品伊人久久大香线蕉| 全区人妻精品视频| 女性被躁到高潮视频| 男的添女的下面高潮视频| 97精品久久久久久久久久精品| 日产精品乱码卡一卡2卡三| 黄网站色视频无遮挡免费观看| 中文欧美无线码| 久热久热在线精品观看|