• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于語義塊識別的材料科學文獻工藝數(shù)據(jù)實體關系抽取

    2024-06-07 22:56:55黃星瑞
    化工自動化及儀表 2024年3期

    DOI:10.20030/j.cnki.1000?3932.202403020

    摘 要 提出一種語義塊標注的材料科學文獻工藝實體關系抽取方案和基于多步實體識別的流水線式材料科學文獻工藝實體關系抽取模型。針對材料科學文獻中工藝數(shù)據(jù)的語義邏輯塊通常連續(xù)出現(xiàn)的特點,首先采用語義塊標注方案將工藝文本作為一個序列完整地進行命名實體識別,然后將提取出的工藝數(shù)據(jù)序列單獨進行分類和進一步命名實體識別,最后依據(jù)類型分類結果和實體識別結果對工藝操作與條件參數(shù)構建關系三元組。實驗結果表明,相較于基線算法,所提標注方案在工藝實體識別上的準確度提升了4%,所提模型在工藝數(shù)據(jù)實體關系抽取實驗中F1分數(shù)提升了3.6%。

    關鍵詞 命名實體識別 關系抽取 材料工藝數(shù)據(jù) 科學文獻

    中圖分類號 TP391.1??? 文獻標志碼 A?? 文章編號 1000?3932(2024)03?0507?09

    作者簡介:黃星瑞(1996-),碩士研究生,從事自然語言處理方面的研究,xrhuang@stu.kust.edu.cn。

    引用本文:黃星瑞.基于語義塊識別的材料科學文獻工藝數(shù)據(jù)實體關系抽取[J].化工自動化及儀表,2024,51(3):507-515.

    近年來,人工智能驅動的科學研究(AI for Science,AI4S)已成為最新的科學研究新范式。其中,針對于材料研發(fā)領域的“材料基因組”計劃[1]便是AI4S范式的一項嘗試,該計劃旨在革新傳統(tǒng)材料“試錯法”的研究方式,通過構建一個將傳統(tǒng)理論、實驗室實驗、高通量計算[2]、大數(shù)據(jù)等相融合的新材料研發(fā)模式,從而提升新材料研發(fā)效率。在材料基因工程項目中,“材料高效計算”“高通量實驗”“大數(shù)據(jù)”[3,4]是實現(xiàn)這一目標的三大必要條件。

    目前,許多科研人員開始使用機器學習技術輔助新材料的研發(fā),并取得了不錯的成果[5~7]。然而,對于數(shù)據(jù)敏感的人工智能技術而言,需要大量的數(shù)據(jù)作為其有效發(fā)揮作用的基礎。材料科學數(shù)據(jù)主要有兩種來源:來自實驗室的實驗和計算結果,其中甚至連錯誤的數(shù)據(jù)都可用于AI發(fā)現(xiàn)新材料[8];來自文獻資料的其他數(shù)據(jù)[9]。

    受限于實驗成本、項目內(nèi)容保密等各項因素,單一實驗室所擁有的數(shù)據(jù)難以像商業(yè)化數(shù)據(jù)庫一樣能夠直接給機器學習算法提供大量數(shù)據(jù),因此,從包含大量公開發(fā)表的,且經(jīng)過同行評議的高質(zhì)量的科學文獻中提取數(shù)據(jù),成為了材料科學與人工智能結合的重要數(shù)據(jù)來源。然而,對于數(shù)以萬計的文獻資料,借助專家知識進行人工數(shù)據(jù)提取是費時且耗費精力的。因此,自動、快速且準確的數(shù)據(jù)抽取工具已成為材料科學領域的迫切需求。

    筆者基于將切分語義從長句切分為小語義塊這一化繁為簡的思想,提出在材料科學文獻中針對工藝數(shù)據(jù)的特點采用連續(xù)語義塊標注方案,將工藝操作序列完整地標注和提取,再分塊地進行命名實體識別和關系分類,從而解決傳統(tǒng)關系分類中復雜度較高的問題。同時,將關系抽取過程轉化為兩步命名實體識別,提升模型性能。最后,使用真實世界數(shù)據(jù)進行實驗,驗證模型的有效性。

    1 相關工作

    在材料領域,從文本數(shù)據(jù)中提取材料數(shù)據(jù)其本質(zhì)上是材料數(shù)據(jù)實體識別、特征標注與提取的一個過程,但是從當前研究情況來看,大多數(shù)文本挖掘、文本分類的機器學習任務是有監(jiān)督的機器學習,而有監(jiān)督的機器學習的顯著特點是需要對數(shù)據(jù)進行大量的標注,但由于大多數(shù)專業(yè)領域中的專業(yè)知識存在專業(yè)壁壘,因此不同領域的語料庫在大多數(shù)情況下是無法共通的,造成目前的材料文本挖掘呈現(xiàn)出針對某一特性或某一種類的特化情況。

    GHADBEIGI L等通過人工手動的方式,從約200多本出版物中提取了鋰離子電池電極材料的數(shù)據(jù),并以此作為分析,建立了一個鋰離子電池材料的大型數(shù)據(jù)庫,為電池材料領域的科研人員提供了極大幫助[10]。

    機器學習方面,KIM E等成功地通過材料文本挖掘技術提取了氧化物材料數(shù)據(jù),利用機器學習和自然語言處理算法從64萬多篇包括材料合成數(shù)據(jù)的期刊文獻中訓練得到了一個神經(jīng)網(wǎng)絡模型,并將該神經(jīng)網(wǎng)絡模型用于解析76 000篇氧化物材料合成文獻,對其中的材料數(shù)據(jù)進行分類標記,預測每個材料數(shù)據(jù)單詞的類別(例如材料種類、原子數(shù)及摩爾質(zhì)量等),最終形成一個不斷更新和擴展的氧化反應數(shù)據(jù)集[11]。

    除此之外,LIU Y L等通過材料技術對鋁硅材料數(shù)據(jù)集進行了擴充。該團隊采用材料實體識別與主動學習相結合的方式解決了在材料領域中只有少量標注數(shù)據(jù)的問題。首先,建立Al?Si合金材料實體標注規(guī)則,對文獻內(nèi)容進行標注;其次,將標注內(nèi)容作為材料實體識別模型的HASE數(shù)據(jù)集;最后,將材料實體識別與主動學習相結合,擴展訓練數(shù)據(jù),增強模型的泛化能力。在結合主動學習時,通過計算不同語料庫之間的句子相似度,從新的語料庫中提取與所需材料相關的語料,利用自動標注模塊實現(xiàn)數(shù)據(jù)擴展的目的。這種方法能夠在文獻中準確提取有效的材料數(shù)據(jù),將手工標注的8 845個材料實體擴展到16 677個,并且利用該方法建立的材料實體識別模型可以更快地達到預期水平[12,13]。

    針對中文科學文獻中的數(shù)據(jù)提取,魏曉等構建了一種基于Bi?GRU?GNN?CRF的材料實體關系聯(lián)合抽取方法,該方法能夠從多種涉及材料的文檔中自動抽取知識;同時基于該方法構建了一個材料領域知識圖譜,經(jīng)測算,該知識圖譜的覆蓋率達到了80%[14]。

    WANG W R等認為,由于特定領域缺乏大量有效的標注數(shù)據(jù),導致采用機器學習的方法很難直接運用在特定領域的材料科學文獻數(shù)據(jù)抽取上;由于特定應用領域存在特征或模式突出明顯的情況,因此他們構建了一個基于正則算法的材料實體和距離識別算法,用于從材料科學文獻中提取數(shù)據(jù),并證明了使用規(guī)則方式從文章中提取數(shù)據(jù)的可行性[15]。

    2 語義塊標注的材料科學文獻工藝實體關系抽取

    基于材料科學文獻中工藝數(shù)據(jù)的特點,筆者設計了一種語義塊標注方案。首先將工藝數(shù)據(jù)進行整段抽取得到工藝序列,然后通過分類器確定該工藝序列所屬,最后通過特定模式進行數(shù)據(jù)分隔,切分工藝步驟與具體操作參數(shù),從而建立材料合成的工藝步驟以及與參數(shù)的關系。

    2.1 標注方案

    文獻[16]認為,在自然語言語句中,相鄰的詞與詞之間應當是可以具有關系的,而在材料科學文獻中,某一特定的工藝通常表現(xiàn)為一段連續(xù)的文本,因此在這一連續(xù)文本中,詞與詞之間應當構成一個相同的關系,即都屬于工藝序列,基于這一思想,筆者選擇將“is”“at”“for”“in”“up”等特點詞和其余修飾詞連續(xù)且完整地納入標注和實體識別過程中,從而完整地標注出工藝序列,最終將工藝步驟從簡單實體拓展成一個長連續(xù)的語義塊。筆者設計的針對材料科學文獻工藝數(shù)據(jù)的標注方案具體如圖1所示。

    具體而言,筆者將材料科學文獻中工藝數(shù)據(jù)的第1個單詞到最后一個單詞的單詞總數(shù)連續(xù)地標注為Process?Sequence,則一個工藝操作序列可以形式化地表述如下:

    Seq={w,w,w,…,w}? ?(1)

    其中,w表示文中的單詞,下標i表示單詞在當前分句中的位置索引。

    2.2 模型結構

    采用語義塊標注模型(Semantic Block Labeled Entity Relation Extractor for Material Synthetic Process,SBLERE)對材料科學文獻中的工藝數(shù)據(jù)進行提取。模型(圖2)共分為3部分:長標注工藝序列語義塊實體識別器,基于雙向編碼器表征法(Bidirectional Encoder Representations from Transformers,BERT)預訓練語言模型[17]的工藝類型分類器,工藝實體識別器。

    圖2中,工藝序列語義塊實體識別模塊主要針對材料科學文獻中的工藝操作序列進行實體識別,將其整段提取,切割成小片段送入基于BERT的工藝類型分類器中。而后,基于BERT的工藝類型分類器依據(jù)輸入的小片段進行特征提取和文本分類,實現(xiàn)對操作序列的具體分類。最后,工藝實體識別器依據(jù)工藝操作序列所對應的操作類型進行數(shù)據(jù)提取,對其中的工藝操作文本和相應的參數(shù)數(shù)據(jù)進行提取,形成工藝操作三元組,最終完成材料科學文獻的工藝實體關系數(shù)據(jù)抽取。

    2.3 實體關系抽取流程

    2.3.1 語義塊實體識別

    將傳統(tǒng)流水線式實體關系抽取的命名實體識別和關系抽取任務轉化為多步的實體識別過程,具體的關系分類交由后續(xù)實體識別完成。因此,在前置的長標注命名實體識別過程中,可以兼容當前各項研究的實體識別。

    基于2.1節(jié)的標注方案,在實體識別時統(tǒng)一將數(shù)據(jù)識別為操作序列Seq,并通過一個命名實體識別模型將其完整且連續(xù)地識別,表達式為:

    Seq=NER(Text) (2)

    其中,NER(·)表示命名實體識別(Named Entity Recognition,NER)操作,Text表示輸入的文本段落。

    2.3.2 工藝類型分類

    為了更精確地對最終構建工藝和具體參數(shù)進行關系構建,經(jīng)過2.3.1節(jié)的長標注實體識別后,將提取出的短序列Seq送入一個單獨的分類器進行分類,進而獲取該工藝屬于何種類型,將該任務與實體識別解耦。

    基于文獻[18]數(shù)據(jù)集中的工藝類型分類,文本模型中的分類任務分別是[“Drying”,“Mixing”,“Purification”,“Heating”,“Cooling”],具體如圖3所示。

    使用一個BERT為后續(xù)的工藝操作分類,該方案不僅能夠將分類任務與實體識別解耦,確保參數(shù)不互相影響,同時還可以將從復雜語句中對實體分類的任務轉化為基于短句的文本分類任

    務。該方案可以更好地利用實體中的特征信息,例如針對“dried at 90 ℃ for 16 h”和“heated up to 250 ℃ for 30 min”的兩段操作序列分類,其核心分類特征為第1個單詞“dried”和“heated”,在短序列中這兩個單詞所具有的特征較為突出,更容易被BERT模型所捕捉,增加模型判別的精確度。

    語義塊序列實體識別結果Seq經(jīng)過BERT后,得到各單詞的詞向量特征,將具體詞向量特征輸入到一個全連接層(Fully Connected Layers,F(xiàn)C)后采用激活函數(shù)Softmax進行分類預測其屬于何種工藝操作類型,為后續(xù)的關系構建提供數(shù)據(jù)。具體計算式如下:

    P=Softmax(FC(BERT(Seq))) (3)

    其中,P代表分類概率。

    2.3.3 工藝數(shù)據(jù)提取

    與工藝類型分類相似,實體識別完成后將其作為短序列提取出來并分類操作完成后,將序列輸入到工藝數(shù)據(jù)提取器(圖4)中。該步驟的目的是正式識別出該語料中所包含的具體工藝操作、操作參數(shù)等信息,如“dried”、“90 ℃”及“16 h”等。

    圖4中,工藝數(shù)據(jù)提取器將序列Seq輸入到BERT中,隨后經(jīng)過全連接層后通過條件隨機場CRF層得到輸出,計算式為:

    P=CRF(FC(BERT(Seq))) (4)

    在該步驟中,由于每次輸入的文本段較少,因此采用傳統(tǒng)的BIO分類標注即可完成任務。

    2.3.4 工藝數(shù)據(jù)關系構建

    完成上述3個步驟后,即可將識別出的實體以及對應的工藝類型進行關系三元組組合,完成關系分類,如圖5所示。

    首先將短序列中識別出的主要工藝操作(圖5中的“dried”)填入到S,隨后遍歷剩余的參數(shù)實體并分別填入到O中。在遍歷的過程中,將2.3.2節(jié)提取的類型分類中具體的工藝類型和2.3.3節(jié)中提取的工藝數(shù)據(jù)進行組合,例如“Drying”與“Time”組合得到關系類型“Drying?Time”并填入到P中,最終形成材料工藝與具體操作參數(shù)的多組關系三元組。

    填空問題中,工藝的操作實體恒定為S,剩余的實體均為O,因此只需要依據(jù)O的數(shù)量同步復制出對應數(shù)量的關系三元組,并且分別填入即可,可以有效解決重疊關系的問題。

    同時,在工藝數(shù)據(jù)關系構建過程中,筆者采用的是語義塊標注方案,通過將關系分類語料限制于一個極短的語義塊內(nèi),從而避免多組工藝數(shù)據(jù)混淆在一個語義塊內(nèi)的復雜情況,降低了關系分類的復雜度,提升了模型性能。

    3 實驗與結果分析

    3.1 實體關系抽取流程

    實驗環(huán)境:操作系統(tǒng)Windows 10,CPU為11th Gen Intel Core i7?11700K,GPU為NVIDIA GeForce RTX 3070 8 GB,編程語言Python 3.8,深度學習框架PyTorch。

    采用準確率(Precision)、查全率(Recall)和F1分數(shù)(F1?score)作為評價指標,計算式分別為:

    Precision=?? (5)

    Recall= (6)

    F1=2× (7)

    其中,TP為預測樣本為真、實際樣本為真的樣本數(shù);FP為預測樣本為真、實際樣本為假的樣本數(shù);FN為預測樣本為假、實際樣本為真的樣本數(shù)。

    3.2 實驗數(shù)據(jù)

    實驗數(shù)據(jù)來源于文獻[18]中一種面向材料的合成工藝數(shù)據(jù)集,然而該數(shù)據(jù)集并未提供完整的文本數(shù)據(jù),僅提供數(shù)據(jù)所在段落,因此筆者為了能夠快速構建數(shù)據(jù)集,從其報告的數(shù)據(jù)中選擇能夠通過ELSEVIER提供的API批量下載的以開放獲取為主的文獻進行數(shù)據(jù)集構建,并將其分成3種難度:

    a. 簡單(Easy)難度數(shù)據(jù)集。單條數(shù)據(jù)不超過20個單詞,且每條數(shù)據(jù)僅包含一組工藝數(shù)據(jù)。該數(shù)據(jù)集偏向于理想化的實體關系抽取數(shù)據(jù)集。

    b. 中等(Medium)難度數(shù)據(jù)集。數(shù)據(jù)集中包含盡可能完整的段落,當輸入過大(輸入數(shù)據(jù)超過BERT編碼最大長度512個字符)時,在保留全部工藝數(shù)據(jù)的情況下對自然語言文段與結尾進行適當截取以保證能夠輸入模型。

    c. 困難(Hard)難度數(shù)據(jù)集。文本內(nèi)容與中等難度數(shù)據(jù)集相同,但是將全部實體兩兩進行實體關系標注,其中將不具備關系的實體對關系標注為Unknown。例如,兩個實體“dried”與“10 min”不具備關系,故兩者關系被標注為Unknown。

    3.3 基線算法

    實驗主要分為實體關系抽取任務和單獨的命名識別任務,因此筆者將基線算法分為兩部分。同時,為了更好地表征材料科學文獻中的數(shù)據(jù),在使用BERT作為底層模型時,筆者均采用經(jīng)過大規(guī)模材料科學文獻預訓練的MatSciBERT模型[19]。

    3.3.1 實體識別基線算法

    BERT?X系列堆疊模型以預訓練模型BERT作為底層,通過在其上疊加堆疊模型進行命名實體識別以檢驗筆者所提方案,具體分別為疊加線性分類層的BERT?Linear、疊加LSTM作為分類器的BERT?LSTM、疊加CRF層作為分類器的BERT?CRF以及同時疊加LSTM作為隱層和作為分類器CRF層的BERT?LSTM?CRF。

    W2NER[16]模型是將命名實體識別任務轉換成預測字與字之間的關系類別,即預測當前字與其鄰近字的關系,因此該模型不僅能夠用于命名實體識別,還可以進行關系抽取。從結果上看,該模型在目前14個數(shù)據(jù)集上均取得了SOTA的最優(yōu)效果,并且能夠處理重疊實體、非連續(xù)實體等問題。

    為了驗證筆者所提方案在不同情況下的識別效果,針對具體的命名實體識別任務,采用3種標注方案進行實驗:

    a. 方案一,連續(xù)標注模式的工藝數(shù)據(jù)實體識別,表述為?SeqLabel,其中,工藝數(shù)據(jù)的標記直接與其所屬操作分類對應;

    b. 方案二,連續(xù)標注的工藝數(shù)據(jù)實體識別,其中,工藝數(shù)據(jù)統(tǒng)一標注為Process?Sequence,表述為?SeqLabel?PS;

    c. 方案三,采用傳統(tǒng)BIO數(shù)據(jù)標注方案,將數(shù)據(jù)依據(jù)類型標注,表述為?Traditional。

    3.3.2 實體關系抽取基線算法

    CasRel[20]:一種聯(lián)合關系抽取模型,該方法基于共享底層的參數(shù),通過一種層疊式的指針標注方案(CasRel)對關系和實體進行建模。該模型使用BERT作為底層編碼器。

    LSTM Joint Extraction[21]:將實體關系抽取轉化為命名實體識別任務,通過提出一種實體關系抽取標注方法,通過同時標注實體和關系的方式將實體關系抽取問題轉化為序列標注問題。該基線算法在底層詞嵌入編碼方面采用的是傳統(tǒng)的One?Hot詞向量模式,該方法同樣是利用標注方案將實體關系抽取轉化為命名實體識別任務。

    SpERT[22]:為了解決實體關系抽取中存在的重疊實體問題,擯棄傳統(tǒng)的序列標注和指針標注方案,提出了一種新的標注方案對數(shù)據(jù)進行標注,即依據(jù)數(shù)據(jù)長度進行切分以構造多個Span,然后訓練分類器判斷各個Span是否為實體。該模型是一種聯(lián)合抽取模型,其中,Span與文中所述的語義塊都是指一段連續(xù)的文字作為實體。但是,該基線方法是建立不同Span之間的關系,而本文則是在語義塊序列內(nèi)部進行關系建立。

    BiRTE[23]:BiRTE是基于CasRel提出的改進模型,CasRel的關系三元組提取過程與流水線式相似,首先提取subjects,然后同時抽取所有的objects和關系,即無向的抽取模式。當subjects提取失效時,后續(xù)任務全部失效。而BiRTE采用的是雙向提取方式進行互補,從而提升模型性能。

    BERTBiLSTM?Rel:采用分階段的方式進行實體關系抽取,其中選擇傳統(tǒng)標注方案(方案三)作為數(shù)據(jù)標注方案,在命名實體識別部分采用BERT?BiLSTM作為詞向量編碼模型和實體識別模型。實體識別完成后,使用一個線性關系分類器對各實體進行關系分類。

    3.4 實驗結果與分析

    3.4.1 命名實體識別

    由于Medium和Hard難度數(shù)據(jù)集的文本相同,實體識別結果完全相同,故二選一進行實驗。表1為基于長標注的材料科學文獻工藝數(shù)據(jù)命名實體識別實驗結果,主要對比了各模型采用不同標注方案下的性能。在命名實體識別對比實驗中,采用傳統(tǒng)標注數(shù)據(jù)的方案被記為?Traditional,采用筆者所提的方案被記為?SeqLabel和?SeqLabel?PS。

    從表1可以看出,對于Easy難度數(shù)據(jù)集,采用基于傳統(tǒng)標注方案的命名實體識別策略進行實體識別時,BERT作為底層輸入,模型的性能在部分實驗數(shù)據(jù)上占優(yōu),即使在多個數(shù)據(jù)集上取得SOTA的W2NER復雜結構模型也無法與簡單結構模型相比,這主要是由于文本量不長,數(shù)據(jù)內(nèi)容較為簡單,導致傳統(tǒng)標注更能適配這種“理想型”的數(shù)據(jù)。而筆者所提方案需要進行長序列匹配,因此在性能評價指標上并不占優(yōu)勢。

    對于Hard難度數(shù)據(jù)集,模型結構較為簡單的BERT?X系列模型均難以完成命名實體識別任務,模型性能下降較為嚴重,這主要是由于Hard難度數(shù)據(jù)集的段落文本量較長,不相關的干擾數(shù)據(jù)較多,簡單結構的模型難以對實體進行提取。

    綜上,在命名實體識別實驗中,基于復雜結構的W2NER模型能夠更好地對連續(xù)詞進行建模,而表1的實驗結果也表明,基于語義塊標注的命名實體識別方案更貼合于材料科學文獻中的工藝數(shù)據(jù)特點,因此實驗中該方案表現(xiàn)更優(yōu)。在基于W2NER的實體識別實驗中,標注更簡單的

    ?SeqLabel?PS在部分實驗中不如稍復雜的SeqLabel,這主要是因為該模型的實體識別部分與標簽分類預測模塊分別獨立,標簽分類模型主要是判斷詞與詞的關系而非用于判斷詞的歸屬類別。而在?SeqLabel?PS中,判別實體識別是否準確僅判斷該實體的左右邊界是否準確,因此雖然

    ?SeqLabel?PS在部分實驗結果上的表現(xiàn)不如稍復雜的?SeqLabel,但總體而言,基于連續(xù)標注的兩組實驗結果差距不大,在模型預測誤差允許范圍內(nèi)。由于單獨標注不符合W2NER的特點,因此呈現(xiàn)出性能下降的情況??梢姡c傳統(tǒng)的標注方案相比,筆者所提方案性能更優(yōu)。

    3.4.2 關系分類

    表2為材料工藝數(shù)據(jù)三元組的實體關系抽取實驗結果,其中SBLERE為本文模型,其后的?X代表筆者所提模型采用的基礎語義塊命名實體識別模塊。

    從表2可以看出,對于Easy難度數(shù)據(jù)集,由于單句總詞數(shù)不多,且僅有一個工藝實體序列即最多僅有兩組實體關系結果,因此任務較為簡單,各模型均能夠有優(yōu)異表現(xiàn),此時影響模型性能的主要因素是實體識別任務的完成情況。

    Medium難度數(shù)據(jù)集較為接近真實數(shù)據(jù),并且貼合當前多數(shù)模型的特點,但由于該數(shù)據(jù)集文本量較長,干擾文本較多,導致現(xiàn)有模型的性能較差,其中性能較差的是基于傳統(tǒng)標注實體識別的BERTBiLSTM?Rel,傳統(tǒng)標注方案雖然在命名實體識別任務中表現(xiàn)優(yōu)異,但是由于關系分類復雜度較高,導致其性能下降嚴重。筆者提出的SBLERE模型采用傳統(tǒng)流水線方式對關系進行分類,將關系分類和實體識別放置在較短的文本中進行,從而取得了幾乎100%的Precision與Recall,因此在關系分類時的性能與第一階段的長標注命名實體識別結果相近。

    對于Hard難度數(shù)據(jù)集,筆者所提模型基于將復雜語義切割成小語義塊的思想,將工藝數(shù)據(jù)的關系構建任務精確限定到具體的工藝操作序列中,從而避免Unknown情況的出現(xiàn),因此其在Hard難度數(shù)據(jù)集上的實驗結果與Medium相同。而其他基線算法在該數(shù)據(jù)集上性能均有所下降,這是由于加入了Unknown這一標簽后,關系分類的復雜度隨著實體的數(shù)量成幾何倍數(shù)上升,因此各模型均表現(xiàn)出性能下降的趨勢。從表2還可以看出,筆者提出的SBLERE模型雖然是一種流水線式的實體關系抽取模型,但是由于其將關系分類和進一步的實體抽取過程獨立出來,避免了Unknown情況的出現(xiàn),因此所有的復雜度均與第一階段的命名實體識別相關,尤其當采用W2NER模型作為底層的實體識別模塊時,筆者所提標注方案與分類模型均能夠取得最優(yōu)結果,即便采用的是較為簡單的BERT?BiLSTM?CRF作為實體識別模塊,同樣能夠取得與CasRel和SpERT相近的性能,并且在F1分數(shù)上優(yōu)于兩者。另一方面,由于大量存在重疊實體,同樣基于標記方法的LSTM Joint Extraction性能表現(xiàn)非常差。由此可見,筆者所提模型在面向材料科學文獻的工藝數(shù)據(jù)抽取數(shù)據(jù)方面是有效的。

    4 結束語

    筆者基于將長文段切分為小語義塊這一化繁為簡的總體思想,提出了一種基于語義塊標注模型的材料科學工藝數(shù)據(jù)提取方案,將工藝操作序列以總詞數(shù)較少的短句形式提取出來,然后依據(jù)該結果分步、分類處理,從而實現(xiàn)針對材料科學文獻的工藝數(shù)據(jù)提取。實驗結果表明,筆者所提標注方案與分類模型均優(yōu)于其他基線算法。下一步工作將優(yōu)化模型在第一步長標注命名實體識別中的準確度,并且結合材料科學文獻中工藝數(shù)據(jù)的特征將模型拓展到對性能或其他數(shù)據(jù)的提取上,進一步提高模型性能。

    參 考 文 獻

    [1] 宿彥京,付華棟,白洋,等.中國材料基因工程研究進展[J].金屬學報,2020,56(10):1313-1323.

    [2] SORIN DRAGHICI.Pathway Analysis of High Throughput Experiments[M].Calabasas:CRC Press,2014.

    [3] LU Z H.Computational discovery of energy materials in the era of big data and machine learning:A critical review[J].Materials Reports:Energy,2021,1(3):

    100047.

    [4] JHA D,GUPTA V,WARD L,et al.Enabling deeper lea? rning on big data for materials informatics applications[J].Scientific Reports,2021,11(1):1-12.

    [5] RAMPRASAD R,BATRA R,PILANIA G,et al. Machine learning in materials informatics:Recent applications and prospects[J].NPJ Computational Materials,2017,3(1):54.

    [6] BUTLER K T,DAVIES D W,HUGH C,et al.Machine learning for molecular and materials science[J].Nature,2018,559:547-555.

    [7] ZHANG H T,F(xiàn)U H D,ZHU S C,et al.Machine learning assisted composition effective design for precipitation strengthened copper alloys[J].Acta Materialia,2021,215:117118.

    [8] RACCUGLIA P,ELBERT K C,ADLER P,et al.Mach? ine?learning?assisted materials discovery using failed experiments[J].Nature,2016,533:73-76.

    [9] KIM E,HUANG K,SAUNDERS A,et al.Materials Synthesis Insights from Scientific Literature via Text Extraction and Machine Learning[J].Chemistry of Materials,2017,29(21):9436-9444.

    [10] GHADBEIGI L,HARADA J K,LETTIERE B R,et al.Performance and resource considerations of Li?ion battery electrode materials[J].Energy & Environmental Science:EES,2015,8(6):1640-1650.

    [11] KIM E,HUANG J M,TOMALA A,et al.Machine?lear? ned and codified synthesis parameters of oxide materials[J].Scientific Data,2017,4(1):1-9.

    [12] LIU Y L,YAO C H,NIU C,et al.Text mining of hyper? eutectic Al?Si alloys literature based on active learning[J].Materials Today Communications,2021, 26:102032.

    [13] 劉英莉,李武亮,牛琛,等.基于遷移學習的鋁硅合金文獻的文本識別[J].材料科學與工程學報,2022,40(4):640-645;667.

    [14] 魏曉,王曉鑫,陳永琪,等.基于自然語言處理的材料領域知識圖譜構建方法[J].上海大學學報(自然科學版),2022,28(3):386-398.

    [15] WANG W R,JIANG X,TIAN S H,et al.Automated pipeline for superalloy data by text mining[J].NPJ Computational Materials,2022(1):58-69.

    [16] LI J,F(xiàn)EI H,LIU J,et al.Unified Named Entity Recognition as Word?Word Relation Classification[J].arXiv e?prints,2021.DOI:10.48550/arXiv.2112.10070.

    [17] DEVLIN J,CHANG M W,LEE K,et al.Bert:Pre?tra? ining of deep bidirectional transformers for language understanding[J].arXiv e?prints,2018.

    [18] WANG Z,KONONOVA O,CRUSE K,et al.Dataset of solution?based inorganic materials synthesis procedures extracted from the scientific literature[J].Scientific Data,2022,9(1):231.

    [19] GUPTA T,ZAKI M,KRISHNAN N M A,et al.Mat Sc? iBERT:A materials domain language model for text mining and information extraction[J].NPJ Computational Materials,2022(1):940-950.

    [20] WEI Z,SU J,WANG Y,et al.A Novel Cascade Binary Tagging Framework for Relational Triple Extraction[C]//Proceedings of the 58th Annual Meeting of the Association for Computational Linguistics.2020.DOI:10.18653/v1/2020.acl?main.136.

    [21] WANG S L,ZHANG Y,CHE W X,et al.Joint extraction of entities and relations based on a novel graph scheme[C]//Proceedings of the 27th International Joint Conference on Artificial Intelligence.2018:4461-4467.DOI:10.24963/ijcai.2018/620.

    [22] EBERTS M,ULGES A.Span?based Joint Entity and Rel? ation Extraction with Transformer Pre?training[J].arXiv e?prints,2019.DOI:10.48550/arXiv.1909.077 55.

    [23] REN F L,ZHANG L H,ZHAO X F,et al.A Simple but Effective Bidirectional Extraction Framework for Relational Triple Extraction[C]//WSDM.2022:824-832.

    (收稿日期:2023-05-15,修回日期:2024-04-08)

    Semantic Block Labeled for the Process Data Entity

    Relation Extraction in Materials Science Literature

    HUANG Xing?rui

    (Faculty of Information Engineering and Automation, Kunming University of Science and Technology)

    Abstract?? A semantic block labeled method for the process entity relationship extraction in materials science literature was proposed, including the pipelined entity relation extraction model for materials science literature based on multi?step entity recognition. Aiming at the characteristic that the semantic logic blocks of process data usually appear continuously in materials science literature; firstly, having a semantic block annotation scheme used to take process text as a sequence for named entity recognition; and then, having the extracted process data sequence classified separately and the entity recognition further named; and finally, having? the relationship triples between process operations and condition parameters constructed according to both type classification results and entity recognition results. Experimental results show that, compared to the baseline algorithm, the accuracy of the proposed annotation scheme in process entity recognition is improved by 4%, and the F1 score of the proposed model in the process data entity relationship extraction experiment is increased by 3.6%.

    Key words?? named entity recognition, relation extraction, material process data, science literature

    (Continued from Page 461)

    riser, the basic equation of un?damped natural vibration was determined, and the differential equation of natural frequency and the modal shapes basic equation of the drilling risers transverse vibration were further analyzed and established, and then the numerical solution was carried out. In addition, having the control variable method adopted to analyze the influence of the drilling risers length, tension ratio and material on its natural frequency and change rule was implemented, including having vibration modes at different orders displayed through MATLAB software. The results show that, controlling the tension ratio and reasonably selecting the riser types can effectively improve natural frequency, avoid resonance with wave current force and ensure the safety of deep?water drilling operation. In addition, the drilling risers vibration mode isnt a standard sinusoidal curve, and the vibration mode changes constantly under the influence of time.

    Key words?? modal shape, deepwater drilling riser, mechanical analysis, natural frequency, control variable method, MATLAB

    高清黄色对白视频在线免费看| 九色亚洲精品在线播放| 18禁观看日本| 亚洲熟妇熟女久久| 欧美人与性动交α欧美精品济南到| 午夜成年电影在线免费观看| 又黄又爽又免费观看的视频| avwww免费| 免费女性裸体啪啪无遮挡网站| 99热国产这里只有精品6| 最近最新中文字幕大全电影3 | 国产主播在线观看一区二区| 狠狠婷婷综合久久久久久88av| 黄色片一级片一级黄色片| 淫妇啪啪啪对白视频| 黄色成人免费大全| 人妻 亚洲 视频| 亚洲国产精品一区二区三区在线| 婷婷丁香在线五月| 亚洲va日本ⅴa欧美va伊人久久| 天天躁夜夜躁狠狠躁躁| 人人妻人人澡人人爽人人夜夜| 99精品久久久久人妻精品| 久久久久久久久免费视频了| 亚洲精品中文字幕在线视频| 国产精品九九99| 如日韩欧美国产精品一区二区三区| 国产片内射在线| 97人妻天天添夜夜摸| 91成人精品电影| 久久精品人人爽人人爽视色| 久久久久久亚洲精品国产蜜桃av| 亚洲国产精品合色在线| 日韩欧美一区视频在线观看| 视频在线观看一区二区三区| 黄片播放在线免费| 黄网站色视频无遮挡免费观看| 极品少妇高潮喷水抽搐| 成年人免费黄色播放视频| 国产精华一区二区三区| 免费观看精品视频网站| 日韩免费av在线播放| 捣出白浆h1v1| 亚洲一卡2卡3卡4卡5卡精品中文| 日日摸夜夜添夜夜添小说| 老汉色∧v一级毛片| 人人妻人人爽人人添夜夜欢视频| 别揉我奶头~嗯~啊~动态视频| 人人澡人人妻人| 亚洲成人免费电影在线观看| 欧美黄色片欧美黄色片| 欧美乱妇无乱码| 久久国产精品人妻蜜桃| 国产精品免费视频内射| 人人妻人人爽人人添夜夜欢视频| 午夜精品久久久久久毛片777| 免费观看精品视频网站| 亚洲少妇的诱惑av| 亚洲精品中文字幕一二三四区| 久久久久视频综合| 欧美 亚洲 国产 日韩一| 午夜福利视频在线观看免费| 精品福利永久在线观看| 欧美大码av| 亚洲中文字幕日韩| 中文字幕人妻丝袜一区二区| 欧美精品一区二区免费开放| 中文字幕高清在线视频| 国产在线一区二区三区精| 90打野战视频偷拍视频| 免费在线观看亚洲国产| 91在线观看av| 91成人精品电影| 欧美日本中文国产一区发布| 婷婷精品国产亚洲av在线 | 婷婷成人精品国产| 国产成人欧美| 久热这里只有精品99| 欧美日韩中文字幕国产精品一区二区三区 | 午夜福利欧美成人| 国产不卡一卡二| 亚洲成人国产一区在线观看| 亚洲成av片中文字幕在线观看| 日韩欧美三级三区| 国产成人系列免费观看| 在线观看免费视频日本深夜| 91av网站免费观看| 69av精品久久久久久| 最近最新中文字幕大全免费视频| 国产精品 国内视频| 性少妇av在线| 午夜免费鲁丝| 国产精品99久久99久久久不卡| www.自偷自拍.com| 国产精品二区激情视频| 免费观看人在逋| 欧美日韩福利视频一区二区| av一本久久久久| 精品国产国语对白av| 精品电影一区二区在线| 国产主播在线观看一区二区| 国产精品av久久久久免费| 成人黄色视频免费在线看| 日韩欧美在线二视频 | 两个人免费观看高清视频| 男女床上黄色一级片免费看| 欧美日韩亚洲综合一区二区三区_| 又大又爽又粗| 日本一区二区免费在线视频| 成熟少妇高潮喷水视频| av天堂久久9| 啦啦啦视频在线资源免费观看| 一本大道久久a久久精品| 一本大道久久a久久精品| 亚洲国产毛片av蜜桃av| 母亲3免费完整高清在线观看| 男女高潮啪啪啪动态图| 午夜精品国产一区二区电影| 成在线人永久免费视频| 欧美丝袜亚洲另类 | 国产精品久久视频播放| 免费在线观看黄色视频的| 亚洲精品乱久久久久久| 国产1区2区3区精品| 亚洲精品成人av观看孕妇| 欧美精品高潮呻吟av久久| 国产亚洲欧美在线一区二区| 欧美日韩成人在线一区二区| 欧美丝袜亚洲另类 | 黄色视频,在线免费观看| 日本a在线网址| 法律面前人人平等表现在哪些方面| 亚洲五月色婷婷综合| 精品乱码久久久久久99久播| 日本撒尿小便嘘嘘汇集6| 99国产精品一区二区三区| 少妇被粗大的猛进出69影院| 一区在线观看完整版| 久久精品国产综合久久久| avwww免费| a级毛片在线看网站| 国产精品一区二区在线不卡| 黄色 视频免费看| 人人妻人人澡人人爽人人夜夜| 亚洲第一欧美日韩一区二区三区| 亚洲三区欧美一区| 国内毛片毛片毛片毛片毛片| 伊人久久大香线蕉亚洲五| 精品国产一区二区三区四区第35| 国产91精品成人一区二区三区| 精品福利永久在线观看| 18禁黄网站禁片午夜丰满| 国内久久婷婷六月综合欲色啪| 亚洲一区二区三区不卡视频| 一进一出抽搐gif免费好疼 | 十八禁网站免费在线| 久久精品国产亚洲av高清一级| 男人操女人黄网站| 午夜成年电影在线免费观看| av电影中文网址| 一边摸一边做爽爽视频免费| 国产精品久久久av美女十八| 黄片小视频在线播放| 黑丝袜美女国产一区| 色精品久久人妻99蜜桃| 老司机午夜十八禁免费视频| www.精华液| 久久精品国产综合久久久| 一二三四在线观看免费中文在| 不卡一级毛片| 欧美精品高潮呻吟av久久| 捣出白浆h1v1| 十八禁人妻一区二区| 法律面前人人平等表现在哪些方面| 午夜91福利影院| 精品视频人人做人人爽| 国产成人一区二区三区免费视频网站| 国产精品亚洲一级av第二区| 精品国产一区二区三区久久久樱花| 大片电影免费在线观看免费| 久久久久久久国产电影| 满18在线观看网站| 在线播放国产精品三级| 国产精品一区二区精品视频观看| 亚洲全国av大片| 他把我摸到了高潮在线观看| 美女高潮到喷水免费观看| tocl精华| 50天的宝宝边吃奶边哭怎么回事| 欧美 亚洲 国产 日韩一| 涩涩av久久男人的天堂| 国产欧美日韩精品亚洲av| 在线观看免费日韩欧美大片| 精品少妇久久久久久888优播| 亚洲中文字幕日韩| 国产欧美日韩精品亚洲av| 一边摸一边抽搐一进一小说 | 精品亚洲成a人片在线观看| www.999成人在线观看| 精品免费久久久久久久清纯 | 久久国产亚洲av麻豆专区| 亚洲精品中文字幕在线视频| cao死你这个sao货| 美女福利国产在线| 精品一品国产午夜福利视频| 精品一区二区三区四区五区乱码| 国产亚洲一区二区精品| 18禁美女被吸乳视频| 9色porny在线观看| 人妻 亚洲 视频| 国产成人一区二区三区免费视频网站| 变态另类成人亚洲欧美熟女 | 99热只有精品国产| 成人国语在线视频| 老熟妇仑乱视频hdxx| 在线看a的网站| 夜夜躁狠狠躁天天躁| 在线观看一区二区三区激情| 午夜老司机福利片| 国产99白浆流出| 日本a在线网址| xxxhd国产人妻xxx| avwww免费| 午夜老司机福利片| 飞空精品影院首页| 大香蕉久久成人网| 一二三四在线观看免费中文在| 午夜福利,免费看| 91国产中文字幕| 亚洲国产中文字幕在线视频| 热re99久久国产66热| 中文字幕精品免费在线观看视频| 色在线成人网| 一夜夜www| 日韩欧美在线二视频 | 狠狠婷婷综合久久久久久88av| 女人精品久久久久毛片| 成年人午夜在线观看视频| 国产主播在线观看一区二区| 18禁裸乳无遮挡免费网站照片 | 国产精品 欧美亚洲| 老司机在亚洲福利影院| av在线播放免费不卡| 男女之事视频高清在线观看| 国产97色在线日韩免费| 亚洲精品国产色婷婷电影| 久久国产精品大桥未久av| 亚洲av日韩在线播放| 视频区图区小说| 怎么达到女性高潮| 一级a爱视频在线免费观看| 国产又爽黄色视频| 亚洲九九香蕉| 操美女的视频在线观看| 少妇猛男粗大的猛烈进出视频| 嫩草影视91久久| 成人亚洲精品一区在线观看| 一进一出抽搐动态| 中文字幕高清在线视频| 精品人妻1区二区| 国产精品一区二区在线观看99| 精品熟女少妇八av免费久了| 在线观看舔阴道视频| 欧美av亚洲av综合av国产av| 亚洲黑人精品在线| 高清在线国产一区| 欧美日韩亚洲高清精品| 人妻丰满熟妇av一区二区三区 | 熟女少妇亚洲综合色aaa.| 丁香欧美五月| 亚洲精品在线观看二区| 中文字幕人妻丝袜制服| 欧美日韩亚洲国产一区二区在线观看 | av一本久久久久| 国产精品综合久久久久久久免费 | 免费在线观看日本一区| 亚洲国产欧美日韩在线播放| 成人免费观看视频高清| 99久久国产精品久久久| 天天躁日日躁夜夜躁夜夜| 精品国产一区二区三区四区第35| 久久精品国产亚洲av高清一级| 少妇的丰满在线观看| 免费在线观看视频国产中文字幕亚洲| 日本五十路高清| 欧美日韩乱码在线| 国产单亲对白刺激| 午夜激情av网站| 亚洲美女黄片视频| 中文字幕另类日韩欧美亚洲嫩草| 夜夜夜夜夜久久久久| 亚洲专区字幕在线| 国产淫语在线视频| 51午夜福利影视在线观看| 久久久国产一区二区| 一级黄色大片毛片| 精品人妻熟女毛片av久久网站| 国产精品秋霞免费鲁丝片| 又紧又爽又黄一区二区| 亚洲国产精品一区二区三区在线| 久久精品亚洲熟妇少妇任你| 精品国产乱码久久久久久男人| 在线观看免费高清a一片| 一区二区日韩欧美中文字幕| 国产熟女午夜一区二区三区| 操出白浆在线播放| 亚洲av电影在线进入| 99国产精品一区二区蜜桃av | 欧洲精品卡2卡3卡4卡5卡区| 欧美 日韩 精品 国产| 国产精品一区二区在线观看99| 自拍欧美九色日韩亚洲蝌蚪91| 欧美乱码精品一区二区三区| 十八禁网站免费在线| 免费av中文字幕在线| 国产精品久久久久久精品古装| 俄罗斯特黄特色一大片| 免费av中文字幕在线| 激情视频va一区二区三区| 久久精品人人爽人人爽视色| 午夜久久久在线观看| 久久久久久久国产电影| 亚洲精品美女久久av网站| 十分钟在线观看高清视频www| 欧美日韩黄片免| 久久中文字幕人妻熟女| 亚洲成国产人片在线观看| 岛国在线观看网站| 90打野战视频偷拍视频| 久久ye,这里只有精品| 男女午夜视频在线观看| 别揉我奶头~嗯~啊~动态视频| 亚洲国产精品合色在线| 美女午夜性视频免费| 一级片免费观看大全| 亚洲avbb在线观看| 久久久国产精品麻豆| 欧美精品一区二区免费开放| 一级毛片精品| 黑人巨大精品欧美一区二区蜜桃| 午夜亚洲福利在线播放| av网站在线播放免费| 久久久久久免费高清国产稀缺| 99在线人妻在线中文字幕 | 女性被躁到高潮视频| 精品一区二区三卡| a级毛片在线看网站| svipshipincom国产片| 热re99久久精品国产66热6| 色94色欧美一区二区| 日本一区二区免费在线视频| 国精品久久久久久国模美| 国产欧美日韩一区二区三区在线| 91av网站免费观看| 黄色丝袜av网址大全| 水蜜桃什么品种好| 美女高潮到喷水免费观看| 精品午夜福利视频在线观看一区| 国产亚洲一区二区精品| 亚洲av日韩精品久久久久久密| 亚洲人成电影免费在线| 不卡av一区二区三区| 国产欧美日韩精品亚洲av| 国产激情久久老熟女| 99国产极品粉嫩在线观看| 一区二区三区精品91| 女人爽到高潮嗷嗷叫在线视频| 美女午夜性视频免费| 波多野结衣一区麻豆| 美国免费a级毛片| 久久精品国产清高在天天线| 国产极品粉嫩免费观看在线| 女性被躁到高潮视频| 国产精品久久久人人做人人爽| 成人手机av| 亚洲av片天天在线观看| 美女午夜性视频免费| 久9热在线精品视频| 国产免费男女视频| 天堂动漫精品| 久久草成人影院| 欧美 日韩 精品 国产| 大香蕉久久成人网| www日本在线高清视频| 十八禁网站免费在线| 亚洲国产中文字幕在线视频| 91字幕亚洲| 超色免费av| 国产精品久久久久成人av| 成年人免费黄色播放视频| 欧洲精品卡2卡3卡4卡5卡区| av线在线观看网站| 久久久久国内视频| 色婷婷久久久亚洲欧美| 黄色视频,在线免费观看| 久久精品国产综合久久久| 叶爱在线成人免费视频播放| 欧美性长视频在线观看| 人成视频在线观看免费观看| 亚洲成人免费电影在线观看| 精品熟女少妇八av免费久了| 国产日韩欧美亚洲二区| 精品久久蜜臀av无| 在线观看免费视频网站a站| www.精华液| 久久精品国产清高在天天线| 国产99久久九九免费精品| 国产三级黄色录像| 天天躁日日躁夜夜躁夜夜| 日韩欧美免费精品| 老熟妇乱子伦视频在线观看| 亚洲五月婷婷丁香| 国产欧美日韩一区二区三区在线| 性少妇av在线| 精品视频人人做人人爽| 久久影院123| 丰满人妻熟妇乱又伦精品不卡| 久久久精品免费免费高清| av一本久久久久| 亚洲男人天堂网一区| 免费观看精品视频网站| 老司机影院毛片| 欧美性长视频在线观看| 久久久久国内视频| 欧美亚洲日本最大视频资源| 亚洲欧美激情综合另类| av在线播放免费不卡| 正在播放国产对白刺激| 国产欧美亚洲国产| 日韩免费高清中文字幕av| 大型av网站在线播放| 又紧又爽又黄一区二区| av福利片在线| 免费看a级黄色片| 成熟少妇高潮喷水视频| 亚洲成人手机| 国产亚洲精品久久久久5区| 一本大道久久a久久精品| 天天操日日干夜夜撸| 国产精品98久久久久久宅男小说| 亚洲熟女精品中文字幕| 男女午夜视频在线观看| 欧美国产精品一级二级三级| 十八禁网站免费在线| 热re99久久国产66热| 男女之事视频高清在线观看| 女同久久另类99精品国产91| 麻豆国产av国片精品| 伊人久久大香线蕉亚洲五| 国产精品亚洲av一区麻豆| 在线观看免费视频网站a站| 丰满迷人的少妇在线观看| 国产一区二区激情短视频| 国产在视频线精品| 亚洲一区二区三区欧美精品| 三上悠亚av全集在线观看| bbb黄色大片| 精品久久久久久,| 色尼玛亚洲综合影院| 99热只有精品国产| 99久久99久久久精品蜜桃| 午夜亚洲福利在线播放| 午夜两性在线视频| 日本wwww免费看| 涩涩av久久男人的天堂| av一本久久久久| 在线天堂中文资源库| 亚洲午夜理论影院| 香蕉丝袜av| 一本综合久久免费| 国产精品自产拍在线观看55亚洲 | 99久久精品国产亚洲精品| 国产无遮挡羞羞视频在线观看| 极品教师在线免费播放| 亚洲国产欧美网| 天堂动漫精品| 午夜免费鲁丝| 男女床上黄色一级片免费看| 露出奶头的视频| 国产精品亚洲av一区麻豆| 纯流量卡能插随身wifi吗| 久久亚洲真实| 精品久久久精品久久久| 国产男女超爽视频在线观看| 亚洲av片天天在线观看| 亚洲中文av在线| 99国产精品99久久久久| 美女高潮到喷水免费观看| 亚洲在线自拍视频| 天堂动漫精品| 国产在线精品亚洲第一网站| 日韩欧美三级三区| 久久久久久久久免费视频了| 一二三四社区在线视频社区8| 最新美女视频免费是黄的| 国产精品免费一区二区三区在线 | 欧美乱色亚洲激情| 亚洲中文av在线| 国产激情欧美一区二区| 国产亚洲精品第一综合不卡| 1024视频免费在线观看| 国产乱人伦免费视频| 在线天堂中文资源库| 老司机午夜福利在线观看视频| 亚洲精品在线观看二区| bbb黄色大片| 纯流量卡能插随身wifi吗| av超薄肉色丝袜交足视频| 又黄又爽又免费观看的视频| 亚洲av日韩在线播放| 午夜精品久久久久久毛片777| 久久影院123| a级片在线免费高清观看视频| 免费av中文字幕在线| 丰满的人妻完整版| av天堂久久9| 亚洲成人国产一区在线观看| 久久热在线av| 日本精品一区二区三区蜜桃| 最新美女视频免费是黄的| 深夜精品福利| 人妻丰满熟妇av一区二区三区 | 久久久久久久久久久久大奶| 一级a爱视频在线免费观看| 亚洲一区二区三区欧美精品| 在线观看免费视频日本深夜| 国产成人影院久久av| 亚洲精品在线美女| 欧美色视频一区免费| 国产精品综合久久久久久久免费 | 正在播放国产对白刺激| 国产精品99久久99久久久不卡| 亚洲七黄色美女视频| 久久精品亚洲精品国产色婷小说| 欧美日韩亚洲综合一区二区三区_| 男男h啪啪无遮挡| 人人妻人人澡人人爽人人夜夜| 男男h啪啪无遮挡| 俄罗斯特黄特色一大片| 亚洲专区字幕在线| 中文字幕另类日韩欧美亚洲嫩草| 欧美日韩国产mv在线观看视频| 国产成人精品在线电影| 一本大道久久a久久精品| 久久久久久久精品吃奶| 国产精品亚洲一级av第二区| 久9热在线精品视频| 自线自在国产av| 18禁裸乳无遮挡动漫免费视频| 日韩 欧美 亚洲 中文字幕| 欧美国产精品一级二级三级| 18禁国产床啪视频网站| 成人18禁高潮啪啪吃奶动态图| 男女床上黄色一级片免费看| 黑人欧美特级aaaaaa片| 中文字幕人妻丝袜一区二区| 精品国内亚洲2022精品成人 | 国产精品自产拍在线观看55亚洲 | 国产有黄有色有爽视频| 一本大道久久a久久精品| 大型av网站在线播放| 又紧又爽又黄一区二区| 国产精华一区二区三区| 老熟妇仑乱视频hdxx| aaaaa片日本免费| 搡老岳熟女国产| 夫妻午夜视频| 18禁国产床啪视频网站| 国产精品电影一区二区三区 | 久久精品国产综合久久久| 亚洲欧美一区二区三区黑人| 国产精品99久久99久久久不卡| 国产精华一区二区三区| 久久久久久人人人人人| 精品国产一区二区久久| 亚洲欧美色中文字幕在线| 欧美中文综合在线视频| 免费在线观看完整版高清| 99国产精品99久久久久| 国产伦人伦偷精品视频| 欧美不卡视频在线免费观看 | 亚洲第一av免费看| 亚洲avbb在线观看| 日韩欧美三级三区| 少妇猛男粗大的猛烈进出视频| 男女之事视频高清在线观看| 水蜜桃什么品种好| 18在线观看网站| 美女视频免费永久观看网站| 精品久久久久久电影网| 欧美日本中文国产一区发布| 日日爽夜夜爽网站| 亚洲精品中文字幕一二三四区| 国产亚洲精品久久久久久毛片 | 下体分泌物呈黄色| 后天国语完整版免费观看| 日本五十路高清| 国产精品久久电影中文字幕 | 在线观看免费日韩欧美大片| 欧美亚洲日本最大视频资源| 性少妇av在线| 久久亚洲精品不卡| 怎么达到女性高潮| 精品国产乱码久久久久久男人| 99国产精品一区二区三区| 最近最新中文字幕大全免费视频| 麻豆乱淫一区二区| 99久久国产精品久久久| videos熟女内射| 午夜成年电影在线免费观看| 99热只有精品国产| netflix在线观看网站| 久久久久久久久久久久大奶| 婷婷成人精品国产| 国产97色在线日韩免费|