• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    開放式地理實體關(guān)系抽取的Bootstrapping方法

    2016-09-06 09:13:20劉希亮
    測繪學報 2016年5期
    關(guān)鍵詞:語料實例實體

    余 麗,陸 鋒,劉希亮

    1. 中國科學院地理科學與資源研究所資源與環(huán)境信息系統(tǒng)國家重點實驗室,北京 100101; 2. 中國科學院大學,北京 100101; 3. 江蘇省地理信息資源開發(fā)與利用協(xié)同創(chuàng)新中心,江蘇 南京 210023

    ?

    開放式地理實體關(guān)系抽取的Bootstrapping方法

    余麗1,2,陸鋒1,3,劉希亮1

    1. 中國科學院地理科學與資源研究所資源與環(huán)境信息系統(tǒng)國家重點實驗室,北京 100101; 2. 中國科學院大學,北京 100101; 3. 江蘇省地理信息資源開發(fā)與利用協(xié)同創(chuàng)新中心,江蘇 南京 210023

    Foundation support: The National Natural Science Foundation of China (No.41271408); The National High-Tech Research and Development Program of China (863 Program) (No.2013AA120305)

    從網(wǎng)絡(luò)文本中抽取地理實體間空間關(guān)系和語義關(guān)系要求高時效性和強魯棒性。本文提出一種開放式地理實體關(guān)系的自動抽取方法,通過bootstrapping技術(shù)統(tǒng)計詞語的詞性、位置和距離特征來計算語境中詞語權(quán)值,據(jù)此確定描述地理實體關(guān)系的關(guān)鍵詞,最終組織成結(jié)構(gòu)化實例,并使用百度百科和Stanford CoreNLP開展了試驗。研究結(jié)果表明,本文方法能自動挖掘自然語言的部分詞法特征,無須領(lǐng)域?qū)<抑R和大規(guī)模標注語料,適用于未知關(guān)系類型的信息抽取任務;較之經(jīng)典的Frequency、TF-IDF和PPMI頻率統(tǒng)計方法,精度和召回率分別提升約5%和23%。

    文本挖掘;地理實體;關(guān)系抽??;定量評價;bootstrapping

    包含地理實體(如地名、組織機構(gòu)、地緣政治實體)間語義關(guān)系(如從屬、合作、繼承關(guān)系)和空間關(guān)系(如拓撲、方位、距離關(guān)系)的文本資源在廣義地理信息采集與服務中占據(jù)重要地位[1-2],為地圖數(shù)據(jù)庫更新提供了巨大潛能,催生了開放式地理實體關(guān)系抽取研究[3-5]。開放式地理實體關(guān)系抽取旨在從自然語言文本中抽取地理實體間的空間關(guān)系和語義關(guān)系,形成結(jié)構(gòu)化的表達形式[6]。它不限定于處理規(guī)范的新聞文本或者特定領(lǐng)域文本,無須預先定義關(guān)系的類別;以“抽取”代替“識別”,挖掘文本中蘊含的一切關(guān)系實例,能更好地適應高動態(tài)、富信息的網(wǎng)絡(luò)文本的處理需求[7]。

    相比實體關(guān)系抽取[8],地理實體關(guān)系抽取有如下特殊性:①缺乏大規(guī)模地理實體關(guān)系標注語料[9]用于訓練監(jiān)督的機器學習模型,以檢測種類繁多的關(guān)系類型;②缺乏典型的地理知識庫作為啟動弱監(jiān)督機器學習模型的種子?,F(xiàn)有的地理知識庫(GeoNames Ontology、OSM SemanticNetwork、GeoWordNet等)僅限于描述面狀地理實體間的“分離”、“包含”和“相鄰”3種空間關(guān)系,遠不能滿足多類型地理實體關(guān)系抽取的需求;③文本蘊含的地理實體關(guān)系實例分布異質(zhì)性極強,熱點地理實體相關(guān)的關(guān)系描述頻繁出現(xiàn),而不受關(guān)注的地理實體文本描述較少;④地理實體關(guān)系抽取結(jié)果難以定量評價。人工逐條檢查上萬條地理實體關(guān)系實例的質(zhì)量是不切實際的,而小規(guī)模的隨機采樣又無法計算系統(tǒng)的召回率。因此,從自然語言文本中抽取地理實體關(guān)系面臨著巨大的挑戰(zhàn)。

    本文重在解決開放式地理實體關(guān)系抽取的兩個核心問題:①缺乏大規(guī)模標注語料和地理知識庫的前提下,如何自動產(chǎn)生地理實體間空間關(guān)系和語義關(guān)系的結(jié)構(gòu)化元組;②如何定量評價開放式地理實體關(guān)系抽取效果。本文利用bootstrapping技術(shù)分析關(guān)系詞的詞法特征,引入到關(guān)鍵詞提取的權(quán)值計算中,據(jù)此將共現(xiàn)地理實體組織成結(jié)構(gòu)化形式,然后分析結(jié)果集的質(zhì)量分布情況,計算關(guān)系抽取精度和召回率,并基于百度百科文本驗證方法的有效性。

    1 相關(guān)工作

    針對文本蘊含地理實體關(guān)系抽取的問題,大量的研究成果集中在模式匹配方法。該方法通過提取和泛化詞法(句法)模式,可識別出有限的關(guān)系實例。文獻[10]將蘊含“包含”和“相鄰”空間關(guān)系的隱式表達(文本中未出現(xiàn)關(guān)系詞)定義為詞法模式,作為查詢條件在Google和Yahoo中搜索新的地理實體關(guān)系實例。該方法適用于按照行政區(qū)劃級別排列的規(guī)范化地址文本,但僅能抽取指定的兩種地理實體關(guān)系。文獻[11]使用人工設(shè)計的493種中文模式與網(wǎng)頁摘要進行匹配,以獲取顯式表達(文本中出現(xiàn)關(guān)系詞)的地理實體關(guān)系實例。該方法能識別出多種類型的地理實體關(guān)系,但需要預先準備大規(guī)模的空間詞典和模式庫。與文獻[11]的方法相同,文獻[12]使用234個空間動詞建立語法規(guī)則,實現(xiàn)了意大利語空間關(guān)系抽取。上述的模式匹配方法,其模式發(fā)現(xiàn)過程仍依賴于手工勞動,需要領(lǐng)域?qū)<抑R;且有限的模式難以適應文本快速增長和變化需求。文獻[13]基于自建立的大規(guī)??臻g關(guān)系標注語料,采用序列比對的方法自動生成空間關(guān)系句法模式庫。該方法提高了模式挖掘的自動化程度,但仍需耗費大量人力構(gòu)建標注語料庫。與之不同,關(guān)系抽取的模式發(fā)現(xiàn)過程充分利用了海量文本的冗余性,整個模式庫的構(gòu)建過程無須人工干預。利用該方法建立的經(jīng)典關(guān)系抽取系統(tǒng)有Reverb、OLLIE、OpenIE。然而,這些系統(tǒng)仍需由領(lǐng)域?qū)<翌A先定義詞法或句法規(guī)則。

    為了放松地理實體關(guān)系抽取方法對領(lǐng)域?qū)<抑R的限制,一些研究者使用監(jiān)督的機器學習方法從文本中自動抽取地理實體關(guān)系:通過大規(guī)模的標記數(shù)據(jù)訓練某個分類模型,再對未標記數(shù)據(jù)自動分配某種預定義的關(guān)系類型。該方法的主要障礙是缺乏可獲取的地理實體關(guān)系標注語料。考慮到存在大量未標注的文本且人工標注語料的成本太高,自動生成大規(guī)模標注語料的弱監(jiān)督學習方法逐步成為研究熱點。文獻[14]使用在線的酒店點評文本自動構(gòu)建了地理實體“相鄰”關(guān)系的標注語料,規(guī)模為10.6萬個文檔。文獻[15]使用維基百科自動回標技術(shù),建立了河流與水系的“流入”關(guān)系、郊區(qū)與城鎮(zhèn)的“組成”關(guān)系。然而,上述自動構(gòu)建標注語料的方法僅能建立指定類型的關(guān)系標注語料。當建立新類型的關(guān)系標注語料時,仍需一定的手工勞動,難以快速適應地理實體關(guān)系的多樣性。此外,以空間本體為知識庫的弱監(jiān)督學習算法也備受關(guān)注。文獻[16]通過手動建立空間本體,成功抽取了地理實體之間的拓撲和方位關(guān)系。相比自動生成大規(guī)模標注語料的方法,空間本體更容易擴展到新類型的地理實體關(guān)系抽??;然而該方法不能識別出一對地理實體之間的多種關(guān)系。

    目前,業(yè)界尚未開展開放式地理實體關(guān)系抽取無監(jiān)督機器學習方法研究,而在關(guān)系抽取領(lǐng)域已有大量的無監(jiān)督機器學習研究成果。其中,頻率統(tǒng)計[17-18]是一種廣泛應用于無監(jiān)督關(guān)系抽取的重要技術(shù),其核心思想是通過統(tǒng)計詞語頻數(shù)反映詞語重要性,并選擇權(quán)值最大的詞語作為關(guān)系名稱。然而,頻率統(tǒng)計方法要求表征關(guān)系的詞語頻繁出現(xiàn),難以適用于稀疏分布的地理實體關(guān)系實例。

    2 方 法

    地理實體關(guān)系抽取過程包含:數(shù)據(jù)獲取、數(shù)據(jù)預處理和數(shù)學計算,如圖1所示。下文將重點闡述數(shù)學計算子過程。

    圖1 地理實體關(guān)系抽取流程Fig.1 Flowchart of geo-entity relation extraction

    2.1任務定義

    本文研究范圍僅限于抽取一個句子中共現(xiàn)的兩個地理實體之間的空間關(guān)系詞語和語義關(guān)系詞語,且關(guān)系詞語存在于句中,即顯式表達的二元地理實體關(guān)系。針對一個句子中共現(xiàn)的兩個地理實體(e1, e2);從所在的句中提取詞語組成一個語境s,并過濾停用詞“了”、“的”等。關(guān)鍵詞抽取即是從集合s中選擇一個詞語k,使得k能表達一種空間關(guān)系或者語義關(guān)系。

    semanticrelation=(e1,k,e2)

    (1)

    semanticrelation=(e1,d,k,m,e2)

    (2)

    式(1)將語義關(guān)系實例作為屬性表達式,用于描述地理實體指定類型的屬性值。式(2)將空間關(guān)系實例作為位置表達式,用于描述一個地理實體相對于參考地理實體的空間位置。分析文本發(fā)現(xiàn),空間關(guān)系表達習慣于同時使用方位和拓撲詞語(“天津東臨渤?!?,或者同時使用方位、行為和度量詞語(“西子灣距高雄市中心車程約20分鐘”)。因此,式(2)中d表示方位詞語(“東”、“中心”),m表示度量詞語(“20分鐘”)。

    2.2特征選擇

    本文借鑒實體關(guān)系抽取和關(guān)鍵詞提取方法,探索自然語言表達的地理實體關(guān)系文本在“詞性”、“位置”、“長度”和“距離”方面的規(guī)律,為下文地理實體關(guān)系抽取提供先驗知識。

    (1) 詞性POS(名詞、動詞、介詞或者其他)。

    (2) 位置LOC(e1的左邊,e1和e2中間,e2的右邊)。

    (3) 左邊有連詞或者介詞時的位置LCCP(e1的左邊,e1和e2中間,e2的右邊)。

    (4) 到e1的距離DIS(e1)。

    (5) 到句尾的距離DIS(e2)。

    (6) 長度LEN,以字為單位。

    (7)e1到e2的距離DIS(e1,e2),以詞語為單位。

    考慮到文本數(shù)量龐大且構(gòu)建標注語料的成本太高,本文使用bootstrapping技術(shù)[19]分析上述7個特征。bootstrapping的原理是通過隨機重采樣,利用小樣本來推測總體的統(tǒng)計量;當樣本規(guī)模足夠大時,基于樣本的統(tǒng)計結(jié)果即可代表總體的水平。首先,隨機排列句子,利用等間距抽樣的方法選擇100個句子;然后,手工標注每個句子的關(guān)系詞語,形成標注語料;最后,從標注語料中隨機采樣形成一個等規(guī)模的新樣本。該過程重復多次(10 000次)得到一個大規(guī)模的樣本集合,統(tǒng)計每個樣本中上述7個特征的值,計算出各項特征的均值。

    統(tǒng)計結(jié)果如表1、表2所示,得到如下規(guī)律:①15%的句子不存在地理實體關(guān)系,超過半數(shù)的關(guān)系詞為名詞,余下的為動詞和介詞;②沒有關(guān)系詞位于e1的左邊,大多數(shù)都位于e2的右邊;③當關(guān)系詞的左邊存在連詞或者介詞時,94.16%的關(guān)系詞位于e2的右邊;④關(guān)系詞到e1的距離為1的比例最大;⑤關(guān)系詞位于句尾的比例最大;⑥關(guān)系詞遠離地理實體e2的概率最高;⑦名詞長度至少為2個字,且跨度較大;⑧當存在關(guān)系詞時,兩個地理實體之間的距離不超過6個詞語。

    與現(xiàn)有方法中獲取的詞法和句法規(guī)則不同[20],上述規(guī)律不是直接用于模式匹配,而是輔助數(shù)據(jù)預處理并將在2.3節(jié)使用統(tǒng)計學方法將其定量化表達,以指導地理實體關(guān)系抽取。同時,這些規(guī)律不是某個文本的變換形式,而是真實數(shù)據(jù)直觀反映出的人們對關(guān)系表達的普遍認知。考慮到語言的地域、文化和認知差異性,bootstrapping方法針對不同體裁、風格的文本獲取規(guī)律的取值范圍將發(fā)生變化。

    表1 特征的平均比例

    表2 特征的平均取值范圍

    2.3關(guān)鍵詞提取

    基于bootstrapping方法得到的統(tǒng)計結(jié)果,本文引入詞語的詞性、位置和距離的重要性,設(shè)計關(guān)鍵詞提取方法,如式(3)—(6)。針對詞語i,wgti表示在詞性、位置、距離影響下的重要性。POSi、locationi、distancei分別表示詞性、位置、距離重要性。Ii、Ie1、Ie2、Iccp分別表示詞語i、地理實體e1和e2、連詞或者介詞在句中的索引,Len表示句子長度。對于每一對地理實體(e1,e2),使用式(3)從語境s中選擇一個重要程度最高的詞語k,作為表達地理實體關(guān)系的關(guān)鍵詞。公式中數(shù)字來源于2.2節(jié)的統(tǒng)計結(jié)果,如式(4)中0.56表示樣本中有56%的關(guān)系詞是名詞。這些數(shù)字不是人為設(shè)定的固定值,會隨著數(shù)據(jù)變化而變化。

    wgti=(wgt(POSi)+wgt(locationi)+

    wgt(distancei))/3

    (3)

    (4)

    (5)

    wgt(distancei)=

    (6)

    2.4關(guān)系實例構(gòu)建

    將每一對地理實體(e1,e2)和它的關(guān)鍵詞k代入式(1)組成語義關(guān)系實例(e1,k,e2)。然而,本文僅為一對地理實體提取一個關(guān)鍵詞,不能完整地描述空間關(guān)系實例(e1,d,k,m,e2)。具體地,方位詞語d受到分詞結(jié)果的影響:若d和拓撲詞被劃分成一個整體(“東鄰”),則提取的關(guān)鍵詞既蘊含方位關(guān)系又包含拓撲關(guān)系;若d和拓撲詞被劃分成兩個部分(“東”和“鄰”),則提取的關(guān)鍵詞僅表達方位關(guān)系。同時,度量詞語m通過預定義的規(guī)則來識別:①若句中存在數(shù)量詞(詞性為CD),且位于地理實體e2右邊x個窗口內(nèi)(取值為3),則保存該數(shù)量詞和單位(詞性為M)作為度量詞m;②默認地關(guān)系表達式(1)和(2)中e1是主體,e2是客體,如果關(guān)鍵詞k位于e2右邊,則將e1設(shè)置為客體,e2設(shè)置為主體。

    3 試 驗

    3.1試驗數(shù)據(jù)

    本文以新浪旅游的中國景點名稱作為地理實體的基礎(chǔ)地名,在百度百科中逐個獲取對應的簡介或正文首段,使用Stanford CoreNLP進行數(shù)據(jù)預處理(分段、分句、分詞、詞性標注、地理實體識別),構(gòu)建了地理實體關(guān)系抽取的文本集合,數(shù)據(jù)分布如表3所示。

    表3 不同階段的語料規(guī)模

    3.2真值

    本文使用bootstrapping技術(shù),基于少量的手工評價結(jié)果,自動產(chǎn)生大規(guī)模的真值:首先,使用等間距隨機采樣法選擇100個句子(不包括特征選擇使用的句子),逐句標注地理實體關(guān)系實例;然后,從標注句子中隨機采樣形成一個等規(guī)模的新樣本,該過程重復10 000次,共產(chǎn)生10 000個樣本,作為評價結(jié)果質(zhì)量的標注語料,每個語料的規(guī)模為100個句子。此外,本文將與經(jīng)典的3種頻率統(tǒng)計方法(Frequency、TF-IDF和PPMI)進行質(zhì)量對比。

    3.3評價指標

    本文結(jié)合地理實體關(guān)系抽取任務描述,定義精度和召回率如表4。Ri表示結(jié)果集i,G(unrel)i表示標注語料i中不存在關(guān)系的實例,G(rel)i表示標注語料i中存在關(guān)系的實例,每個標注語料的精度和召回率計算如式(7),均值計算如式(8)。

    表4 精度和召回率的定義

    (7)

    (8)

    4 結(jié)果與討論

    本文針對18 588對地理實體共抽取了27 012個關(guān)系實例,一對地理實體可擁有多種關(guān)系。4種方法的精度和召回率如圖2所示(本文方法表示為WFS)。試驗結(jié)果顯示,本文方法的精度和召回率分別為80%和87.79%,比其他3種統(tǒng)計方法的均值分別提高了約5%和23%。

    圖2 4種方法的精度和召回率的均值Fig.2 Means of precision and recall of four approaches

    表5展示了百度百科詞條“海寧”的文本抽取地理實體關(guān)系的結(jié)果。其中,斜體表示根據(jù)句意表達的邏輯調(diào)整元素順序后的關(guān)系實例,黑體表示擴展了度量詞后的空間關(guān)系實例。本文針對一個句子中共現(xiàn)的兩個地理實體僅提取一個關(guān)鍵詞。例如表5,若“東鄰”被劃分成一個詞語,則提取的關(guān)系詞為“東鄰”;否則提取的關(guān)系詞為“東”。為了避免分詞結(jié)果不一致導致的信息誤判,本文認為上述的兩種關(guān)系抽取結(jié)果都是正確的。

    表5 地理實體關(guān)系抽取的示例

    據(jù)統(tǒng)計,試驗文本中97.63%的語境存在多個頻數(shù)最大的詞語。此時,TF-IDF和PPMI僅與詞語在整個文本集合中的分布有關(guān),將賦予低頻詞語更大的權(quán)值;而Frequency恰好相反,將賦予高頻詞語更大的權(quán)值。因此對于分布稀疏的地理實體關(guān)系實例,單純地依靠頻率統(tǒng)計難以判斷詞語在句中的重要程度。本文基于自然語言描述的詞法特征,通過bootstrapping技術(shù)自動引入詞語的詞性、位置和距離的重要性,提取關(guān)鍵詞作為描述地理實體關(guān)系的線索。對比Frequency、TF-IDF和PPMI 3種頻率統(tǒng)計方法,本文方法產(chǎn)生了更高質(zhì)量的關(guān)系實例。同時,本文方法無須領(lǐng)域?qū)<抑R和大規(guī)模標注語料,不限定地理實體關(guān)系的類型,僅需少量的標注語料即可啟動算法,能快速適應新領(lǐng)域的地理實體關(guān)系抽取需求。

    然而,本文抽取的地理實體關(guān)系實例中存在兩類錯誤:①不存在關(guān)系的地理實體對提取出關(guān)系(FP);②存在關(guān)系的地理實體對提取出錯誤的關(guān)系(FN)。針對上述兩類錯誤,本文使用bootstrapping技術(shù)對結(jié)果集中10 000個標注語料進行統(tǒng)計,結(jié)果如表6所示。FP錯誤可分為4種情況:①是地理實體對之間不存在關(guān)系,本文方法僅能通過語境為空或者地理實體之間的距離大于6個詞語判斷不存在關(guān)系,尚未深入到句意理解層次;②是不能識別隱式的地理實體關(guān)系,本文的研究范圍僅限于明確提及關(guān)鍵詞的顯式地理實體關(guān)系抽?。虎酆廷芫怯晌谋绢A處理帶來的級聯(lián)錯誤。FN錯誤可分為6種情況:①是當關(guān)系詞語(“進入”)作為謂語且存在多個狀語修飾詞(“間或”“蜿蜒”),長距離的影響增大了狀語修飾詞的權(quán)值,無法準確提取出謂語關(guān)系詞;②是當多個地理實體按照行政級別順次排列(“中國”“云南省”“麗江市”),僅僅依靠詞語本身的特征尚不能準確識別出嵌套地理實體之間復雜的空間關(guān)系;③是當多個詞語組成一個復雜的關(guān)系描述,單個關(guān)鍵詞語無法概括完整的語義;④—⑥均是由文本預處理帶來的級聯(lián)錯誤。

    綜上所述,本文針對顯式表達的地理實體關(guān)系,僅考慮了詞法特征,尚未深入到句法分析和語義理解層次。同時,本文未考慮中文分詞、詞性標注、地理實體識別、指代消解等環(huán)節(jié)帶來的級聯(lián)錯誤,文本預處理的質(zhì)量有待提高;且本文僅使用百度百科進行試驗,語料的規(guī)模和多樣性有待進一步擴展。此外,本文產(chǎn)生的27 012個關(guān)系實例共有9148種關(guān)系類型,存在大量語義相似但描述不同的關(guān)系,例如“位于”“處于”“在”“地處”“坐落”均表達同一種空間關(guān)系。本文研究的關(guān)鍵詞提取方法是語義聚類的基礎(chǔ),下一步將研究語義聚類問題,以減少關(guān)系實例表達的冗余,為地理實體高動態(tài)信息的增量更新提供基礎(chǔ)數(shù)據(jù)。

    表6 錯誤分析

    5 結(jié) 論

    本文研究了開放式地理實體關(guān)系抽取中的關(guān)鍵詞提取方法。通過bootstrapping技術(shù)驗證了本文的關(guān)鍵詞提取方法在精度和召回率上均優(yōu)于3種經(jīng)典的頻率統(tǒng)計方法。同時,本文方法無須領(lǐng)域?qū)<抑R和大規(guī)模標注語料,不限定地理實體關(guān)系的類型,具有潛在的領(lǐng)域移植性。在后續(xù)的工作中,需要加入不同領(lǐng)域、體裁、規(guī)模的文本擴充試驗,以驗證方法的可移植性;同時需要研究語義聚類技術(shù),以降低地理實體關(guān)系實例的冗余性。

    [1]陸鋒, 張恒才. 大數(shù)據(jù)與廣義GIS[J]. 武漢大學學報(信息科學版), 2014, 39(6): 645-654.

    LU Feng, ZHANG Hengcai. Big Data and Generalized GIS[J]. Geomatics and Information Science of Wuhan University, 2014, 39(6): 645-654.

    [2]劉紀平, 栗斌, 石麗紅, 等. 一種本體驅(qū)動的地理空間事件相關(guān)信息自動檢索方法[J]. 測繪學報, 2011, 40(4): 502-508.

    LIU Jiping, LI Bin, SHI Lihong, et al. An Automated Retrieval Method of Geo-spatial Event Information Based on Ontology[J]. Acta Geodaetica et Cartographica Sinica, 2011, 40(4): 502-508.

    [3]張春菊. 面向中文文本的事件時空與屬性信息解析方法研究[J]. 測繪學報, 2015, 44(5): 590. DOI: 10.11947/j.AGCS.2015.20140657.

    ZHANG Chunju. Interpretation of Event Spatio-temporal and Attribute Information in Chinese Text[J]. Acta Geodaetica et Cartographica Sinica, 2015, 44(5): 590. DOI: 10.11947/j.AGCS.2015.20140657.

    [4]張恒才, 陸鋒, 陳潔. 微博客蘊含交通信息的提取[J]. 中國圖象圖形學報, 2013, 18(1): 123-129.

    ZHANG Hengcai, LU Feng, CHEN Jie. Extracting Traffic Information from Massive Micro-blog Messages[J]. Journal of Image and Graphics, 2013, 18(1): 123-129.

    [5]JONES C B, PURVES R S, CLOUGH P D, et al. Modelling Vague Places with Knowledge from the Web[J]. International Journal of Geographical Information Science, 2008, 22(10): 1045-1065.

    [6]JONES C B, PURVES R S. Geographical Information Retrieval[J]. International Journal of Geographical Information Science, 2008, 22(3): 219-228.

    [7]趙軍, 劉康, 周光有, 等. 開放式文本信息抽取[J]. 中文信息學報, 2011, 25(6): 98-110.

    ZHAO Jun, LIU Kang, ZHOU Guangyou, et al. Open Information Extraction[J]. Journal of Chinese Information Processing, 2011, 25(6): 98-110.

    [8]楊博, 蔡東風, 楊華. 開放式信息抽取研究進展[J]. 中文信息學報, 2014, 28(4): 1-11, 36.YANG Bo, CAI Dongfeng, YANG Hua. Progress in Open Information Extraction[J]. Journal of Chinese Information Processing, 2014, 28(4): 1-11, 36.

    [9]張雪英, 張春菊, 朱少楠. 中文文本的地理空間關(guān)系標注[J]. 測繪學報, 2012, 41(3): 468-474.ZHANG Xueying, ZHANG Chunju, ZHU Shaonan. Annotation for Geographical Spatial Relations in Chinese Text[J]. Acta Geodaetica et Cartographica Sinica, 2012, 41(3): 468-474.

    [10]SCHOCKAERT S, SMART P D, ABDELMOTY A I, et al. Mining Topological Relations from the Web[C]∥Proceedings of the 19th International Workshop on Database and Expert Systems Application. Turin: IEEE, 2008: 652-656.

    [11]CAO Cungen, WANG Shi, JIANG Lin. A Practical Approach to Extracting Names of Geographical Entities and Their Relations from the Web[C]∥Proceedings of the 7th International Conference on Knowledge Science, Engineering and Management. Switzerland: Springer, 2014: 210-221.

    [12]ELIA A, GUGLIELMO D, MAISTO A, et al. A Linguistic-based Method for Automatically Extracting Spatial Relations from Large Non-structured Data[C]∥Proceedings of the 13th International Conference on Algorithms and Architectures for Parallel Processing. Switzerland: Springer, 2013: 193-200.

    [13]ZHU Shaonan, ZHANG Xueying, ZHANG Chunju. Syntactic Pattern Recognition of Geospatial Relations Described in Natural Language[C]∥Proceedings of the 2010 International Conference on Broadcast Technology and Multimedia Communication. New York: IEEE, 2010: 354-357.

    [14]WALLGRüN J O, KLIPPEL A, BALDWIN T. Building a Corpus of Spatial Relational Expressions Extracted from Web Documents[C]∥Proceedings of the 8th Workshop on Geographic Information Retrieval. New York: ACM, 2014.

    [15]BLESSING A, SCHüTZE H. Fine-grained Geographical Relation Extraction from Wikipedia[C]∥Proceedings of the 7th International Conference on Language Resources and Evaluation. Valletta: LREC, 2010.

    [16]LOGLISCI C, IENCO D, ROCHE M, et al. Toward Geographic Information Harvesting: Extraction of Spatial Relational Facts from Web Documents[C]∥Proceedings of the 2012 IEEE 12th International Conference on Data Mining Workshops. Brussels: IEEE, 2012: 789-796.

    [17]MORO A, NAVIGLI R. Integrating Syntactic and Semantic Analysis into the Open Information Extraction Paradigm[C]∥Proceedings of the 23rd International Joint Conference on Artificial Intelligence. Beijing: [s.n.], 2013: 2148-2154.

    [18]LIU Zhiyuan, CHEN Xinxiong, ZHENG Yabin, et al. Automatic Keyphrase Extraction by Bridging Vocabulary Gap[C]∥Proceedings of the 15th Conference on Computational Natural Language Learning. Stroudsburg: Association for Computational Linguistics, 2011: 135-144.

    [19]ABNEY S P. Bootstrapping[C]∥Proceedings of the 40th Annual Meeting of the Association for Computational Linguistics. Stroudsburg: Association for Computational Linguistics, 2002: 360-367.

    [20]鄧敏, 徐銳, 李志林, 等. 空間查詢中自然語言空間關(guān)系與度量空間關(guān)系的轉(zhuǎn)換方法研究: 以面目標為例[J]. 測繪學報, 2009, 38(6): 527-531.

    DENG Min, XU Rui, LI Zhilin, et al. A Spatial-query-driven Transformation between Metric Spatial Relations and Natural Language Spatial Relations: Taking Regions as Example[J]. Acta Geodaetica et Cartographica Sinica, 2009, 38(6): 527-531.

    (責任編輯:宋啟凡)

    YU Li (1986—), female, PhD candidate, majors in spatial information mining in internet.

    A Bootstrapping Based Approach for Open Geo-entity Relation Extraction

    YU Li1,2,LU Feng1,3,LIU Xiliang1

    1. State Key Lab of Resources and Environmental Information System, The Institute of Geographic Sciences and Natural Resources Research, Beijing 100101, China; 2. University of Chinese Academy of Sciences, Beijing 100101, China; 3. Jiangsu Center for Collaborative Innovation in Geographical Information Resource Development and Application, Nanjing 210023, China

    Extracting spatial relations and semantic relations between two geo-entities from Web texts, asks robust and effective solutions. This paper puts forward a novel approach: firstly, the characteristics of terms (part-of-speech, position and distance) are analyzed by means of bootstrapping. Secondly, the weight of each term is calculated and the keyword is picked out as the clue of geo-entity relations. Thirdly, the geo-entity pairs and their keywords are organized into structured information. Finally, an experiment is conducted with Baidubaike and Stanford CoreNLP. The study shows that the presented method can automatically explore part of the lexical features and find additional relational terms which neither the domain expert knowledge nor large scale corpora need. Moreover, compared with three classical frequency statistics methods, namely Frequency, TF-IDF and PPMI, the precision and recall are improved about 5% and 23% respectively.

    text mining; geo-entities; relation extraction; quantitative evaluation; bootstrapping

    2015-04-07

    2016-02-02

    余麗(1986—),女,博士生,研究方向為互聯(lián)網(wǎng)空間信息搜索。

    E-mail: yul@lreis.ac.cn

    陸鋒

    LU Feng

    E-mail: luf@lreis.ac.cn

    10.11947/j.AGCS.2016.20150181.

    YU Li,LU Feng,LIU Xiliang.A Bootstrapping Based Approach for Open Geo-entity Relation Extraction[J]. Acta Geodaetica et Cartographica Sinica,2016,45(5):616-622. DOI:10.11947/j.AGCS.2016.20150181.

    P208

    A

    1001-1595(2016)05-0616-07

    國家自然科學基金(41271408);國家863計劃(2013AA120305)

    引文格式:余麗,陸鋒,劉希亮.開放式地理實體關(guān)系抽取的Bootstrapping方法[J].測繪學報,2016,45(5):616-622.

    猜你喜歡
    語料實例實體
    前海自貿(mào)區(qū):金融服務實體
    中國外匯(2019年18期)2019-11-25 01:41:54
    實體的可感部分與實體——兼論亞里士多德分析實體的兩種模式
    哲學評論(2017年1期)2017-07-31 18:04:00
    兩會進行時:緊扣實體經(jīng)濟“釘釘子”
    振興實體經(jīng)濟地方如何“釘釘子”
    基于語料調(diào)查的“連……都(也)……”出現(xiàn)的語義背景分析
    華語電影作為真實語料在翻譯教學中的應用
    《苗防備覽》中的湘西語料
    國內(nèi)外語用學實證研究比較:語料類型與收集方法
    完形填空Ⅱ
    完形填空Ⅰ
    av网站免费在线观看视频| 天天躁夜夜躁狠狠久久av| 婷婷成人精品国产| 久久久久久久精品精品| 十分钟在线观看高清视频www| 交换朋友夫妻互换小说| 宅男免费午夜| 精品视频人人做人人爽| 伊人久久国产一区二区| 51国产日韩欧美| 校园人妻丝袜中文字幕| 极品人妻少妇av视频| av有码第一页| 久热这里只有精品99| 国产一级毛片在线| 狂野欧美激情性bbbbbb| 最近中文字幕高清免费大全6| 一本—道久久a久久精品蜜桃钙片| 国产永久视频网站| 国产成人午夜福利电影在线观看| 熟女人妻精品中文字幕| 午夜福利视频精品| 成人漫画全彩无遮挡| 一本—道久久a久久精品蜜桃钙片| 国产精品一国产av| 中文天堂在线官网| 精品国产露脸久久av麻豆| 国产探花极品一区二区| 成年女人在线观看亚洲视频| 999精品在线视频| 久久久久精品性色| 高清欧美精品videossex| 狂野欧美激情性xxxx在线观看| 日本av免费视频播放| 欧美日韩一区二区视频在线观看视频在线| 新久久久久国产一级毛片| 丝袜脚勾引网站| 国语对白做爰xxxⅹ性视频网站| av国产久精品久网站免费入址| 黄色毛片三级朝国网站| www.熟女人妻精品国产 | 精品一区在线观看国产| 一区二区av电影网| 日韩中字成人| 亚洲精品,欧美精品| 成人毛片a级毛片在线播放| 亚洲av电影在线进入| 亚洲,欧美精品.| 午夜免费男女啪啪视频观看| 成人二区视频| 欧美成人午夜精品| 日本欧美国产在线视频| 亚洲国产精品一区三区| 各种免费的搞黄视频| 欧美亚洲 丝袜 人妻 在线| 国产熟女欧美一区二区| 久久久久国产网址| 亚洲久久久国产精品| 亚洲国产毛片av蜜桃av| 九色亚洲精品在线播放| 中文字幕精品免费在线观看视频 | 爱豆传媒免费全集在线观看| 国产熟女欧美一区二区| 午夜福利在线观看免费完整高清在| 亚洲久久久国产精品| 熟妇人妻不卡中文字幕| 午夜福利视频精品| 免费观看性生交大片5| 777米奇影视久久| 国产男人的电影天堂91| 少妇人妻久久综合中文| 五月伊人婷婷丁香| 精品国产乱码久久久久久小说| 国产精品成人在线| 亚洲一区二区三区欧美精品| 精品国产露脸久久av麻豆| 国产淫语在线视频| 91成人精品电影| 中文字幕亚洲精品专区| 国产黄色视频一区二区在线观看| 黄片播放在线免费| 亚洲欧洲日产国产| 一级a做视频免费观看| 大码成人一级视频| 黑人猛操日本美女一级片| 国产麻豆69| 久久精品国产自在天天线| 亚洲熟女精品中文字幕| 国产熟女午夜一区二区三区| 久久久久久久久久久久大奶| 黄色配什么色好看| 亚洲人成网站在线观看播放| 久久久国产欧美日韩av| 欧美成人午夜免费资源| 天天躁夜夜躁狠狠躁躁| 一级黄片播放器| 欧美亚洲日本最大视频资源| 国产精品久久久久久精品古装| 久久99热6这里只有精品| 美女内射精品一级片tv| 精品久久国产蜜桃| 69精品国产乱码久久久| 亚洲av国产av综合av卡| 久久99一区二区三区| 久久人妻熟女aⅴ| 高清黄色对白视频在线免费看| 80岁老熟妇乱子伦牲交| 热re99久久精品国产66热6| 国内精品宾馆在线| 成年人午夜在线观看视频| av电影中文网址| 午夜福利影视在线免费观看| 日韩免费高清中文字幕av| 另类亚洲欧美激情| 国产精品国产三级国产专区5o| 熟女人妻精品中文字幕| 曰老女人黄片| 日本欧美国产在线视频| 国产免费一区二区三区四区乱码| 校园人妻丝袜中文字幕| 亚洲色图综合在线观看| 欧美日韩国产mv在线观看视频| 亚洲av电影在线观看一区二区三区| 日韩三级伦理在线观看| 久久久久久伊人网av| 99热国产这里只有精品6| 国产精品偷伦视频观看了| 天天躁夜夜躁狠狠久久av| 香蕉丝袜av| 欧美xxⅹ黑人| 永久网站在线| 午夜福利在线观看免费完整高清在| 亚洲在久久综合| 成年人免费黄色播放视频| 天堂中文最新版在线下载| 母亲3免费完整高清在线观看 | 在现免费观看毛片| 最近的中文字幕免费完整| 黄色 视频免费看| 亚洲图色成人| 国产日韩欧美在线精品| 亚洲国产看品久久| 国产又色又爽无遮挡免| 精品人妻熟女毛片av久久网站| 一个人免费看片子| 久久这里有精品视频免费| 青春草视频在线免费观看| 亚洲欧美色中文字幕在线| 久热这里只有精品99| 国产精品不卡视频一区二区| 人妻一区二区av| 黄色配什么色好看| 成人毛片60女人毛片免费| 交换朋友夫妻互换小说| 成人毛片a级毛片在线播放| 你懂的网址亚洲精品在线观看| 丝袜人妻中文字幕| 大香蕉久久成人网| 99热网站在线观看| 一本—道久久a久久精品蜜桃钙片| 亚洲精品aⅴ在线观看| 国产免费福利视频在线观看| 免费观看av网站的网址| 欧美xxⅹ黑人| 91aial.com中文字幕在线观看| 日本色播在线视频| 日韩中文字幕视频在线看片| 亚洲成国产人片在线观看| 亚洲国产av影院在线观看| 免费观看a级毛片全部| 如日韩欧美国产精品一区二区三区| 免费观看a级毛片全部| 亚洲美女视频黄频| xxx大片免费视频| 色视频在线一区二区三区| 日本爱情动作片www.在线观看| 国产免费一区二区三区四区乱码| 亚洲欧美清纯卡通| 国产精品一二三区在线看| 亚洲精品一区蜜桃| 成人午夜精彩视频在线观看| 日韩在线高清观看一区二区三区| 国产精品国产av在线观看| 一区二区日韩欧美中文字幕 | kizo精华| 久久久久国产网址| 国产av码专区亚洲av| 亚洲成色77777| 日本-黄色视频高清免费观看| 亚洲人成77777在线视频| 女性生殖器流出的白浆| 久久久久久久久久人人人人人人| 免费观看在线日韩| 免费人妻精品一区二区三区视频| 观看av在线不卡| 精品久久蜜臀av无| av卡一久久| 男人爽女人下面视频在线观看| 免费日韩欧美在线观看| 五月天丁香电影| 亚洲美女搞黄在线观看| 国产又爽黄色视频| 伦理电影大哥的女人| 99精国产麻豆久久婷婷| 日本-黄色视频高清免费观看| 亚洲精品久久久久久婷婷小说| 亚洲精品乱久久久久久| 制服人妻中文乱码| av不卡在线播放| 亚洲少妇的诱惑av| 亚洲,欧美,日韩| 男女啪啪激烈高潮av片| 国产欧美日韩综合在线一区二区| 又大又黄又爽视频免费| 一级毛片 在线播放| 国产亚洲午夜精品一区二区久久| 黑人欧美特级aaaaaa片| 亚洲欧美日韩卡通动漫| 日韩免费高清中文字幕av| 最近的中文字幕免费完整| 欧美日韩亚洲高清精品| 巨乳人妻的诱惑在线观看| 18+在线观看网站| 亚洲经典国产精华液单| 免费大片黄手机在线观看| 国产永久视频网站| 国产一区二区在线观看av| 国产男女内射视频| 亚洲婷婷狠狠爱综合网| 春色校园在线视频观看| 99热6这里只有精品| 亚洲图色成人| 中国美白少妇内射xxxbb| 亚洲成人av在线免费| 22中文网久久字幕| 久久久久精品久久久久真实原创| 少妇的丰满在线观看| 国产精品女同一区二区软件| 国产精品熟女久久久久浪| 欧美3d第一页| 国产精品麻豆人妻色哟哟久久| 久久这里有精品视频免费| 国产精品不卡视频一区二区| 国产成人精品福利久久| 亚洲国产精品999| 你懂的网址亚洲精品在线观看| 一区二区三区精品91| 亚洲欧洲国产日韩| www.熟女人妻精品国产 | 国产高清三级在线| 亚洲在久久综合| 国产免费一级a男人的天堂| 丝袜人妻中文字幕| 少妇的丰满在线观看| 久久ye,这里只有精品| 久久韩国三级中文字幕| 美女国产高潮福利片在线看| 国产成人欧美| 亚洲三级黄色毛片| 欧美最新免费一区二区三区| 18在线观看网站| xxx大片免费视频| 性色avwww在线观看| 欧美成人午夜精品| 天天影视国产精品| 久久女婷五月综合色啪小说| 婷婷成人精品国产| 久久精品aⅴ一区二区三区四区 | 久久精品夜色国产| 免费看不卡的av| 国产精品国产三级专区第一集| 国产精品人妻久久久影院| 午夜久久久在线观看| 嫩草影院入口| 十八禁高潮呻吟视频| 国产毛片在线视频| 2022亚洲国产成人精品| 久久久国产一区二区| 亚洲情色 制服丝袜| 熟女人妻精品中文字幕| av黄色大香蕉| 久久久国产精品麻豆| 亚洲天堂av无毛| 国产日韩一区二区三区精品不卡| 一区二区三区乱码不卡18| 久久精品久久久久久久性| 亚洲国产看品久久| 亚洲成色77777| 男女边摸边吃奶| 18禁裸乳无遮挡动漫免费视频| 97在线视频观看| 最近的中文字幕免费完整| 国产精品麻豆人妻色哟哟久久| 久久久久久久久久成人| 国产精品久久久久久久电影| 日韩中字成人| 天美传媒精品一区二区| 最近手机中文字幕大全| 人妻系列 视频| 国产日韩欧美在线精品| 插逼视频在线观看| 人人妻人人澡人人看| 欧美性感艳星| 免费黄色在线免费观看| 久久久国产欧美日韩av| 90打野战视频偷拍视频| 国产黄频视频在线观看| 一级毛片 在线播放| 亚洲情色 制服丝袜| 美女国产高潮福利片在线看| 国产精品蜜桃在线观看| 亚洲精品一二三| 一区二区三区精品91| 菩萨蛮人人尽说江南好唐韦庄| 成人影院久久| 大香蕉97超碰在线| 高清毛片免费看| 在线天堂中文资源库| 久久精品国产自在天天线| 成人国产av品久久久| av在线老鸭窝| 国产免费又黄又爽又色| 国产精品人妻久久久久久| 男人添女人高潮全过程视频| 99国产精品免费福利视频| 免费观看av网站的网址| 又大又黄又爽视频免费| 久久午夜综合久久蜜桃| 最后的刺客免费高清国语| 丰满饥渴人妻一区二区三| 国产精品久久久av美女十八| 在线精品无人区一区二区三| 男的添女的下面高潮视频| 亚洲成国产人片在线观看| 日韩欧美精品免费久久| 黄色 视频免费看| 免费大片黄手机在线观看| 1024视频免费在线观看| 黑人高潮一二区| 一本大道久久a久久精品| 精品亚洲成国产av| 久久女婷五月综合色啪小说| 中文欧美无线码| 一级毛片电影观看| 水蜜桃什么品种好| 国产淫语在线视频| 国产福利在线免费观看视频| 免费播放大片免费观看视频在线观看| 国产精品女同一区二区软件| 在线 av 中文字幕| a级片在线免费高清观看视频| 男女边摸边吃奶| 91在线精品国自产拍蜜月| a级毛片黄视频| 亚洲国产毛片av蜜桃av| 亚洲,欧美精品.| 男女边摸边吃奶| √禁漫天堂资源中文www| 搡老乐熟女国产| 下体分泌物呈黄色| h视频一区二区三区| 男女免费视频国产| 日韩中文字幕视频在线看片| 日韩免费高清中文字幕av| 欧美日韩亚洲高清精品| kizo精华| 国产精品成人在线| 国产综合精华液| 久热久热在线精品观看| 成人午夜精彩视频在线观看| 国产成人精品久久久久久| 亚洲美女视频黄频| 最近中文字幕高清免费大全6| 少妇熟女欧美另类| 国产不卡av网站在线观看| 精品人妻偷拍中文字幕| 亚洲欧洲日产国产| 久久精品久久久久久久性| 高清视频免费观看一区二区| 日韩av在线免费看完整版不卡| 午夜激情久久久久久久| 国产片特级美女逼逼视频| 国产淫语在线视频| 捣出白浆h1v1| 大香蕉久久成人网| av在线播放精品| 亚洲精品国产av蜜桃| 国产在线视频一区二区| 黄片无遮挡物在线观看| 久久久精品94久久精品| 99热6这里只有精品| 亚洲丝袜综合中文字幕| 人成视频在线观看免费观看| 一本—道久久a久久精品蜜桃钙片| 精品少妇内射三级| 新久久久久国产一级毛片| 亚洲性久久影院| 观看av在线不卡| 日韩免费高清中文字幕av| tube8黄色片| 只有这里有精品99| 一二三四中文在线观看免费高清| 亚洲国产成人一精品久久久| 国产探花极品一区二区| 我的女老师完整版在线观看| 亚洲av免费高清在线观看| 男女无遮挡免费网站观看| 边亲边吃奶的免费视频| 亚洲成国产人片在线观看| av不卡在线播放| 国产日韩欧美亚洲二区| 精品熟女少妇av免费看| 日韩中文字幕视频在线看片| www日本在线高清视频| tube8黄色片| 男女啪啪激烈高潮av片| 国产亚洲最大av| 久久久久久人妻| 纵有疾风起免费观看全集完整版| 久久这里只有精品19| 亚洲精品av麻豆狂野| 成年av动漫网址| 国产av码专区亚洲av| 欧美精品国产亚洲| 热re99久久精品国产66热6| 亚洲成av片中文字幕在线观看 | 天堂俺去俺来也www色官网| 国产伦理片在线播放av一区| 午夜av观看不卡| 99九九在线精品视频| 国产高清三级在线| 一区二区三区精品91| 观看美女的网站| av在线app专区| 高清黄色对白视频在线免费看| 国产男人的电影天堂91| 日韩免费高清中文字幕av| 久久久a久久爽久久v久久| 最近中文字幕2019免费版| 爱豆传媒免费全集在线观看| 精品久久久精品久久久| 少妇 在线观看| 女人久久www免费人成看片| 色婷婷av一区二区三区视频| 亚洲国产精品成人久久小说| 热99久久久久精品小说推荐| 街头女战士在线观看网站| 啦啦啦中文免费视频观看日本| 国产日韩欧美在线精品| 亚洲一区二区三区欧美精品| 亚洲av电影在线观看一区二区三区| 欧美xxxx性猛交bbbb| 免费看不卡的av| 视频区图区小说| 国产成人aa在线观看| 99国产精品免费福利视频| 日韩精品有码人妻一区| 国产精品熟女久久久久浪| 久久这里有精品视频免费| 91aial.com中文字幕在线观看| av卡一久久| a级片在线免费高清观看视频| 观看av在线不卡| 亚洲av免费高清在线观看| 亚洲三级黄色毛片| 亚洲天堂av无毛| 2021少妇久久久久久久久久久| 午夜福利乱码中文字幕| 国产一区二区三区av在线| 嫩草影院入口| a级片在线免费高清观看视频| 五月伊人婷婷丁香| 高清欧美精品videossex| 久热这里只有精品99| 高清欧美精品videossex| 成人手机av| 久久精品国产综合久久久 | 亚洲激情五月婷婷啪啪| 视频中文字幕在线观看| 亚洲av在线观看美女高潮| 国产福利在线免费观看视频| 成人影院久久| 新久久久久国产一级毛片| 人成视频在线观看免费观看| 午夜免费鲁丝| 巨乳人妻的诱惑在线观看| av在线观看视频网站免费| 大片免费播放器 马上看| 日韩电影二区| 精品一区二区三区四区五区乱码 | 黑人欧美特级aaaaaa片| 高清在线视频一区二区三区| 视频在线观看一区二区三区| av一本久久久久| 精品亚洲成国产av| 日本午夜av视频| 在线免费观看不下载黄p国产| av有码第一页| 久久午夜综合久久蜜桃| 新久久久久国产一级毛片| 大片电影免费在线观看免费| 亚洲五月色婷婷综合| 亚洲成人av在线免费| 狂野欧美激情性xxxx在线观看| 十八禁高潮呻吟视频| 欧美精品人与动牲交sv欧美| 日日爽夜夜爽网站| 久久婷婷青草| 亚洲av.av天堂| 久久久精品区二区三区| 亚洲成色77777| 黄色怎么调成土黄色| 一个人免费看片子| 又大又黄又爽视频免费| 韩国av在线不卡| 国产永久视频网站| 久久久久网色| 日本免费在线观看一区| 亚洲,一卡二卡三卡| 另类亚洲欧美激情| 九色成人免费人妻av| 久久精品国产鲁丝片午夜精品| 18在线观看网站| 日韩 亚洲 欧美在线| 精品熟女少妇av免费看| 久久热在线av| 久久久a久久爽久久v久久| 亚洲精品久久久久久婷婷小说| 久久韩国三级中文字幕| 久久久久久久久久成人| 2018国产大陆天天弄谢| 男女午夜视频在线观看 | 久久久久网色| 永久网站在线| 久久午夜福利片| 人人妻人人澡人人爽人人夜夜| 国产高清国产精品国产三级| 如何舔出高潮| 91国产中文字幕| 侵犯人妻中文字幕一二三四区| 国产一区二区激情短视频 | 尾随美女入室| 男女高潮啪啪啪动态图| 极品少妇高潮喷水抽搐| 亚洲精品乱码久久久久久按摩| videossex国产| 精品少妇黑人巨大在线播放| 少妇的逼好多水| 少妇精品久久久久久久| 免费人妻精品一区二区三区视频| 我要看黄色一级片免费的| 亚洲精品美女久久久久99蜜臀 | 精品午夜福利在线看| 狠狠精品人妻久久久久久综合| 国产黄色免费在线视频| 人妻人人澡人人爽人人| 亚洲中文av在线| 久久97久久精品| 日韩,欧美,国产一区二区三区| 午夜久久久在线观看| videos熟女内射| 亚洲av男天堂| av线在线观看网站| 99香蕉大伊视频| 另类精品久久| 亚洲美女黄色视频免费看| 熟女人妻精品中文字幕| 亚洲人成77777在线视频| 国产成人av激情在线播放| 久久精品aⅴ一区二区三区四区 | 伦精品一区二区三区| 国产激情久久老熟女| 免费黄频网站在线观看国产| 婷婷色综合大香蕉| 成人二区视频| 成人手机av| 在线观看www视频免费| 精品人妻偷拍中文字幕| 国产在视频线精品| 精品国产一区二区三区久久久樱花| 国产视频首页在线观看| 国产又爽黄色视频| 国产男女内射视频| 亚洲欧美成人精品一区二区| 国产精品三级大全| 亚洲三级黄色毛片| 一级片'在线观看视频| 天天躁夜夜躁狠狠躁躁| 国产精品一国产av| 亚洲欧美日韩另类电影网站| 最近最新中文字幕大全免费视频 | 国产精品久久久久久av不卡| 99re6热这里在线精品视频| 搡老乐熟女国产| 午夜免费观看性视频| 亚洲av男天堂| av黄色大香蕉| 亚洲综合色惰| av黄色大香蕉| 我的女老师完整版在线观看| 欧美 日韩 精品 国产| 午夜av观看不卡| 蜜桃国产av成人99| 欧美人与性动交α欧美精品济南到 | 新久久久久国产一级毛片| 精品久久久久久电影网| 自线自在国产av| av免费在线看不卡| 欧美97在线视频| 精品一区在线观看国产| 国产日韩欧美亚洲二区| 草草在线视频免费看| 亚洲精品国产av蜜桃| 精品国产乱码久久久久久小说| 婷婷色av中文字幕|