• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于類型論的漢語(yǔ)分詞系統(tǒng)TTCS

    2011-10-30 12:25:54高東平
    關(guān)鍵詞:及物動(dòng)詞歧義分詞

    高東平

    (中國(guó)醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所,北京 100020)

    基于類型論的漢語(yǔ)分詞系統(tǒng)TTCS

    高東平

    (中國(guó)醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所,北京 100020)

    針對(duì)漢語(yǔ)分詞中的未登錄詞識(shí)別和歧義消除這兩個(gè)瓶頸問(wèn)題和目前方法的不足,將類型論的思想引入到漢語(yǔ)分詞領(lǐng)域中,提出了類型匹配模型,以類型論函數(shù)貼合為主要算法,融合了全切分、統(tǒng)計(jì),前后綴識(shí)別信息等多種技術(shù)手段,將分詞、未登錄詞識(shí)別、歧義消除,詞典的動(dòng)態(tài)擴(kuò)充有機(jī)的融合到一個(gè)統(tǒng)一的理論模型當(dāng)中。在此理論框架的基礎(chǔ)上,最后實(shí)現(xiàn)了基于類型論的漢語(yǔ)分詞系統(tǒng)TTCS。

    類型匹配;漢語(yǔ)分詞;歧義消除;未登錄詞;類型論

    眾所周知,歧義和未登錄詞是漢語(yǔ)分詞的兩大瓶頸。從1983年第一個(gè)實(shí)用分詞系統(tǒng)CDWS[1]的誕生至今,國(guó)內(nèi)外的研究者對(duì)漢語(yǔ)分詞中的這兩個(gè)問(wèn)題進(jìn)行了廣泛的研究。從眾多研究方法來(lái)看,多數(shù)是針對(duì)其中之一進(jìn)行的研究。例如,針對(duì)歧義問(wèn)題,有基于規(guī)則的方法[2-3],也有針對(duì)某一類歧義的處理,如引入向量空間解決組合歧義問(wèn)題[4],用條件隨機(jī)域的方法處理組合歧義問(wèn)題[5]等。對(duì)于未登錄詞識(shí)別的研究,主要的出發(fā)點(diǎn)是綜合利用未登錄詞內(nèi)部構(gòu)成規(guī)律及其上下文信息。未登錄詞識(shí)別處理的對(duì)象主要是人名、地名、譯名和機(jī)構(gòu)名等命名實(shí)體。

    在現(xiàn)有的研究中,對(duì)于分詞算法、切分排歧和未登錄詞識(shí)別的解決方案多數(shù)是相對(duì)獨(dú)立進(jìn)行的。只有少數(shù)學(xué)者給出相對(duì)統(tǒng)一的模型框架將三者進(jìn)行有機(jī)的融合[6-7]。

    本文借鑒類型論的思想,針對(duì)漢語(yǔ)的特點(diǎn),對(duì)漢語(yǔ)類型重新進(jìn)行設(shè)計(jì),并在此基礎(chǔ)上提出了一種基于類型匹配的模型,旨在將歧義消除、未登錄詞識(shí)別、詞典動(dòng)態(tài)擴(kuò)充等任務(wù)融合到一個(gè)相對(duì)統(tǒng)一的理論模型中。在我們的分詞系統(tǒng)中,詞典中的每個(gè)詞不再標(biāo)注其詞性,而是標(biāo)注類型。通過(guò)句子類型匹配和短語(yǔ)類型匹配模型可以計(jì)算尋找出恰當(dāng)?shù)那蟹?。在文章的第一部分我們描述了TTCS系統(tǒng)的流程,給出了類型與規(guī)則的設(shè)計(jì),并對(duì)設(shè)計(jì)背后的動(dòng)機(jī)進(jìn)行了詳細(xì)闡釋;在第二部分我們介紹了在類型論框架下,歧義和未登錄詞識(shí)別的解決方案;文章最后對(duì)此系統(tǒng)的設(shè)計(jì)進(jìn)行了總結(jié)和討論。

    一、基于漢語(yǔ)類型論的分詞系統(tǒng)TTCS

    (一)TTCS的系統(tǒng)流程

    基于類型邏輯的漢語(yǔ)分詞系統(tǒng)(TTCS)的基本設(shè)計(jì)流程如圖1。

    (二)類型論與語(yǔ)句生成

    類型邏輯語(yǔ)義學(xué)主要是指蒙太格語(yǔ)法的內(nèi)涵類型邏輯。蒙太格把范疇語(yǔ)法與內(nèi)涵類型邏輯聯(lián)系在一起,通過(guò)句法范疇到邏輯類型的映射給范疇語(yǔ)法的句法分析提供了嚴(yán)格的模型論語(yǔ)義解釋[8]。以蒙太格語(yǔ)義學(xué)為代表的邏輯語(yǔ)義學(xué)把語(yǔ)句的句法分析和語(yǔ)義解釋看成是同構(gòu)的。即認(rèn)為詞的組合成句及其語(yǔ)義的模型論解釋有著一一對(duì)應(yīng)的關(guān)系,也就是說(shuō),語(yǔ)義解釋是從句法代數(shù)到語(yǔ)義代數(shù)的同構(gòu)映像。類型論使得這種同構(gòu)映像成為可能[9]。從邏輯的觀點(diǎn)看,語(yǔ)句S的兩個(gè)關(guān)鍵成份為謂詞和論元。較簡(jiǎn)單的語(yǔ)句的謂詞僅含單個(gè)動(dòng)詞或形容詞,論元僅由專名充當(dāng)。從外延的角度看,專名指稱個(gè)體(在類型論中記作e),語(yǔ)句指稱真值(記作t),謂詞指稱個(gè)體的集合[10]。在類型論中,如果把e和t設(shè)定為基本類型,則其它較復(fù)雜的類型都可以根據(jù)以下定義得到:

    定義1[10]:類型的集合S是最小集,使得:

    (1)e,t∈S;

    (2)如果a,b∈S,那么ab∈S;

    (3)此外,S中不包含其他元素。

    其中,e,t為基本類型,e代表個(gè)體,t代表真值。

    (2)中的a﹑b可以是基本類型,也可以是復(fù)雜類型。這樣,謂詞可以通過(guò)e和t來(lái)間接定義。

    圖1 TTCS流程圖

    將上述類型與具體的詞匯及其邏輯表達(dá)式相匹配,可以得出一些結(jié)構(gòu)較為簡(jiǎn)單的語(yǔ)句的組合過(guò)程。例如:“John Walks.”

    (三)漢語(yǔ)類型設(shè)計(jì)

    漢語(yǔ)的句法結(jié)構(gòu)有其特殊的地方。再加上考慮到漢語(yǔ)分詞系統(tǒng)設(shè)計(jì)的實(shí)際情況,我們需要將類型重新定義。在這一小節(jié),我們將給出漢語(yǔ)的類型設(shè)計(jì),以及在后文計(jì)算中用到的相關(guān)概念。

    定義2:漢語(yǔ)類型的集合S是最小集,使得:

    (1)e和t為基本類型;f為輔助類型;

    (2)如果a,b為輔助類型之外的類型,則(ab)為類型。

    (3)如果a,b之中存在輔助類型,若a,b之間存在匹配規(guī)則,則(ab)為類型。

    其中f={f1,f2,f3,n,q,p,s,x}。其中,f1,f2,f3主要指函數(shù)類型;x類型主要包括助動(dòng)詞,嘆詞,擬聲詞,助詞,語(yǔ)氣詞等,n指數(shù)詞;q指量詞;p,s分別指前、后綴。

    定義3(函數(shù)貼合):令g是類型為ab的表達(dá)式,如果(是類型為a的表達(dá)式,那么g(a),g(b)分別是類型為b和a的表達(dá)式。

    定義4:一個(gè)句子是真歧義的當(dāng)且僅當(dāng)有兩種不同的切分方式使得每一種類型函數(shù)貼合后的結(jié)果都是t。

    定義5:一個(gè)切分是正確的,當(dāng)且僅當(dāng)存在一種貼合方式使得類型函數(shù)貼合的最后結(jié)果是t。一個(gè)切分是可接受的當(dāng)且僅當(dāng)它存在一種貼合方式可以得到一個(gè)類型函數(shù)貼合結(jié)果。

    表1中每一種類型設(shè)計(jì)都是語(yǔ)言學(xué)知識(shí)的體現(xiàn)。例如:趨向動(dòng)詞(分為簡(jiǎn)單趨向動(dòng)詞(上,下,來(lái),去)和復(fù)雜趨向動(dòng)詞(起來(lái),出去)),它們既可以單獨(dú)做謂語(yǔ),也可以在別的動(dòng)詞或形容詞后作趨向補(bǔ)語(yǔ)。故我們將其類型設(shè)計(jì)為:et(et),et類型。

    更多的類型設(shè)計(jì)參見(jiàn)筆者的前期研究成果[11-12]。

    表1 TTCS中的類型設(shè)計(jì)

    (四)多類型指派的討論

    在類型邏輯的經(jīng)典階段,它是通過(guò)對(duì)基本表達(dá)式指派一個(gè)或多個(gè)范疇組成,來(lái)使被計(jì)算的函數(shù)-論元組合匹配實(shí)際的語(yǔ)法字串。然而,由于自然語(yǔ)言是非常靈活的,同一個(gè)詞在不同語(yǔ)句中的作用,在不同語(yǔ)句中的詞性顯然不盡相同。為了處理眾多語(yǔ)言學(xué)中的問(wèn)題,后來(lái)的很多學(xué)者,已經(jīng)有了諸多不同的提議,如增加類型改變的范疇機(jī)制,或者是增加類型組合的更多的模式等。這是至今為止,大量文獻(xiàn)里普遍采用的方法,例如,Geach為了說(shuō)明否定的多態(tài)性,引入了他的遞歸規(guī)則,來(lái)提升基本類型tt為((et)(et))(不及物動(dòng)詞否定),((e(et))(e(et)))(及物動(dòng)詞否定)[13]。此種相同的改變也可以解釋非常不同的事實(shí),比如在及物動(dòng)詞接受復(fù)雜的命題短語(yǔ)對(duì)象時(shí)遇到的人所共知的困難[14]:

    這在基本的框架下是沒(méi)有函數(shù)貼合規(guī)則可以實(shí)現(xiàn)的。Geach的解決方式是讓直接對(duì)象表達(dá)式“適應(yīng)語(yǔ)境”[14]:

    其他很多的類型改變規(guī)則也已經(jīng)因?yàn)榫浞ê驮~法的需要而被提出。

    但是與這種傳統(tǒng)的研究路線不同,我們?cè)谠O(shè)計(jì)TTCS系統(tǒng)時(shí),采用每個(gè)詞進(jìn)行多類型指派的方法,而不采用類型改變方法來(lái)解決自然語(yǔ)言中遇到的各種問(wèn)題,原因有下述幾點(diǎn):

    首先,類型改變自身也存在一定的問(wèn)題,即類型改變的規(guī)則是非常寬松的,而事實(shí)上,某些類型變換確實(shí)是不可接受的。如“主目上升”規(guī)則: (a,c)?(((a,b),b),c)這種一般性的范式是無(wú)效的[14]。

    而在TTCS中,我們對(duì)每個(gè)詞進(jìn)行多類型指派不但可以實(shí)現(xiàn)類型改變的目的,而且還可以減少類型改變?cè)趯?shí)際語(yǔ)言中不可接受的情況。原因很簡(jiǎn)單,因?yàn)轭愋透淖冏鳛橐?guī)則而言,是對(duì)于任何類型都成立的,但是,我們進(jìn)行多類型指派,是針對(duì)每一個(gè)詞的,例如,有的類型改變規(guī)則將不及物動(dòng)詞可以類型改變?yōu)榧拔飫?dòng)詞,如果作為規(guī)則應(yīng)用,則所有不及物動(dòng)詞都可以改變?yōu)榧拔飫?dòng)詞。但是在漢語(yǔ)中,雖然有很多不及物動(dòng)詞也確實(shí)是及物動(dòng)詞,但是顯然也有很多詞只能作為不及物動(dòng)詞使用,因此對(duì)于漢語(yǔ)分詞的具體任務(wù)而言,我們?cè)跇?gòu)建詞典時(shí),對(duì)每一個(gè)詞根據(jù)其語(yǔ)言學(xué)特征,進(jìn)行多類型指派可以很好的解決類型改變過(guò)于寬松這一問(wèn)題。

    另外,類型改變的另一優(yōu)點(diǎn),比如通過(guò)類型提升解決及物動(dòng)詞接受復(fù)雜的命題短語(yǔ)對(duì)象時(shí)遇到的困難:(e,(e,t))和((e,t),t)的匹配問(wèn)題,類似的這類現(xiàn)象,在TTCS中,我們則是直接將函數(shù)的組合描述成:(e,(e,t))((e,t),t)?(e,t)來(lái)進(jìn)行解決。

    再有,對(duì)于解決漢語(yǔ)分詞的實(shí)際問(wèn)題而言,時(shí)空開(kāi)銷是我們必須要考慮的一個(gè)因素,雖然在我們的算法設(shè)計(jì)中,也應(yīng)用到了一些遞歸算法,但是實(shí)際效果分詞速度是可以接受的,如果我們不采用多類型指派的方法,而改為給出大量類型改變規(guī)則的方法,分詞速度將會(huì)明顯變慢。且分詞的準(zhǔn)確度也會(huì)受到一定影響。

    第四,采用多類型指派的方法,可以通過(guò)分詞過(guò)程很清晰的看出句子的結(jié)構(gòu),以及每個(gè)詞在句子中的角色。

    (五)類型貼合運(yùn)算規(guī)則設(shè)計(jì)

    類型函數(shù)貼合算法中的類型貼合規(guī)則,主要是根據(jù)語(yǔ)言學(xué)知識(shí)所進(jìn)行的設(shè)計(jì)。規(guī)則設(shè)計(jì)的合理度和全面度直接影響著分詞系統(tǒng)的準(zhǔn)確度。

    在TTCS系統(tǒng)中,部分類型貼合規(guī)則如下(更多規(guī)則見(jiàn)參考文獻(xiàn)[11-12]):

    其中有α出現(xiàn)的為規(guī)則模式,即α可以替換為任意類型,其他為具體規(guī)則。

    如果切分序列類型函數(shù)貼合的結(jié)果是t,則說(shuō)明是正確的切分。

    如果切分序列類型函數(shù)貼合存在最后的類型則是可以接受的切分。

    具體算法如下:

    第(1)步:讀取類型序列;

    第(2)步:對(duì)類型序列中相鄰類型(從第一個(gè)類型開(kāi)始),運(yùn)用上述類型貼合規(guī)則逐步進(jìn)行貼合,直到不再有可以貼合的相鄰類型為止。

    第(3)步:對(duì)貼合結(jié)果進(jìn)行判斷,如果只有一種切分是正確切分則直接輸出;如果兩種切分都是正確切分,則進(jìn)行統(tǒng)計(jì)校正;如果不存在正確切分,存在可以接受的切分,則輸出可以接受的切分;如果既不存在正確切分也不存在可以接受的切分,則輸出全切分后排在第一個(gè)的序列作為切分結(jié)果。

    一個(gè)合法的句子總是可以匹配成t的,本文中設(shè)計(jì)出“可以接受的切分”,是考慮到漢語(yǔ)中經(jīng)常使用逗號(hào)將一個(gè)完整的句子分為幾部分,而對(duì)于逗號(hào)切分出的部分,匹配結(jié)果應(yīng)該是一個(gè)類型(對(duì)應(yīng)漢語(yǔ)中的一個(gè)成份),這樣可以減少匹配次數(shù),提高分詞效率。

    二、TTCS對(duì)歧義和未登錄詞的處理

    (一)對(duì)歧義的處理

    在TTCS中,交叉歧義、組合歧義識(shí)別通過(guò)已有方法進(jìn)行判斷:

    (1)令S=C1C2…Cn是需要切分的字符串,檢測(cè)是否至少存在兩種不同的切分路徑 S1=W1W2…Wn和S2=W1’W2’…Wm’,其中Wi,Wi’∈LexiCon。

    (2)如果存在至少兩種不同的切分路徑,且Wi和Wi’是兩種切分下第一個(gè)不同的詞,若Wi的長(zhǎng)度大于Wi’的長(zhǎng)度,且Wi’+Wi+1’的長(zhǎng)度大于Wi的長(zhǎng)度,則稱字串Wi’Wi+1’是S中第一個(gè)具有交叉歧義的字串。

    (3)如果Wi’+Wi+1’的長(zhǎng)度等于Wi的長(zhǎng)度,則稱字串Wi’Wi+1’是S中第一個(gè)具有組合歧義的字段。

    在我們的系統(tǒng)中,對(duì)歧義的處理主要基于以下幾個(gè)步驟:

    (1)對(duì)輸入的句子進(jìn)行全切分;

    (2)歧義識(shí)別;

    (3)對(duì)全切分結(jié)果執(zhí)行函數(shù)貼合運(yùn)算

    (4)選擇可以接受的結(jié)果

    (5)輸出

    (二)未登錄詞的識(shí)別

    在TTCS系統(tǒng)中,未登錄詞的識(shí)別主要是基于未登錄詞合并算法和類型貼合運(yùn)算而進(jìn)行的。在我們的未登錄詞合并算法中,主要處理了下面三種情況:

    Case1.type(Ci)=p;其中Ci是預(yù)合并單詞的詞頭;

    Case2:type(Ci)=s;其中Ci是預(yù)合并單詞的詞尾;

    Case3:type(Ci)=‘?’;起哄‘?’是對(duì)詞典中沒(méi)有的詞進(jìn)行的標(biāo)記。

    每一種情況又包含數(shù)種子情況(對(duì)于預(yù)合并單詞的詞頭是p類型,預(yù)合并單詞的詞尾是s類型的情況,我們?cè)谒惴ň帉戇^(guò)程中歸入到了第一種情況進(jìn)行處理)。

    考慮到越界問(wèn)題,我們將Case1又分為以下三種情況來(lái)處理:

    Case1.1:Ci后只有Ci+1;

    Case1.2:Ci后只有Ci+1,Ci+2;

    Case1.3:Ci后多于Ci+1Ci+2

    Case2:也同樣分為:

    Case2.1:Ci前只有Ci-1且不是p類型

    Case2.2:Ci前只有Ci-1,Ci-2

    Case2.3:Ci前只有Ci-1,Ci-2,Ci-3

    在每種情況下又將Cj(j=i-1,i-2,i+1,i+ 2,i+3……)分為未登錄詞,單字詞,多字詞幾種情況來(lái)處理。是單字詞時(shí),我們又細(xì)分為是否具有連詞類型,介詞類型,判定動(dòng)詞類型幾種子情況。

    未登錄詞的識(shí)別過(guò)程概述如下:

    (1)前、后綴類型、未登錄字的識(shí)別;

    (2)在具有前、后綴類型、未登錄字時(shí),執(zhí)行合并算法;

    (3)將合并算法的結(jié)果進(jìn)行類型函數(shù)貼合運(yùn)算;

    (4)根據(jù)類型函數(shù)貼合運(yùn)算結(jié)果選擇正確的合并結(jié)果(正確的合并結(jié)果既為識(shí)別出的未登錄詞)

    三、結(jié)論

    本文主要目的是將類型邏輯的思想和方法引入到自然語(yǔ)言信息處理領(lǐng)域,來(lái)解決漢語(yǔ)分詞問(wèn)題。從類型邏輯的研究趨勢(shì)來(lái)看,目前大量學(xué)者意識(shí)到了用其描述各種不同自然語(yǔ)言的重要性以及用其解決各種不同自然語(yǔ)言中特殊問(wèn)題的可行性及價(jià)值。因此,學(xué)者們紛紛用其為工具,對(duì)荷蘭語(yǔ)、意大利語(yǔ)、日語(yǔ)、漢語(yǔ)等各種語(yǔ)言中的特殊問(wèn)題進(jìn)行研究、刻畫[15-16]。因此對(duì)漢語(yǔ)類型論進(jìn)行研究,對(duì)于類型邏輯本身而言,也是具有重要意義的。

    在本文中,我們從根本上突破了傳統(tǒng)類型論的定義,引入了輔助類型來(lái)解決未登錄詞識(shí)別問(wèn)題,使類型論可以描述的語(yǔ)句范圍有了明顯擴(kuò)展。當(dāng)然,輔助類型的引入也是出于漢語(yǔ)語(yǔ)句比較松散,且非常靈活這些因素而考慮的。

    在TTCS系統(tǒng)的設(shè)計(jì)中,除了文中詳述的內(nèi)容之外,還涉及到統(tǒng)計(jì)校正和詞典的動(dòng)態(tài)擴(kuò)充等問(wèn)題,這些由于篇幅問(wèn)題我們沒(méi)有展開(kāi),但這些問(wèn)題的解決對(duì)于我們系統(tǒng)的完整性及應(yīng)用的方便性都具有重要作用。

    [1]梁南元.書(shū)面漢語(yǔ)自動(dòng)分詞系統(tǒng)-CDWS[J].中文信息學(xué)報(bào),1987(2):101-106.

    [2]張仕仁.利用語(yǔ)素詞規(guī)則消除切分歧義[C]//1998年中文信息處理國(guó)際會(huì)議論文集.北京:清華大學(xué)出版社,1998.

    [3]Zheng J H,Wu F F.Study on segmentation of ambiguous phrases with the combinatorial type[C]//Collections of papers on Computational Lingustics,Beijing: Tsinghua University Press,1999.

    [4]Xiao Luo,Maosong Sun,Benjamin K Tsou.Covering Ambiguity Resolution in Chinese Word Segmentation Based on Contextual Information.COLING’02 Proceedings of the 19th international conference on Computational linguistics,vol1,Stroudsburg,2002.

    [5]Ying Xiong,Jie Zhu.A New Machine Learning Method for Chinese Overlapping Disambiguity—Conditional Random Fields[C]//Proceedings of the Sixth International Conference on Machine Learning and Cybernetics,HongKong,2007.

    [6]劉群,張華平,俞鴻魁,程學(xué)旗.基于層疊隱馬模型的漢語(yǔ)詞法分析[J].計(jì)算機(jī)研究與發(fā)展,2004,41(8),1421-1429.

    [7]Gao Jianfeng,Li Mu,Wu Andi,et al.Chinese Word Segmentation and Named Entity Recognition:A Pragmatic Approach[J].Computational Linguistics,2006,31 (4):531-574.

    [8]鄒崇理.自然語(yǔ)言邏輯研究[M].北京:北京大學(xué)出版社,2000.

    [9]蔣嚴(yán),潘海華.漢語(yǔ)語(yǔ)句的類型表達(dá)[C]//1998中文信息處理國(guó)際會(huì)議論文集.北京:清華大學(xué)出版社,1998.

    [10]Gamut L T F.Logic,Language,and Meaning(Vol2)[M].The University of Chicago Press,1991.

    [11]Gao Dongping,Niu Zhendong,Lv Lening,et al.Chinese Unknown Word Recognition Based on Functional Applications of Type Theory[C]//IITA2008,Published by IEEE Computer Sociey,2008.

    [12]Gao Dongping,Guo Jiahong.Dealing with Chinese Overlapping Ambiguity Based on Type Functional Application[C]//2009 International Conference on Artificial Intelligence and Computational Intelligence,Published by IEEE Computer Sociey,2009.

    [13]Geach P.A Program for Syntax[M].Davidson D.Harman G.eds.,Springer,1972.

    [14]約翰·范本特姆.邏輯、語(yǔ)言和認(rèn)知[C]//劉新文,郭美云,等,譯.邏輯之門——約翰·范本特姆經(jīng)典著作(卷II).北京:科學(xué)出版社,2008.

    [15]Otake R,Yoshimoto K.A Multimodal Type Logical Grammar Analysis of Japanese:Word Order and Quantifier Scope[C]//Annual Conference of the Japanese Society for Artificial Intelligence,Springer,2007.

    [16]Angelov K.Type-theoretical Bulgarian grammar[C]// Advances in Natural Language Processing,Proceedings,Berlin:Springer,2008.

    Chinese Segmentation System TTCS Based on Type Theory

    GAO Dong-ping
    (The Institute of Medical Information,Chinese Academy of Medical Sciences,Bejing 100020,China)

    Chinese unknown word recognition and disambiguation are difficult problems of Chinese word segmentation.We introduce a method based on type theory for Chinese word segmentation in this paper.The model of type functional application is employed attempting to resolve Chinese ambiguity and unknown word recognition.A Chinese word segmentation system TTCS is proposed that it unites techniques including omni-segmentation,statistical method,prefix and suffix information expansion and so on.A major advantage of the TTCS is that it can deal with Chinese word segmentation,unknown word recognition,disambiguation and the dynamic expansion of the dictionary in a unified theoretical model.

    type functional application;Chinese word segmentation;disambiguation;Chinese unknown word recognition;type theory

    B81

    A

    1674-8425(2011)08-0061-06

    2011-06-30

    國(guó)家社科基金“面向自然語(yǔ)言信息處理的范疇類型邏輯研究”(09BZX046)資助。

    高東平(1979—),女,河北人,博士后,副研究員,研究方向:自然語(yǔ)言處理、邏輯學(xué)、情報(bào)學(xué)。

    (責(zé)任編輯 鄺坦勵(lì))

    猜你喜歡
    及物動(dòng)詞歧義分詞
    eUCP條款歧義剖析
    結(jié)巴分詞在詞云中的應(yīng)用
    English Jokes: Homonyms
    值得重視的分詞的特殊用法
    “那么大”的語(yǔ)義模糊與歧義分析
    高考分詞作狀語(yǔ)考點(diǎn)歸納與疑難解析
    尋求歧義研究的解釋力度:從認(rèn)知視角到社會(huì)視角——兼評(píng)《現(xiàn)代漢語(yǔ)歧義識(shí)別與消解的認(rèn)知研究》
    論英語(yǔ)不定式和-ing分詞的語(yǔ)義傳承
    Swagger:氣場(chǎng)壓人
    及物與不及物動(dòng)詞的用法與區(qū)別
    大陆偷拍与自拍| 99国产精品一区二区三区| 免费在线观看影片大全网站| 男女床上黄色一级片免费看| 国产av又大| 亚洲国产中文字幕在线视频| 下体分泌物呈黄色| 精品亚洲成国产av| 性高湖久久久久久久久免费观看| 最黄视频免费看| 中文字幕最新亚洲高清| 国产精品一区二区精品视频观看| 一个人免费看片子| 国产av精品麻豆| 欧美日韩视频精品一区| 欧美久久黑人一区二区| 国产精品久久久久久精品古装| 国产真人三级小视频在线观看| 捣出白浆h1v1| 免费在线观看黄色视频的| 老司机午夜福利在线观看视频 | 精品国产亚洲在线| 亚洲av美国av| 国产色视频综合| 搡老乐熟女国产| 岛国在线观看网站| 日韩精品免费视频一区二区三区| 69av精品久久久久久 | 欧美在线黄色| 交换朋友夫妻互换小说| 亚洲avbb在线观看| 黄色成人免费大全| kizo精华| 成人黄色视频免费在线看| 在线播放国产精品三级| 动漫黄色视频在线观看| 欧美日本中文国产一区发布| 69精品国产乱码久久久| 午夜福利视频精品| 成人国产一区最新在线观看| videosex国产| 十分钟在线观看高清视频www| 丁香六月欧美| 新久久久久国产一级毛片| 国产在线免费精品| 国产成人av教育| 99国产精品99久久久久| 97在线人人人人妻| 国产亚洲精品久久久久5区| 日本撒尿小便嘘嘘汇集6| 亚洲 欧美一区二区三区| 国产亚洲av高清不卡| 999久久久国产精品视频| 在线观看免费视频网站a站| 久久人妻福利社区极品人妻图片| 欧美黄色淫秽网站| 我要看黄色一级片免费的| 韩国精品一区二区三区| 国产男女超爽视频在线观看| 最黄视频免费看| 黄色怎么调成土黄色| 成人特级黄色片久久久久久久 | 成人国语在线视频| 一本大道久久a久久精品| 精品亚洲成a人片在线观看| 99国产综合亚洲精品| 日韩大片免费观看网站| 老司机亚洲免费影院| 国产日韩欧美在线精品| 免费看十八禁软件| 黄色怎么调成土黄色| 激情视频va一区二区三区| 欧美激情 高清一区二区三区| 久久精品成人免费网站| 午夜免费鲁丝| 狠狠精品人妻久久久久久综合| 99精品欧美一区二区三区四区| 日韩大码丰满熟妇| 成人18禁高潮啪啪吃奶动态图| 一二三四在线观看免费中文在| 国产xxxxx性猛交| 国产成人精品无人区| 欧美中文综合在线视频| 美女视频免费永久观看网站| 五月开心婷婷网| 久久久国产成人免费| 亚洲色图综合在线观看| 黑人巨大精品欧美一区二区蜜桃| 国产精品自产拍在线观看55亚洲 | 久久精品国产综合久久久| 人人妻,人人澡人人爽秒播| 黄色视频,在线免费观看| 国产精品亚洲av一区麻豆| 99国产精品一区二区三区| 国产精品香港三级国产av潘金莲| 日韩人妻精品一区2区三区| 欧美精品av麻豆av| 男人舔女人的私密视频| 亚洲九九香蕉| 成人18禁在线播放| 亚洲国产成人一精品久久久| 露出奶头的视频| 女人精品久久久久毛片| 变态另类成人亚洲欧美熟女 | 人人妻人人添人人爽欧美一区卜| 久久久久久久大尺度免费视频| 亚洲熟妇熟女久久| 女人精品久久久久毛片| 一边摸一边做爽爽视频免费| 大香蕉久久网| 桃花免费在线播放| 侵犯人妻中文字幕一二三四区| 他把我摸到了高潮在线观看 | 亚洲av成人不卡在线观看播放网| 精品国产一区二区三区久久久樱花| 久久这里只有精品19| av电影中文网址| 国产精品香港三级国产av潘金莲| 大香蕉久久成人网| 91九色精品人成在线观看| 天天影视国产精品| 中国美女看黄片| 我的亚洲天堂| 国产一区有黄有色的免费视频| 中文字幕人妻丝袜制服| 国产aⅴ精品一区二区三区波| 建设人人有责人人尽责人人享有的| 国产91精品成人一区二区三区 | 国产男靠女视频免费网站| 男女之事视频高清在线观看| 国产在线精品亚洲第一网站| 乱人伦中国视频| 18禁美女被吸乳视频| 国产精品欧美亚洲77777| 女同久久另类99精品国产91| 国产一区二区三区综合在线观看| 两人在一起打扑克的视频| 一边摸一边抽搐一进一出视频| 精品国产一区二区三区四区第35| 一区二区三区精品91| 怎么达到女性高潮| 日本欧美视频一区| 亚洲五月婷婷丁香| 亚洲欧美一区二区三区久久| 精品一品国产午夜福利视频| tocl精华| 欧美国产精品va在线观看不卡| 日韩 欧美 亚洲 中文字幕| 久久久久国内视频| 免费一级毛片在线播放高清视频 | 成人三级做爰电影| 国产午夜精品久久久久久| 老司机午夜十八禁免费视频| 黄色成人免费大全| 国产一区二区激情短视频| 最新在线观看一区二区三区| 国产无遮挡羞羞视频在线观看| 亚洲精品粉嫩美女一区| 欧美一级毛片孕妇| 久久久精品区二区三区| 亚洲精品中文字幕一二三四区 | 国产欧美亚洲国产| 久久久久国产一级毛片高清牌| 精品福利观看| 国产成人精品在线电影| 欧美精品av麻豆av| 一个人免费看片子| 欧美乱妇无乱码| 丝袜美足系列| 亚洲成人国产一区在线观看| 日本一区二区免费在线视频| 一二三四在线观看免费中文在| 人人妻人人爽人人添夜夜欢视频| 国产成人免费观看mmmm| 亚洲欧美激情在线| 中文字幕另类日韩欧美亚洲嫩草| 中文字幕最新亚洲高清| 国产精品久久久av美女十八| 午夜精品久久久久久毛片777| 国产成人精品久久二区二区免费| 日本欧美视频一区| 久久香蕉激情| 侵犯人妻中文字幕一二三四区| 国产精品二区激情视频| 国产精品免费大片| 午夜精品国产一区二区电影| 肉色欧美久久久久久久蜜桃| 久久人人爽av亚洲精品天堂| 精品人妻1区二区| 日韩人妻精品一区2区三区| 啦啦啦视频在线资源免费观看| 久久久国产欧美日韩av| 欧美乱妇无乱码| 久久精品亚洲精品国产色婷小说| 国产欧美日韩一区二区三区在线| 精品国产亚洲在线| 高清在线国产一区| 黄色视频在线播放观看不卡| av线在线观看网站| 岛国毛片在线播放| 国产精品成人在线| 一区在线观看完整版| 亚洲成a人片在线一区二区| 亚洲精品av麻豆狂野| 亚洲欧美激情在线| av在线播放免费不卡| 免费女性裸体啪啪无遮挡网站| 一进一出抽搐动态| 国产av国产精品国产| 国产亚洲一区二区精品| 午夜福利一区二区在线看| 欧美在线一区亚洲| 国产激情久久老熟女| a级毛片黄视频| av在线播放免费不卡| 人成视频在线观看免费观看| 777米奇影视久久| 国产在视频线精品| 国产在线一区二区三区精| 国产亚洲欧美在线一区二区| 精品一区二区三区四区五区乱码| 亚洲色图综合在线观看| 亚洲精品国产区一区二| 电影成人av| 国产免费视频播放在线视频| 日韩欧美一区二区三区在线观看 | 国产成人精品无人区| 亚洲色图综合在线观看| 国产精品久久久人人做人人爽| 久9热在线精品视频| www日本在线高清视频| 99国产精品免费福利视频| 久久久久久亚洲精品国产蜜桃av| 动漫黄色视频在线观看| 男女边摸边吃奶| 久久国产亚洲av麻豆专区| 精品国产一区二区三区四区第35| 国产成人一区二区三区免费视频网站| 国产精品亚洲一级av第二区| 在线看a的网站| 人人妻人人添人人爽欧美一区卜| 欧美黑人精品巨大| 首页视频小说图片口味搜索| 嫩草影视91久久| 久久精品成人免费网站| 成人精品一区二区免费| 亚洲少妇的诱惑av| 男女之事视频高清在线观看| 大片免费播放器 马上看| 精品国产一区二区三区四区第35| 亚洲国产av影院在线观看| 建设人人有责人人尽责人人享有的| 亚洲性夜色夜夜综合| 国产精品一区二区免费欧美| 人妻 亚洲 视频| 日本一区二区免费在线视频| 久久婷婷成人综合色麻豆| 交换朋友夫妻互换小说| 一区二区三区乱码不卡18| 亚洲精品一二三| 老司机午夜十八禁免费视频| 亚洲全国av大片| 日韩大码丰满熟妇| 一级a爱视频在线免费观看| 国产av精品麻豆| 久久影院123| 亚洲美女黄片视频| 精品熟女少妇八av免费久了| 欧美亚洲日本最大视频资源| 欧美亚洲 丝袜 人妻 在线| 在线观看舔阴道视频| 一本一本久久a久久精品综合妖精| 亚洲人成伊人成综合网2020| 国产高清视频在线播放一区| 丝袜人妻中文字幕| 一边摸一边抽搐一进一出视频| 岛国毛片在线播放| 久久99热这里只频精品6学生| 久久国产精品男人的天堂亚洲| 中文字幕人妻熟女乱码| 老司机靠b影院| 一边摸一边抽搐一进一小说 | 大型黄色视频在线免费观看| 美女主播在线视频| 国产亚洲一区二区精品| 电影成人av| 亚洲自偷自拍图片 自拍| 亚洲中文av在线| 国产高清国产精品国产三级| 久久久精品免费免费高清| 99热网站在线观看| 国产在线一区二区三区精| 在线观看免费日韩欧美大片| 精品少妇一区二区三区视频日本电影| 欧美在线一区亚洲| 国产老妇伦熟女老妇高清| 日韩视频一区二区在线观看| 大片免费播放器 马上看| 人妻一区二区av| 人妻久久中文字幕网| 国产精品影院久久| 精品久久久久久电影网| 亚洲国产欧美日韩在线播放| 国产av又大| 欧美成人午夜精品| 亚洲人成电影观看| 亚洲五月色婷婷综合| 精品高清国产在线一区| 久久久国产精品麻豆| 黄色a级毛片大全视频| avwww免费| 久久久久久亚洲精品国产蜜桃av| 女人被躁到高潮嗷嗷叫费观| 男人操女人黄网站| 欧美亚洲日本最大视频资源| 免费观看a级毛片全部| 日韩一区二区三区影片| 男女边摸边吃奶| 欧美人与性动交α欧美软件| 性色av乱码一区二区三区2| 男男h啪啪无遮挡| 黄片小视频在线播放| 成人18禁在线播放| 另类亚洲欧美激情| 最新在线观看一区二区三区| av线在线观看网站| 人人妻人人澡人人看| 美女视频免费永久观看网站| 91国产中文字幕| 亚洲五月色婷婷综合| 夜夜爽天天搞| 欧美日韩av久久| 国产免费福利视频在线观看| 一本久久精品| 中文字幕人妻丝袜制服| 久久精品亚洲熟妇少妇任你| 亚洲av第一区精品v没综合| 一本综合久久免费| 国产亚洲精品久久久久5区| 亚洲欧美一区二区三区久久| 欧美日韩亚洲综合一区二区三区_| 日日爽夜夜爽网站| 成人亚洲精品一区在线观看| 大片免费播放器 马上看| 久久久久精品人妻al黑| 看免费av毛片| 黄色视频不卡| 在线观看免费高清a一片| 日本精品一区二区三区蜜桃| 久久青草综合色| 国产91精品成人一区二区三区 | 国产一区二区三区综合在线观看| 国产成人av激情在线播放| 亚洲,欧美精品.| 国产人伦9x9x在线观看| 黄片小视频在线播放| 久久影院123| 精品人妻在线不人妻| 亚洲avbb在线观看| 80岁老熟妇乱子伦牲交| 亚洲精品国产一区二区精华液| 极品少妇高潮喷水抽搐| 99热网站在线观看| 亚洲欧美色中文字幕在线| 久久久久视频综合| 亚洲国产毛片av蜜桃av| 黄片大片在线免费观看| 亚洲av成人一区二区三| 99re在线观看精品视频| 国产黄频视频在线观看| 免费在线观看日本一区| 在线永久观看黄色视频| 日韩一卡2卡3卡4卡2021年| 亚洲色图av天堂| 国产精品av久久久久免费| 精品少妇久久久久久888优播| 午夜免费成人在线视频| 亚洲精华国产精华精| 王馨瑶露胸无遮挡在线观看| av欧美777| 69精品国产乱码久久久| 午夜两性在线视频| 男人操女人黄网站| 日韩制服丝袜自拍偷拍| 免费不卡黄色视频| 在线观看一区二区三区激情| 大码成人一级视频| 国产又色又爽无遮挡免费看| 久久久久精品国产欧美久久久| 精品一品国产午夜福利视频| 国产亚洲午夜精品一区二区久久| 亚洲精品久久成人aⅴ小说| 色尼玛亚洲综合影院| 国产精品国产av在线观看| √禁漫天堂资源中文www| 国产免费av片在线观看野外av| 人妻久久中文字幕网| av欧美777| 国产片内射在线| 宅男免费午夜| 日日夜夜操网爽| 久久久国产精品麻豆| 亚洲欧美一区二区三区久久| 久久99一区二区三区| 成年版毛片免费区| 超色免费av| 国产一区二区三区视频了| 亚洲天堂av无毛| 999精品在线视频| 日韩有码中文字幕| 久久久国产欧美日韩av| 亚洲国产中文字幕在线视频| 精品乱码久久久久久99久播| 啦啦啦视频在线资源免费观看| 国产午夜精品久久久久久| 热re99久久国产66热| 精品国产一区二区三区久久久樱花| 亚洲午夜理论影院| 国产福利在线免费观看视频| 女同久久另类99精品国产91| 美女主播在线视频| 黑人巨大精品欧美一区二区蜜桃| 操美女的视频在线观看| 精品一区二区三卡| 夫妻午夜视频| 久久久欧美国产精品| 国产一区二区 视频在线| 天堂动漫精品| 王馨瑶露胸无遮挡在线观看| 99精国产麻豆久久婷婷| 久久精品亚洲精品国产色婷小说| 最近最新中文字幕大全免费视频| 老司机在亚洲福利影院| 久久性视频一级片| 久久人人97超碰香蕉20202| 亚洲成a人片在线一区二区| 巨乳人妻的诱惑在线观看| 色尼玛亚洲综合影院| 中文字幕人妻丝袜一区二区| 亚洲成人手机| 狠狠婷婷综合久久久久久88av| 成人永久免费在线观看视频 | 国产精品98久久久久久宅男小说| 免费一级毛片在线播放高清视频 | av电影中文网址| 国产成人精品久久二区二区91| 曰老女人黄片| 亚洲色图 男人天堂 中文字幕| 飞空精品影院首页| 首页视频小说图片口味搜索| 另类亚洲欧美激情| 人人妻人人添人人爽欧美一区卜| 国产亚洲欧美在线一区二区| 久久精品亚洲熟妇少妇任你| 欧美日韩成人在线一区二区| 日韩欧美国产一区二区入口| 午夜激情久久久久久久| 久热这里只有精品99| 亚洲欧洲精品一区二区精品久久久| 亚洲第一青青草原| 午夜福利视频精品| 免费观看av网站的网址| 国产精品99久久99久久久不卡| 国产黄色免费在线视频| 久久婷婷成人综合色麻豆| aaaaa片日本免费| 男女无遮挡免费网站观看| 多毛熟女@视频| 黄片小视频在线播放| 午夜福利视频精品| 一夜夜www| 变态另类成人亚洲欧美熟女 | 亚洲精品在线观看二区| √禁漫天堂资源中文www| 精品少妇黑人巨大在线播放| 男男h啪啪无遮挡| 欧美日韩亚洲综合一区二区三区_| 在线十欧美十亚洲十日本专区| av超薄肉色丝袜交足视频| 国产成人欧美| 可以免费在线观看a视频的电影网站| 国产精品香港三级国产av潘金莲| 最近最新中文字幕大全电影3 | 日韩欧美免费精品| 一本久久精品| 国产亚洲精品久久久久5区| 两性午夜刺激爽爽歪歪视频在线观看 | 少妇粗大呻吟视频| 午夜成年电影在线免费观看| 国产在线视频一区二区| 大片免费播放器 马上看| 免费女性裸体啪啪无遮挡网站| 精品福利观看| 日韩有码中文字幕| 亚洲第一av免费看| 欧美大码av| 老汉色av国产亚洲站长工具| 国产成人av激情在线播放| 国产一卡二卡三卡精品| 国产人伦9x9x在线观看| 亚洲男人天堂网一区| netflix在线观看网站| 国产精品 国内视频| 欧美日韩亚洲高清精品| 夜夜夜夜夜久久久久| 80岁老熟妇乱子伦牲交| 亚洲色图综合在线观看| 欧美激情高清一区二区三区| 国产视频一区二区在线看| 国产精品美女特级片免费视频播放器 | 精品福利永久在线观看| 亚洲精品成人av观看孕妇| 母亲3免费完整高清在线观看| 九色亚洲精品在线播放| 18禁黄网站禁片午夜丰满| 国产日韩欧美亚洲二区| 国产成人一区二区三区免费视频网站| 12—13女人毛片做爰片一| 亚洲熟女精品中文字幕| 精品国产亚洲在线| 人人妻人人澡人人看| 亚洲精品久久成人aⅴ小说| 中文字幕av电影在线播放| 男女免费视频国产| 日韩中文字幕欧美一区二区| 女人精品久久久久毛片| 久久av网站| 免费一级毛片在线播放高清视频 | 亚洲欧美日韩另类电影网站| 一区二区av电影网| 精品视频人人做人人爽| 淫妇啪啪啪对白视频| 日韩欧美免费精品| 999久久久精品免费观看国产| 亚洲伊人久久精品综合| 久久久精品免费免费高清| 国产99久久九九免费精品| 国产成人精品久久二区二区91| 精品国产亚洲在线| 亚洲第一欧美日韩一区二区三区 | 国产亚洲欧美精品永久| 亚洲,欧美精品.| 夜夜骑夜夜射夜夜干| 最新的欧美精品一区二区| 乱人伦中国视频| 正在播放国产对白刺激| 99国产综合亚洲精品| 一区二区三区激情视频| 成年女人毛片免费观看观看9 | 日韩熟女老妇一区二区性免费视频| 欧美国产精品va在线观看不卡| 国产精品偷伦视频观看了| av天堂在线播放| 国产人伦9x9x在线观看| 俄罗斯特黄特色一大片| 精品一区二区三区视频在线观看免费 | 亚洲国产看品久久| 在线观看免费视频网站a站| 久久99热这里只频精品6学生| 国产亚洲精品久久久久5区| 蜜桃国产av成人99| 国产精品免费大片| 19禁男女啪啪无遮挡网站| 黄色视频在线播放观看不卡| 亚洲色图 男人天堂 中文字幕| 国产成人欧美| 精品久久久久久电影网| 丁香六月天网| 午夜激情久久久久久久| 国产又爽黄色视频| 亚洲精品国产一区二区精华液| 日韩成人在线观看一区二区三区| 国产单亲对白刺激| 国产主播在线观看一区二区| 亚洲国产中文字幕在线视频| 国产欧美日韩一区二区三| 日本av手机在线免费观看| 欧美日韩中文字幕国产精品一区二区三区 | 青草久久国产| 91字幕亚洲| 成人国语在线视频| 人妻 亚洲 视频| 中文字幕最新亚洲高清| 黄色视频不卡| 一本大道久久a久久精品| 色精品久久人妻99蜜桃| 国产一区二区三区视频了| 国产一区二区在线观看av| 日韩 欧美 亚洲 中文字幕| 国产aⅴ精品一区二区三区波| 亚洲久久久国产精品| 日日爽夜夜爽网站| 久久人妻福利社区极品人妻图片| 两性午夜刺激爽爽歪歪视频在线观看 | 亚洲天堂av无毛| 欧美+亚洲+日韩+国产| 91麻豆av在线| 一本一本久久a久久精品综合妖精| 国产成人免费无遮挡视频| 国产在线免费精品| 99精品在免费线老司机午夜| 满18在线观看网站| 乱人伦中国视频| 高潮久久久久久久久久久不卡| 最近最新中文字幕大全免费视频| 久久久久久久大尺度免费视频| 亚洲国产中文字幕在线视频| 国产av精品麻豆| 妹子高潮喷水视频| 午夜激情久久久久久久| 国产亚洲欧美在线一区二区| 黄网站色视频无遮挡免费观看| 狂野欧美激情性xxxx| 女性生殖器流出的白浆| 国产亚洲av高清不卡|