• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于主動(dòng)學(xué)習(xí)的新聞讀者情緒分類方法

    2017-06-01 11:29:54陳敬劉歡歡李壽山周國棟
    關(guān)鍵詞:語料分類器分類

    陳敬,劉歡歡,李壽山,周國棟

    (蘇州大學(xué)自然語言處理實(shí)驗(yàn)室,江蘇 蘇州 215006)

    基于主動(dòng)學(xué)習(xí)的新聞讀者情緒分類方法

    陳敬,劉歡歡,李壽山*,周國棟

    (蘇州大學(xué)自然語言處理實(shí)驗(yàn)室,江蘇 蘇州 215006)

    讀者情緒分類具體是指針對某個(gè)文本推測讀者可能產(chǎn)生的情緒。針對該新問題,目前遇到的主要挑戰(zhàn)是標(biāo)注語料庫的匱乏問題。文章提出了一種基于主動(dòng)學(xué)習(xí)的讀者情緒分類方法,即在已有少量標(biāo)注樣本的基礎(chǔ)上,利用主動(dòng)學(xué)習(xí)方法挑選優(yōu)質(zhì)樣本,使得使用盡量少的標(biāo)注代價(jià)獲得較好的分類性能??紤]到新聞讀者情緒分類可以同時(shí)使用新聞文本和評論文本的特殊性,提出了分類器融合分類方法,并在主動(dòng)學(xué)習(xí)方面提出了結(jié)合不確定性與新聞評論信息量的挑選策略。實(shí)驗(yàn)表明,分類器融合方法能夠獲得比僅用新聞文本更好的分類性能。此外,文章提出的主動(dòng)學(xué)習(xí)方法能夠有效減小標(biāo)注規(guī)模,在同等標(biāo)注規(guī)模下,獲得比隨機(jī)更佳的分類性能。

    讀者情緒分類;主動(dòng)學(xué)習(xí);分類器融合;評論信息量

    隨著各種社交平臺(tái)的興起,網(wǎng)絡(luò)上用戶的生成內(nèi)容越來越多,產(chǎn)生了大量的文本信息,如新聞、微博、博客等。面對如此龐大且富有情緒表達(dá)的文本信息,完全可以考慮通過探索它們的潛在價(jià)值為人們服務(wù)。因此近年來情緒分析受到計(jì)算語言學(xué)領(lǐng)域研究者們的密切關(guān)注,成為一項(xiàng)基本的熱點(diǎn)研究任務(wù)[1-2]。情緒可以分為兩類:作者情緒(作者在寫作文本時(shí)所表達(dá)的情緒)和讀者情緒(讀者看完文本后所產(chǎn)生的情緒),本文將利用新聞文本與評論文本對新聞的讀者情緒進(jìn)行粗粒度(消極和積極情緒)的探討研究。下面舉例詳細(xì)說明作者情緒與讀者情緒。

    (a) 新聞文本:今天的日本地震很可能是2011年大地震的余震。

    (b) 評論文本:我希望一切都能好,真的好難過,我依舊無法忘記去年的場景。 我的岳父岳母經(jīng)歷了這次地震,多么痛苦啊。

    從以上的新聞文本與評論文本中,我們可以看出新聞文本沒有作者情緒,而新聞文本的讀者情緒為消極情緒。

    在已有的研究工作中,作者的情緒分類研究較多,而讀者的情緒分類研究起步相對較晚,相關(guān)的研究較少。Lin等人[3]利用機(jī)器學(xué)習(xí)方法訓(xùn)練了一個(gè)識(shí)別讀者情緒的分類器,在后期的研究[4]中,通過探索更多有效的特征,獲得了相對更好的分類結(jié)果。Lin和Chen[5]將新聞的讀者情緒分類看作是一個(gè)多標(biāo)簽分類問題,并采用回歸方法得到情緒類別的排序。Bai等人[6]使用一個(gè)帶有特定權(quán)值的情緒詞典構(gòu)建文本向量,然后通過訓(xùn)練SVM和NB模型分別進(jìn)行讀者情緒預(yù)測。Xu等人[7]提出了基于PLDA模型的多標(biāo)簽讀者情緒預(yù)測方法,利用PLDA將特定情緒類型的詞與特定話題結(jié)合,再將PLDA的結(jié)果作為分類的特征用于情緒預(yù)測。Liu等[8]利用新聞和評論兩個(gè)相互獨(dú)立的視圖分別構(gòu)建兩個(gè)分類器進(jìn)行協(xié)同學(xué)習(xí)(Co-training)對新聞讀者的情緒進(jìn)行粗粒度情緒分類研究。葉璐[9]利用主題模型實(shí)現(xiàn)讀者情緒預(yù)測,并且在LDA的基礎(chǔ)上采用加權(quán)方法進(jìn)行改進(jìn),利用WLDA主題模型實(shí)現(xiàn)降維進(jìn)而對讀者情緒進(jìn)行預(yù)測。劉歡歡[10]利用兩個(gè)關(guān)聯(lián)的二部圖子圖(新聞文本二部圖和評論文本二部圖)用于描述新聞文本和評論文本之間的關(guān)聯(lián),進(jìn)行基于標(biāo)簽傳播算法的粗粒度情緒分類;再者又構(gòu)建了特征-標(biāo)簽因子圖(FLFG)模型用于實(shí)現(xiàn)對文本特征和情緒標(biāo)簽間關(guān)聯(lián)的共同學(xué)習(xí),進(jìn)行基于特征-標(biāo)簽因子圖模型的細(xì)粒度情緒分類。溫雯等人[11]先使用Wordvec模型學(xué)習(xí)文本初始的語義表達(dá),在此基礎(chǔ)上結(jié)合各個(gè)情緒類別分別構(gòu)建有代表性的語義詞簇并采用一定準(zhǔn)則篩選出對類別判斷有效詞簇,最終使用多標(biāo)簽分類的方法進(jìn)行新聞讀者情緒分類。

    與以往研究不同的是,本文首先探究了全監(jiān)督學(xué)習(xí)方法下分類器融合方法對新聞讀者情緒分類的效果;再者采用了基于不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)算法,并結(jié)合分類器融合方法對新聞讀者情緒進(jìn)行粗粒度的情緒分類研究。

    新聞的讀者情緒分類有一個(gè)特性:既可以用新聞內(nèi)容作為判斷情緒的依據(jù),也可以利用評論內(nèi)容作為判斷情緒的依據(jù)。例如:新聞內(nèi)容的“地震”預(yù)示著讀者的消極情緒;同時(shí),評論文本中的“難過”、“痛苦”等描述也直接清晰表達(dá)了該新聞的讀者情緒為消極情緒。因此,分別利用新聞文本和評論文本構(gòu)建兩個(gè)分類器,繼而提出了基于分類器融合方法用于融合這兩個(gè)分類器進(jìn)一步提高讀者情緒分類性能。

    此外,目前主流的讀者情緒分類方法是基于機(jī)器學(xué)習(xí)的全監(jiān)督學(xué)習(xí)方法。標(biāo)注語料庫的匱乏問題是全監(jiān)督學(xué)習(xí)方法最大的挑戰(zhàn)。針對該挑戰(zhàn),本文探究基于主動(dòng)學(xué)習(xí)的新聞情緒分類方法。具體而言,主動(dòng)學(xué)習(xí)是一種通過挑選優(yōu)質(zhì)樣本進(jìn)行人工標(biāo)注,從而能夠在盡可能使用少的標(biāo)注樣本的情況下保持較好的分類效果。然而,在讀者情緒分類任務(wù)中,傳統(tǒng)的基于不確定性的主動(dòng)學(xué)習(xí)方法在挑選優(yōu)質(zhì)樣本的時(shí)候,樣本的信息量未被充分利用。在讀者情緒分類任務(wù)中,雖然每個(gè)樣本中的新聞文本內(nèi)容都比較充分,但是每個(gè)樣本的評論文本信息差異較大。具體表現(xiàn)為,有些樣本的評論較多,有些樣本的評論較少甚至沒有??紤]到評論文本的信息量可能對讀者情緒分類帶來積極影響,本文同時(shí)考慮樣本不確定因素和評論文本的信息量來挑選優(yōu)質(zhì)樣本,并結(jié)合分類器融合方法改善新聞讀者情緒分類性能。實(shí)驗(yàn)結(jié)果表明本文提出的主動(dòng)學(xué)習(xí)方法能夠明顯優(yōu)于隨機(jī)樣本選擇方法及傳統(tǒng)的基于不確定性的主動(dòng)學(xué)習(xí)方法。

    1 主動(dòng)學(xué)習(xí)方法

    1.1 基于機(jī)器學(xué)習(xí)的讀者情緒分類

    向量空間模型是目前主流的文本表示方式,文本可以用D(document)表示,特征項(xiàng)(Term)用t表示,文本可以表示為D(t1,t2,t3,…,tn),其中t為特征項(xiàng),對于文檔D中的每一個(gè)特征項(xiàng),通常會(huì)預(yù)先設(shè)置一個(gè)權(quán)值表示各特征項(xiàng)的重要程度,例如D(t1,w1;t2,w2;…;tn,wn),簡記為:D(w1,w2,…,wn),其中wk為tk的權(quán)重,1≤k≤n。本文采用的特征為詞特征,借助分詞工具,可以方便地提取出這種特征。

    在本文所用語料中,新聞文本與評論文本對應(yīng)存在?;谌O(jiān)督的學(xué)習(xí)方法,分別利用新聞文本特征和評論文本特征訓(xùn)練分類器,然后采用分類器融合的方法得到最終的分類結(jié)果。主動(dòng)學(xué)習(xí)過程中從未標(biāo)注樣本中挑選不確定性樣本加入已標(biāo)注樣本時(shí),采取新聞文本和評論文本的融合特征來表示最大熵模型特征,而在測試時(shí)所用的特征與基于全監(jiān)督的學(xué)習(xí)方法所用的特征一致,即分別利用新聞文本特征和評論文本特征訓(xùn)練分類器,并利用分類器融合的方法得到最后的實(shí)驗(yàn)結(jié)果。為了更清晰表達(dá)這些特征,表1通過一個(gè)例子來說明。

    表1 新聞文本與評論文本特征以及融合特征的例子

    1.2 分類器融合方法

    本文利用新聞文本和對應(yīng)的評論文本分別構(gòu)建了兩個(gè)分類器,即新聞讀者的情緒分類器和評論作者的情緒分類器,來預(yù)測新聞的讀者情緒。形式上將新聞讀者的情緒分類器記作CN,評論作者的情緒分類器記作Cc。兩個(gè)分類器最終會(huì)分別賦予測試樣本(記作x)一個(gè)后驗(yàn)概率向量,即PN(x)和PC(x):

    其中,PN(c1|x)表示分類器CN預(yù)測樣本x屬于類別c1的概率。PC(c1|x)、PN(c1|x)和PC(c2|x)有類似的定義。

    在多個(gè)分類系統(tǒng)(MCS)的研究中,可以利用多種基于分類器后驗(yàn)概率的融合方法得出最終的分類結(jié)果。一般來說,融合方法可以分為兩種[12]:一種是確定的規(guī)則,例如多數(shù)投票法、乘法規(guī)則和直接求和規(guī)則[13]等;另一種是訓(xùn)練的規(guī)則,例如加權(quán)求和規(guī)則[14]和元學(xué)習(xí)方式[15]等。本文主要采用加權(quán)求和規(guī)則來融合新聞讀者和評論作者的情緒分類器的輸出,即通過求后驗(yàn)概率的加權(quán)和來實(shí)現(xiàn)兩個(gè)分類器的融合,進(jìn)而得到最終的分類結(jié)果,計(jì)算方法如下:

    assigny→cj

    (1)

    其中,參數(shù)λ用來表示分類器的權(quán)重,其值是通過對訓(xùn)練數(shù)據(jù)進(jìn)行全局最優(yōu)搜索調(diào)整所得。在本文實(shí)驗(yàn)中,經(jīng)10倍交叉驗(yàn)證所得,λ的值為0.7。

    1.3 基于不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)方法

    傳統(tǒng)的基于不確定性的主動(dòng)學(xué)習(xí)方法是根據(jù)分類結(jié)果的后驗(yàn)概率挑選不確定樣本進(jìn)行人工標(biāo)注[16-17]。不同于傳統(tǒng)的方法,本文方法利用評論信息量輔助傳統(tǒng)的不確定性選擇策略,進(jìn)行未標(biāo)注樣本的選擇,并結(jié)合上述的分類器融合方法進(jìn)行分類。

    1)評論信息量

    (2)

    2) 不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)算法

    樣本的不確定性是通過已標(biāo)注樣本構(gòu)建的分類器對其進(jìn)行測試的分類結(jié)果進(jìn)行判定[18-19]。具體通過情緒分類結(jié)果的后驗(yàn)概率進(jìn)行計(jì)算,計(jì)算方法如下:

    (3)

    綜合評論文本的信息量和樣本的不確定性,樣本選擇的打分公式如下:

    (4)

    不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)算法的主要步驟如下。

    輸入:已標(biāo)注樣本L,未標(biāo)注樣本U;

    輸出:新的已標(biāo)注樣本L;

    程序:

    循環(huán)N次

    1) 根據(jù)未標(biāo)注樣本U的評論文本算出平均中心向量CR;

    2) 從L中學(xué)習(xí)分類器f;

    3) 使用f對U進(jìn)行分類得出每個(gè)未標(biāo)注樣本的不確定度,即Uncertainty(xi);

    5) 計(jì)算Score(xi),并將U按照值從大到小的次序進(jìn)行排列;

    6) 選擇中前n個(gè)樣本,放入L中。

    2 實(shí)驗(yàn)結(jié)果與分析

    2.1 實(shí)驗(yàn)設(shè)置

    本文從Yahoo! Kimo新聞網(wǎng)站*Yahoo新聞數(shù)據(jù)集[CP/OL].[2015-05-25].http:∥tw.news.yahoo.com中搜集了多個(gè)領(lǐng)域(世界新聞、生活資訊等)的中文新聞?wù)Z料,為了保證新聞的粗粒度情緒標(biāo)簽的準(zhǔn)確性,選擇顯著情緒類別的投票比例在50%以上的新聞?wù)Z料,同時(shí)過濾掉不含評論信息的新聞。最終,含有“積極”情緒的語料有1 497篇,含有“消極”情緒的語料有1 997篇,從“積極”情緒的語料和“消極”情緒的語料中各隨機(jī)抽取1 000篇作為實(shí)驗(yàn)樣本,其中,80%作為訓(xùn)練語料,20%作為測試語料,從訓(xùn)練語料中選取10個(gè)樣本作為主動(dòng)學(xué)習(xí)中的已標(biāo)注樣本集,其余的訓(xùn)練語料都作為未標(biāo)注樣本集。

    本文所用的特征為新聞文本與評論文本的詞特征,考慮到中文句子中詞與詞之間沒有明顯的分詞信息,需要對其進(jìn)行分詞。本文采用目前使用最廣泛的漢語分詞開源工具*Ictclas開源工具[CP/OL].[2011-02-16].http:∥ictclas.org/[EB],即,ICTCLAS分詞工具對收集的中文新聞?wù)Z料進(jìn)行分詞。

    實(shí)驗(yàn)中使用了基于Mallet工具包*Mallet開源工具[CP/OL].[2002-11-06].http:∥mallet.cs.umass.edu/的最大熵分類方法進(jìn)行新聞讀者情緒分類,同時(shí)本文采用準(zhǔn)確率(Accuracy,Acc.)作為新聞讀者情緒分類效果的衡量標(biāo)準(zhǔn)。

    2.2 實(shí)驗(yàn)結(jié)果分析

    2.2.1 全監(jiān)督分類方法的結(jié)果

    在基于全監(jiān)督的學(xué)習(xí)方法下,研究了取訓(xùn)練樣本的10%、20%、40%、60%和80%作為新的訓(xùn)練樣本,以下幾種全監(jiān)督方法的分類效果。

    ?新聞讀者的情緒分類:基于已標(biāo)注的新聞文本訓(xùn)練分類器,對未標(biāo)注的新聞文本進(jìn)行分類;

    ?評論作者的情緒分類:基于已標(biāo)注的評論文本訓(xùn)練分類器,對未標(biāo)注的評論文本進(jìn)行分類;

    ?兩種文本特征融合的情緒分類:將新聞文本和評論文本的特征進(jìn)行融合訓(xùn)練分類器,對未標(biāo)注的新聞文本進(jìn)行分類;

    ?兩種文本分類加權(quán)融合的情緒分類(加權(quán)加法規(guī)則):將新聞讀者和評論作者的情緒分類得到的后驗(yàn)概率采用加權(quán)求和的規(guī)則。通過訓(xùn)練樣本的十倍交叉實(shí)驗(yàn)結(jié)果選取最佳權(quán)重(λ值)為0.7。

    表2給出了上述四種分類方法的分類性能,從表中可以看出:

    (1)基于新聞文本的情緒分類方法性能明顯優(yōu)于基于評論文本的分類方法,這主要是因?yàn)樾侣勎谋舅奈谋緝?nèi)容往往比評論文本多。有些樣本的評論文本比較少,很難有足夠分類能力。

    (2)簡單將兩種文本的特征進(jìn)行疊加并不能提高分類性能,獲得分類效果甚至比單用新聞文本的方法差。然而,采用本文的分類器融合方法能夠穩(wěn)定獲得比新聞文本分類方法更好的分類性能。

    表2 4種全監(jiān)督方法下的實(shí)驗(yàn)結(jié)果

    2.2.2 主動(dòng)學(xué)習(xí)分類方法的結(jié)果

    本實(shí)驗(yàn)比較了以下三種樣本選擇方式用于基于主動(dòng)學(xué)習(xí)的讀者情緒分類:

    ?隨機(jī)方法(RAND):從未標(biāo)注樣本集中隨機(jī)選擇樣本進(jìn)行人工標(biāo)注后加入到已標(biāo)注樣本集中,再基于已標(biāo)注樣本集訓(xùn)練分類器,對未標(biāo)注的新聞文本進(jìn)行分類;

    ?不確定性(UNCE):基于不確定性對未標(biāo)注樣本進(jìn)行選擇,人工標(biāo)注后加入到已標(biāo)注樣本集中,再基于已標(biāo)注樣本集訓(xùn)練分類器,對未標(biāo)注的新聞文本進(jìn)行分類;

    ?基于不確定性與評論信息量相結(jié)合(MULTI):本文提出的主動(dòng)學(xué)習(xí)方法,具體方法見在1.3節(jié)。

    從訓(xùn)練語料中選取10篇語料(積極和消極樣本各5篇)作為初始已標(biāo)注樣本,采用以上三種不同樣本選擇方式的主動(dòng)學(xué)習(xí)方法對新聞讀者情緒進(jìn)行分類。實(shí)驗(yàn)設(shè)定每次選擇最不確定的10個(gè)未標(biāo)注樣本進(jìn)行人工標(biāo)注后加入到已標(biāo)注樣本集中。

    Fig.1 Comparison of experimental results based on the method of active learning圖1 基于主動(dòng)學(xué)習(xí)方法的實(shí)驗(yàn)結(jié)果的比較

    圖1給出了基于三種樣本挑選策略的分類效果,從圖中我們可以看出:

    (1)基于不確定性與基于不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)方法都能夠有效地減少標(biāo)注規(guī)模,在同樣的標(biāo)注規(guī)模下能夠獲得比隨機(jī)挑選樣本方法更優(yōu)的性能。例如,基于不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)方法在加入50樣本時(shí)就能夠達(dá)到了基于隨機(jī)的主動(dòng)學(xué)習(xí)方法加入200樣本數(shù)的分類效果。

    (2)基于不確定性與評論信息量相結(jié)合的主動(dòng)學(xué)習(xí)方法在樣本比較少的情況下(少于200)能夠優(yōu)于傳統(tǒng)的基于不確定性的主動(dòng)學(xué)習(xí)方法。當(dāng)標(biāo)注樣本較多的時(shí)候,這兩種主動(dòng)學(xué)習(xí)方法的性能表現(xiàn)接近。

    3 本文結(jié)論和下一步工作介紹

    本文針對新聞讀者情緒分類問題提出了一種基于分類器融合的全監(jiān)督學(xué)習(xí)方法,用于組合分別由新聞文本和評論文本訓(xùn)練的兩個(gè)分類器。在此基礎(chǔ)上,本文提出了一種基于不確定性與評論信息量相結(jié)合選擇策略的主動(dòng)學(xué)習(xí)方法,用于減輕監(jiān)督學(xué)習(xí)對于標(biāo)注樣本的依賴。實(shí)驗(yàn)結(jié)果表明,分類器融合方法能夠獲得比僅用新聞文本分類器更佳的分類性能。此外,基于不確定性與評論信息量相結(jié)合選擇策略的主動(dòng)學(xué)習(xí)方法比隨機(jī)樣本選擇策略及傳統(tǒng)的基于不確定性的主動(dòng)學(xué)習(xí)方法獲得更好的分類性能,在少量的已標(biāo)注樣本的情況下就能獲得較高的分類性能。

    本文的研究中僅僅使用詞特征,在下一步研究中,我們將考察更復(fù)雜的語言特征,例如句法、語義特征,進(jìn)一步提升讀者情緒分類性能。此外,我們將嘗試結(jié)合主動(dòng)學(xué)習(xí)和半監(jiān)督學(xué)習(xí)方法,進(jìn)一步減輕分類方法對標(biāo)注樣本的依賴。

    [1]ZhengC,ShenL,DaiN.ChineseMicroblogEmotionClassificationBasedonClassSequentialRules[J].ComputerEngineering,2016,42(2):184-189.DOI:10.3969/j.issn.1000-3428.2016.02.033.

    [2]ChangYC,ChuCH,ChenCC,et al.LinguisticTemplateExtractionforRecognizingReader-Emotion[J].中文計(jì)算語言學(xué)期刊,2016,21(1):29-50.DOI:10.1111/j.1541-0420.2007.00820.x.

    [3]LinHY,YangC,ChenHH.WhatEmotionsdoNewsArticlesTriggerinTheirReaders[C]∥ProceedingsoftheInternationalACMSIGIRConferenceonResearchandDevelopmentinInformationRetrieval,2007:733-734.DOI:10.1145/1277741.1277882.

    [4]LinHY,YangC,ChenHH.EmotionClassificationofOnlineNewsArticlesfromtheReader’sPerspective[C]∥ProceedingoftheInternationalConferenceonWebIntelligenceandIntelligentAgentTechnology,2008:220-226.DOI:10.1109/WIIAT.2008.197.

    [5]LinHY,ChenHH.RankingReaderEmotionsUsingPairwiseLossMinimizationandEmotionalDistributionRegression[C]∥ProceedingsoftheConferenceonEmpiricalMethodsinNaturalLanguageProcessing,2008:136-144.DOI:10.3115/1613715.1613735.

    [6]BaiS,NingY,YuanS,et al.PredictingReader’sEmotiononChineseWebNewsArticles[C]∥InternationalConferenceonPervasiveComputingandtheNetworkedWorld,2012:16-27.DOI:10.1007/978-3-642-37015-1-2.

    [7]XuR,ZouC,XuJ.Reader’sEmotionPredictionBasedonPartitionedLatentDirichletAllocationModel[C]∥ProceedingsofInternationalConferenceonInternetComputingandBigData,2013:457-464.

    [8]LiuH,LiS,ZhouG,etal.JointModelingofNewsReader’sandCommentWriter’sEmotions[C]∥MeetingoftheAssociationforComputationalLinguistics,2013:511-515.

    [9] 葉璐.新聞文本的讀者情緒自動(dòng)預(yù)測方法研究[D].哈爾濱:哈爾濱工業(yè)大學(xué)研究生院,2012.

    [10] 劉歡歡.面向新聞的讀者情緒自動(dòng)分析方法研究[D].蘇州:蘇州大學(xué)研究生院,2015.

    [11] 溫雯,吳彪,蔡瑞初,等.基于多類別語義詞簇的新聞讀者情緒分類[J].計(jì)算機(jī)應(yīng)用,2016,36(8):2076-2081.DOI:10.11772/j.issn.1001-9081.2016.08.2076.

    [12]DuinRPW.TheCombiningClassifier:ToTrainOrNotToTrain[C]∥Proceedingsof16thInternationalConferenceonPatternRecognition(ICPR-02),2002:765-770.

    [13]KittlerJ,HatefM,DuinRPW,et al.OnCombiningClassifiers[J].IEEETransactionsonPatternAnalysis&MachineIntelligence,1998,20(3):226-239.DOI:10.1109/34.667881.

    [14]FumeraG,RoliF.ATheoreticalandExperimentalAnalysisofLinearCombinersforMultipleClassifierSystems[J].IEEETransactionsonPatternAnalysis&MachineIntelligence,2005,27(6):942-956.DOI:10.1109/TPAMI.2005.109.

    [15]VilaltaR,DrissiY.APerspectiveViewandSurveyofMeta-learning[J].ArtificialIntelligenceReview,2002,18(2):77-95.DOI:10.1023/A:1019956318069.

    [16] 居勝峰,王中卿,李壽山,等.情感分類中不同主動(dòng)學(xué)習(xí)策略比較研究[C]∥中國計(jì)算語言學(xué)研究前沿進(jìn)展,2011:506-511.

    [17] 劉康,錢旭,王自強(qiáng).主動(dòng)學(xué)習(xí)算法綜述[J].計(jì)算機(jī)工程與應(yīng)用,2013,48(34):1-4.DOI:10.3778/j.issn.1002-8331.1205-0149.

    [18] 居勝峰.基于主動(dòng)學(xué)習(xí)的情感分類方法研究[D].蘇州:蘇州大學(xué)研究生院,2013.

    [19]LiS,XueY,WangZ,ZhouG.ActiveLearningforCross-domainSentimentClassification[C]∥Proceedingofthe22ndInternationalJointConferenceonArtificialIntelligence,2013:2127-2133.

    Active Learning on News Reader Emotion Classification

    CHEN Jing,LIU Huanhuan,LI Shoushan*,ZHOU Guodong

    (NaturalLanguageProcessingLabofSoochowUniversity,Suzhou215006,China)

    Reader emotion classification aims to predict the mood that the reader may have speculated according to some text. For this new issue, the main challenge is the lack of the annotated corpus. In order to alleviate this problem, this paper proposes an active learning approach to reader emotion classification, which is based on a few initial annotated samples, using active learning method to select high-quality sample, making use of the annotating cost as little as possible to get a good classification performance. Considering the specificity that news reader emotion classification, we make use of news text and the comment text and employ classifier combination method to combine them. Moreover, selection strategy combined with uncertainty and news comment information in active learning is proposed.The experiments demonstrate that the method of classifier combination performs better than the method that only using news text. In addition, the proposed active learning method can effectively reduce the dimension scale, and obtain better classification performance than random selection.

    reader emotion classification; active learning; classifier combination; comment information

    10.13451/j.cnki.shanxi.univ(nat.sci.).2017.01.004

    2016-11-20;

    2016-12-16

    國家自然科學(xué)基金重點(diǎn)項(xiàng)目(61331011);國家自然科學(xué)基金(61375073;61273320)

    陳敬(1992-),男,江蘇揚(yáng)州人,碩士研究生。

    TP391

    A

    0253-2395(2017)01-0021-06

    *通信作者:李壽山(LI Shoushan),shoushan.Li@gmail.com

    猜你喜歡
    語料分類器分類
    分類算一算
    分類討論求坐標(biāo)
    數(shù)據(jù)分析中的分類討論
    BP-GA光照分類器在車道線識(shí)別中的應(yīng)用
    電子測試(2018年1期)2018-04-18 11:52:35
    教你一招:數(shù)的分類
    基于語料調(diào)查的“連……都(也)……”出現(xiàn)的語義背景分析
    加權(quán)空-譜與最近鄰分類器相結(jié)合的高光譜圖像分類
    結(jié)合模糊(C+P)均值聚類和SP-V-支持向量機(jī)的TSK分類器
    華語電影作為真實(shí)語料在翻譯教學(xué)中的應(yīng)用
    《苗防備覽》中的湘西語料
    亚洲国产欧美在线一区| 国产av码专区亚洲av| 亚洲精品国产成人久久av| 最近中文字幕2019免费版| 直男gayav资源| 七月丁香在线播放| ponron亚洲| 国产淫语在线视频| 国产av国产精品国产| 日日撸夜夜添| 国产黄色免费在线视频| 亚洲成人av在线免费| 人妻少妇偷人精品九色| 国产综合精华液| 一级片'在线观看视频| 1000部很黄的大片| 国产亚洲av嫩草精品影院| 色吧在线观看| 婷婷色综合大香蕉| 亚洲欧美精品自产自拍| 午夜免费观看性视频| 欧美高清性xxxxhd video| 久久人人爽人人爽人人片va| 国产永久视频网站| 国产黄片美女视频| 中文字幕久久专区| 亚洲成人一二三区av| videossex国产| 久久综合国产亚洲精品| 国产精品av视频在线免费观看| 欧美成人精品欧美一级黄| 久久精品久久精品一区二区三区| 亚洲最大成人av| 亚洲在久久综合| 国产中年淑女户外野战色| 日韩欧美三级三区| 色网站视频免费| 国产精品99久久久久久久久| 日韩国内少妇激情av| 色视频www国产| 高清欧美精品videossex| 久久久精品94久久精品| 热99在线观看视频| 两个人的视频大全免费| 亚洲天堂国产精品一区在线| 国产男人的电影天堂91| 成年版毛片免费区| 久久久色成人| 亚洲av电影在线观看一区二区三区 | 老女人水多毛片| 午夜福利在线观看吧| 免费高清在线观看视频在线观看| videos熟女内射| 在线观看人妻少妇| 蜜桃亚洲精品一区二区三区| 最后的刺客免费高清国语| 午夜福利在线观看吧| 视频中文字幕在线观看| 综合色av麻豆| 国产欧美另类精品又又久久亚洲欧美| 99久久精品一区二区三区| 99久国产av精品国产电影| av在线天堂中文字幕| 免费播放大片免费观看视频在线观看| 永久网站在线| 岛国毛片在线播放| 日本三级黄在线观看| 国产单亲对白刺激| av女优亚洲男人天堂| 一二三四中文在线观看免费高清| 亚洲欧洲国产日韩| 黄片无遮挡物在线观看| 日韩精品青青久久久久久| 在线a可以看的网站| 91狼人影院| 真实男女啪啪啪动态图| 亚洲av电影在线观看一区二区三区 | 干丝袜人妻中文字幕| 国产一区二区亚洲精品在线观看| 成人特级av手机在线观看| 五月玫瑰六月丁香| 九九久久精品国产亚洲av麻豆| 22中文网久久字幕| 亚洲欧美清纯卡通| 一夜夜www| 亚洲精品aⅴ在线观看| 三级毛片av免费| 亚洲国产色片| 国产黄色小视频在线观看| 一级毛片我不卡| 久久综合国产亚洲精品| 亚洲熟女精品中文字幕| 成人欧美大片| 狂野欧美激情性xxxx在线观看| 91午夜精品亚洲一区二区三区| 亚洲国产高清在线一区二区三| av在线亚洲专区| 成年人午夜在线观看视频 | 日韩电影二区| 国产淫语在线视频| 午夜精品一区二区三区免费看| 天堂av国产一区二区熟女人妻| 国产激情偷乱视频一区二区| 亚洲精品国产av蜜桃| 天堂俺去俺来也www色官网 | 日韩亚洲欧美综合| 日本免费a在线| 国产成年人精品一区二区| 日韩欧美 国产精品| 亚洲成人av在线免费| 欧美日韩综合久久久久久| 夫妻性生交免费视频一级片| 亚洲av二区三区四区| 国产伦一二天堂av在线观看| 国产激情偷乱视频一区二区| 日韩欧美一区视频在线观看 | 国产精品久久久久久久久免| 国产一级毛片在线| 中文字幕亚洲精品专区| 亚洲精品一区蜜桃| 九草在线视频观看| 精品酒店卫生间| 欧美xxⅹ黑人| 美女国产视频在线观看| 亚洲欧美日韩卡通动漫| 免费黄色在线免费观看| 精品久久久久久久人妻蜜臀av| 中文天堂在线官网| 国产成人福利小说| 亚洲精品国产av成人精品| 精品一区二区三区视频在线| 丰满少妇做爰视频| 好男人视频免费观看在线| 丝袜美腿在线中文| 亚洲av一区综合| 深爱激情五月婷婷| 国产淫片久久久久久久久| 美女cb高潮喷水在线观看| 亚洲婷婷狠狠爱综合网| 韩国av在线不卡| 亚洲人成网站高清观看| 国产淫语在线视频| 日韩欧美 国产精品| 在线观看一区二区三区| 身体一侧抽搐| 啦啦啦韩国在线观看视频| 免费看不卡的av| 伦精品一区二区三区| 日本免费a在线| 国产麻豆成人av免费视频| 国产精品久久久久久av不卡| 女人被狂操c到高潮| 久久精品国产亚洲av天美| 天堂av国产一区二区熟女人妻| 免费观看av网站的网址| 精品国产三级普通话版| av在线天堂中文字幕| 好男人在线观看高清免费视频| 老女人水多毛片| 黄色配什么色好看| 亚洲精品,欧美精品| 2018国产大陆天天弄谢| 亚洲国产精品成人综合色| 亚洲人与动物交配视频| 观看免费一级毛片| 成人高潮视频无遮挡免费网站| 又爽又黄a免费视频| 欧美+日韩+精品| 可以在线观看毛片的网站| 最近中文字幕2019免费版| 精品少妇黑人巨大在线播放| 国产精品不卡视频一区二区| 男的添女的下面高潮视频| 精品午夜福利在线看| 亚洲怡红院男人天堂| 日日摸夜夜添夜夜爱| 一级av片app| 久久久精品免费免费高清| 国内精品美女久久久久久| 亚洲av.av天堂| 视频中文字幕在线观看| 久久综合国产亚洲精品| 国产永久视频网站| ponron亚洲| 国产伦精品一区二区三区视频9| 黄片wwwwww| 日日撸夜夜添| 视频中文字幕在线观看| 国内精品宾馆在线| 日韩一区二区三区影片| 高清在线视频一区二区三区| 中文资源天堂在线| 国产综合懂色| 午夜免费观看性视频| 午夜激情欧美在线| 国产高清不卡午夜福利| 精品不卡国产一区二区三区| 熟女电影av网| 蜜桃亚洲精品一区二区三区| 欧美日韩国产mv在线观看视频 | 久久国内精品自在自线图片| 欧美xxxx性猛交bbbb| 精品久久久精品久久久| 好男人在线观看高清免费视频| 97精品久久久久久久久久精品| 青春草国产在线视频| 久久草成人影院| 国产乱人偷精品视频| 久久精品国产鲁丝片午夜精品| 又黄又爽又刺激的免费视频.| 黄色欧美视频在线观看| 成人欧美大片| 国产伦一二天堂av在线观看| 国产黄片美女视频| 两个人的视频大全免费| 午夜福利网站1000一区二区三区| 免费高清在线观看视频在线观看| 亚洲精品,欧美精品| 亚洲欧美成人综合另类久久久| 一级片'在线观看视频| 午夜亚洲福利在线播放| 久久久久九九精品影院| 欧美xxxx性猛交bbbb| 成人亚洲精品av一区二区| 中文字幕人妻熟人妻熟丝袜美| 又爽又黄a免费视频| 80岁老熟妇乱子伦牲交| 免费大片黄手机在线观看| 你懂的网址亚洲精品在线观看| 日产精品乱码卡一卡2卡三| 国内揄拍国产精品人妻在线| 国产精品av视频在线免费观看| 中国国产av一级| 丰满少妇做爰视频| 欧美日韩亚洲高清精品| 国产精品一区二区在线观看99 | 97在线视频观看| 一边亲一边摸免费视频| 亚洲精品日本国产第一区| 精品久久久噜噜| 国产精品麻豆人妻色哟哟久久 | 精品人妻视频免费看| 高清日韩中文字幕在线| 一级片'在线观看视频| 两个人视频免费观看高清| 性插视频无遮挡在线免费观看| 国产成人aa在线观看| 亚洲美女搞黄在线观看| 欧美潮喷喷水| 黄色一级大片看看| av网站免费在线观看视频 | 一级片'在线观看视频| 国产高清有码在线观看视频| 久久久久网色| 又爽又黄无遮挡网站| av线在线观看网站| 日韩欧美一区视频在线观看 | 秋霞伦理黄片| 日韩国内少妇激情av| 日本-黄色视频高清免费观看| 身体一侧抽搐| 国产一区二区在线观看日韩| 床上黄色一级片| 国产高清有码在线观看视频| 午夜爱爱视频在线播放| 欧美高清性xxxxhd video| 看黄色毛片网站| 亚洲国产精品国产精品| 国产成人午夜福利电影在线观看| 国产高清不卡午夜福利| 免费看a级黄色片| 色吧在线观看| 嫩草影院新地址| 国产老妇伦熟女老妇高清| 成年av动漫网址| 青春草视频在线免费观看| 国产成人精品福利久久| 欧美精品一区二区大全| 日韩制服骚丝袜av| 青青草视频在线视频观看| 免费观看的影片在线观看| 欧美丝袜亚洲另类| 欧美高清性xxxxhd video| 免费av观看视频| 在线天堂最新版资源| 亚洲欧美日韩无卡精品| 免费播放大片免费观看视频在线观看| 又粗又硬又长又爽又黄的视频| 亚洲欧美日韩卡通动漫| 国产中年淑女户外野战色| 欧美成人午夜免费资源| 国产午夜精品论理片| 大话2 男鬼变身卡| 日韩不卡一区二区三区视频在线| 乱人视频在线观看| 99久国产av精品国产电影| 成年av动漫网址| 久久久久久久久久成人| 国产高潮美女av| 国产成人免费观看mmmm| 在线观看美女被高潮喷水网站| 欧美一级a爱片免费观看看| 白带黄色成豆腐渣| 国产精品福利在线免费观看| 精品久久久久久久久av| 丰满少妇做爰视频| 亚洲国产成人一精品久久久| kizo精华| 精品人妻偷拍中文字幕| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 天天一区二区日本电影三级| 日韩精品青青久久久久久| 国产男人的电影天堂91| 午夜福利在线观看吧| 国产v大片淫在线免费观看| 亚洲在线自拍视频| .国产精品久久| 美女主播在线视频| 中国国产av一级| 欧美xxxx性猛交bbbb| 精品一区二区三卡| 亚洲第一区二区三区不卡| 亚洲国产精品专区欧美| 日本爱情动作片www.在线观看| 99热这里只有是精品在线观看| 国产 一区 欧美 日韩| 亚洲在久久综合| 免费看a级黄色片| 国产高清国产精品国产三级 | 小蜜桃在线观看免费完整版高清| 国产免费福利视频在线观看| 最近最新中文字幕免费大全7| 嫩草影院新地址| 日韩一区二区三区影片| 波多野结衣巨乳人妻| 91久久精品电影网| 亚洲欧美成人综合另类久久久| 亚洲国产精品专区欧美| 成人无遮挡网站| 亚洲图色成人| 亚洲自拍偷在线| 非洲黑人性xxxx精品又粗又长| 联通29元200g的流量卡| 欧美xxⅹ黑人| 久久久久久久久久黄片| 久久久久九九精品影院| 亚洲精品456在线播放app| 成人午夜精彩视频在线观看| 久久久久久九九精品二区国产| 99久久精品热视频| 男女视频在线观看网站免费| 如何舔出高潮| 久久精品国产亚洲av涩爱| 自拍偷自拍亚洲精品老妇| 亚洲av.av天堂| 一区二区三区免费毛片| 18禁动态无遮挡网站| 少妇高潮的动态图| 久久久久精品久久久久真实原创| 亚洲内射少妇av| 在线 av 中文字幕| 精品一区二区三卡| 一区二区三区高清视频在线| 久久人人爽人人爽人人片va| 亚洲欧美中文字幕日韩二区| 美女被艹到高潮喷水动态| 成人毛片60女人毛片免费| 亚洲av福利一区| 五月天丁香电影| 又爽又黄a免费视频| 精品酒店卫生间| 成人国产麻豆网| 91在线精品国自产拍蜜月| 99久国产av精品| 联通29元200g的流量卡| 精品一区二区三区人妻视频| 国产国拍精品亚洲av在线观看| 国产精品嫩草影院av在线观看| 一级毛片aaaaaa免费看小| 亚洲国产高清在线一区二区三| 高清av免费在线| 最近2019中文字幕mv第一页| 中文资源天堂在线| 亚洲欧美精品专区久久| 成人午夜高清在线视频| 99久久人妻综合| 国产成人精品久久久久久| 精品久久国产蜜桃| 人妻少妇偷人精品九色| 免费看不卡的av| 黄片无遮挡物在线观看| 偷拍熟女少妇极品色| 99热这里只有是精品在线观看| 波多野结衣巨乳人妻| 婷婷色麻豆天堂久久| 一夜夜www| 亚洲精品国产av蜜桃| www.av在线官网国产| 久久精品国产自在天天线| 精品久久久久久久末码| 伊人久久国产一区二区| 特级一级黄色大片| 国产av在哪里看| av在线播放精品| 国产麻豆成人av免费视频| 尾随美女入室| 日韩欧美 国产精品| 丰满乱子伦码专区| 国产单亲对白刺激| 亚洲电影在线观看av| 午夜亚洲福利在线播放| 建设人人有责人人尽责人人享有的 | 麻豆成人午夜福利视频| 天天一区二区日本电影三级| 久久久成人免费电影| 男人爽女人下面视频在线观看| 天堂av国产一区二区熟女人妻| 国产一区二区三区av在线| 国模一区二区三区四区视频| 欧美97在线视频| 自拍偷自拍亚洲精品老妇| 色播亚洲综合网| 大又大粗又爽又黄少妇毛片口| 久久99精品国语久久久| 日本欧美国产在线视频| 91狼人影院| 一个人看视频在线观看www免费| 国产精品.久久久| 亚洲欧美精品自产自拍| 97在线视频观看| 亚洲精品国产av蜜桃| 国产黄片美女视频| 高清av免费在线| 久久久久久久国产电影| 国产精品一区二区性色av| 亚洲av一区综合| 99热这里只有精品一区| 欧美三级亚洲精品| 国产成人福利小说| 国产精品久久久久久久久免| 一级毛片黄色毛片免费观看视频| 国国产精品蜜臀av免费| 男人狂女人下面高潮的视频| 国产高清不卡午夜福利| 麻豆国产97在线/欧美| 如何舔出高潮| av.在线天堂| 欧美日韩视频高清一区二区三区二| 欧美日韩亚洲高清精品| 国产免费福利视频在线观看| 亚洲av电影在线观看一区二区三区 | 久久热精品热| 91在线精品国自产拍蜜月| 十八禁国产超污无遮挡网站| 婷婷色麻豆天堂久久| 色播亚洲综合网| av专区在线播放| 哪个播放器可以免费观看大片| 欧美性猛交╳xxx乱大交人| 女的被弄到高潮叫床怎么办| 欧美性猛交╳xxx乱大交人| 国产黄色小视频在线观看| 乱码一卡2卡4卡精品| 日产精品乱码卡一卡2卡三| 亚洲av一区综合| 菩萨蛮人人尽说江南好唐韦庄| 国产淫片久久久久久久久| 看免费成人av毛片| 久久久国产一区二区| 亚洲国产色片| 青春草视频在线免费观看| av免费观看日本| 午夜免费激情av| 国产伦理片在线播放av一区| 神马国产精品三级电影在线观看| 国产高清国产精品国产三级 | 日韩视频在线欧美| 在线免费观看的www视频| 又爽又黄无遮挡网站| 国产免费福利视频在线观看| 国产黄片视频在线免费观看| 中文字幕久久专区| 国产成人精品婷婷| 天堂网av新在线| 久久久久久久久久黄片| 99热这里只有是精品50| 国产成人91sexporn| 熟妇人妻不卡中文字幕| 亚洲精品成人久久久久久| 女的被弄到高潮叫床怎么办| 亚洲乱码一区二区免费版| 国产黄色视频一区二区在线观看| 亚洲欧美一区二区三区黑人 | 五月玫瑰六月丁香| 精品亚洲乱码少妇综合久久| 免费播放大片免费观看视频在线观看| 国产单亲对白刺激| 国产黄频视频在线观看| 国产精品美女特级片免费视频播放器| 伦理电影大哥的女人| 激情 狠狠 欧美| 秋霞伦理黄片| 777米奇影视久久| 日韩欧美国产在线观看| 久久99热这里只有精品18| 男人狂女人下面高潮的视频| 色网站视频免费| 美女xxoo啪啪120秒动态图| 亚洲在线观看片| 精品国产三级普通话版| 特大巨黑吊av在线直播| 国产精品无大码| 干丝袜人妻中文字幕| 国产精品国产三级专区第一集| 在线免费十八禁| 国产女主播在线喷水免费视频网站 | 一本一本综合久久| 国产毛片a区久久久久| 搡老妇女老女人老熟妇| 亚洲,欧美,日韩| 国产高清有码在线观看视频| 亚洲性久久影院| 久久精品综合一区二区三区| 看黄色毛片网站| 午夜激情久久久久久久| 久久精品久久久久久久性| 亚洲欧美日韩无卡精品| 狂野欧美白嫩少妇大欣赏| 亚洲第一区二区三区不卡| 免费观看的影片在线观看| 成人亚洲欧美一区二区av| 大片免费播放器 马上看| 99久久九九国产精品国产免费| 91久久精品国产一区二区成人| 熟妇人妻久久中文字幕3abv| 亚洲av一区综合| 不卡视频在线观看欧美| 一个人免费在线观看电影| av在线亚洲专区| 国产高清国产精品国产三级 | 精品一区在线观看国产| 有码 亚洲区| 久久久久久久亚洲中文字幕| 美女黄网站色视频| 亚洲人成网站高清观看| av又黄又爽大尺度在线免费看| 99热这里只有是精品50| 美女黄网站色视频| 亚洲在线观看片| 午夜激情久久久久久久| 大又大粗又爽又黄少妇毛片口| 日韩三级伦理在线观看| 在线观看人妻少妇| 成人国产麻豆网| 又爽又黄a免费视频| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 国产视频首页在线观看| 久久久久久久亚洲中文字幕| 国产伦精品一区二区三区视频9| 亚洲精品国产av蜜桃| 男女下面进入的视频免费午夜| 亚洲图色成人| 亚洲精品乱久久久久久| 老师上课跳d突然被开到最大视频| 国内揄拍国产精品人妻在线| 嘟嘟电影网在线观看| 黄片无遮挡物在线观看| 女人被狂操c到高潮| 97人妻精品一区二区三区麻豆| 晚上一个人看的免费电影| 哪个播放器可以免费观看大片| 中文字幕免费在线视频6| 国内揄拍国产精品人妻在线| 精品99又大又爽又粗少妇毛片| 欧美日韩在线观看h| 成年免费大片在线观看| 国产精品福利在线免费观看| 成年免费大片在线观看| 日本与韩国留学比较| 欧美 日韩 精品 国产| 亚洲精品成人久久久久久| 亚洲不卡免费看| 久久久久久伊人网av| 国产成人a区在线观看| 亚洲精品乱久久久久久| 国产成人精品一,二区| 国产欧美另类精品又又久久亚洲欧美| 亚洲人成网站高清观看| 九九久久精品国产亚洲av麻豆| 亚洲国产精品国产精品| 一级毛片 在线播放| 国产淫语在线视频| 国产黄a三级三级三级人| av专区在线播放| 欧美性猛交╳xxx乱大交人| 精品少妇黑人巨大在线播放| 久久韩国三级中文字幕| 在线a可以看的网站| 最后的刺客免费高清国语| 成年免费大片在线观看| 黄片无遮挡物在线观看| 成人亚洲精品av一区二区| 草草在线视频免费看| 国产在视频线在精品| 一级毛片 在线播放| 成人综合一区亚洲| 成人特级av手机在线观看| 国产精品人妻久久久久久| 亚洲av一区综合| 国内精品一区二区在线观看| 日韩av在线大香蕉| 波野结衣二区三区在线| 禁无遮挡网站| 麻豆久久精品国产亚洲av| 国产成人aa在线观看|