挑戰(zhàn)播客監(jiān)管新課題適應(yīng)網(wǎng)絡(luò)斗爭(zhēng)新形勢(shì)

挑戰(zhàn)播客監(jiān)管新課題適應(yīng)網(wǎng)絡(luò)斗爭(zhēng)新形勢(shì)

播客作為一種新興的網(wǎng)上視聽(tīng)媒體傳播形式，在互聯(lián)網(wǎng)視聽(tīng)節(jié)目傳播中占有十分重要的地位，成為廣大網(wǎng)民在線觀看視頻和上傳視頻的主要途徑，但也存在著一些不容忽視的問(wèn)題。為進(jìn)一步落實(shí)監(jiān)管職責(zé)，加強(qiáng)對(duì)播客網(wǎng)站的管理，國(guó)家廣電總局2008年4月批復(fù)監(jiān)管中心建設(shè)“播客視頻節(jié)目監(jiān)管系統(tǒng)”，以擴(kuò)大互聯(lián)網(wǎng)視聽(tīng)節(jié)目監(jiān)管范圍，為管理部門規(guī)范播客網(wǎng)站視聽(tīng)節(jié)目傳播秩序提供更高效的技術(shù)手段。

播客視頻節(jié)目監(jiān)管系統(tǒng)由30多臺(tái)搜索機(jī)集群服務(wù)器，以及業(yè)務(wù)處理分析服務(wù)器、數(shù)據(jù)庫(kù)服務(wù)器、存儲(chǔ)陣列、負(fù)載均衡、防火墻、交換機(jī)等設(shè)備組成，包含節(jié)目歸類、熱點(diǎn)監(jiān)控、播客監(jiān)控、網(wǎng)站監(jiān)控、影視監(jiān)管、視頻專題等30個(gè)功能模塊。以國(guó)內(nèi)156家重點(diǎn)播客網(wǎng)站為監(jiān)控對(duì)象，根據(jù)播客網(wǎng)站的技術(shù)特點(diǎn)，在播客視頻節(jié)目深度采集、多層次熱點(diǎn)話題聚類、智能化視頻節(jié)目歸類、播客影視節(jié)目排重和傳播動(dòng)態(tài)分析等技術(shù)上進(jìn)行了創(chuàng)新，解決了播客網(wǎng)站節(jié)目數(shù)據(jù)大規(guī)模抓取、視頻熱點(diǎn)自動(dòng)聚類、播客節(jié)目自動(dòng)歸類、播客發(fā)布者管理、影視節(jié)目傳播分析等多個(gè)技術(shù)難點(diǎn)。

該系統(tǒng)實(shí)時(shí)采集、分析、發(fā)現(xiàn)播客網(wǎng)站上最新的視聽(tīng)節(jié)目，對(duì)熱點(diǎn)信息進(jìn)行話題聚類與跟蹤，對(duì)播客網(wǎng)站上的視聽(tīng)節(jié)目按照電影、電視劇、動(dòng)漫、新聞等重點(diǎn)類別進(jìn)行自動(dòng)歸類，建立了播客發(fā)布者黑白名單，可以及時(shí)掌握播客網(wǎng)站上節(jié)目傳播趨勢(shì)與動(dòng)態(tài)，記錄和下載各類違規(guī)節(jié)目，跟蹤其擴(kuò)散范圍與演變趨勢(shì)，并能對(duì)各類注冊(cè)并發(fā)布節(jié)目的播客進(jìn)行登記和跟蹤，對(duì)播客網(wǎng)站上傳播的影視節(jié)目版權(quán)信息進(jìn)行核查。播客視頻節(jié)目監(jiān)管系統(tǒng)在研制了面向播客網(wǎng)站的深度視頻信息采集子系統(tǒng)、播客視頻熱點(diǎn)自動(dòng)發(fā)現(xiàn)技術(shù)、面向播客的智能化視頻節(jié)目歸類技術(shù)、播客影視節(jié)目排重和傳播動(dòng)態(tài)分析技術(shù)方面，都有創(chuàng)新。

播客具備WEB2.0時(shí)代傳媒形態(tài)的典型特征，如自主的信息傳播方式，以音視頻為主的信息傳播內(nèi)容等。從發(fā)展軌跡來(lái)看，播客發(fā)展速度比當(dāng)年博客更為迅猛，這種新傳媒形態(tài)已成為互聯(lián)網(wǎng)視頻傳播的主流。網(wǎng)絡(luò)視聽(tīng)媒體在豐富人民群眾的精神文化生活的同時(shí)，也存在著為不健康的內(nèi)容提供了傳播渠道。例如，境內(nèi)部分網(wǎng)站片面追求經(jīng)濟(jì)效益，無(wú)視政府法規(guī)，在網(wǎng)絡(luò)視聽(tīng)節(jié)目中播放、轉(zhuǎn)播、鏈接含有色情、暴力甚至反動(dòng)的節(jié)目?jī)?nèi)容。黨中央和國(guó)家領(lǐng)導(dǎo)高度重視信息網(wǎng)絡(luò)視聽(tīng)節(jié)目傳播管理工作，對(duì)互聯(lián)網(wǎng)絡(luò)信息安全保障工作提出了更高的要求，明確廣電總局對(duì)IP電視、播客和手機(jī)視聽(tīng)節(jié)目業(yè)務(wù)負(fù)有監(jiān)管職責(zé)，并多次批示要求“加快完善視聽(tīng)節(jié)目監(jiān)控中心建設(shè)，盡快運(yùn)作監(jiān)管體系”，“要加強(qiáng)網(wǎng)絡(luò)視頻節(jié)目監(jiān)看，加快完善視頻監(jiān)看平臺(tái)建設(shè)，以適應(yīng)網(wǎng)絡(luò)斗爭(zhēng)的新形勢(shì)”。

播客視頻節(jié)目監(jiān)管系統(tǒng)于2008年10月開(kāi)始建設(shè)，2009年6月投入運(yùn)行至今，軟硬件運(yùn)行穩(wěn)定，監(jiān)控范圍涵蓋156家重點(diǎn)播客網(wǎng)站，平均搜索周期小于9小時(shí)，已保存節(jié)目元信息數(shù)量超過(guò)9500萬(wàn)條，音視頻平均遺漏率小于2.2%，熱點(diǎn)排行更新周期小于4小時(shí)，首頁(yè)內(nèi)容提取準(zhǔn)確率達(dá)到100%，保存節(jié)目信息重復(fù)率小于0.1%。建立了播客網(wǎng)站基礎(chǔ)信息庫(kù)、視聽(tīng)節(jié)目庫(kù)、視聽(tīng)節(jié)目索引及特征庫(kù)等各類信息庫(kù)，在“打擊整治網(wǎng)絡(luò)淫穢色情等有害信息專項(xiàng)行動(dòng)”、“六四二十周年專項(xiàng)監(jiān)控”、“新疆7·5事件”、“國(guó)慶六十周年”、“茉莉花革命”等重大專項(xiàng)和日常監(jiān)管任務(wù)中,為總局對(duì)播客網(wǎng)站管理提供了大量及時(shí)、準(zhǔn)確的監(jiān)管數(shù)據(jù)，為維護(hù)國(guó)家信息安全和文化安全，提供了有力的技術(shù)支撐手段。

系統(tǒng)設(shè)計(jì)以國(guó)內(nèi)重點(diǎn)播客網(wǎng)站為監(jiān)測(cè)對(duì)象，實(shí)時(shí)采集和分析網(wǎng)站上的視聽(tīng)節(jié)目信息，發(fā)現(xiàn)最新的音視頻節(jié)目，對(duì)熱點(diǎn)信息進(jìn)行話題聚類與跟蹤，及時(shí)掌握網(wǎng)上視聽(tīng)節(jié)目傳播趨勢(shì)與動(dòng)態(tài)；對(duì)播客網(wǎng)站上的視聽(tīng)節(jié)目進(jìn)行歸類，對(duì)電影、電視劇、動(dòng)漫、新聞等重點(diǎn)類別節(jié)目進(jìn)行重點(diǎn)監(jiān)管；對(duì)發(fā)現(xiàn)的違規(guī)節(jié)目進(jìn)行記錄和下載取證，跟蹤其擴(kuò)散范圍與演變趨勢(shì)；建立播客發(fā)布者黑白名單，對(duì)在播客網(wǎng)站上登記注冊(cè)并發(fā)布節(jié)目的播客發(fā)布者按違規(guī)情況進(jìn)行登記；對(duì)已審批播客網(wǎng)站的備案信息進(jìn)行核查，發(fā)現(xiàn)違規(guī)情況并自動(dòng)報(bào)警提示；對(duì)播客網(wǎng)站上傳播的視聽(tīng)節(jié)目版權(quán)信息進(jìn)行核查，對(duì)侵權(quán)盜版行為進(jìn)行記錄；通過(guò)建立播客網(wǎng)站基礎(chǔ)信息庫(kù)、視聽(tīng)節(jié)目庫(kù)、視聽(tīng)節(jié)目索引及特征庫(kù)等各類信息庫(kù)，初步建立播客網(wǎng)站視聽(tīng)節(jié)目信息數(shù)據(jù)庫(kù)，為播客網(wǎng)站的監(jiān)管工作提供較為全面、準(zhǔn)確的監(jiān)管數(shù)據(jù)資料。

基于內(nèi)容分析技術(shù)對(duì)熱點(diǎn)和輿情信息進(jìn)行發(fā)現(xiàn)和跟蹤是監(jiān)管的重點(diǎn)之一。由于網(wǎng)站節(jié)目類別多樣，熱點(diǎn)分散，同時(shí)視頻信息文本內(nèi)容少，需要系統(tǒng)具有較強(qiáng)的節(jié)目自動(dòng)歸類和熱點(diǎn)話題聚類能力。針對(duì)上述問(wèn)題，播客視頻節(jié)目監(jiān)管系統(tǒng)

在節(jié)目、關(guān)鍵詞、話題等三個(gè)層次上進(jìn)行在熱點(diǎn)信息的發(fā)現(xiàn)和輿情分析。在節(jié)目熱點(diǎn)發(fā)現(xiàn)層次，與傳統(tǒng)的基于點(diǎn)擊量絕對(duì)值發(fā)現(xiàn)熱點(diǎn)節(jié)目的方法不同，系統(tǒng)采用了基于節(jié)目點(diǎn)擊量和評(píng)論時(shí)間變化曲線分析，發(fā)現(xiàn)熱點(diǎn)節(jié)目的策略，取得了很好的效果；在關(guān)鍵詞熱點(diǎn)發(fā)現(xiàn)層次，基于數(shù)據(jù)挖掘方法，并充分結(jié)合播客節(jié)目數(shù)據(jù)的本身特征，包括標(biāo)題、標(biāo)簽、分類、熱度、發(fā)布時(shí)間等信息，利用關(guān)鍵詞在不同時(shí)間段內(nèi)的熱度散布特征，提出了一種面向視頻等短文本數(shù)據(jù)的熱點(diǎn)關(guān)鍵詞發(fā)現(xiàn)算法，在系統(tǒng)應(yīng)用中取得了較好的效果；在話題熱點(diǎn)發(fā)現(xiàn)層次，系統(tǒng)使用了一種新的視頻話題檢測(cè)算法。采用二部圖模型表示視頻和關(guān)鍵詞的雙向關(guān)系，通過(guò)該模型，視頻不僅可以用關(guān)鍵詞表示，也能用作特征以傳播文本信息。通過(guò)分析視頻和關(guān)鍵詞的關(guān)聯(lián)結(jié)構(gòu)能減少文本噪聲,基于該模型對(duì)視頻進(jìn)行聚類，能夠有效發(fā)現(xiàn)最新的熱門視頻事件。在系統(tǒng)實(shí)際數(shù)據(jù)的測(cè)試表明，該方法具有較好的有效性，方法具有一定的創(chuàng)新性。

播客視頻節(jié)目監(jiān)管系統(tǒng)的建立運(yùn)行，填補(bǔ)了國(guó)內(nèi)對(duì)播客網(wǎng)站視頻節(jié)目監(jiān)管的技術(shù)手段空白，進(jìn)一步擴(kuò)大了互聯(lián)網(wǎng)視聽(tīng)節(jié)目有效監(jiān)管范圍，在面向播客網(wǎng)站的深度視頻信息采集、熱點(diǎn)話題、熱點(diǎn)詞匯、熱點(diǎn)節(jié)目分析、智能化視頻節(jié)目歸類等方面取得了新的突破，積累了播客發(fā)布者黑白名單、播客網(wǎng)站影視節(jié)目庫(kù)等基礎(chǔ)數(shù)據(jù)。

該系統(tǒng)從2008年10月開(kāi)始建設(shè)，2009年6月上線試運(yùn)行至今，監(jiān)控目標(biāo)156家，保存各類節(jié)目元信息9500多萬(wàn)條，記錄個(gè)人播客信息超過(guò)800萬(wàn)，機(jī)構(gòu)播客1300多個(gè)，播客群組1.6萬(wàn)個(gè)，建立了20個(gè)大類83個(gè)小類的節(jié)目分類，包含10000多條電影、電視劇、動(dòng)漫、記錄片的播客影視節(jié)目庫(kù)，以及播客網(wǎng)站基礎(chǔ)信息庫(kù)、視聽(tīng)節(jié)目庫(kù)、視聽(tīng)節(jié)目索引庫(kù)及特征庫(kù)等播客視頻節(jié)目基礎(chǔ)信息庫(kù)。

在“打擊整治網(wǎng)絡(luò)淫穢色情等有害信息專項(xiàng)行動(dòng)”、“六四二十周年專項(xiàng)監(jiān)控”、“新疆7·5事件”、“國(guó)慶六十周年”、“茉莉花革命”等一系列重大專項(xiàng)和日常監(jiān)管任務(wù)中為監(jiān)管工作提供了大量及時(shí)、準(zhǔn)確的監(jiān)管數(shù)據(jù)，并為進(jìn)一步打擊影視節(jié)目盜版源頭，維護(hù)影視節(jié)目版權(quán)，提供了數(shù)據(jù)基礎(chǔ)和技術(shù)手段。

播客視頻節(jié)目監(jiān)管系統(tǒng)實(shí)現(xiàn)了對(duì)國(guó)內(nèi)156家播客網(wǎng)站上9500萬(wàn)條視頻節(jié)目的有效監(jiān)管，平均搜索周期小于9小時(shí)，音視頻平均遺漏率小于2.2%，熱點(diǎn)排行更新周期小于4小時(shí)，首頁(yè)內(nèi)容提取準(zhǔn)確率達(dá)到100%，保存節(jié)目信息重復(fù)率小于0.1%。2010年8月26日，廣電總局科技司組織有關(guān)專家對(duì)播客視頻節(jié)目監(jiān)管系統(tǒng)進(jìn)行了技術(shù)鑒定，鑒定組一致認(rèn)為該系統(tǒng)具有創(chuàng)新性，填補(bǔ)了國(guó)內(nèi)空白，達(dá)到國(guó)際領(lǐng)先水平。

播客作為一種新興的網(wǎng)上視聽(tīng)節(jié)目傳播形式，在互聯(lián)網(wǎng)視聽(tīng)節(jié)目傳播中占有十分重要的地位，并已成為互聯(lián)網(wǎng)視聽(tīng)節(jié)目傳播的主流形式，播客網(wǎng)站視聽(tīng)節(jié)目傳播秩序直接關(guān)系到國(guó)家文化安全。如今播客視聽(tīng)節(jié)目傳播的發(fā)展和監(jiān)管是全世界共同面臨的新課題，它具有信息海量、傳播形式多樣且不斷更新、受眾人群眾多等特點(diǎn)，僅僅依靠人工手段開(kāi)展監(jiān)管工作，根本無(wú)法適應(yīng)網(wǎng)絡(luò)視聽(tīng)節(jié)目的發(fā)展形勢(shì)，這對(duì)所有網(wǎng)絡(luò)文化的建設(shè)者和管理者而言，既是新的機(jī)遇，也是新的挑戰(zhàn)。因此播客視頻節(jié)目監(jiān)管系統(tǒng)挑戰(zhàn)了播客監(jiān)管新課題，適應(yīng)了網(wǎng)絡(luò)斗爭(zhēng)的新形勢(shì)。

圖1 系統(tǒng)的軟件架構(gòu)

圖2系統(tǒng)硬件構(gòu)成