基于大數(shù)據(jù)的互聯(lián)網(wǎng)“信息淘汰”機(jī)制分析

姜?jiǎng)︿h

摘? 要? 大數(shù)據(jù)技術(shù)作為信息社會(huì)發(fā)展中的重要資源，在信息管理方面發(fā)揮著不可替代的作用。利用大數(shù)據(jù)技術(shù)，為互聯(lián)網(wǎng)引入“信息淘汰”機(jī)制，對(duì)海量信息進(jìn)行高效率的處理，裨補(bǔ)以往發(fā)展中的缺漏，營(yíng)造精簡(jiǎn)、實(shí)用的網(wǎng)絡(luò)，從而帶給受眾互聯(lián)網(wǎng)新體驗(yàn)，推動(dòng)信息行業(yè)新發(fā)展。

關(guān)鍵詞? 大數(shù)據(jù);信息行業(yè);“信息淘汰”;受眾困擾

隨著云時(shí)代的到來(lái)，大數(shù)據(jù)吸引了越來(lái)越多的關(guān)注。但是，在信息時(shí)代的大背景下，受眾面對(duì)海量信息篩選難度增大，而信息行業(yè)發(fā)展也日見(jiàn)亂象頻生，利用大數(shù)據(jù)對(duì)其進(jìn)行處理，很有必要。

1? 大數(shù)據(jù)的基本內(nèi)容

1.1? 大數(shù)據(jù)的概念

2008年8月中旬，維克托·邁爾-舍恩伯格及肯尼斯·庫(kù)克耶首次提出“大數(shù)據(jù)（Big Data）”的概念，大數(shù)據(jù)（Big Data）技術(shù)是指利用云計(jì)算的分布式處理、分布式數(shù)據(jù)庫(kù)和云存儲(chǔ)、虛擬化技術(shù)對(duì)海量數(shù)據(jù)進(jìn)行甄別、篩選和處理，從而求得更為準(zhǔn)確、有效的數(shù)據(jù)信息，實(shí)現(xiàn)數(shù)據(jù)價(jià)值的最大化。

1.2? 大數(shù)據(jù)的特點(diǎn)

就目前大數(shù)據(jù)發(fā)展?fàn)顩r來(lái)看，主要呈現(xiàn)出以下幾個(gè)特點(diǎn)。第一，大量而高速。大數(shù)據(jù)技術(shù)可在較短的時(shí)間內(nèi)處理較大的信息量，和傳統(tǒng)的隨機(jī)分析法相比較，大數(shù)據(jù)技術(shù)采用數(shù)據(jù)覆蓋面廣，計(jì)算周期短。第二，低價(jià)值密度。在常態(tài)的數(shù)據(jù)處理中，數(shù)據(jù)采集不及時(shí)、樣本不全面、處理誤差大等因素會(huì)造成數(shù)據(jù)失真，難以得到精準(zhǔn)的信息。第三，多樣而真實(shí)。大數(shù)據(jù)可將不同數(shù)據(jù)源、不同數(shù)據(jù)樣本進(jìn)行甄別，篩選處理，使非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù)[1]。

1.3? 大數(shù)據(jù)的發(fā)展趨勢(shì)

一方面，大數(shù)據(jù)正占據(jù)著科技前沿的位置，成為新一代技術(shù)革命中的重要資源[2]。數(shù)據(jù)挖掘、人工智能、經(jīng)濟(jì)市場(chǎng)都日漸依賴(lài)于大數(shù)據(jù)強(qiáng)大的處理能力。掌握大數(shù)據(jù)，即掌握數(shù)據(jù)生態(tài)系統(tǒng)話語(yǔ)的主導(dǎo)權(quán)。

另一方面，大數(shù)據(jù)在發(fā)展過(guò)程中，數(shù)據(jù)源缺乏相應(yīng)的管理措施，對(duì)個(gè)人信息挖掘過(guò)度，造成隱私泄露;數(shù)據(jù)造假，許多人在不知情的情況下繼續(xù)使用，從而產(chǎn)生一系列問(wèn)題。

1.4? 大數(shù)據(jù)與信息時(shí)代

信息時(shí)代帶給人們的影響是雙向的，通過(guò)大眾傳媒的雙重屬性理論，我們可知，一方面，網(wǎng)絡(luò)媒介具有準(zhǔn)入門(mén)檻低、媒介種類(lèi)多、受眾范圍廣等優(yōu)點(diǎn)，可在最大程度上突破時(shí)空的局限性，另一方面，網(wǎng)絡(luò)媒介把整個(gè)世界呈現(xiàn)在人們眼前，但部分新聞失實(shí)，誤導(dǎo)受眾;豐富了知識(shí)，卻降低了人們的思考能力。目前，大數(shù)據(jù)技術(shù)在為信息行業(yè)提供服務(wù)時(shí)，只停留在為受眾提供個(gè)性化推薦的層面，而沒(méi)有做到過(guò)濾信息中的非實(shí)用部分，即主要通過(guò)對(duì)讀者的年齡、性別、地域、愛(ài)好、等進(jìn)行研究，從而進(jìn)行信息推薦，卻往往忽視了受眾出于獵奇心理、短暫追求愉悅等主觀化的特點(diǎn)。相當(dāng)一部分學(xué)者對(duì)信息過(guò)載、信息不實(shí)等問(wèn)題進(jìn)行批評(píng)，呼吁信息勿失價(jià)值性。

2? “信息淘汰“機(jī)制的引入及可行性分析

2.1? “信息淘汰”機(jī)制的概念

“信息淘汰”機(jī)制是指利用大數(shù)據(jù)結(jié)構(gòu)化處理的優(yōu)勢(shì)，在極其有限的時(shí)間內(nèi)，發(fā)揮信息處理量大、速度快，低價(jià)值密度的特點(diǎn)，充當(dāng)媒介“把關(guān)人”的角色，對(duì)網(wǎng)絡(luò)虛假、重復(fù)、實(shí)用價(jià)值低的信息進(jìn)行剔除、淘汰，從而使互聯(lián)網(wǎng)信息報(bào)道向優(yōu)質(zhì)化，精簡(jiǎn)化發(fā)展。

2.2? “信息淘汰”機(jī)制的引入

2.2.1? 議程設(shè)置和選擇算法的宏觀引入

就當(dāng)前信息傳播形式而言，信息量和傳播速度日趨龐大，把握信息的主流方向，必不可少。在宏觀層面上，主要借助于兩種方式：主流媒體的“議程設(shè)置功能”和大數(shù)據(jù)的選擇算法。

基于當(dāng)前主流媒體的影響力，可在信息傳播過(guò)程中主動(dòng)進(jìn)行“議程設(shè)置”。再者，在傳播過(guò)程中，適時(shí)對(duì)低質(zhì)量、低價(jià)值的信息進(jìn)行議題干涉，排斥此類(lèi)議題的深入長(zhǎng)期發(fā)展，達(dá)到“信息淘汰”的目的。最后，可通過(guò)“公共議題”的引入，將此類(lèi)信息展現(xiàn)在受眾面前，依托有效的受眾評(píng)論，轉(zhuǎn)變信息從業(yè)者的生產(chǎn)方向，達(dá)到信息的凈化。

同時(shí)，可以利用好數(shù)據(jù)挖掘的“選擇算法”?！斑x擇算法”主要分為三類(lèi)：一是“分類(lèi)算法”，主要采用VSM法，建立類(lèi)別向量空間，計(jì)算文本相似度，點(diǎn)面結(jié)合，剔除無(wú)效信息;二是“聚類(lèi)算法”，可通過(guò)“自頂而下”層次的劃分來(lái)實(shí)現(xiàn)信息的篩選。設(shè)定一定的數(shù)據(jù)條件，提高層次聚類(lèi)質(zhì)量，過(guò)濾低層次遺留信息;三是“關(guān)聯(lián)規(guī)則算法”，基于支持度公式：support（XY）= P（XY），收集用戶設(shè)定的閾值，排查出一定數(shù)目的信息類(lèi)別;再根據(jù)信任度公式：support（XY）/support（X），挖掘頻繁出現(xiàn)的無(wú)效信息，達(dá)到最終“淘汰”目的。

2.2.2? 用戶群評(píng)論和“社區(qū)文化”的微觀引入

考慮到網(wǎng)民基數(shù)以及主觀意愿的表達(dá)欲望，在微觀層面上，可從用戶個(gè)體出發(fā)，借助用戶群評(píng)論和“社區(qū)”進(jìn)行“信息淘汰”機(jī)制的引入。

第一，利用用戶群評(píng)論判斷信息的有效性。“信息淘汰”機(jī)制的引入，本身就服務(wù)于互聯(lián)網(wǎng)信息受眾，通過(guò)收集受眾對(duì)信息的評(píng)論，可形成較為有力的沖擊，制約同質(zhì)信息的再生產(chǎn)。第二，利用“社區(qū)文化”排斥低俗信息?！吧鐓^(qū)”指的是一些或多數(shù)網(wǎng)民通過(guò)興趣愛(ài)好、習(xí)俗宗教、情感歸屬構(gòu)成的類(lèi)似社區(qū)的網(wǎng)絡(luò)群體，而“社區(qū)”中必然存在共同的喜好和追求。通過(guò)加強(qiáng)“社區(qū)文化”的構(gòu)建和管理，可形成自下而上的管理機(jī)制，由點(diǎn)到面，遏制低質(zhì)信息的傳播。

2.2.3? Hadoop的實(shí)踐嘗試

Hadoop是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架，在近些年，借助集群的方式對(duì)信息進(jìn)行高速運(yùn)算和儲(chǔ)存，使它在Internet的發(fā)展過(guò)程中廣受歡迎。在最初使用時(shí)，Hadoop主要被用于做網(wǎng)絡(luò)索引，主要亮點(diǎn)是擴(kuò)展性強(qiáng)、可靠高效、成本較低。就利用它來(lái)運(yùn)行“信息淘汰”機(jī)制，可以說(shuō)是一次相當(dāng)大的嘗試。一方面，它非常適合針對(duì)敏感信息進(jìn)行處理，可行性較強(qiáng)，但是另一方面，它雖然高速發(fā)展，但仍有相當(dāng)多的不足亟待完善，諸如政府制度、行業(yè)行規(guī)，數(shù)據(jù)調(diào)取管理等等。隨著相關(guān)問(wèn)題的解決，相信它在“信息淘汰”機(jī)制運(yùn)行的路上必將走得更遠(yuǎn)。

3? “信息淘汰”機(jī)制的積極作用

3.1? “信息淘汰”機(jī)制對(duì)受眾的作用

基于“信息淘汰”機(jī)制，一方面，可使受眾層得到真實(shí)、有效、低重復(fù)率、實(shí)用性強(qiáng)的信息，從而降低使用率，激發(fā)受眾層的創(chuàng)造力和對(duì)信息的利用率，另一方面，可使受眾層對(duì)信息的信任程度增強(qiáng)，弱化不良輿論及惡意信息對(duì)受眾層的干擾，帶給受眾綠色、干凈、高效的互聯(lián)網(wǎng)新體驗(yàn)。

3.2? “信息淘汰”機(jī)制對(duì)信息行業(yè)的作用

對(duì)于信息從業(yè)者來(lái)說(shuō)，“信息淘汰”機(jī)制的引入可規(guī)范其信息生產(chǎn)內(nèi)容，監(jiān)督其信息生產(chǎn)質(zhì)量，從而提高其對(duì)優(yōu)質(zhì)報(bào)道的追求，對(duì)行業(yè)的認(rèn)知度和社會(huì)責(zé)任感。對(duì)于信息行業(yè)來(lái)說(shuō)，“信息淘汰”機(jī)制可以促進(jìn)信息行業(yè)的持久發(fā)展，抵制低質(zhì)量、差內(nèi)容的信息，避免資源浪費(fèi)，從而淘汰一批“僵尸”信息產(chǎn)業(yè)，盤(pán)活行業(yè)新發(fā)展，提高社會(huì)整體活性，帶動(dòng)經(jīng)濟(jì)整體增長(zhǎng)。

3.3? “信息淘汰”機(jī)制對(duì)監(jiān)管者的作用

就當(dāng)今信息監(jiān)管情況而言，“信息淘汰”機(jī)制的引入，將在技術(shù)完善和制度完善兩方面起到作用，進(jìn)而提高互聯(lián)網(wǎng)監(jiān)管效果。首先，在技術(shù)完善方面，“信息淘汰”機(jī)制會(huì)修補(bǔ)原有監(jiān)察系統(tǒng)的缺漏，提高監(jiān)察力度，簡(jiǎn)化監(jiān)察形式，提高監(jiān)察效率;其次，在制度完善方面，“信息淘汰”機(jī)制能夠起到“硬控制”的作用，全面原有制度，調(diào)節(jié)信息生產(chǎn)方向，從而約束信息生產(chǎn)，并最終達(dá)到降低互聯(lián)網(wǎng)管理難度的目標(biāo)。

4? 結(jié)語(yǔ)

綜上所述，在當(dāng)今信息時(shí)代高速發(fā)展的背景下，大數(shù)據(jù)技術(shù)持續(xù)深入發(fā)展，各行各業(yè)利用大數(shù)據(jù)進(jìn)行分析處理的現(xiàn)象屢見(jiàn)不鮮。就承擔(dān)傳遞信息、控制社會(huì)輿情、服務(wù)大眾利益的信息行業(yè)來(lái)說(shuō)，更需要肩負(fù)起身為公眾媒介的責(zé)任。利用大數(shù)據(jù)，為互聯(lián)網(wǎng)引入“淘汰”機(jī)制，將幫助互聯(lián)網(wǎng)信息進(jìn)行有效的改變，對(duì)受眾而言，可以得到高質(zhì)量的信息;對(duì)產(chǎn)業(yè)而言，可以促進(jìn)其發(fā)展，提高信息質(zhì)量;對(duì)社會(huì)而言，使此機(jī)制能彌補(bǔ)當(dāng)今社會(huì)中信息發(fā)展不充分、不協(xié)調(diào)、不全面的問(wèn)題，推動(dòng)互聯(lián)網(wǎng)綠色、高效、精簡(jiǎn)化構(gòu)建。

參考文獻(xiàn)

[1]劉春生.計(jì)算機(jī)數(shù)據(jù)庫(kù)技術(shù)在信息管理中的實(shí)踐與應(yīng)用[J].科學(xué)技術(shù)創(chuàng)新，2019（29）：87-88.

[2]羅曼.大數(shù)據(jù)技術(shù)在計(jì)算機(jī)網(wǎng)絡(luò)信息管理中的應(yīng)用[J].電子技術(shù)與軟件工程，2019（20）：150-151.