網(wǎng)絡(luò)大數(shù)據(jù)的現(xiàn)狀及展望

董俊伶

?

網(wǎng)絡(luò)大數(shù)據(jù)的現(xiàn)狀及展望

董俊伶

國(guó)網(wǎng)新疆電力公司科技信通部，新疆 烏魯木齊 830000

網(wǎng)絡(luò)大數(shù)據(jù)時(shí)代越來(lái)越高要求著IT構(gòu)架與計(jì)算機(jī)能力，當(dāng)然網(wǎng)絡(luò)大數(shù)據(jù)的發(fā)展也帶給人們深入挖掘其價(jià)值功能更嚴(yán)峻的挑戰(zhàn)和巨大的機(jī)遇，同時(shí)這就表明加強(qiáng)對(duì)大數(shù)據(jù)的研究，概括其發(fā)展規(guī)律等將極具現(xiàn)實(shí)意義。因此，在分析網(wǎng)絡(luò)大數(shù)據(jù)發(fā)展現(xiàn)狀的基礎(chǔ)上，展望其未來(lái)發(fā)展前景。

網(wǎng)絡(luò)大數(shù)據(jù)；發(fā)展現(xiàn)狀；基本概述

1 網(wǎng)絡(luò)大數(shù)據(jù)發(fā)展現(xiàn)狀

近年來(lái)，云計(jì)算、互聯(lián)網(wǎng)等IT技術(shù)和通信技術(shù)的進(jìn)一步發(fā)展，數(shù)據(jù)增長(zhǎng)速度的加劇帶給各行各業(yè)更多機(jī)遇和挑戰(zhàn)，促進(jìn)著信息社會(huì)向大數(shù)據(jù)時(shí)代（Big Data）發(fā)展，而這種發(fā)展趨勢(shì)改變了人們生活工作的方式與企業(yè)運(yùn)作模式，更從根本上改變了科學(xué)研究模式。

1.1 網(wǎng)絡(luò)大數(shù)據(jù)概述

所謂大數(shù)據(jù)，即數(shù)據(jù)集合，其在一定時(shí)間內(nèi)無(wú)法利用常規(guī)軟硬件工具或機(jī)械實(shí)現(xiàn)感知獲取等操作。而網(wǎng)絡(luò)大數(shù)據(jù)簡(jiǎn)稱(chēng)網(wǎng)絡(luò)數(shù)據(jù)，指的是在Cyberspace（網(wǎng)絡(luò)空間）內(nèi)彼此交互融合的三元世界（人、機(jī)、物）所產(chǎn)生且能夠獲取的互聯(lián)網(wǎng)大數(shù)據(jù)。目前，隨著網(wǎng)絡(luò)數(shù)據(jù)復(fù)雜程度和規(guī)模的增加擴(kuò)大，促使現(xiàn)行IT架構(gòu)處理計(jì)算能力面臨著嚴(yán)峻的考驗(yàn)。據(jù)IDC公司2015年公布的數(shù)據(jù)顯示全球數(shù)據(jù)量?jī)?chǔ)存達(dá)到了7910ZB，同時(shí)在大數(shù)據(jù)摩爾定律，即全球數(shù)據(jù)量約每?jī)赡攴环谋尘跋?，這個(gè)發(fā)展速度將延續(xù)到2020年。IBM則概括出大數(shù)據(jù)3個(gè)V的特點(diǎn)，包括Volume（大量化）、Variety（多樣化）和Velocity（快速化）。

1.2 網(wǎng)絡(luò)大數(shù)據(jù)發(fā)展現(xiàn)狀

網(wǎng)絡(luò)空間數(shù)據(jù)體量的擴(kuò)展，數(shù)據(jù)集合規(guī)模也由GB、TB發(fā)展到PB，特別是網(wǎng)絡(luò)大數(shù)據(jù)計(jì)數(shù)單位更發(fā)展到EB、ZB（1021）等。據(jù)IDC研究報(bào)告中表明，全球大數(shù)據(jù)在今后10年內(nèi)或?qū)⒃鲩L(zhǎng)約50倍，管理數(shù)據(jù)庫(kù)的服務(wù)器數(shù)量也將隨之增長(zhǎng)至少10倍左右。而且隨著網(wǎng)絡(luò)大數(shù)據(jù)的發(fā)展，其類(lèi)型也不斷突破，現(xiàn)階段包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化三種數(shù)據(jù)。據(jù)調(diào)查顯示現(xiàn)代互聯(lián)網(wǎng)應(yīng)用中，整個(gè)互聯(lián)網(wǎng)數(shù)據(jù)量中非結(jié)構(gòu)化數(shù)據(jù)所占比例高達(dá)約75%，同時(shí)這些數(shù)據(jù)往往是伴隨新技術(shù)的涌現(xiàn)應(yīng)用而產(chǎn)生的。[1]

目前，世界各國(guó)均將網(wǎng)絡(luò)大數(shù)據(jù)當(dāng)作重要戰(zhàn)略資源。特別是一些發(fā)達(dá)國(guó)家更將其戰(zhàn)略納入國(guó)家戰(zhàn)略，為了推動(dòng)其相關(guān)產(chǎn)業(yè)更進(jìn)一步發(fā)展，發(fā)達(dá)國(guó)家甚至不惜為其大量投資，其重視程度堪比石油資源。這也表明國(guó)家數(shù)據(jù)運(yùn)用能力及擁有規(guī)模是組成綜合國(guó)力的重要部分，對(duì)其的占有控制權(quán)更是國(guó)家核心權(quán)力之一。數(shù)據(jù)與土地、資本、人力同為生產(chǎn)中最關(guān)鍵的要素。因此，面對(duì)網(wǎng)絡(luò)大數(shù)據(jù)關(guān)鍵詞在全球范圍內(nèi)極速升溫的現(xiàn)狀，這就必須保證網(wǎng)絡(luò)大數(shù)據(jù)研究?jī)?nèi)容及層次的全面性。

2 網(wǎng)絡(luò)大數(shù)據(jù)的展望

2.1 全新數(shù)據(jù)計(jì)算模式

網(wǎng)絡(luò)大數(shù)據(jù)自身的特性使其無(wú)法適應(yīng)傳統(tǒng)數(shù)據(jù)分析、挖掘和處理的模式。故而，在這一背景下就必須采取數(shù)據(jù)密集型計(jì)算模式和新型計(jì)算范式，加強(qiáng)對(duì)數(shù)據(jù)計(jì)算效率評(píng)估方法等基本理論的應(yīng)用。鑒于數(shù)據(jù)擁有較大體量，再加上其存在形式多為分布式，因此無(wú)法進(jìn)行集中處理，而需要運(yùn)用去中心化的自下向上計(jì)算模式，而避免從中心化的自上向下模式。此外，網(wǎng)絡(luò)大數(shù)據(jù)源自不同的網(wǎng)絡(luò)用戶，由于受到人為因素影響存在極大的隨機(jī)性，極易增高增多數(shù)據(jù)噪聲和冗余甚至垃圾數(shù)據(jù)。為此，這就需要采取舉要?jiǎng)h蕪、刪繁就簡(jiǎn)的處理范式，或是尋求類(lèi)似數(shù)據(jù)體量結(jié)合簡(jiǎn)單邏輯的方式解決復(fù)雜問(wèn)題。[2]

2.2 新型IT基礎(chǔ)架構(gòu)

網(wǎng)絡(luò)大數(shù)據(jù)誕生至今對(duì)系統(tǒng)的要求越來(lái)越嚴(yán)格，包括如計(jì)算機(jī)系統(tǒng)和存儲(chǔ)傳輸系統(tǒng)等，簡(jiǎn)言之即現(xiàn)行數(shù)據(jù)中心技術(shù)無(wú)法滿足其需求。為此，革命性的重構(gòu)整個(gè)IT基礎(chǔ)架構(gòu)尤為迫切。但鑒于當(dāng)前數(shù)據(jù)增長(zhǎng)遠(yuǎn)超存儲(chǔ)能力增長(zhǎng)，故而還需采取分層存儲(chǔ)架構(gòu)才能滿足scale-up式與scale-out式的可擴(kuò)展性，這也是IT系統(tǒng)最關(guān)鍵的部分。隨著網(wǎng)絡(luò)大數(shù)據(jù)時(shí)代的來(lái)臨，IT系統(tǒng)要改變既往數(shù)據(jù)圍繞處理器工作的模式，堅(jiān)持處理能力圍繞數(shù)據(jù)操作的形式，避免將數(shù)據(jù)推送給計(jì)算，做到推送計(jì)算給數(shù)據(jù)。同時(shí)，在網(wǎng)絡(luò)大數(shù)據(jù)高速傳輸?shù)谋尘跋?，網(wǎng)絡(luò)大數(shù)據(jù)計(jì)算、傳輸、存儲(chǔ)等平臺(tái)技術(shù)必須進(jìn)行革命性的創(chuàng)新。[3]

2.3 安全與隱私問(wèn)題

數(shù)據(jù)是一種有價(jià)值的資源，而由于存在價(jià)值也就增加了爭(zhēng)奪侵害的概率。無(wú)論是那種數(shù)據(jù)都會(huì)面臨安全與隱私問(wèn)題。特別是在數(shù)據(jù)不斷增多的網(wǎng)絡(luò)大數(shù)據(jù)時(shí)代，其面臨的風(fēng)險(xiǎn)威脅更大，必須嚴(yán)格遵守相關(guān)規(guī)范標(biāo)準(zhǔn)，這也就提出了革新傳統(tǒng)數(shù)據(jù)保護(hù)法的要求。當(dāng)前網(wǎng)絡(luò)大數(shù)據(jù)隱私保護(hù)需要解決的問(wèn)題包括：數(shù)據(jù)密碼學(xué)與計(jì)算倫理學(xué)、強(qiáng)制與多粒度訪問(wèn)控制、數(shù)據(jù)存儲(chǔ)與日志管理的安全性、分析挖掘基于商業(yè)利益和隱私保護(hù)的數(shù)據(jù)及安全通信等。

2.4 以人為本的發(fā)展趨勢(shì)

網(wǎng)絡(luò)大數(shù)據(jù)與以人為本理念相結(jié)合，也是其將來(lái)發(fā)展的趨勢(shì)之一。由于信息科技時(shí)代競(jìng)爭(zhēng)的主體是人，這就需要契合人的思想需要進(jìn)行不斷的持續(xù)發(fā)展。大數(shù)據(jù)時(shí)代要實(shí)現(xiàn)科學(xué)探索和決策，必須基于數(shù)據(jù)分析的基礎(chǔ)上。然而，數(shù)據(jù)分析從本質(zhì)來(lái)說(shuō)與人類(lèi)思維活動(dòng)不同，因此大數(shù)據(jù)的發(fā)展以人類(lèi)思維意識(shí)為推助力。同時(shí)隨著互聯(lián)網(wǎng)IT通信技術(shù)的進(jìn)一步提高，在大數(shù)據(jù)時(shí)代發(fā)展歷程中人們開(kāi)始擔(dān)當(dāng)不同的角色，不但是其使用者、生產(chǎn)者更是參與者，促進(jìn)著人類(lèi)與數(shù)據(jù)的雙邊互動(dòng)合作。由此可見(jiàn)，網(wǎng)絡(luò)大數(shù)據(jù)將來(lái)的發(fā)展趨勢(shì)必定是與以人為本理念的應(yīng)用相結(jié)合。

3 結(jié)語(yǔ)

通過(guò)對(duì)當(dāng)前網(wǎng)絡(luò)大數(shù)據(jù)發(fā)展現(xiàn)狀分析不難看出，新時(shí)代大數(shù)據(jù)雖然面臨著良好的發(fā)展機(jī)遇，但同時(shí)也面臨著更加嚴(yán)峻的挑戰(zhàn)，必須進(jìn)一步增強(qiáng)其發(fā)展，不斷擴(kuò)大網(wǎng)絡(luò)大數(shù)據(jù)規(guī)模。只有更深入地研究網(wǎng)絡(luò)大數(shù)據(jù)，并高效有序地利用大數(shù)據(jù)，才能真正為我國(guó)經(jīng)濟(jì)發(fā)展助力，促進(jìn)社會(huì)穩(wěn)定持續(xù)的發(fā)展，從而有效增強(qiáng)國(guó)家綜合競(jìng)爭(zhēng)力，達(dá)到保衛(wèi)我國(guó)網(wǎng)絡(luò)空間數(shù)字主權(quán)，推動(dòng)國(guó)家經(jīng)濟(jì)核心產(chǎn)業(yè)和戰(zhàn)略新興行業(yè)發(fā)展崛起的目的。

[1]范媛媛.網(wǎng)絡(luò)大數(shù)據(jù)的現(xiàn)狀與展望[J].數(shù)字技術(shù)與應(yīng)用，2015（12）：246-246.

[2]趙淑芳.淺談大數(shù)據(jù)應(yīng)用現(xiàn)狀及發(fā)展趨勢(shì)[J].商，2015（36）：223-223.

[3]廖建新.大數(shù)據(jù)技術(shù)的應(yīng)用現(xiàn)狀與展望[J].電信科學(xué)，2015，31（7）：1-12.

The present situation and Prospect of large data network

Dong Junling

Xinjiang electric power company of Ministry of science and technology communication，Urumqi Xinjiang 830000

Network era of big data has higher and higher requirements on it infrastructure and computer ability, of course, the development of network data also bring people dig its value function is more severe challenges and enormous opportunities. At the same time, it shows that strengthen the data research, this paper generalizes its law of development will be of great practical significance. Therefore, this paper will be based on the analysis of the status quo of the development of large data network, and prospects its future development prospects.

network big data; development status; basic overview

TP311.13

A

1009-6434(2016)6-0141-02