杜坤熠
(鄭州龍湖一中,河南 鄭州 450000)
大數(shù)據(jù)技術在互聯(lián)網(wǎng)中的應用
杜坤熠
(鄭州龍湖一中,河南 鄭州 450000)
隨著新一代信息技術的融合發(fā)展,現(xiàn)在社會邁進了大數(shù)據(jù)時代。本文從大數(shù)據(jù)的概念、應用領域、來源、特征和所面臨的問題等方面對大數(shù)據(jù)技術在互聯(lián)網(wǎng)中的應用進行研究,以期讓科技更好地服務于人們的生活。
大數(shù)據(jù);互聯(lián)網(wǎng);應用;特征
21世紀初,隨著新一代信息技術的融合發(fā)展,物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、數(shù)字家庭、社會化網(wǎng)絡等的廣泛應用使得數(shù)據(jù)規(guī)??焖倥蛎洠幚砗头治龃髷?shù)據(jù)的需求日益旺盛,興起了大數(shù)據(jù)熱潮,使得大數(shù)據(jù)領域獲得飛速發(fā)展。
哈佛大學社會學教授加里·金說:“這是一場革命,龐大的數(shù)據(jù)資源使得各個領域開始了量化進程,無論學術界、商界還是政府,所有領域都將開始這種進程?!睆募夹g上分析,大數(shù)據(jù)技術涉及計算機、應用數(shù)學等幾乎所有的學科領域。大數(shù)據(jù)關鍵技術不僅包括數(shù)據(jù)存儲與分析技術等核心技術,也包括數(shù)據(jù)處理、數(shù)據(jù)管理、數(shù)據(jù)呈現(xiàn)等重要技術。大數(shù)據(jù)技術是一系列技術的集合,任何單一的軟件產(chǎn)品都無法完全解決大數(shù)據(jù)問題,需要一整套全面的解決方案,需要各種應用系統(tǒng)能夠根據(jù)需要獲取計算能力、存儲空間和各種軟件,并通過各種網(wǎng)絡傳遞給不同的使用者[1]。
大數(shù)據(jù)通過互聯(lián)網(wǎng)應用在各行各業(yè)。例如,世界客流量網(wǎng)絡圖,對于不同國家、不同地區(qū),跨越大洋,連接交通線路,如此大量的數(shù)據(jù)信息可能有意想不到的利用價值;中國氣象云圖,每天氣象云圖產(chǎn)生如此多的數(shù)據(jù),怎樣合理分析和利用這些數(shù)據(jù),預測不同時段不同地區(qū)的天氣,可謂是意義重大;電子郵件網(wǎng)絡圖,假如每個人把自己收發(fā)電子郵件織成一張網(wǎng)絡,這個數(shù)據(jù)量也是非常大的,可以從中分析有價值的數(shù)據(jù);又如全世界范圍內(nèi)淘寶網(wǎng)上成功交易記錄數(shù)據(jù),淘寶公司可以從中分析每年中不同時間、不同國家、不同地區(qū)的客戶喜歡購買的商品,哪些商品在某一時間段內(nèi)比較熱銷,可以為后期售賣提供數(shù)據(jù)支持,也能夠給淘寶公司提供更有價值的數(shù)據(jù)信息[2]。
進入21世紀以來,進入了信息爆炸的時代,不僅是世界充斥著比以往更多的信息,而且信息增長速度也在加快。例如,在互聯(lián)網(wǎng)應用領域中,如移動互聯(lián)網(wǎng)、社交網(wǎng)絡、電子商務等;在非互聯(lián)網(wǎng)應用領域方面,如醫(yī)學、氣象、傳感器等,都成了大數(shù)據(jù)的源頭。其中有大家比較熟悉的網(wǎng)站,例如:①搜索引擎,如谷歌和百度都是搜索引擎的數(shù)據(jù)來源;②社交網(wǎng)絡,如QQ、微信等是大數(shù)據(jù)產(chǎn)生的聚集地;③電子商務,如淘寶和京東等每天能夠產(chǎn)生海量的交易數(shù)據(jù);④互聯(lián)網(wǎng)電視,如小米電視和搜狐TV等,他們把電視變成了互聯(lián)網(wǎng)終端,終端產(chǎn)生了大量的數(shù)據(jù)[3]。以上幾個方面均是大數(shù)據(jù)產(chǎn)生的重要來源。
因此,在21世紀,數(shù)據(jù)信息的爆發(fā)式增長和社會化趨勢是大數(shù)據(jù)應運而生的本質(zhì)原因。所謂爆發(fā)式的增長,是指實時數(shù)據(jù)、非結(jié)構(gòu)化的數(shù)據(jù)、機器數(shù)據(jù)產(chǎn)生數(shù)據(jù)的速度是人們以前所無法想象的,現(xiàn)在在原有摩爾定律的基礎上又產(chǎn)生出新的摩爾定律,即全球每18個月新增的信息量是計算機有史以來全部信息總量之和,且這個摩爾定律還在被不斷更新,其中的18個月還在不斷縮短。所謂社會化趨勢,是指每個互聯(lián)網(wǎng)用戶的行為、用戶的關系都能夠被互聯(lián)網(wǎng)所記錄,而且每天在網(wǎng)絡中產(chǎn)生大量的碎片化信息,用戶對數(shù)據(jù)產(chǎn)生的貢獻也就是用戶對數(shù)據(jù)利用和消費的地方[4]。
現(xiàn)在業(yè)界有一個相對比較統(tǒng)一的認識和觀點,滿足4個“V”就可以稱得上是大數(shù)據(jù):體量大(Volume)、多樣性(Variety)、價值密度低(Value)、速度快(Velocity)[5]。其中就包括大數(shù)據(jù)的廣度、深度、速度和準度4個方面。首先,體量大。傳統(tǒng)的數(shù)據(jù)庫可能已經(jīng)承載不了每天幾十兆的數(shù)據(jù)。其次,多樣性。如今有音頻、視頻、圖片等傳統(tǒng)的數(shù)據(jù)庫,但不能簡單地存儲,需要對其進行格式轉(zhuǎn)化才能夠存儲。再者,價值密度低。對于傳統(tǒng)數(shù)據(jù),怎樣從大量數(shù)據(jù)中進行選擇,篩選出有用的信息,減少碎片數(shù)據(jù)。最后,速度快。網(wǎng)絡中產(chǎn)生的數(shù)據(jù)需要實時生成、實時消費使用,對于傳統(tǒng)的數(shù)據(jù)庫和網(wǎng)絡架構(gòu)可能沒有這么快的速度,不一定能夠滿足其速度需求。以上4個方面都是大數(shù)據(jù)技術應用所要考慮的問題。因此,大數(shù)據(jù)技術的發(fā)展不僅給如今人們的生活帶來了機遇,也帶來了挑戰(zhàn)。
大數(shù)據(jù)能夠幫助人們進行量化分析,做出正確合理的決策。例如,對于全國房屋空置率的統(tǒng)計,即當前國家的所有房屋中有多少房屋是空置的,這個數(shù)據(jù)就可以應用大數(shù)據(jù)技術進行簡單、準確的統(tǒng)計得出。另外,供電局也可以對每家每戶的電表進行用電量統(tǒng)計,來進一步預測房屋空置率。比如,在一棟樓里或一個小區(qū)里,住著N戶人家,一些住戶家里的電表連續(xù)一個季度用電量均為0,則可以說明該房屋是空置的,最終能夠統(tǒng)計出該小區(qū)房屋的空置率,以此也可以得出全國房屋空置率,這就是對大數(shù)據(jù)技術的簡單應用。
大數(shù)據(jù)給社會發(fā)展帶來機遇的同時也帶來了挑戰(zhàn),其中最重要的挑戰(zhàn)就是數(shù)據(jù)安全隱私問題。正如2013年“斯諾登事件”,就給數(shù)據(jù)安全帶來了很大的隱患。如何去規(guī)范、去解決問題,是政府和組織機構(gòu)需要共同關注的問題。
當前,大數(shù)據(jù)給社會發(fā)展帶來了機遇和挑戰(zhàn),只有抓住機遇,迎接挑戰(zhàn),才能讓科技更好地服務于人們的生活。
[1]何克抗.大數(shù)據(jù)面面觀[J].電化教育研究,2014(10):8-16.
[2]全嫣.大數(shù)據(jù)的影響[J].電子技術與軟件工程,2017(15):168.
[3]王麓銘.大數(shù)據(jù)在交通中的應用[J].科技展望,2017(24):23.
[4]王綱,李月榮,賈冬艷.大數(shù)據(jù)在城市智能交通中的應用研究[J].科技視界,2017(21):30-31.
[5]范嘉琦.關于大數(shù)據(jù)的安全現(xiàn)狀與應對策略探討[J].信息系統(tǒng)工程,2017(10):73-75.
The Application of Big Data Technology in the Internet
Du Kunyi
(NO.1 Middle School of Zhengzhou Longhu,Zhengzhou Henan 450000)
With the integration and development of the new generation of information technology,the soci?ety has stepped into the big data time.This paper studied the application of big data technology in the in?ternet from the concept,application field,source,characteristics and problems of big data,in order to make technology better serve people's lives.
big data;internet;application;feature
TP311.13;TP393.08
A
1003-5168(2017)12-0044-02
2017-11-05
杜坤熠(2000-),男,研究方向:信息安全。