大數(shù)據(jù)的發(fā)展及應(yīng)用

鐘偉松

?

大數(shù)據(jù)的發(fā)展及應(yīng)用

鐘偉松

公誠管理咨詢有限公司，廣東 廣州 510610

首先對(duì)大數(shù)據(jù)的產(chǎn)生以及興起進(jìn)行了簡要介紹，并在此基礎(chǔ)上，從關(guān)聯(lián)性、數(shù)據(jù)可視化以及經(jīng)濟(jì)性與社會(huì)學(xué)角度出發(fā)對(duì)其應(yīng)用展開了研究。

大數(shù)據(jù)；發(fā)展；應(yīng)用

引言

近年來，信息技術(shù)以日新月異的速度飛快發(fā)展，世界各國在積極進(jìn)行現(xiàn)代化建設(shè)的過程中，都積極增加對(duì)信息技術(shù)的應(yīng)用，促使社會(huì)運(yùn)行過程中每天都會(huì)產(chǎn)生海量的數(shù)據(jù)。這標(biāo)志著人類文明進(jìn)入了大數(shù)據(jù)時(shí)代。大數(shù)據(jù)時(shí)代給予各個(gè)領(lǐng)域較多的發(fā)展機(jī)遇，同時(shí)也帶來了較多的挑戰(zhàn)，我國在長期發(fā)展中積極做好準(zhǔn)備工作，采取多種措施來面對(duì)大數(shù)據(jù)的機(jī)遇和挑戰(zhàn)，在這種情況下，積極加強(qiáng)大數(shù)據(jù)的發(fā)展及應(yīng)用研究具有重要意義。

1 大數(shù)據(jù)的產(chǎn)生與興起

近年來，我國在積極發(fā)展中，對(duì)大數(shù)據(jù)和云計(jì)算的應(yīng)用越來越廣泛，人們普遍意識(shí)到我國已經(jīng)進(jìn)入到了大數(shù)據(jù)時(shí)代。20世紀(jì)90年代，數(shù)據(jù)的功能已經(jīng)開始顯現(xiàn)出來，美國某超市在經(jīng)營過程中，為了加強(qiáng)POS數(shù)據(jù)分析功能，及時(shí)融入了Apriori算法，這樣一來就能夠?qū)ι唐返匿N售狀況進(jìn)行清晰的掌握，從而對(duì)顧客的購買習(xí)慣以及行為等進(jìn)行有效的預(yù)測(cè)。在這一算法有效應(yīng)用的過程中，該超市工作人員通過分析發(fā)現(xiàn)，年輕的男子在購物中常常習(xí)慣于同時(shí)購買尿布以及啤酒，因此在接下來發(fā)展中，為了方便顧客的購買，開始將尿布同啤酒擺放在相鄰位置，這一舉動(dòng)一定程度上提升了銷售額。

從以上事例可以看出大數(shù)據(jù)的重要性，在這種情況下，近年來世界各國展開了對(duì)大數(shù)據(jù)的研究和分析，這也是大數(shù)據(jù)快速發(fā)展的主要原因[1]。我國在積極進(jìn)行現(xiàn)代化建設(shè)的過程中，積極借鑒了美國等發(fā)達(dá)國家對(duì)大數(shù)據(jù)的應(yīng)用經(jīng)驗(yàn)，并在日常經(jīng)營中的多個(gè)領(lǐng)域開始進(jìn)行大數(shù)據(jù)應(yīng)用的實(shí)踐，如工業(yè)、學(xué)術(shù)甚至是政府工作中?，F(xiàn)階段，我國的大數(shù)據(jù)應(yīng)用和建設(shè)還處于初級(jí)階段，在未來的發(fā)展中，人們必須加大對(duì)大數(shù)據(jù)功能的重視以及認(rèn)知程度，并將其合理部署于我國各個(gè)領(lǐng)域，為實(shí)現(xiàn)技術(shù)以及科技的創(chuàng)新奠定良好的基礎(chǔ)。

2 大數(shù)據(jù)的應(yīng)用

2.1 關(guān)聯(lián)性分析

一般，如果給定已知條件，X、Y保持關(guān)聯(lián)，那么如果對(duì)X的狀況進(jìn)行了解的過程中，可以有效對(duì)Y進(jìn)行預(yù)測(cè)；反之，如果已知Y的狀況，也能夠?qū)進(jìn)行有效預(yù)測(cè)。由此可見，如果在因果關(guān)系不明確的狀況下，X、Y在使用過程中，可以成為對(duì)方的預(yù)測(cè)指示器。這種關(guān)聯(lián)性的實(shí)例較多，例如，John Hopkins大學(xué)計(jì)算機(jī)專家在日常工作中，能夠?qū)Χ畠|條推特帖子進(jìn)行利用，并運(yùn)用自身的方式構(gòu)建數(shù)據(jù)建模，從而有效計(jì)算出相關(guān)的流感傳染率信息，將這些信息同“谷歌流感趨勢(shì)研究”中的相關(guān)數(shù)據(jù)進(jìn)行對(duì)比，發(fā)現(xiàn)二者具有高度的一致性[2]。

現(xiàn)階段，如果一定的關(guān)聯(lián)性在新數(shù)據(jù)源中得以體現(xiàn)，那么傳統(tǒng)官方統(tǒng)計(jì)就能夠被準(zhǔn)確地反映出來，這一過程中，相關(guān)方向的預(yù)測(cè)以及研究將更加便捷和快速。例如，MIT工作者在日常工作中，要想對(duì)通貨膨脹率進(jìn)行有效的估計(jì)，就可以對(duì)商品價(jià)格以及網(wǎng)上銷售狀況等數(shù)據(jù)進(jìn)行充分的分析來實(shí)現(xiàn)[3]。這一手段在使用過程中，關(guān)鍵在于獲得商品每一天的網(wǎng)上價(jià)格，但是多數(shù)國家在日常運(yùn)行過程中，都是按月發(fā)布消費(fèi)價(jià)格指數(shù)的。在這種情況下，在對(duì)通貨膨脹進(jìn)行檢測(cè)的過程中，該手段要較傳統(tǒng)手段更加快速和準(zhǔn)確。

圖1 流感傳染率的官方數(shù)據(jù)與基于推特的數(shù)據(jù)比較

2.2 數(shù)據(jù)可視化

視覺表現(xiàn)形式在數(shù)據(jù)中的體現(xiàn)研究就是數(shù)據(jù)可視化，在對(duì)其展開研究的過程中，目的在于通過圖形化方式，促使相關(guān)信息的交流更加清晰有效，值得注意的是，這一方法的產(chǎn)生遭遇大數(shù)據(jù)，當(dāng)大數(shù)據(jù)時(shí)代來臨，該技術(shù)的應(yīng)用更加廣泛。以往，對(duì)大量數(shù)據(jù)進(jìn)行多維度觀察是可視化實(shí)施的主要用途，這一過程中，相關(guān)數(shù)據(jù)的變化、趨勢(shì)等都能夠得到有效的反映，當(dāng)大數(shù)據(jù)時(shí)代來臨時(shí)，可視化不僅能夠?qū)崿F(xiàn)以上功能，同時(shí)還可以有效展示大數(shù)據(jù)中隱藏的模式內(nèi)容，從而提升相關(guān)趨勢(shì)預(yù)測(cè)的準(zhǔn)確性。

圖2 2015年美國全國槍擊死亡情況

上圖為數(shù)據(jù)可視化表示在2015年美國全國槍擊死亡情況中的體現(xiàn)，其中年齡用橫軸進(jìn)行表示，槍機(jī)致死人應(yīng)用不同的弧線進(jìn)行表示，而弧線都擁有統(tǒng)一的起點(diǎn)，代表年齡為0，終點(diǎn)代表死亡年齡?；【€呈現(xiàn)出兩種顏色，分別為灰色和橘色，而槍擊身亡的年級(jí)應(yīng)用中間分界點(diǎn)進(jìn)行表示[4]。由此可見，2015年，美國死于槍擊的人數(shù)共為9595人，因此產(chǎn)生了9595條弧線，構(gòu)成了以上圖形，通過圖形展示出來的數(shù)據(jù)信息，促使人們?cè)趯?duì)其進(jìn)行觀察的過程中就能夠意識(shí)到槍擊的可怕性，也因此將可視化的功能進(jìn)行了充分的展現(xiàn)。

2.3 在經(jīng)濟(jì)性與社會(huì)學(xué)當(dāng)中應(yīng)用

以上兩種大數(shù)據(jù)的功能在應(yīng)用的過程中只是一種手段的體現(xiàn)，而大數(shù)據(jù)真正的功能在于利用以上功能針對(duì)各個(gè)領(lǐng)域制定科學(xué)的應(yīng)對(duì)措施。例如，USGS為美國地理測(cè)量會(huì)，其運(yùn)行過程中運(yùn)用相關(guān)系統(tǒng)對(duì)地震爆發(fā)的信息進(jìn)行了有效的檢測(cè)和預(yù)測(cè)，并將該信息有效傳遞給當(dāng)局，當(dāng)USGS對(duì)地震發(fā)生的實(shí)際狀況進(jìn)行了驗(yàn)證以后，可以對(duì)發(fā)生地震的震中以及等級(jí)進(jìn)行明確。通過該系統(tǒng)的運(yùn)行檢測(cè)表明，其中正確警報(bào)率高達(dá)90%。

同時(shí)，經(jīng)過多年實(shí)踐表明，多數(shù)數(shù)據(jù)源在使用過程中，已經(jīng)不再局限于發(fā)揮速度和規(guī)模的功能，同時(shí)其包含的大量數(shù)據(jù)能夠具有全面性，對(duì)多個(gè)角度產(chǎn)生重要的影響。多數(shù)情況下，官方在展開各個(gè)方面的統(tǒng)計(jì)過程中，不僅會(huì)對(duì)大數(shù)據(jù)進(jìn)行應(yīng)用，更重要的是利用其能夠?qū)崿F(xiàn)對(duì)細(xì)節(jié)以及深度內(nèi)容的挖掘[5]。現(xiàn)階段，社會(huì)媒體定性信息越多，就越能夠?qū)σ患挛锏恼w進(jìn)行全面描繪，而相關(guān)部門以及人員就越能夠及時(shí)采取有效措施來面對(duì)多種變化。這一過程中呈現(xiàn)出來的是速度、規(guī)模等大數(shù)據(jù)功能和價(jià)值。

3 結(jié)語

綜上所述，近年來，世界各國以及各個(gè)領(lǐng)域在積極發(fā)展的過程中，都增加了對(duì)信息技術(shù)的有效應(yīng)用，海量數(shù)據(jù)的產(chǎn)生，極大地轉(zhuǎn)變了人們的生活以及工作。在這種情況下，我國在謀求可持續(xù)發(fā)展的過程中必須采取積極的態(tài)度來面對(duì)大數(shù)據(jù)時(shí)代帶來的各種機(jī)遇和挑戰(zhàn)。本文首先對(duì)大數(shù)據(jù)的產(chǎn)生以及興起展開了研究，并從聯(lián)性、數(shù)據(jù)可視化以及經(jīng)濟(jì)性與社會(huì)學(xué)角度對(duì)大數(shù)據(jù)的具體應(yīng)用進(jìn)行了探討，希望對(duì)我國社會(huì)的進(jìn)步起到促進(jìn)作用。

[1]李娜.對(duì)應(yīng)用大數(shù)據(jù)推動(dòng)經(jīng)濟(jì)社會(huì)發(fā)展創(chuàng)新的思考[J].價(jià)格月刊，2015（3）：77-82.

[2]李仲達(dá)，林建浩，王美今.大數(shù)據(jù)時(shí)代的高維統(tǒng)計(jì)：稀疏建模的發(fā)展及其應(yīng)用[J].統(tǒng)計(jì)研究，2015（10）：3-11.

[3]省人民政府印發(fā)《關(guān)于加快大數(shù)據(jù)產(chǎn)業(yè)發(fā)展應(yīng)用若干政策的意見》、《貴州省大數(shù)據(jù)產(chǎn)業(yè)發(fā)展應(yīng)用規(guī)劃綱要（2014-2020年）》的通知[J].貴州省人民政府公報(bào)，2014（3）：9-21.

[4]鄔賀銓.制定國家大數(shù)據(jù)發(fā)展戰(zhàn)略提升技術(shù)創(chuàng)新與應(yīng)用水平[J].世界電信，2014（Z1）：37-43.

[5]楊震乾，楊泳丹.面向大數(shù)據(jù)的分布式存儲(chǔ)技術(shù)的發(fā)展與應(yīng)用[J].電子技術(shù)與軟件工程，2016（2）：201.

F49

A

1009-6434（2016）04-0059-02