大數(shù)據(jù)時代不是突然出現(xiàn)的,實(shí)際上過去的幾十年間,數(shù)學(xué)分析就已經(jīng)涉獵金融行業(yè)了,諾貝爾經(jīng)濟(jì)學(xué)獎獲得者哈里·馬克維茨、威廉·夏普、羅伯特·恩格爾就是利用計量經(jīng)濟(jì)學(xué)知識和金融市場數(shù)據(jù)來建立數(shù)學(xué)模型,預(yù)測金融市場產(chǎn)品收益同風(fēng)險波動的關(guān)系。
大數(shù)據(jù)時代的出現(xiàn),簡單地講是海量數(shù)據(jù)同完美計算能力結(jié)合的結(jié)果;確切的說是移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)產(chǎn)生了海量的數(shù)據(jù),大數(shù)據(jù)計算技術(shù)完美地解決了海量數(shù)據(jù)的收集、存儲、計算、分析的問題。
大數(shù)據(jù)時代開啟人類社會利用數(shù)據(jù)價值的另一個時代。
新的數(shù)據(jù)類型
首先來介紹一下大數(shù)據(jù)時代中新出現(xiàn)的數(shù)據(jù)類型:
1)過于一些記錄是以模擬形式方式存在的,或者以數(shù)據(jù)形式存在但是存貯在本地,不是公開數(shù)據(jù)資源,沒有開放給互聯(lián)網(wǎng)用戶,例如音樂、照片、視頻、監(jiān)控錄像等影音資料?,F(xiàn)在這些數(shù)據(jù)不但數(shù)據(jù)量巨大,并且共享到了互聯(lián)網(wǎng)上,面對所有互聯(lián)網(wǎng)用戶,其數(shù)量之大是前所未有。舉個例子,F(xiàn)acebook每天有18億張照片被上傳或傳播,形成了海量的數(shù)據(jù)。
2)移動互聯(lián)網(wǎng)出現(xiàn)后,移動設(shè)備的很多傳感器收集了大量的用戶點(diǎn)擊行為數(shù)據(jù),已知IPHONE有3個傳感器,三星有6個傳感器。它們每天產(chǎn)生了大量的點(diǎn)擊數(shù)據(jù),這些數(shù)據(jù)被某些公司所有擁有,形成用戶大量行為數(shù)據(jù)。
3)電子地圖如高德、百度、Google地圖出現(xiàn)后,其產(chǎn)生了大量的數(shù)據(jù)流數(shù)據(jù),這些數(shù)據(jù)不同于傳統(tǒng)數(shù)據(jù),傳統(tǒng)數(shù)據(jù)代表一個屬性或一個度量值,但是這些地圖產(chǎn)生的流數(shù)據(jù)代表著一種行為、一種習(xí)慣,這些流數(shù)據(jù)經(jīng)頻率分析后會產(chǎn)生巨大的商業(yè)價值?;诘貓D產(chǎn)生的數(shù)據(jù)流是一種新型的數(shù)據(jù)類型,在過去是不存在的。
4)進(jìn)入了社交網(wǎng)絡(luò)的年代后,互聯(lián)網(wǎng)行為主要由用戶參與創(chuàng)造,大量的互聯(lián)網(wǎng)用戶創(chuàng)造出海量的社交行為數(shù)據(jù),這些數(shù)據(jù)是過去未曾出現(xiàn)的。其揭示了人們行為特點(diǎn)和生活習(xí)慣。
5)電商戶崛起產(chǎn)來了大量網(wǎng)上交易數(shù)據(jù),包含支付數(shù)據(jù),查詢行為,物流運(yùn)輸、購買喜好,點(diǎn)擊順序,評價行為等,其是信息流和資金流數(shù)據(jù)。
6)傳統(tǒng)的互聯(lián)網(wǎng)入口轉(zhuǎn)向搜索引擎之后,用戶的搜索行為和提問行為聚集了海量數(shù)據(jù)。單位存儲價格的下降也為存儲這些數(shù)據(jù)提供了經(jīng)濟(jì)上的可能。
我們所指的大數(shù)據(jù)不同與過去傳統(tǒng)的數(shù)據(jù),其產(chǎn)生方式、存儲載體、訪問方式、表現(xiàn)形式、來源特點(diǎn)等都同傳統(tǒng)數(shù)據(jù)不同。大數(shù)據(jù)更接近于某個群體行為數(shù)據(jù),它是全面的數(shù)據(jù)、準(zhǔn)確的數(shù)據(jù)、有價值的數(shù)據(jù)。
大數(shù)據(jù)時代帶給我們的思考
1)大數(shù)據(jù)計算提高數(shù)據(jù)處理效率,增加人類認(rèn)知盈余
大數(shù)據(jù)技術(shù)就像其他的技術(shù)革命一樣,是從效率提升入手。大數(shù)據(jù)技術(shù)平臺的出現(xiàn)提升了數(shù)據(jù)處理效率。其效率的提升是幾何級數(shù)增長的,過去需要幾天或更多時間處理的數(shù)據(jù),現(xiàn)在可能在幾分鐘之內(nèi)就會完成。大數(shù)據(jù)的高效計算能力,為人類節(jié)省了更多的時間。我們都知道效率提升是人類社會進(jìn)步的典型標(biāo)志,可以推斷大數(shù)據(jù)技術(shù)將帶領(lǐng)人類社會進(jìn)入另外一個階段。通過大數(shù)據(jù)計算節(jié)省下來的時間,人們可以去消費(fèi),娛樂和創(chuàng)造。未來大數(shù)據(jù)計算將釋放人類社會巨大的產(chǎn)能,增加人類認(rèn)知盈余,幫助人類更好地改造世界。
2)大數(shù)據(jù)通過全局的數(shù)據(jù)讓人類了解事物背后的真相
相對于過去的樣本代替全體的統(tǒng)計方法,大數(shù)據(jù)將使用全局的數(shù)據(jù),其統(tǒng)計出來的結(jié)果更為精確,更接事物真相,幫助科學(xué)家了解事物背后的真相。大數(shù)據(jù)帶來的統(tǒng)計結(jié)果將糾正過去人們對事物錯誤的認(rèn)識,影響過去人類行為、社會行為的結(jié)論,帶來全新的認(rèn)知。有利于政府、企業(yè)、科學(xué)家對過去人類社會的各種歷史行為真正原因的了解,大數(shù)據(jù)統(tǒng)計將糾正樣本統(tǒng)計誤差,為統(tǒng)計結(jié)論不斷糾錯。大數(shù)據(jù)可以讓人類更加接近了解大自然,增加對自然災(zāi)害原因的了解。
3)大數(shù)據(jù)有助于了解事物發(fā)展的客觀規(guī)律,利于科學(xué)決策
大數(shù)據(jù)收集了全局的數(shù)據(jù),準(zhǔn)確的數(shù)據(jù),通過大數(shù)據(jù)計算統(tǒng)計出了解事物發(fā)展過程中的真相,通過數(shù)據(jù)分析出解人類社會的發(fā)展規(guī)律,自然界發(fā)展規(guī)律。利用大數(shù)據(jù)提供的分析結(jié)果來歸納和演繹出事物的發(fā)展規(guī)律,通過掌握事物發(fā)展規(guī)律來幫助人們進(jìn)行科學(xué)決策,大數(shù)據(jù)時代的精準(zhǔn)營銷就是典型的應(yīng)用。
4)大數(shù)據(jù)提供了同事物的連接,客觀了解人類行為
在沒有大數(shù)據(jù)之前,我們了解人類行為的數(shù)據(jù)往往來源于一些被動的調(diào)查表格及滯后的統(tǒng)計數(shù)據(jù)。擁有了大數(shù)據(jù)技術(shù)之后,則可以利用大量的傳感器如手機(jī)APP、攝像頭、分享的圖片和視頻等讓我們更加客觀的了解人類的行為。大數(shù)據(jù)技術(shù)連接了人類行為,通過大數(shù)據(jù)將人類的行為數(shù)據(jù)收集起來,經(jīng)過一定的分析后來統(tǒng)計人類行為,幫助我們了解人類的行為??梢哉f大數(shù)據(jù)的一個重要作用就是將人類行為數(shù)據(jù)進(jìn)行收集分析,了解人類行為特點(diǎn),為數(shù)據(jù)價值的商業(yè)運(yùn)用提供基礎(chǔ)資產(chǎn)。
5)大數(shù)據(jù)改變過去的經(jīng)驗(yàn)思維,幫助人們建立數(shù)據(jù)思維
人類社會的發(fā)展一直都在依賴著數(shù)據(jù),無論是各國文明的演化,農(nóng)業(yè)的規(guī)劃,工業(yè)的發(fā)展,軍事戰(zhàn)役及政治事件等。但是出現(xiàn)大數(shù)據(jù)之后,我們將會面對著海量的數(shù)據(jù),多種維度的數(shù)據(jù)、行為的數(shù)據(jù)、情緒的數(shù)據(jù)、實(shí)時的數(shù)據(jù)。這些數(shù)據(jù)是過去沒有了解到的,通過大數(shù)據(jù)計算和分析技術(shù),人們將會得到不同的事物真相,不同的事物發(fā)展規(guī)律。依靠大數(shù)據(jù)提供的數(shù)據(jù)分析報告,人們將會發(fā)現(xiàn)決定一件事、判斷一件事、了解一件事不再變得困難。各國政府和企業(yè)將借助于大數(shù)據(jù)來了解民眾需求,拋棄過去的經(jīng)驗(yàn)思維和慣性思維,掌握客觀規(guī)律,跳出歷史預(yù)測未來的困境。
大數(shù)據(jù)的應(yīng)用場景
大數(shù)據(jù)時代最有意義就是利用大數(shù)據(jù)及大數(shù)據(jù)技術(shù)創(chuàng)造價值。
對企業(yè)而言,大數(shù)據(jù)的應(yīng)用場景會將提升企業(yè)對大數(shù)據(jù)的關(guān)注,鼓勵企業(yè)大數(shù)據(jù)產(chǎn)業(yè)中投入更多的資源,利用大數(shù)據(jù)這個工具,為人類社會造福。
1)醫(yī)療行業(yè)
醫(yī)療行業(yè)擁有大量的病例,病理報告,治愈方案,藥物報告等等。如果這些數(shù)據(jù)可以被整理和應(yīng)用將會極大地幫助醫(yī)生和病人。在未來,借助于大數(shù)據(jù)平臺我們可以收集不同病例和治療方案,以及病人的基本特征,可以建立針對疾病特點(diǎn)的數(shù)據(jù)庫。
醫(yī)療行業(yè)的數(shù)據(jù)應(yīng)用一直在進(jìn)行,但是數(shù)據(jù)沒有打通,都是孤島數(shù)據(jù),沒有辦法起大規(guī)模應(yīng)用。未來需要將這些數(shù)據(jù)統(tǒng)一收集起來,納入統(tǒng)一的大數(shù)據(jù)平臺,為人類健康造福。政府和醫(yī)療行業(yè)是推動這一趨勢的重要動力。
2)生物技術(shù)
基因技術(shù)是人類未來戰(zhàn)勝疾病的重要武器,借助于大數(shù)據(jù)技術(shù)的應(yīng)用,人們將會加快自身基因和其它他生物的基因的研究進(jìn)程。未來利用生物基因技術(shù)來改良農(nóng)作物,利用基因技術(shù)來培養(yǎng)人類器官,利用基因技術(shù)來消滅害蟲都即將實(shí)現(xiàn)。
3)金融行業(yè)
大數(shù)據(jù)在金融行業(yè)應(yīng)用范圍較廣,典型的案例有花旗銀行利用IBM沃森電腦為財富管理客戶推薦產(chǎn)品,美國銀行利用客戶點(diǎn)擊數(shù)據(jù)集為客戶提供特色服務(wù),如有競爭的信用額度。,招商銀行利用客戶刷卡、存取款、電子銀行轉(zhuǎn)帳、微信評論等行為數(shù)據(jù)進(jìn)行分析,每周給客戶發(fā)送針對性廣告信息,里面有顧客可能感興趣的產(chǎn)品和優(yōu)惠信息。
大數(shù)據(jù)在金融行業(yè)的應(yīng)用可以總結(jié)為以下五個方面:
精準(zhǔn)營銷:依據(jù)客戶消費(fèi)習(xí)慣、地理位置、消費(fèi)時間進(jìn)行推薦
風(fēng)險管控:依據(jù)客戶消費(fèi)和現(xiàn)金流提供信用評級或融資支持,利用客戶社交行為記錄實(shí)施信用卡反欺詐
決策支持:利用抉策樹技術(shù)進(jìn)抵押貸款管理,利用數(shù)據(jù)分析報告實(shí)施產(chǎn)業(yè)信貸風(fēng)險控制
效率提升:利用金融行業(yè)全局?jǐn)?shù)據(jù),了解業(yè)務(wù)運(yùn)營薄弱點(diǎn),利用大數(shù)據(jù)技術(shù)加快內(nèi)部數(shù)據(jù)處理速度
產(chǎn)品設(shè)計:利用大數(shù)據(jù)計算技術(shù)為財富客戶推薦產(chǎn)品,利用客戶行為數(shù)據(jù)設(shè)計滿足客戶需求的金融產(chǎn)品
4)零售行業(yè)
零售行業(yè)大數(shù)據(jù)應(yīng)用有兩個層面,一個層面是零售行業(yè)可以了解客戶消費(fèi)喜好和趨勢,進(jìn)行商品的精準(zhǔn)營銷,降低營銷成本。另一層面是依據(jù)客戶購買產(chǎn)品,為客戶提供可能購買的其它產(chǎn)品,擴(kuò)大銷售額,也屬于精準(zhǔn)營銷范疇。另外零售行業(yè)可以通過大數(shù)據(jù)掌握未來消費(fèi)趨勢,有利于熱銷商品的進(jìn)貨管理和過季商品的處理。零售行業(yè)的數(shù)據(jù)對于產(chǎn)品生產(chǎn)廠家是非常寶貴的,零售商的數(shù)據(jù)信息將會有助于資源的有效利用,降低產(chǎn)能過剩,廠商依據(jù)零售商的信息按實(shí)際需求進(jìn)行生產(chǎn),減少不必要的生產(chǎn)浪費(fèi)。
5)電商
電商是最早利用大數(shù)據(jù)進(jìn)行精準(zhǔn)營銷的行業(yè),除了精準(zhǔn)營銷,電商可以依據(jù)客戶消費(fèi)習(xí)慣來提前為客戶備貨,并利用便利店作為貨物中轉(zhuǎn)點(diǎn),在客戶下單15分鐘內(nèi)將貨物送上門,提高客戶體驗(yàn)。馬云的菜鳥網(wǎng)絡(luò)宣稱的24小時完成在中國境內(nèi)的送貨,以及京東的劉強(qiáng)東宣傳未來京東將在15分鐘完成送貨上門,都是基于客戶消費(fèi)習(xí)慣的大數(shù)據(jù)分析和預(yù)測。
電商可以利用其交易數(shù)據(jù)和現(xiàn)金流數(shù)據(jù),為其生態(tài)圈內(nèi)的商戶提供基于現(xiàn)金流的小額貸款,電商業(yè)也可以將此數(shù)據(jù)提供給銀行,同銀行合作為中小企業(yè)提供信貸支持。
由于電商的數(shù)據(jù)較為集中,數(shù)據(jù)量足夠大,數(shù)據(jù)種類較多,因此未來電商數(shù)據(jù)應(yīng)用將會有更多的想象空間,包括預(yù)測流行趨勢,消費(fèi)趨勢、地域消費(fèi)特點(diǎn)、客戶消費(fèi)習(xí)慣、各種消費(fèi)行為的相關(guān)度、消費(fèi)熱點(diǎn)、影響消費(fèi)的重要因素等。依托大數(shù)據(jù)分析,電商的消費(fèi)報告將有利于品牌公司產(chǎn)品設(shè)計,生產(chǎn)企業(yè)的庫存管理和計劃生產(chǎn),物流企業(yè)的資源配制,生產(chǎn)資料提供方產(chǎn)能安排等等,有利于精細(xì)化社會化大生產(chǎn),有利于精細(xì)化社會的出現(xiàn)。
6)農(nóng)牧業(yè)
大數(shù)據(jù)在農(nóng)業(yè)應(yīng)用主要是指依據(jù)未來商業(yè)需求的預(yù)測來進(jìn)行農(nóng)牧產(chǎn)品生產(chǎn),降低菜賤傷農(nóng)的概率。同時大數(shù)據(jù)的分析將會更見精確預(yù)測未來的天氣氣候,幫助農(nóng)牧民做好自然災(zāi)害的預(yù)防工作。大數(shù)據(jù)同時也會幫助農(nóng)民依據(jù)消費(fèi)者消費(fèi)習(xí)慣決定來增加哪些品種的種植,減少哪些品種農(nóng)作物的生產(chǎn),提高單位種植面積的產(chǎn)值,同時有助于快速銷售農(nóng)產(chǎn)品,完成資金回流。牧民可以通過大數(shù)據(jù)分析來安排放牧范圍,有效利用牧場。漁民可以利用大數(shù)據(jù)安排休漁期、定位捕魚范圍等。
大數(shù)據(jù)另外一個重要應(yīng)用領(lǐng)域就是在政府。利用采集到的數(shù)據(jù),政府可以實(shí)現(xiàn)精細(xì)化管理。政府過去一直都在利用數(shù)據(jù)來進(jìn)行管理,但是過去由于沒有高效的數(shù)據(jù)處理平臺,造成了很多數(shù)據(jù)只是在收集,沒有體現(xiàn)其社會價值。由于缺少全局的數(shù)據(jù)和完善的數(shù)據(jù),數(shù)據(jù)自身沒有體現(xiàn)其應(yīng)用的價值,所以在過去政府不重視數(shù)據(jù)價值。依托于大數(shù)據(jù)和大數(shù)據(jù)技術(shù),政府可以及時得到更加準(zhǔn)確信息,利用這些信息,政府可以更加高效的管理國家這部機(jī)器,實(shí)現(xiàn)精細(xì)化資源配置和宏觀調(diào)控。(未完待續(xù))