21世紀(jì)什么最重要？數(shù)據(jù)！

三年前，云計(jì)算還是高高在上；而今，卻已是觸手可及。我們可以輕松地將文檔、照片、視頻、游戲存檔記錄上傳至云端永久保存；對(duì)企業(yè)客戶(hù)而言，還可以根據(jù)自身需求，搭建自己的私有云，或托管、或租用公有云上的IT資源與服務(wù)，這些都已塵埃落定。

其實(shí)，不管是云計(jì)算本身，或是智能終端，還是凌駕于云和端之上的基于社會(huì)化網(wǎng)絡(luò)的平臺(tái)和應(yīng)用，都會(huì)讓數(shù)以百億計(jì)的機(jī)器、企業(yè)、個(gè)人隨時(shí)隨地地獲取和產(chǎn)生新的數(shù)據(jù)，高性能計(jì)算設(shè)備進(jìn)化的速度早已趕不上數(shù)據(jù)增長(zhǎng)的速度，并且這一問(wèn)題會(huì)日漸嚴(yán)峻——這樣的背景下，唯有云才能解決“賦予數(shù)據(jù)以更大價(jià)值”的問(wèn)題。

云計(jì)算和大數(shù)據(jù)將注定帶來(lái)一次革命，無(wú)論是對(duì)社會(huì)、公司和個(gè)人來(lái)說(shuō)，都是一次顛覆性的改變?；ヂ?lián)網(wǎng)不再是一個(gè)展示公司的工具或平臺(tái)，而是屬于未來(lái)的生產(chǎn)方式，是關(guān)乎競(jìng)爭(zhēng)和生存的關(guān)鍵。就像工業(yè)經(jīng)濟(jì)時(shí)代，人們無(wú)法拒絕用電；個(gè)人計(jì)算機(jī)時(shí)代，公司無(wú)法拒絕用電腦辦公；大數(shù)據(jù)將帶來(lái)的是競(jìng)爭(zhēng)形態(tài)的改變，當(dāng)你的客戶(hù)都在互聯(lián)網(wǎng)上，你的市場(chǎng)就在互聯(lián)網(wǎng)上，如果缺乏對(duì)客戶(hù)數(shù)據(jù)的判斷及對(duì)市場(chǎng)的了解，缺少的就是核心競(jìng)爭(zhēng)力——企業(yè)的IQ。政府和個(gè)人也一樣，需要擁抱大數(shù)據(jù)時(shí)代的來(lái)臨。借用黎叔的一句話(huà)就是：21世紀(jì)什么最重要？——數(shù)據(jù)！

何以跨越數(shù)據(jù)挖掘的鴻溝？

數(shù)據(jù)挖掘其實(shí)早已滲透到了人們生活的方方面面，如電子商務(wù)推薦引擎會(huì)根據(jù)用戶(hù)瀏覽的歷史記錄，分析其偏好后，為用戶(hù)推薦符合其偏好的商品；上海世博會(huì)期間也曾根據(jù)數(shù)據(jù)分析，發(fā)布明日入園客流量預(yù)報(bào)；還有城市電子醫(yī)療衛(wèi)生平臺(tái)、基于電子標(biāo)簽的食品安全追溯體系、水資源管理的智慧系統(tǒng)等，也都在數(shù)據(jù)挖掘領(lǐng)域大有可為。

盡管如此，目前大數(shù)據(jù)技術(shù)的運(yùn)用仍存在一些困難與挑戰(zhàn)，體現(xiàn)在大數(shù)據(jù)挖掘的四個(gè)環(huán)節(jié)中。首先在數(shù)據(jù)收集方面。需要對(duì)來(lái)自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)以及機(jī)構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時(shí)空標(biāo)簽，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，必要時(shí)還可與歷史數(shù)據(jù)對(duì)照，多角度驗(yàn)證數(shù)據(jù)的全面性和可信性。其次是數(shù)據(jù)存儲(chǔ)。要達(dá)到低成本、低能耗、高可靠性目標(biāo)，通常要用到冗余配置、分布化和云計(jì)算技術(shù)，在存儲(chǔ)時(shí)要按照一定規(guī)則對(duì)數(shù)據(jù)進(jìn)行分類(lèi)，通過(guò)過(guò)濾和去重，減少存儲(chǔ)量，同時(shí)加入便于日后檢索的標(biāo)簽。第三是數(shù)據(jù)處理。有些行業(yè)的數(shù)據(jù)涉及上百個(gè)參數(shù)，其復(fù)雜性不僅體現(xiàn)在數(shù)據(jù)樣本本身，更體現(xiàn)在多源異構(gòu)、多實(shí)體和多空間之間的交互動(dòng)態(tài)性，難以用傳統(tǒng)的方法描述與度量，處理的復(fù)雜度很大，需要將高維圖像等多媒體數(shù)據(jù)降維后度量與處理，利用上下文關(guān)聯(lián)進(jìn)行語(yǔ)義分析，從大量動(dòng)態(tài)而且可能是模棱兩可的數(shù)據(jù)中綜合信息，并導(dǎo)出可理解的內(nèi)容。第四是結(jié)果的可視化呈現(xiàn)，使結(jié)果更直觀以便于洞察。目前，盡管計(jì)算機(jī)智能化有了很大進(jìn)步，但還只能針對(duì)小規(guī)模、有結(jié)構(gòu)或類(lèi)結(jié)構(gòu)的數(shù)據(jù)進(jìn)行分析，談不上深層次的數(shù)據(jù)挖掘，現(xiàn)有的數(shù)據(jù)挖掘算法在不同行業(yè)中難以通用。

目前，越來(lái)越多的企業(yè)認(rèn)識(shí)到數(shù)據(jù)在應(yīng)用管理中的重要性，并希望將其運(yùn)用到管理決策中來(lái)。從零售業(yè)到汽車(chē)行業(yè)，再到金融保險(xiǎn)業(yè)，都在思考如何利用數(shù)據(jù)提升企業(yè)競(jìng)爭(zhēng)力以及如何管理好并持續(xù)積累自己的數(shù)據(jù)戰(zhàn)略資產(chǎn)。那么如何才能做好大數(shù)據(jù)的應(yīng)用管理呢？其一，要有較強(qiáng)的整合數(shù)據(jù)的能力，整合來(lái)自企業(yè)各種不同的數(shù)據(jù)源、各種不同結(jié)構(gòu)的數(shù)據(jù)，如客戶(hù)關(guān)系管理、搜索、移動(dòng)、社交、網(wǎng)絡(luò)分析工具、普查數(shù)據(jù)以及離線(xiàn)數(shù)據(jù)，這些整合而得的數(shù)據(jù)是定向更大目標(biāo)受眾的基礎(chǔ)；其二，要有研究探索數(shù)據(jù)背后價(jià)值的能力。未來(lái)營(yíng)銷(xiāo)管理成功的關(guān)鍵將取決于如何在大數(shù)據(jù)庫(kù)中挖掘更豐富的營(yíng)銷(xiāo)價(jià)值。像是站內(nèi)、站外的數(shù)據(jù)整合、多方平臺(tái)的數(shù)據(jù)接軌、結(jié)合人口與行為數(shù)據(jù)去建立優(yōu)化算法等都是未來(lái)的發(fā)展重點(diǎn)；其三，探索出來(lái)之后給予精確快速實(shí)時(shí)性行為的管理指導(dǎo)。

在醫(yī)療領(lǐng)域，大多數(shù)人都擁有一份電子健康記錄，不過(guò)其中的內(nèi)容頗為有限，甚至只包含最近一次健康檢查的基本結(jié)果。據(jù)國(guó)外媒體報(bào)道，目前足以支撐全世界健康記錄資料庫(kù)的工具與技術(shù)已經(jīng)到位。這樣的全球性數(shù)據(jù)庫(kù)一旦出現(xiàn)，制藥企業(yè)就能對(duì)其進(jìn)行分析進(jìn)而研發(fā)出人類(lèi)最急需的疫苗及藥物，即據(jù)供應(yīng)鏈的實(shí)際需求進(jìn)行優(yōu)先選擇。既然前景一片光明，為什么我們遲遲沒(méi)有感受到由此帶來(lái)的益處呢？主要是由于目前還缺乏一套訪(fǎng)問(wèn)全球數(shù)據(jù)的可行性機(jī)制。健康記錄被保存在一大堆彼此隔離的系統(tǒng)當(dāng)中，而資料持有者又沒(méi)有足夠的動(dòng)力來(lái)分享這些信息，即使真的能把所有數(shù)據(jù)都聚攏在一起，也仍然需要通過(guò)機(jī)器學(xué)習(xí)算法及實(shí)時(shí)分析對(duì)其進(jìn)行全面優(yōu)化。而這也正是目前業(yè)界努力鉆研的方向。

安全 不容忽視

如今，大數(shù)據(jù)發(fā)展的最大障礙在于數(shù)據(jù)的“流動(dòng)性”和“可獲取性”。2009年，美國(guó)政府創(chuàng)建了Data.gov網(wǎng)站，為大數(shù)據(jù)敞開(kāi)了大門(mén)，公眾能夠通過(guò)這個(gè)網(wǎng)站獲得各種政府?dāng)?shù)據(jù)?，F(xiàn)在，在印度也有“數(shù)據(jù)公開(kāi)”運(yùn)動(dòng)。中國(guó)要趕上這樣一場(chǎng)數(shù)據(jù)的變革，首先從政府開(kāi)始公開(kāi)數(shù)據(jù)，其次是企業(yè)，最后是個(gè)人。開(kāi)放的、流通的數(shù)據(jù)是時(shí)代趨勢(shì)的要求。

大數(shù)據(jù)的利用首先要求政府?dāng)?shù)據(jù)原則上該公開(kāi)的必須公開(kāi)。大數(shù)據(jù)的挖掘與利用需要有法可依。我國(guó)需要盡快制定“信息保護(hù)法”和“信息公開(kāi)法”，既要鼓勵(lì)面向群體而且服務(wù)于社會(huì)的數(shù)據(jù)挖掘，又要防止針對(duì)個(gè)體侵犯隱私的行為，提倡數(shù)據(jù)共享又要防止數(shù)據(jù)被濫用。安全與隱私保護(hù)的隱患仍大量存在，重要的數(shù)據(jù)存儲(chǔ)和應(yīng)用不能過(guò)分依賴(lài)大數(shù)據(jù)分析技術(shù)與平臺(tái)，需要重視信息泄密的風(fēng)險(xiǎn)。

眾所周知，云計(jì)算、大數(shù)據(jù)、移動(dòng)、社交是未來(lái)的重要發(fā)展趨勢(shì)，越來(lái)越多的企業(yè)用戶(hù)以及服務(wù)商開(kāi)始進(jìn)軍這些領(lǐng)域來(lái)贏得市場(chǎng)的一席之地。對(duì)于眾多的IT服務(wù)商而言，在每個(gè)領(lǐng)域都匯集著各自專(zhuān)注的產(chǎn)品及服務(wù)。然而，能夠“通吃”這些領(lǐng)域的安全服務(wù)商或許是最受益的。

當(dāng)前，我國(guó)對(duì)大數(shù)據(jù)的保護(hù)能力還十分有限，數(shù)據(jù)被惡意使用的現(xiàn)象仍然難以掌控。我國(guó)企業(yè)和個(gè)人對(duì)于數(shù)據(jù)資源的保護(hù)意識(shí)還比較薄弱。隨著電子商務(wù)、社交網(wǎng)絡(luò)、物聯(lián)網(wǎng)、云計(jì)算以及移動(dòng)互聯(lián)網(wǎng)的全面普及，我國(guó)數(shù)據(jù)資源與全球數(shù)據(jù)資源一樣，正在呈現(xiàn)爆發(fā)性、多樣性的增長(zhǎng)態(tài)勢(shì)。但是，由于對(duì)數(shù)據(jù)保護(hù)的認(rèn)識(shí)不足，以及對(duì)個(gè)人電腦的安全防護(hù)不當(dāng)，企業(yè)或個(gè)人的隱私數(shù)據(jù)暴露在互聯(lián)網(wǎng)上的現(xiàn)象十分普遍。2011年，我國(guó)最大程序員網(wǎng)站600萬(wàn)個(gè)人信息和郵箱密碼被黑客攻擊，進(jìn)而引發(fā)了連鎖泄密事件。2013年，中國(guó)人壽80萬(wàn)客戶(hù)個(gè)人保單信息被泄露。這些事件都凸顯出在大數(shù)據(jù)時(shí)代，信息安全管理面臨前所未有的挑戰(zhàn)。

大數(shù)據(jù)安全管理問(wèn)題，是我國(guó)應(yīng)用大數(shù)據(jù)面臨的最大風(fēng)險(xiǎn)。雖然將海量數(shù)據(jù)集中存儲(chǔ)，方便了數(shù)據(jù)分析和處理，但由于安全管理不當(dāng)所造成的大數(shù)據(jù)丟失和損壞，將引發(fā)毀滅性災(zāi)難。相關(guān)人士指出：由于新技術(shù)的產(chǎn)生和發(fā)展，對(duì)隱私權(quán)侵犯已經(jīng)不再需要物理、強(qiáng)制性侵入，而是以更加微妙的方式廣泛衍生，由此所引發(fā)的數(shù)據(jù)風(fēng)險(xiǎn)和隱私風(fēng)險(xiǎn)，也將更為嚴(yán)重。

正如任何事情“有其利必有其弊”一樣，大數(shù)據(jù)也有它的弊端，即操作不當(dāng)有可能侵犯公民的隱私權(quán)。國(guó)外有人在自己的網(wǎng)頁(yè)上亮出極富個(gè)性的搞怪照片，結(jié)果在找工作時(shí)屢次被拒絕聘用，理由是這種打扮的人士是不適宜從事本公司工作的。這種做法到底對(duì)不對(duì)？可能一時(shí)難以得出結(jié)論。但是，防止大數(shù)據(jù)可能帶來(lái)的副作用，確實(shí)是應(yīng)該注意的。

大數(shù)據(jù)呼喚創(chuàng)新型人才

沒(méi)有什么能夠阻擋大數(shù)據(jù)的發(fā)展勢(shì)頭。大數(shù)據(jù)領(lǐng)域技術(shù)人才和商業(yè)人才匱乏，已是一個(gè)全球性的問(wèn)題。根據(jù)麥肯錫的一項(xiàng)研究顯示，僅美國(guó)每年就有14萬(wàn)到19萬(wàn)名數(shù)據(jù)科學(xué)家的缺口，預(yù)計(jì)到2018年將達(dá)到44萬(wàn)到49萬(wàn)，而數(shù)據(jù)科學(xué)家則更是嚴(yán)重缺乏。

在我國(guó)，大數(shù)據(jù)分析專(zhuān)業(yè)人才缺口究竟有多大，有專(zhuān)家粗略估算至少需要100萬(wàn)人。當(dāng)前，具備綜合掌控?cái)?shù)學(xué)、統(tǒng)計(jì)學(xué)、機(jī)器學(xué)習(xí)等方面知識(shí)的復(fù)合型人才，同時(shí)又可承擔(dān)數(shù)據(jù)分析和數(shù)據(jù)挖掘的數(shù)據(jù)科學(xué)家，在我國(guó)尤為奇缺。目前，我國(guó)初級(jí)的分析人員只能對(duì)數(shù)據(jù)進(jìn)行簡(jiǎn)單的報(bào)表和進(jìn)行描述性分析。而隨著未來(lái)大數(shù)據(jù)應(yīng)用的不斷增長(zhǎng)，我國(guó)大數(shù)據(jù)人才儲(chǔ)備不足的問(wèn)題將更加嚴(yán)重。既然如此，就應(yīng)未雨綢繆，尋求對(duì)策。不難預(yù)見(jiàn)，在人才管理領(lǐng)域，十分需要培養(yǎng)一批懂得大數(shù)據(jù)，收集大數(shù)據(jù)，并且善于研究大數(shù)據(jù)，深挖大數(shù)據(jù)的專(zhuān)業(yè)人士。這種專(zhuān)業(yè)人士不僅具有較高的社會(huì)價(jià)值，而且能夠承擔(dān)起大幅度提升人才管理科學(xué)化水平的重任。

如同互聯(lián)網(wǎng)創(chuàng)造了搜索、電子商務(wù)、競(jìng)價(jià)排名等一系列商業(yè)模式一樣，大數(shù)據(jù)也會(huì)孕育出更多新的公司類(lèi)型，這也是大數(shù)據(jù)最具投資潛力的原因?！皵?shù)據(jù)金礦”就在那里等待挖掘，分析平臺(tái)也日趨成熟，現(xiàn)階段就是要用解決問(wèn)題的視角，尋找數(shù)據(jù)分析師和懂得商業(yè)操作的人才，把數(shù)據(jù)分析產(chǎn)品化。

結(jié)語(yǔ)

大數(shù)據(jù)時(shí)代，我國(guó)還須在國(guó)家層面對(duì)大數(shù)據(jù)給予高度重視，特別需要從政策制定、資源投入、人才培養(yǎng)等方面給予強(qiáng)有力的支持；另一方面，建立良性的大數(shù)據(jù)生態(tài)環(huán)境是有效應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)、用好大數(shù)據(jù)的主要出路，需要科技界、工業(yè)界以及政府部門(mén)在國(guó)家政策的引導(dǎo)下共同努力，通過(guò)消除壁壘、成立聯(lián)盟、制訂大數(shù)據(jù)相關(guān)標(biāo)準(zhǔn)和規(guī)范、建立專(zhuān)業(yè)組織等途徑，建立和諧的大數(shù)據(jù)生態(tài)系統(tǒng)。