復(fù)雜性將影響大數(shù)據(jù)部署

楊光

日前發(fā)布的《2017～2022年中國大數(shù)據(jù)產(chǎn)業(yè)發(fā)展前景與投資戰(zhàn)略規(guī)劃分析報告》顯示，中國大數(shù)據(jù)產(chǎn)業(yè)市場在未來五年內(nèi)，仍將保持著高速增長。預(yù)計2016年年末，市場規(guī)模將達到2485億元，而隨著各項政策的配套落實及推進，到2020年，中國大數(shù)據(jù)產(chǎn)業(yè)規(guī)模或達13626億元。

管理數(shù)據(jù)的效率需提升

有專家認為，通過大數(shù)據(jù)技術(shù)使人們可以利用以前不能有效利用的多種數(shù)據(jù)類型，抓住被忽略的機遇，使企業(yè)機構(gòu)變得更加智能和高效。大數(shù)據(jù)的重心將從數(shù)據(jù)的存儲和傳輸過渡到數(shù)據(jù)的挖掘與應(yīng)用，這將深刻地影響企業(yè)的商業(yè)模式，既可直接為企業(yè)帶來利潤，也可通過正反饋為企業(yè)帶來難以復(fù)制的競爭優(yōu)勢。據(jù)麥肯錫測算，大數(shù)據(jù)的應(yīng)用每年潛在可為美國醫(yī)療健康業(yè)和歐洲政府分別節(jié)省3000億美元和1000億歐元，利用個人位置信息潛在可創(chuàng)造出6000億美元的消費者剩余。因此大數(shù)據(jù)應(yīng)用有遠超萬億美元的市場。

大數(shù)據(jù)產(chǎn)業(yè)鏈參與者眾多，覆蓋面廣。按照產(chǎn)品形態(tài)，主要分為硬件、基礎(chǔ)軟件和應(yīng)用軟件三大領(lǐng)域。綜合各領(lǐng)域國內(nèi)外競爭態(tài)勢，商業(yè)智能、信息安全和云計算將是數(shù)據(jù)挖掘和應(yīng)用環(huán)節(jié)國內(nèi)相對受益的三駕馬車。中國智能市場已步入成長期，“十三五”期間潛在空間將超過300億元；信息安全“十三五”期間潛在空間將超過4000億元；云計算剛進入成長期。

據(jù)測算，到2020年，全球需要管理的數(shù)據(jù)量將達到35ZB，相較于2011年將增長50倍，而同期IT從業(yè)人員將僅增加1.5倍，意味著人均管理數(shù)據(jù)量將膨脹近33倍。雖然目前看來，人力資源的配給與現(xiàn)有的數(shù)據(jù)庫管理技術(shù)基本是匹配的，但是未來，如果人類管理數(shù)據(jù)的效率不能保持同步提升，在大數(shù)據(jù)時代將無法對數(shù)據(jù)進行有效管理。

傳統(tǒng)數(shù)據(jù)庫的管理能力無法應(yīng)付大數(shù)據(jù)體量的數(shù)據(jù)。人們和機器制造越來越多的業(yè)務(wù)數(shù)據(jù)對IT系統(tǒng)帶來了更大的挑戰(zhàn)，數(shù)據(jù)的存儲和安全以及在未來訪問和使用這些數(shù)據(jù)已成為難點。目前成熟的經(jīng)典數(shù)據(jù)庫技術(shù)——結(jié)構(gòu)化數(shù)據(jù)查詢語言SQL，在設(shè)計的一開始是沒有考慮非結(jié)構(gòu)化數(shù)據(jù)的，也就是說以前計算機人員討論數(shù)據(jù)的時候，數(shù)據(jù)的范圍限定在結(jié)構(gòu)化數(shù)據(jù)范疇以內(nèi)。

真正的挑戰(zhàn)是洞察

大數(shù)據(jù)和分析法的質(zhì)量，不如分析的目的來得重要。最有趣的緊張態(tài)勢和爭論，始終圍繞著組織是否會因使用分析法而獲得最大報酬，以使既有的流程行為更完善，或者改變公司人員的行為。

許多企業(yè)投下數(shù)百萬美元用于大數(shù)據(jù)、大數(shù)據(jù)分析，并雇用數(shù)據(jù)分析家，但卻感到很受挫。無可否認，他們現(xiàn)在得到了更多、更好的數(shù)據(jù)。他們的分析師和分析法也是一流的。但經(jīng)理人對業(yè)務(wù)的想法和爭論，似乎與過去的類型仍一樣，只是他們使用的數(shù)據(jù)與分析法都比以前好得多。最終的決定可能更加由數(shù)據(jù)驅(qū)動，但組織文化給人的感覺仍然相同。正如一位CIO最所言，“我們現(xiàn)在可以做實時的分析，那是我在五年前根本無法想象的，但這樣所帶來的影響力，仍與我的預(yù)期差距很遠”。

“要等到管理階層確認想要改變、并清楚知道影響的行為是什么之后，我們才會去做分析或商業(yè)情報的工作”，一位金融服務(wù)公司的CIO說，“提高合乎法規(guī)的情況和改善財務(wù)報告，是很容易獲得的成果。但是，這只意味著我們使用分析法去做我們已經(jīng)做得比以前好的事情?！?/p>

真正的挑戰(zhàn)是洞察，利用大數(shù)據(jù)和分析法，以改善解決問題和決策的方式，會掩蓋組織里一個現(xiàn)實情況，那就是新的分析法往往需要新的行為。公司人員可能需要作更多分享和協(xié)力合作；各部門可能需要設(shè)置不同的或互補的業(yè)務(wù)流程；經(jīng)理人和高級主管可能需要確保，現(xiàn)有的激勵措施不會破壞分析帶來的成長機會和效率。

例如，一家醫(yī)療用品供貨商整合有關(guān)“能帶來最多利潤的客戶”和“最賺錢產(chǎn)品”的分析，必須對業(yè)務(wù)人員與技術(shù)支持團隊進行完整的再教育，兩者都是為了“打擾”并“教育”客戶有關(guān)附加價值較高的產(chǎn)品。這家公司了解，這些分析法不應(yīng)該只是被用來支持現(xiàn)有的銷售和服務(wù)實務(wù)，而應(yīng)該被視為一種契機，可推動新型的促進式和顧問式銷售及支持組織。

諷刺的是，大數(shù)據(jù)和分析法的質(zhì)量，不如分析的目的來得重要。最有趣的緊張態(tài)勢和爭論，始終圍繞著組織是否會因使用分析法而獲得最大報酬，以使既有的流程行為更完善，或者改變公司人員的行為。但大致的共識是，最有成效的對話聚焦于分析如何改變行為，而非解決問題。

得到正確的答案，甚至是問正確的問題，原來不是擁有高ROA企業(yè)的主要關(guān)切點。無可否認，數(shù)據(jù)與分析法的問題、答案，都是重要的。但更重要的是，這些問題、答案及分析法，如何與個人與機構(gòu)的行為協(xié)調(diào)一致（或彼此沖突）。有時候，即使是最好的分析法也可能引發(fā)適得其反的行為。

大數(shù)據(jù)實現(xiàn)空間化表達

對于國民經(jīng)濟的發(fā)展，測繪地理信息技術(shù)發(fā)揮的作用越來越大。測繪行業(yè)的人不要固步自封，要跳出測繪看測繪，把測繪技術(shù)用到國民經(jīng)濟的發(fā)展當中才能發(fā)揮真正的價值。

地圖服務(wù)模式創(chuàng)新如今已進入大數(shù)據(jù)思維模式的成熟發(fā)展階段，大數(shù)據(jù)分析方法融入測繪地理信息行業(yè)，強調(diào)了數(shù)據(jù)、業(yè)務(wù)、空間三個維度的結(jié)合，能夠真正解決問題。中科宇圖大地圖可以提升大數(shù)據(jù)的宏觀定性，也是微觀定量分析的基礎(chǔ)。如何把大數(shù)據(jù)從定性到定量發(fā)展，空間數(shù)據(jù)、地圖能夠發(fā)揮作用。通過大地圖的創(chuàng)新模式，大數(shù)據(jù)的分析方法從平面走向了立體這樣的一個思維模式，這種空間位置的動態(tài)演變與時間序列的動態(tài)演變過程相結(jié)合的模式，這才是地圖與大數(shù)據(jù)真正的結(jié)合點。

實際上，地圖技術(shù)應(yīng)用存在著四大痛點，即地圖專業(yè)技術(shù)壁壘、解決了地圖經(jīng)費的高投入、地圖數(shù)據(jù)使用保密、地圖行業(yè)數(shù)據(jù)共享的難題?；诖耍袊鴾y繪地理信息學會創(chuàng)立了地圖大數(shù)據(jù)的創(chuàng)新工作委員會，通過在政府、科研機構(gòu)、行業(yè)及從事大數(shù)據(jù)的公司之間架設(shè)起交流的橋梁，促進大數(shù)據(jù)技術(shù)與測繪技術(shù)融合，并通過非營利的運作，物聯(lián)網(wǎng)技術(shù)、云計算技術(shù)、大數(shù)據(jù)挖掘的技術(shù)、空間技術(shù)、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、智能化采集技術(shù)、模型技術(shù)等核心技術(shù)的共同研究，搭建基于數(shù)據(jù)采集、運行管理以及應(yīng)用的科學決策不同的相關(guān)的體系，建立并完善一個基于地圖與大數(shù)據(jù)真正整合的不同的資源體系。大數(shù)據(jù)應(yīng)用層面，障礙重重。

無獨有偶，大數(shù)據(jù)應(yīng)用過程中也同樣存在諸多問題。清華大學教授黨安榮指出，大數(shù)據(jù)應(yīng)用并未深入到各行各業(yè)的應(yīng)用中去，而基于大數(shù)據(jù)的服務(wù)體系也并未建立起來，如何聚合大數(shù)據(jù)服務(wù)還是個難題。與此同時，如何將含有人本信息的信息以及反映的過程和他的實時的交互結(jié)合在一起，形成動態(tài)化的相關(guān)應(yīng)用模式，并最終形成流程化應(yīng)用，值得探討。

大數(shù)據(jù)的應(yīng)用范圍之廣，黨安榮教授大數(shù)據(jù)以人居環(huán)境研究中的應(yīng)用實踐揭示了大數(shù)據(jù)應(yīng)用的重要意義。隨著GPS數(shù)據(jù)日益增多，國內(nèi)北斗衛(wèi)星系統(tǒng)的逐步完善，智慧城市的大規(guī)模建設(shè)，物聯(lián)網(wǎng)的發(fā)展，大數(shù)據(jù)也逐漸多起來，并進入到了遙感大數(shù)據(jù)新時代。在宏觀應(yīng)用方面，夜光遙感數(shù)據(jù)能夠直接反映城鎮(zhèn)化的水平，而人口遷徙則反映了城鎮(zhèn)建設(shè)的系統(tǒng)或者經(jīng)濟系統(tǒng)的發(fā)展水平；在微觀應(yīng)用方面，通過各樣的傳感器形成物聯(lián)網(wǎng)，進一步形成云計算，可以用來了解小區(qū)的氣候環(huán)境以及動態(tài)變化。

如果用地圖可視化的方式來進行大數(shù)據(jù)表達，只需要在數(shù)據(jù)其他的屬性等等這些緯度之上再加一個空間的緯度，再加一個時間的緯度即可。只有用專業(yè)的分析工具進行分析，打造出各種各樣的呈現(xiàn)方式，才能夠便于公眾的決策，利于廣泛應(yīng)用。

如今，大數(shù)據(jù)應(yīng)用程序比常規(guī)應(yīng)用程序復(fù)雜10倍，開發(fā)人員通常需要了解大量的技術(shù)，以使大數(shù)據(jù)能夠正常工作。

大數(shù)據(jù)的應(yīng)用仍然太難了。盡管有很多的炒作的成分，但大多數(shù)企業(yè)仍然努力從他們的數(shù)據(jù)中獲得價值。而Dresner咨詢服務(wù)公司得出結(jié)論：“盡管長時間的意識培養(yǎng)和炒作，大數(shù)據(jù)分析的實際部署目前并不廣泛適用于大多數(shù)組織?！?