大數(shù)據(jù)思維

?

大數(shù)據(jù)思維

李偉順 周凱 高越

北方民族大學 寧夏銀川 750021

[摘要]隨著互聯(lián)網(wǎng)技術的飛速發(fā)展、不斷革新，尤其是數(shù)據(jù)挖掘、網(wǎng)絡社交、云計算以及高性能芯片的廣泛應用，大數(shù)據(jù)正在蔓延至各個行業(yè)和領域，大數(shù)據(jù)所產(chǎn)生的信息風暴正在急速的變革人類固有的知識體系、工作習慣和思維方式。大數(shù)據(jù)開啟了一次重大的時代轉型，如何在大數(shù)據(jù)時代挖掘和利用隱蔽于數(shù)據(jù)內部未被激發(fā)的潛在價值，從而實現(xiàn)在經(jīng)濟、教育、醫(yī)療、交通、能源、軍事等領域的革新，取決于我們是否能夠從以往的小數(shù)據(jù)思維及時轉換成大數(shù)據(jù)思維。本文介紹了大數(shù)據(jù)時代的思維變革、商業(yè)變革和管理變革，分析數(shù)據(jù)信息的三個轉變，以及數(shù)據(jù)創(chuàng)新。

[關鍵詞]大數(shù)據(jù)；云計算；思維方式；大數(shù)據(jù)思維；創(chuàng)新

大數(shù)據(jù)時代的天文學、政治學、經(jīng)濟學、物理學、社會學等很多種科學門類都將會發(fā)生巨大的變化和發(fā)展，從而影響整個人類的價值觀、生活方式和知識體系。大數(shù)據(jù)的核心就是預測，在不久的將來，我們生活中很多現(xiàn)在依靠人類思維判斷的領域都會被計算機系統(tǒng)所改變甚至取代。大數(shù)據(jù)給我們的生活創(chuàng)造了無與倫比的可量化的維度，就像Internet通過給計算機添加了通信功能而改變了世界，大數(shù)據(jù)也會改變我們生活中很重要的方面。

一、大數(shù)據(jù)，公共衛(wèi)生變革

大家一定記得2009年出現(xiàn)的甲型H1N1流感病毒，這種病毒傳播迅速，其結合了豬流感和禽流感的特點，有些專家警告說，這種病毒可能會導致大規(guī)模流感的爆發(fā)，然而更糟糕的是，當時的科研人員還沒有研發(fā)出抵抗這種新型病毒的疫苗。在美國，假如醫(yī)生發(fā)現(xiàn)了新型的流感病例時需要告訴疾病預防與控制中心，然而，通告病例這個過程往往會有一兩周時間的延遲，這種信息的滯后對于飛速傳播的疾病來說，其導致的后果是相當致命的。在疫情爆發(fā)的關鍵時期，公共衛(wèi)生機構對于這種信息滯后卻又無所適從。

二、大數(shù)據(jù)，商業(yè)變革

大數(shù)據(jù)不但對公共衛(wèi)生領域的影響十分巨大，對整個商業(yè)領域也產(chǎn)生了深遠的影響。購買飛機票是其中一個很好的例子。挨齊奧尼協(xié)助創(chuàng)建了全球最早的網(wǎng)絡搜索引擎MetaCrawler，聯(lián)合創(chuàng)立國第一個大型比價網(wǎng)站ClearForest。在他的眼中，世界就是一系列的大數(shù)據(jù)問題。埃齊奧尼創(chuàng)立了一個機票預測系統(tǒng)，這個系統(tǒng)建立在12000個價格樣本的基礎上，這個預測系統(tǒng)并不會分析哪些因素導致了機票價格的波動，只會利用其他航班的數(shù)據(jù)預測機票價格的走勢。后來這個小項目發(fā)展成為一個科技創(chuàng)業(yè)公司Farecast，到2012年為止，F(xiàn)arecast系統(tǒng)擁有近十萬億條價格記錄，從而能很準確的預測美國航班的票價，其票價預測準確率已經(jīng)高達75％，旅客通過使用這種票價預測工具，平均每張機票可節(jié)省50美元左右。Farecast僅僅是利用大數(shù)據(jù)的一個縮影，代表了當今世界的發(fā)展趨勢。

三、大數(shù)據(jù)，管理變革

大數(shù)據(jù)時代如何管理龐大的數(shù)據(jù)以及個人隱私的控制與風險，將成為我們面臨的一個巨大挑戰(zhàn)。任何技術都是雙刃劍，大數(shù)據(jù)也不例外。大數(shù)據(jù)平臺在給我們提供服務的同時，無時不刻也在收集著用戶的各種信息：購買習慣、查閱習慣甚至生活習慣。通過這些數(shù)據(jù)，一方面給人們帶來了很多便利，但另一方面，由于數(shù)據(jù)的管理還不完善，存在諸多漏洞，那些存儲起來或發(fā)布出去的海量信息，也很容易被竊取、被監(jiān)視。通過大數(shù)據(jù)，當我們獲得足夠多的個人信息，我們就可以知道隱藏在數(shù)據(jù)背后的人是誰，甚至這個人心里在想著誰。在大數(shù)據(jù)時代，此時我們已經(jīng)不能放心期待擁有數(shù)據(jù)的公司不作惡。如何管理這些龐大的數(shù)據(jù)？誰來保護公民的個人隱私？既是所有人都應該思考的問題，也是政府法律部門不可推卸的責任。

四、大數(shù)據(jù)的關鍵在于我們分析信息數(shù)據(jù)時的三個轉變

第一個轉變：在大數(shù)據(jù)時代，我們可以分析越來越多的數(shù)據(jù)，甚至有些時候可以處理某個特殊現(xiàn)象的所有數(shù)據(jù)，而不是像以前一樣依賴于隨機采樣

從19世紀開始，當我們遇到大量數(shù)據(jù)時就會依賴于采樣分析。傳統(tǒng)上的統(tǒng)計學的隨機抽樣方法中有一條十分明智的真理：”采樣分析結論的精確性隨著采樣隨機性的增加而大幅提升，但與樣本數(shù)量的增加關系不大?！笨梢哉f，“樣本分析”奠定了絕大多數(shù)科學研究的基礎，但隨機采樣實際上是信息缺乏時代和信息流通受限制的模擬數(shù)據(jù)時期的產(chǎn)品?，F(xiàn)如今，我們處于一個足夠強大的數(shù)據(jù)搜集和數(shù)據(jù)處理能力的時代，隨著計算機技術的迅猛發(fā)展，高性能數(shù)字技術的流行讓我們意識到，相對于局限性的小數(shù)據(jù)范圍來說，使用一切數(shù)據(jù)給予我們更高的精確性，當前的技術水平使人類可以處理海量數(shù)據(jù)，樣本不再是幾萬分之一，而轉變成了“樣本=全部”。

第二個轉變：不再熱衷于追求精確度，而是混雜性

在小數(shù)據(jù)時代，追求精確度是情理之中的。因為受制于我們收集的數(shù)據(jù)很少，所以需要越精確越好。但大數(shù)據(jù)時代精確則很難實現(xiàn)，而是用概率說話，混雜性變成了一種新型的途徑。數(shù)據(jù)量的顯著增加也必然會產(chǎn)生一些問題，一些不準確的數(shù)據(jù)難免會混入數(shù)據(jù)庫，導致結果也可能不準確。這就是大數(shù)據(jù)時代的一種新思維——“不是精確性，而是混雜性”。對“小數(shù)據(jù)”來說，最重要的一點就是減少差錯。而在大數(shù)據(jù)時代里，在技術尚未達到足夠完美之前，混亂是無法避免的。

第三個轉變：不在熱衷于尋找因果關系，而是相關關系

在大數(shù)據(jù)時代，是什么比為什么更加重要。這個觀點很大程度上挑戰(zhàn)了我們固有的思維模式。大數(shù)據(jù)思維更加關注相關性，而不是因果關系。也就是說，沃爾瑪只需要知道啤酒和尿布、pop-tarts蛋撻與手電筒的銷量具有正相關性，就可以做出如何銷售的決策了。它并不需要去分析具體原因，企業(yè)只需要知道某件事情正在發(fā)生或者即將發(fā)生，就完全能夠做出正確的決定。相關關系很有價值，因為它能為我們提供全新的視角，而且很清晰。而當我們考慮到因果關系的時候就很可能會忽略這些視角。大數(shù)據(jù)的核心就是預測，大數(shù)據(jù)并不是讓機器像人類一樣去思考。相反，它是通過計算海量的數(shù)據(jù)來預測事情發(fā)生的可能性。

五、結語

中國是世界上人口最多的國家，眾多的人群和應用市場，數(shù)據(jù)極其復雜，而且充滿了變化，多種因素使得中為全球最復雜的大數(shù)據(jù)國家。如何解決這些由大規(guī)模數(shù)據(jù)產(chǎn)生的問題，從而形成以大數(shù)據(jù)為基礎的解決辦法，將是中國轉變產(chǎn)業(yè)方式，提高效率的重要手段。由于中國復雜的國情，在現(xiàn)代歷史中的多次技術革命中，中國均是作為學習者出現(xiàn)的，但是在這次大數(shù)據(jù)與云計算的新的變革中，可以說中國與世界的差距最小，此時，中國面臨著一個重大的歷史抉擇關口，只要我們以更加開放的心態(tài)，更加堅定的步伐，更加創(chuàng)新的勇氣來擁抱“大數(shù)據(jù)時代”，一定能夠把握住新的歷史賦予中國創(chuàng)新的機會。

參考文獻

[1]員巧云,程剛.近年來我國數(shù)據(jù)挖掘研究綜述[J].情報學報,2005.

[2]蔡立英.“大數(shù)據(jù)”改變我們的生活[J].世界科學,2013.

[3]文洋.美國的“大數(shù)據(jù)”發(fā)展戰(zhàn)略新動向[J].中國多媒體通信,2014, (11):60-61.