對大數(shù)據(jù)發(fā)展現(xiàn)狀的研究

董云影 張紅

摘 要：隨著科學(xué)、技術(shù)和工程的迅猛發(fā)展，近20年來，許多領(lǐng)域（如光學(xué)觀測、光學(xué)監(jiān)控、健康醫(yī)護、傳感器、用戶數(shù)據(jù)、互聯(lián)網(wǎng)和金融公司以及供應(yīng)鏈系統(tǒng)）都產(chǎn)生了海量的數(shù)據(jù)（更恰當(dāng)?shù)拿枋龌蛟S是“無限”的數(shù)據(jù)，大數(shù)據(jù)的概念也隨之再次引起重視。

關(guān)鍵詞：大數(shù)據(jù)；數(shù)據(jù)獲取；數(shù)據(jù)傳輸；數(shù)據(jù)存儲；數(shù)據(jù)分析

1 引言

近年來，“大數(shù)據(jù)”已廣為人知，并被認(rèn)為是信息時代的新“石油”，這主要基于兩點共識。首先，在過去20年間，數(shù)據(jù)產(chǎn)生速度越來越快。據(jù)國際數(shù)據(jù)公司IDC報道，2011年產(chǎn)生和復(fù)制的數(shù)據(jù)量超過1.8Z字節(jié)，是過去5年數(shù)據(jù)增長的9倍，并將以每兩年翻倍的速度增長。其次，大數(shù)據(jù)中隱藏著巨大的機會和價值，將給許多領(lǐng)域帶來變革性的發(fā)展。因此，大數(shù)據(jù)研究領(lǐng)域吸引了產(chǎn)業(yè)界、政府和學(xué)術(shù)界的廣泛關(guān)注。例如，產(chǎn)業(yè)界報告和公共媒體中充斥了大數(shù)據(jù)的相關(guān)信息；政府部門設(shè)立重大項目加速大數(shù)據(jù)的發(fā)展等期刊也發(fā)表了大數(shù)據(jù)挑戰(zhàn)相關(guān)的論點。毫無疑問，大數(shù)據(jù)時代已經(jīng)到來。

2 國外研究現(xiàn)狀

早在2009年，聯(lián)合國就啟動了“全球脈動計劃”，擬通過大數(shù)據(jù)推動落后地區(qū)的發(fā)展，而2012年1月的世界經(jīng)濟論壇年會也把“大數(shù)據(jù)，大影響”作為重要議題之一。在美國，2009年至今，Data.gov（美國政府?dāng)?shù)據(jù)庫）全面開放了40萬政府原始數(shù)據(jù)集，大數(shù)據(jù)已成為美國國家創(chuàng)新戰(zhàn)略、國家安全戰(zhàn)略以及國家信息網(wǎng)絡(luò)安全戰(zhàn)略的交叉領(lǐng)域和核心領(lǐng)域。2012年3月，美國政府提出“大數(shù)據(jù)研究和發(fā)展倡議”，發(fā)起全球開放政府?dāng)?shù)據(jù)運動，并投資2億美元促進大數(shù)據(jù)核心技術(shù)研究和應(yīng)用，涉及NSF，DARPA等6個政府部門和機構(gòu)，把大數(shù)據(jù)放在重要的戰(zhàn)略位置。英國政府也將大數(shù)據(jù)作為重點發(fā)展的科技領(lǐng)域，在發(fā)展8類高新技術(shù)的6億英鎊投資中，大數(shù)據(jù)的注資占三成。2014年7月，歐盟委員會也呼吁各成員國積極發(fā)展大數(shù)據(jù)，迎接“大數(shù)據(jù)”時代，并將采取具體措施發(fā)展大數(shù)據(jù)業(yè)務(wù)。例如建立大數(shù)據(jù)領(lǐng)域的公私合作關(guān)系；依托“地平線2020”科研規(guī)劃，創(chuàng)建開放式數(shù)據(jù)孵化器；成立多個超級計算中心；在成員國創(chuàng)建數(shù)據(jù)處理設(shè)施網(wǎng)絡(luò)。無疑，歐美等國家對大數(shù)據(jù)的探索和發(fā)展已走在世界前列，各國政府已將大數(shù)據(jù)發(fā)展提升至戰(zhàn)略高度，大力促進大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展。

3 國內(nèi)研究現(xiàn)狀

我國政府、學(xué)術(shù)界和產(chǎn)業(yè)界也早已經(jīng)開始高度重視大數(shù)據(jù)的研究和應(yīng)用的工作，并紛紛啟動了相應(yīng)的研究計劃。掛一漏萬，鑒于我們的了解所限，本文僅能夠簡要介紹其中的一些。

在政府層面，科技部“十二五”部署了關(guān)于物聯(lián)網(wǎng)、云計算的相關(guān)專項。2012年，中國科學(xué)院院長白春禮院士呼吁中國應(yīng)制定國家大數(shù)據(jù)戰(zhàn)略。同年3月，科技部發(fā)布的《“十二五”國家科技計劃信息技術(shù)領(lǐng)域2013年度備選項目征集指南》中的“先進計算”板塊己明確提出“面向大數(shù)據(jù)的先進存儲結(jié)構(gòu)及關(guān)鍵技術(shù)”，國家“973計劃”、“863計劃”、國家自然科學(xué)基金等也分別設(shè)立了針對大數(shù)據(jù)的研究計劃和專項。目前已立項“973計劃”項目2項，“973計劃”青年項目2項，國家自然科學(xué)基金重點項目2項。地方政府也對大數(shù)據(jù)戰(zhàn)略高度重視，2013年上海市提出了《上海推進大數(shù)據(jù)研究與發(fā)展三年行動計劃》，重慶市提出了《重慶市人民政府關(guān)于印發(fā)重慶市大數(shù)據(jù)行動計劃的通知》，2014年廣東省成立大數(shù)據(jù)管理局負(fù)責(zé)研究擬訂并組織實施大數(shù)據(jù)戰(zhàn)略、規(guī)劃和政策措施，引導(dǎo)和推動大數(shù)據(jù)研究和應(yīng)用工作。貴州、河南和承德等省市也都推出了各自的大數(shù)據(jù)發(fā)展規(guī)劃。

在學(xué)術(shù)研究層面，國內(nèi)許多高等院校和研究所開始成立大數(shù)據(jù)的研究機構(gòu)。與此同時，國內(nèi)有關(guān)大數(shù)據(jù)的學(xué)術(shù)組織和活動也紛紛成立和開展。2012年中國計算機學(xué)會和中國通信學(xué)會都成立了大數(shù)據(jù)專家委員會，教育部也在人民大學(xué)成立“薩師煊大數(shù)據(jù)分析與管理國際研究中心”。近年來開展了許多學(xué)術(shù)活動，主要包括：CCF大數(shù)據(jù)學(xué)術(shù)會議、中國大數(shù)據(jù)技術(shù)創(chuàng)新與創(chuàng)業(yè)大賽、大數(shù)據(jù)分析與管理國際研討會、大數(shù)據(jù)科學(xué)與工程國際學(xué)術(shù)研討會、中國大數(shù)據(jù)技術(shù)大會和中國國際大數(shù)據(jù)大會等。

在產(chǎn)業(yè)層面，國內(nèi)不少知名企業(yè)或組織也成立了大數(shù)據(jù)產(chǎn)品團隊和實驗室，力爭在大數(shù)據(jù)產(chǎn)業(yè)競爭中占據(jù)領(lǐng)先地位。

參考文獻(xiàn)

[1]Gantz J，Reinsel D. Extracting value from chaos. IDC iView，2011： 1-12.

[2]Manyika J，Chui M，Brown B，et al. Big data： the next frontier for innovation，competition，and productivity.McKinsey Global Institute，2011.

[3]Cukier K. Data，data everywhere. Economist，2010，394：3-16.

[4]Lohr S. The age of big data. New York Times，2012，11.

[5]Noguchi Y. Following digital breadcrumbs to big data gold. National Public Radio，2011.

[6]Noguchi Y. The search for analysts to make sense of big data. National Public Radio，2011.

[7]White House. Fact Sheet： Big Data Across the Federal Government. Office of Science and Technology Policy，2012.

[8]Howard J H，Kazar M L，Menees S G，et al. Scale and performance in a distributed file system. ACM Trans ComputSyst，1988，6：51-81.