大數(shù)據(jù)的發(fā)展歷史與現(xiàn)狀

秦明旭 鞠軼 王冰 涂強(qiáng) 遼寧省重要技術(shù)創(chuàng)新與研發(fā)基地建設(shè)工程中心

大數(shù)據(jù)時(shí)代的來(lái)臨，為社會(huì)中的許多行業(yè)帶來(lái)了變革，讓社會(huì)各領(lǐng)域擁有了廣闊的發(fā)展空間。近年來(lái)，科學(xué)技術(shù)的不斷進(jìn)步也為大數(shù)據(jù)帶來(lái)了新的發(fā)展前景，我們應(yīng)不斷提高大數(shù)據(jù)在各行業(yè)中的應(yīng)用效率，最大程度的發(fā)揮出大數(shù)據(jù)的功能和作用。

一、大數(shù)據(jù)概述

大數(shù)據(jù)是指在一定時(shí)間內(nèi)，通過(guò)多種手段方法收集信息資料并對(duì)相應(yīng)的資料進(jìn)行整合分析，以方便客戶使用，同時(shí)大數(shù)據(jù)也要保證提供數(shù)據(jù)資料的精準(zhǔn)性?？梢哉f(shuō)大數(shù)據(jù)，改變了社會(huì)各行各業(yè)的工作形式，并提高了工作效率。信息量較大大和復(fù)雜程度較高是大數(shù)據(jù)的主要特點(diǎn)，并且還具備多種應(yīng)用優(yōu)勢(shì)。

二、大數(shù)據(jù)的發(fā)展歷史

（一）大數(shù)據(jù)概念興起

20 世紀(jì)五六十年代至21 世紀(jì)初的期間內(nèi)提出了大數(shù)據(jù)概念，在這一時(shí)期的大數(shù)據(jù)主要代表的是“數(shù)據(jù)體量”，但在之后相當(dāng)長(zhǎng)的一段時(shí)間內(nèi)，由于受到科學(xué)技術(shù)和IT 產(chǎn)業(yè)發(fā)展能力的限制，并且信息資源產(chǎn)業(yè)也處于初級(jí)發(fā)展階段，從而讓大數(shù)據(jù)概念沒(méi)有被真正重視，也沒(méi)有在社會(huì)中得到普及。

大數(shù)據(jù)概念得到初步發(fā)展的階段是在2004—2011 年之間。在2004 年左右，美國(guó)一家科技公司谷歌相繼發(fā)表了三篇具有重要價(jià)值的論文，引起了業(yè)界的廣泛重視，被公認(rèn)為促進(jìn)大數(shù)據(jù)科學(xué)發(fā)展的重要基石，也被叫作“三駕馬車(chē)”。到目前為止，許多先進(jìn)的大數(shù)據(jù)技術(shù)都是以這三篇論文為基礎(chǔ)發(fā)展起來(lái)的。2006 年，Doug Cutting 通過(guò)不懈努力，Hadoop 的研發(fā)工作終于取得重大突破，取得研發(fā)工作的勝利，并普遍應(yīng)用與大數(shù)據(jù)的處理工作中。此后的幾年時(shí)間里，許多信息應(yīng)用和研發(fā)機(jī)構(gòu)，比如Facebook 和Spark UC 等，成功研制出了大量的具有一定特色的技術(shù)，同時(shí)還推出了與之相關(guān)的產(chǎn)品，從而促進(jìn)了大數(shù)據(jù)的科學(xué)健康發(fā)展。2008 年前后，云計(jì)算和物聯(lián)網(wǎng)技術(shù)得到了大力推行并取得快速發(fā)展，在這種環(huán)境下誕生了巨量的信息數(shù)據(jù)資料而社會(huì)中各個(gè)行業(yè)對(duì)大數(shù)據(jù)技術(shù)的需求也逐漸增高[1]。2010 年左右，許多傳統(tǒng)的信息技術(shù)領(lǐng)域的企業(yè)也加強(qiáng)了對(duì)大數(shù)據(jù)產(chǎn)業(yè)的重視，比如IBM 和微軟等企業(yè)已經(jīng)開(kāi)始將大數(shù)據(jù)產(chǎn)業(yè)布局提升到戰(zhàn)略地位，與新興的信息科技公司，如谷歌和亞馬遜等展開(kāi)激烈競(jìng)爭(zhēng)。后來(lái)，時(shí)代經(jīng)歷了重大變革，各種新型科學(xué)技術(shù)也層出不窮，為大數(shù)據(jù)的發(fā)展帶來(lái)了重大機(jī)遇，開(kāi)始走上歷史舞臺(tái)，并發(fā)揮出了十分重要的作用。

（二）大數(shù)據(jù)快速發(fā)展階段

當(dāng)進(jìn)入2012 年，大數(shù)據(jù)快速發(fā)展階段就拉開(kāi)了帷幕。眾所周知，從全世界范圍來(lái)說(shuō)，美國(guó)在大數(shù)據(jù)技術(shù)和應(yīng)用方面遙遙領(lǐng)先。美國(guó)開(kāi)展大數(shù)據(jù)研究工作的主要目的是從大量數(shù)字?jǐn)?shù)據(jù)中將需要的數(shù)據(jù)和知識(shí)成功提取出來(lái)，為大數(shù)據(jù)革命帶來(lái)了重大機(jī)遇。2012 年7 月，日本政府制定了大數(shù)據(jù)研究和發(fā)展的綜合戰(zhàn)略，將大數(shù)據(jù)應(yīng)用作為重點(diǎn)研究?jī)?nèi)容。緊接著在2013 年提出了一項(xiàng)重要宣言，主要表達(dá)了日本大力發(fā)展開(kāi)放公共數(shù)據(jù)技術(shù)的決心。2013 年1 月，英國(guó)政府加大了在大數(shù)據(jù)技術(shù)研究和應(yīng)用領(lǐng)域中的投資力度，大數(shù)據(jù)技術(shù)在倫敦金融服務(wù)領(lǐng)域得到應(yīng)用。我國(guó)政府對(duì)大數(shù)據(jù)的重視程度也越來(lái)越高，2012 年12 月，國(guó)家發(fā)改委在專項(xiàng)指南中加入了數(shù)據(jù)分析軟件開(kāi)發(fā)和服務(wù)方面的內(nèi)容，2013 年初科技部加大了對(duì)大數(shù)據(jù)計(jì)算領(lǐng)域的深入研究，展開(kāi)了對(duì)大數(shù)據(jù)的計(jì)算能力和處理效率等方面的研究，為我國(guó)大數(shù)據(jù)科學(xué)體系的成功建立奠定了堅(jiān)實(shí)基礎(chǔ)。同時(shí)，各級(jí)地方政府對(duì)大數(shù)據(jù)的重視程度也越來(lái)越高，相繼出臺(tái)諸多政策來(lái)扶持本地大數(shù)據(jù)技術(shù)產(chǎn)業(yè)的快速發(fā)展。

三、大數(shù)據(jù)的發(fā)展現(xiàn)狀

（一）國(guó)外發(fā)展現(xiàn)狀

如今，大數(shù)據(jù)的戰(zhàn)略價(jià)值引起了世界上許多國(guó)家的關(guān)注，各國(guó)也都制定了關(guān)于大數(shù)據(jù)配套規(guī)劃的法律法規(guī)，這有利于大數(shù)據(jù)技術(shù)的不斷創(chuàng)新和發(fā)展。例如，美國(guó)在國(guó)家戰(zhàn)略方面融入了大數(shù)據(jù)技術(shù)的應(yīng)用研究，在國(guó)防、能源、航空航天和地質(zhì)勘查等多個(gè)重要行業(yè)中應(yīng)用了大數(shù)據(jù)技術(shù)，這樣做的目的是應(yīng)用大數(shù)據(jù)來(lái)促進(jìn)這些領(lǐng)域的快速發(fā)展。日本的許多企業(yè)也積極開(kāi)展與大數(shù)據(jù)相關(guān)的業(yè)務(wù)。

（二）國(guó)內(nèi)發(fā)展現(xiàn)狀

目前，大數(shù)據(jù)受到了我國(guó)政府、學(xué)術(shù)研究和產(chǎn)業(yè)界的重視，并且得到了廣泛應(yīng)用。從政府層面來(lái)講，很多的政府工作報(bào)告中加入了大數(shù)據(jù)提供的相關(guān)內(nèi)容，這樣的數(shù)據(jù)更準(zhǔn)確，更直觀。在政府的支持下，我國(guó)大數(shù)據(jù)產(chǎn)業(yè)取得了迅猛發(fā)展。在之后的時(shí)間里我國(guó)頒發(fā)了《中華人民共和國(guó)國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展第十三個(gè)五年（2016-2020 年）規(guī)劃綱要》，將大數(shù)據(jù)上升到戰(zhàn)略層面，把大數(shù)據(jù)看作戰(zhàn)略基礎(chǔ)資源，并不斷推動(dòng)大數(shù)據(jù)健康穩(wěn)定發(fā)展，注重各種數(shù)據(jù)資源的共享，提高大數(shù)據(jù)信息的應(yīng)用效率。這些措施的都為大數(shù)據(jù)發(fā)展起到餓了保駕護(hù)航的作用。從學(xué)術(shù)研究層面來(lái)講，大數(shù)據(jù)發(fā)展起來(lái)之后，我國(guó)的大數(shù)據(jù)研究機(jī)構(gòu)和學(xué)術(shù)組織如雨后春筍般建立發(fā)展起來(lái)，例如中國(guó)通信學(xué)會(huì)和計(jì)算機(jī)學(xué)會(huì)共同成立了大數(shù)據(jù)專家委員會(huì)，教育部在人民大學(xué)成立了“大數(shù)據(jù)分析和管理國(guó)際研究中心”，“大數(shù)據(jù)研究中心”也在國(guó)家信息中心、電子科技大學(xué)和北京大數(shù)據(jù)研究院的共同合作中成立。從產(chǎn)業(yè)層面來(lái)講，大數(shù)據(jù)是在政府和企業(yè)的共同推動(dòng)下得到發(fā)展和進(jìn)步，例如貴陽(yáng)市政府聯(lián)合阿里巴巴成立的貴州大數(shù)據(jù)安全工程研究中心，這里聚集眾多知名大數(shù)據(jù)安全企業(yè)，為大數(shù)據(jù)安全產(chǎn)業(yè)發(fā)展積累經(jīng)驗(yàn)。此外，我國(guó)的數(shù)據(jù)信息數(shù)量十分巨大，能夠?yàn)榇髷?shù)據(jù)產(chǎn)業(yè)的發(fā)展和創(chuàng)新提供動(dòng)力支持。

四、結(jié)語(yǔ)

大數(shù)據(jù)隨著時(shí)代的發(fā)展而發(fā)展，對(duì)于國(guó)家和社會(huì)的發(fā)展具有十分重要的作用。當(dāng)前階段，在我國(guó)社會(huì)經(jīng)濟(jì)和科學(xué)技術(shù)的支持下，大數(shù)據(jù)研究獲得了十分顯著的成果，我們應(yīng)緊跟時(shí)代發(fā)展潮流，加強(qiáng)對(duì)大數(shù)據(jù)的重視，不斷提升大數(shù)據(jù)在社會(huì)各個(gè)行業(yè)中的應(yīng)用效率。