王俊珺
摘 ? 要:我國的物聯(lián)網(wǎng)產(chǎn)業(yè)隨著近年來經(jīng)濟水平的提高得到了快速的發(fā)展,客戶對服務(wù)的要求也在不斷提高。物聯(lián)網(wǎng)產(chǎn)業(yè)的產(chǎn)品種類和產(chǎn)品總量在市場需求擴大下迅猛增加,因此,產(chǎn)生了數(shù)量龐大的信息數(shù)據(jù)。在新的形勢下,物聯(lián)網(wǎng)工作者必須對物聯(lián)網(wǎng)產(chǎn)業(yè)進行高效的管理,新興的大數(shù)據(jù)技術(shù)在相關(guān)工作中發(fā)揮了不可替代的作用。文章對物聯(lián)網(wǎng)的概念和物聯(lián)網(wǎng)產(chǎn)業(yè)的發(fā)展趨勢進行了簡單的介紹,并且重點闡述了大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)應(yīng)用中的價值。
關(guān)鍵詞:大數(shù)據(jù)技術(shù);物聯(lián)網(wǎng)產(chǎn)業(yè);應(yīng)用分析
美國麻省理工學院于1999年最早提出了物聯(lián)網(wǎng)的概念,物聯(lián)網(wǎng)是指通過具有感知能力、計算能力和執(zhí)行能力的實體傳感設(shè)備的布置以及網(wǎng)絡(luò)的應(yīng)用對信息進行交互和處理,用以實現(xiàn)在廣域或大范圍內(nèi)實施人與物或物與物之間的信息交換。感知、傳輸、處理是物聯(lián)網(wǎng)的3個關(guān)鍵環(huán)節(jié),物聯(lián)網(wǎng)可以依托傳感器、二維碼、多媒體、無線射頻識別(Radio Frequency Identification,RFID)等多種信息獲取技術(shù)。物聯(lián)網(wǎng)產(chǎn)業(yè)通過儲存技術(shù)的使用可以實現(xiàn)信息的有效收集,對海量數(shù)據(jù)實時處理。
1 ? ?物聯(lián)網(wǎng)產(chǎn)業(yè)在我國的發(fā)展趨勢
傳感網(wǎng)技術(shù)是物聯(lián)網(wǎng)技術(shù)的核心,我國自1999年開始啟動相關(guān)的研究工作,標志著我國的物聯(lián)網(wǎng)產(chǎn)業(yè)從培育期穩(wěn)步邁入了發(fā)展壯大期。按照預(yù)期,我國物聯(lián)網(wǎng)的年復(fù)合增長率將超過30%,市場規(guī)模將在2015年達到7 500億元。我國的物聯(lián)網(wǎng)產(chǎn)業(yè)已經(jīng)取得了初步的發(fā)展成果,具備了完整的產(chǎn)業(yè)體系,在國際上取得了一定的話語權(quán)。物聯(lián)網(wǎng)的國際標準、國家標準全面采納了由我國提出的物聯(lián)網(wǎng)頂層設(shè)計;物聯(lián)網(wǎng)的應(yīng)用已經(jīng)擺脫了對政策扶持的依賴,成功地邁入了以市場導(dǎo)向作為發(fā)展依據(jù)的新階段,并且已經(jīng)在電力、安防、交通等領(lǐng)域的應(yīng)用中形成了一定的規(guī)模。物聯(lián)網(wǎng)的發(fā)展即將進入井噴階段,在不久的將來,定會為我國的可持續(xù)發(fā)展和經(jīng)濟社會智能化作出重要的貢獻。
2009年,我國提出了“感知中國”的戰(zhàn)略發(fā)展方針,為物聯(lián)網(wǎng)產(chǎn)業(yè)的快速發(fā)展提供了動力和方向。國務(wù)院于2013年年初下發(fā)了《關(guān)于推進物聯(lián)網(wǎng)有序健康發(fā)展的指導(dǎo)意見》,首次提出了要在經(jīng)濟社會的各個領(lǐng)域?qū)崿F(xiàn)物聯(lián)網(wǎng)的廣泛應(yīng)用,要求相關(guān)單位和部門對物聯(lián)網(wǎng)的核心技術(shù)和關(guān)鍵技術(shù)進行掌握,加速我國物聯(lián)網(wǎng)的發(fā)展,盡快形成基本安全可控并且能夠在國際上與其他國家展開競爭的產(chǎn)業(yè)體系。在我國可持續(xù)發(fā)展和經(jīng)濟社會智能化建設(shè)的進程中,物聯(lián)網(wǎng)應(yīng)該發(fā)揮出重要的推動作用。該指導(dǎo)意見還發(fā)布了關(guān)于未來發(fā)展的10項行動計劃,包括頂層設(shè)計、標準研制、商業(yè)模式、技術(shù)研發(fā)、產(chǎn)業(yè)支持、信息安全和法律法規(guī)等內(nèi)容。物聯(lián)網(wǎng)產(chǎn)業(yè)目前在我國發(fā)展十分迅速,相應(yīng)的信息數(shù)據(jù)處理的發(fā)展已經(jīng)嚴重滯后。在新的發(fā)展形勢下,數(shù)據(jù)管理技術(shù)必須及時進行突破和更新,以適應(yīng)物聯(lián)網(wǎng)產(chǎn)業(yè)的發(fā)展進程。經(jīng)過大量的探索和研究,物聯(lián)網(wǎng)產(chǎn)業(yè)工作者提出了大數(shù)據(jù)和智能處理技術(shù),推動了物聯(lián)網(wǎng)產(chǎn)業(yè)的進一步發(fā)展。
2 ? ?大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)應(yīng)用中的作用和意義
2.1 ?大數(shù)據(jù)的概念
當一個數(shù)據(jù)集達到一定的體量或數(shù)據(jù)類別時就可以被稱為大數(shù)據(jù),當前所說的大數(shù)據(jù)技術(shù)指一種能夠快速、高效地從大量信息數(shù)據(jù)中獲得有價值的信息的技術(shù)手段。除了數(shù)據(jù)本身,物聯(lián)網(wǎng)產(chǎn)業(yè)中的大數(shù)據(jù)還指設(shè)計數(shù)據(jù)采集的工具、數(shù)據(jù)存儲平臺以及相應(yīng)的數(shù)據(jù)處理和數(shù)據(jù)分析系統(tǒng)。物聯(lián)網(wǎng)產(chǎn)業(yè)中的大數(shù)據(jù)所包含的數(shù)據(jù)信息通常具有極高的使用價值。大數(shù)據(jù)信息處理技術(shù)的應(yīng)用能夠?qū)嫶蠖鴱?fù)雜的數(shù)據(jù)進行處理,在此過程中,還能產(chǎn)生各種有價值的數(shù)據(jù)信息。多年的工作經(jīng)驗證明,通過對數(shù)據(jù)的分析和處理,企業(yè)的決策者能夠得到更多深層次、智能化且具有極高商業(yè)價值的信息,相關(guān)的知識和理論在國外的智能交通領(lǐng)域已經(jīng)開始應(yīng)用。傳統(tǒng)互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)和物聯(lián)網(wǎng)每天都會有海量的新數(shù)據(jù)產(chǎn)生,應(yīng)用云計算、大數(shù)據(jù)技術(shù)可以對這些數(shù)據(jù)進行篩選和分析處理,將有用的信息進行匯總,這個過程被稱為大數(shù)據(jù)分析[1]。
2.2 ?大數(shù)據(jù)技術(shù)在現(xiàn)實生活中的應(yīng)用
衛(wèi)星和遍布全球的數(shù)億個RFID標簽、智能手機、帶GPS的相機和傳感器能夠?qū)崟r完成數(shù)據(jù)的收集工作,通過對這些數(shù)據(jù)進行可視化處理,能夠幫助人類將前人遙不可及的夢想變成現(xiàn)實—對人類的生存方式進行感知、測量、理解和影響。站在技術(shù)層面上來看,正是大數(shù)據(jù)的有效應(yīng)用推動了傳統(tǒng)海量存儲監(jiān)控向聯(lián)網(wǎng)智能化監(jiān)控的發(fā)展進程。一個國際大都市一年內(nèi)產(chǎn)生的車輛行駛數(shù)據(jù)可能會超過百億,通過車牌和車身顏色等能夠快速地提取出相關(guān)車輛的行駛路線以及違章記錄等信息,從而基于大數(shù)據(jù)開展有關(guān)的分析工作。
2.3 ?大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)應(yīng)用的價值
中國的大數(shù)據(jù)市場目前才剛剛起步,尚處于發(fā)展的初期階段,但應(yīng)用的范圍已經(jīng)非常廣泛,且發(fā)展勢頭極其迅猛,與物聯(lián)網(wǎng)、云計算、移動互聯(lián)和智慧城市都有所關(guān)聯(lián)。大數(shù)據(jù)技術(shù)在“數(shù)據(jù)為王”的未來發(fā)展趨勢中必然會在各個領(lǐng)域得到更加廣泛的應(yīng)用。目前,物聯(lián)網(wǎng)的網(wǎng)絡(luò)架構(gòu)包括感知層、網(wǎng)絡(luò)層以及應(yīng)用層。感知層的主要功能是實現(xiàn)信息采集、捕獲以及物體識別等智能化的感知,每天都會產(chǎn)生大量的新數(shù)據(jù)。信息的傳送和通信主要由物聯(lián)網(wǎng)的網(wǎng)絡(luò)層來實現(xiàn)。物聯(lián)網(wǎng)的應(yīng)用層可以實現(xiàn)智能電網(wǎng)、監(jiān)控服務(wù)、智能家居、環(huán)境監(jiān)控、公共安全、綠色農(nóng)業(yè)、工業(yè)監(jiān)控等各類應(yīng)用。通過智能化的處理和分析,對感知層產(chǎn)生的海量數(shù)據(jù)進行再加工,能夠?qū)τ脩舻男袨榱晳T和個人喜好進行充分的了解,并且以此為依據(jù)有針對性地對產(chǎn)品和服務(wù)進行優(yōu)化和調(diào)整,進而可以根據(jù)客戶的具體需求提供不同的商業(yè)應(yīng)用。物聯(lián)網(wǎng)產(chǎn)業(yè)最重要的商業(yè)價值就在于這些應(yīng)用,物聯(lián)網(wǎng)產(chǎn)業(yè)發(fā)展的關(guān)鍵就在于大數(shù)據(jù)分析手段在智能管理和運營優(yōu)化中的廣泛運用[2]。
3 ? ?大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中的應(yīng)用
物聯(lián)網(wǎng)產(chǎn)業(yè)當前主要分為數(shù)據(jù)采集、傳輸、處理和應(yīng)用4個階段,其中,數(shù)據(jù)的采集和傳遞為大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中的應(yīng)用奠定了基礎(chǔ),數(shù)據(jù)的處理和應(yīng)用是大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中進行應(yīng)用的核心。雖然我國的物聯(lián)網(wǎng)產(chǎn)業(yè)近年來取得了一定的發(fā)展成果,但依然存在許多弊端,仍需進行不懈的研究和探索。RFID、傳感器等一線設(shè)備廠商依然要以感知層數(shù)據(jù)采集作為主要發(fā)展方向,電信運營商等則將以傳輸層數(shù)據(jù)傳遞作為主要發(fā)展方向。通過數(shù)據(jù)可視化、數(shù)據(jù)挖掘、預(yù)測分析、語意引擎、數(shù)據(jù)質(zhì)量、數(shù)據(jù)管理等手段,大數(shù)據(jù)技術(shù)對于物聯(lián)網(wǎng)產(chǎn)業(yè)在應(yīng)用層方面的數(shù)據(jù)智能處理和信息決策的商業(yè)應(yīng)用具有巨大的促進作用,其中,運用的技術(shù)手段主要包括數(shù)據(jù)的采集、存儲、基礎(chǔ)架構(gòu)、處理、統(tǒng)計分析、挖掘、模型預(yù)測和結(jié)果呈現(xiàn)等[3]。
3.1 ?數(shù)據(jù)采集
對于大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中的應(yīng)用而言,數(shù)據(jù)的采集是數(shù)據(jù)分析和數(shù)據(jù)處理的基礎(chǔ)。由于數(shù)據(jù)對于智能決策的執(zhí)行和效果具有決定性的作用,因此物聯(lián)網(wǎng)必須通過數(shù)據(jù)的獲取、選擇和存儲等一系列過程完成大數(shù)據(jù)的采集工作。數(shù)據(jù)的采集過程通常與信息提取和數(shù)據(jù)的去噪處理緊密相關(guān),物聯(lián)網(wǎng)的數(shù)據(jù)與一般的大數(shù)據(jù)相比,具有增長率高、異構(gòu)、多樣、非結(jié)構(gòu)、有噪聲等特點。為了方便信息的處理和運輸,采集到的數(shù)據(jù)通常會在初級階段進行去噪處理。物聯(lián)網(wǎng)的數(shù)據(jù)通常帶有時間、位置、行為、環(huán)境等信息,且具有明顯的顆粒性,因此,智能化處理的關(guān)鍵在于如何有效地去噪和提取有用的信息。為了能夠有效地實現(xiàn)對電子郵件、圖片、音頻等異構(gòu)數(shù)據(jù)的智能化信息的理解,基于香農(nóng)信息論和貝葉斯概率論,HP公司提出了Autonomy非結(jié)構(gòu)化數(shù)據(jù)解決方案。此外,在物聯(lián)網(wǎng)產(chǎn)業(yè)的運行中必須對所采集的數(shù)據(jù)進行提取,以降低在此過程中必然會產(chǎn)生的一些負荷。
3.2 ?數(shù)據(jù)存儲
隨著近年來我國信息化建設(shè)的快速發(fā)展,大數(shù)據(jù)時代的數(shù)據(jù)信息量增長速度突飛猛進。有效地應(yīng)對物聯(lián)網(wǎng)每天不斷增加的信息,并對其進行及時、高效的處理,數(shù)據(jù)存儲是唯一可行的解決方案。物聯(lián)網(wǎng)通常采用分布式計算集群來對大數(shù)據(jù)進行分析、分類和匯總,外部存儲器控制器(External Memory Controller,EMC)的Green Plum,Oracle的Exadata等數(shù)據(jù)庫基本能夠滿足傳統(tǒng)的數(shù)據(jù)存儲和實時分析的應(yīng)用需求。但是以谷歌為代表的IT企業(yè)針對物聯(lián)網(wǎng)產(chǎn)生的海量異構(gòu)數(shù)據(jù)提出了Map Reduce技術(shù)的解決方案,即利用大規(guī)模廉價服務(wù)器以達到并行處理的非關(guān)系數(shù)據(jù)庫。物聯(lián)網(wǎng)產(chǎn)業(yè)中數(shù)據(jù)的存儲技術(shù)正在隨著經(jīng)濟的發(fā)展而不斷提高,非關(guān)系數(shù)據(jù)庫的分布式存儲技術(shù)對于物聯(lián)網(wǎng)產(chǎn)業(yè)的發(fā)展起到了推動作用,同時也是目前最受歡迎的數(shù)據(jù)存儲技術(shù)[4]。此后,云存儲、分布式文件系統(tǒng)等大數(shù)據(jù)基礎(chǔ)架構(gòu)以及以云計算為基礎(chǔ)的分布式數(shù)據(jù)處理方式也相繼出現(xiàn)。
3.3 ?數(shù)據(jù)分析
數(shù)據(jù)的統(tǒng)計和分析可以將其內(nèi)部儲存的海量數(shù)據(jù)通過分布式數(shù)據(jù)庫或分布式計算集群進行普通的分析和分類匯總等處理,對于大多數(shù)常見的分析需求都能夠滿足。數(shù)據(jù)分析囊括了物聯(lián)網(wǎng)后臺海量數(shù)據(jù)的挖掘、統(tǒng)計分析、成果呈現(xiàn)、模型預(yù)測等。數(shù)據(jù)分析是物聯(lián)網(wǎng)真正的商業(yè)價值基礎(chǔ),基于各種算法對現(xiàn)有數(shù)據(jù)進行計算,達到預(yù)測數(shù)據(jù)未來走向的目的,滿足一些客戶對于分析高級別數(shù)據(jù)的需求[5]。其中,用于聚類的Kmeans、用于分類的Naive Bayes和用于統(tǒng)計學習的支持向量機(Support Vector Machine,SVM)屬于比較典型的算法。數(shù)據(jù)統(tǒng)計與分析的重點和難點在于:體量大的分析數(shù)據(jù)將會占用大量的系統(tǒng)資源。
4 ? ?結(jié)語
大數(shù)據(jù)技術(shù)的應(yīng)用能夠有效地促進物聯(lián)網(wǎng)產(chǎn)業(yè)的發(fā)展,物聯(lián)網(wǎng)在此基礎(chǔ)上可以通過應(yīng)用不同的算法對已有的價值數(shù)據(jù)進行整理、組合與聯(lián)系,所得到的相應(yīng)結(jié)論能夠促進更高級別的數(shù)據(jù)分析活動實現(xiàn)。物聯(lián)網(wǎng)產(chǎn)業(yè)通過使用存儲技術(shù)對海量數(shù)據(jù)進行處理的同時,還能夠?qū)τ行У男畔⑦M行收集。因此,可以從數(shù)據(jù)的采集、分析和存儲3個方面對大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中的應(yīng)用問題進行解答。
[參考文獻]
[1]張亞飛,閻東.大數(shù)據(jù)技術(shù)在物聯(lián)網(wǎng)產(chǎn)業(yè)中的應(yīng)用分析[J].通訊世界,2018(1):93-94.
[2]孫月,全秋浩,馬云飛,等.大數(shù)據(jù)與物聯(lián)網(wǎng)的關(guān)系及應(yīng)用[J].吉林農(nóng)業(yè),2019(7):110.
[3]楊岱巖.基于大數(shù)據(jù)的信息管理系統(tǒng)研究[J].通訊世界,2019(1):10-11.
[4]孫重陽.論物聯(lián)網(wǎng)技術(shù)中大數(shù)據(jù)的應(yīng)用[J].電腦編程技巧與維護,2018(10):96-97,119.
[5]羅由.大數(shù)據(jù)在移動通信網(wǎng)絡(luò)優(yōu)化中的應(yīng)用[J].科學技術(shù)創(chuàng)新,2018(1):76-77.