基于大數(shù)據(jù)環(huán)境的云存儲(chǔ)技術(shù)的應(yīng)用

侯佳路++胡曉鳳++王潤(rùn)華

摘要：

隨著網(wǎng)絡(luò)技術(shù)的不斷發(fā)展，信息交互也越來越強(qiáng)，數(shù)據(jù)交互在整個(gè)世界范圍內(nèi)無時(shí)無刻不在發(fā)生，人類的信息技術(shù)迎來一個(gè)大數(shù)據(jù)的時(shí)代，而云計(jì)算的出現(xiàn)更是加快了信息的傳播速度。云存儲(chǔ)是云計(jì)算最主要的表現(xiàn)形式，在大數(shù)據(jù)環(huán)境下其作用十分突出。文章分析了大數(shù)據(jù)及云存儲(chǔ)的相關(guān)概念，對(duì)云存儲(chǔ)技術(shù)的應(yīng)用及注意事項(xiàng)做出簡(jiǎn)單分析。

關(guān)鍵詞：大數(shù)據(jù)；云存儲(chǔ)；應(yīng)用

【中圖分類號(hào)】TP393.09

大數(shù)據(jù)是一個(gè)非常廣泛的定義，無論是計(jì)算機(jī)還是手機(jī)，只要通過網(wǎng)絡(luò)使用信息、通過網(wǎng)絡(luò)讓數(shù)據(jù)在世界范圍內(nèi)進(jìn)行交流，均是大數(shù)據(jù)時(shí)代的存在方法，因此，只要通過網(wǎng)絡(luò)進(jìn)行信息交互的用戶均是大數(shù)據(jù)時(shí)代的參與者。而基于大數(shù)據(jù)環(huán)境下研究云存儲(chǔ)，是以大數(shù)據(jù)為依托，將云存儲(chǔ)技術(shù)的優(yōu)勢(shì)充分發(fā)揮出來，使其更好的服務(wù)于大數(shù)據(jù)。

一、大數(shù)據(jù)對(duì)存儲(chǔ)的要求

大數(shù)據(jù)背景下，非確定數(shù)據(jù)應(yīng)用中的海量數(shù)據(jù)對(duì)數(shù)據(jù)存儲(chǔ)系統(tǒng)的要求相對(duì)較高。一方面，海量數(shù)據(jù)需要通過分布式數(shù)據(jù)組織與管理策略進(jìn)行組織與管理，因此其數(shù)據(jù)與數(shù)據(jù)組織方式要能滿足非確定數(shù)據(jù)應(yīng)用的要求。另一方面，海量數(shù)據(jù)是通過一個(gè)漫長(zhǎng)的、持續(xù)增長(zhǎng)的積累形成的，因此不僅要求存儲(chǔ)支持具有一定的規(guī)模性及良好的性能，對(duì)其可擴(kuò)展性也有更高的要求，并要求其具備功能完善的索引機(jī)制。大數(shù)據(jù)環(huán)境下，存儲(chǔ)技術(shù)所面臨的是海量的不確定性數(shù)據(jù)，傳統(tǒng)的信息存儲(chǔ)結(jié)構(gòu)及對(duì)象查詢方法的效率越來越低，人們迫切需要通過一種新的元數(shù)據(jù)組織結(jié)構(gòu)及查詢方法提高信息應(yīng)用效率。在分布式環(huán)境中，各個(gè)網(wǎng)絡(luò)結(jié)點(diǎn)均有數(shù)據(jù)源，大大降低了網(wǎng)絡(luò)的傳輸性能，而各個(gè)數(shù)據(jù)源具有較強(qiáng)的自治性，再加之?dāng)?shù)據(jù)的非確定性，使得海量非確定性異構(gòu)數(shù)據(jù)的集成工作越來越復(fù)雜。因此要對(duì)數(shù)據(jù)挖掘引擎的布局、多引擎的調(diào)度策略加以調(diào)整。

二、云存儲(chǔ)概念及分類

云存儲(chǔ)是云計(jì)算最主要的表現(xiàn)形式，而云計(jì)算是分布式處理、并行處理及網(wǎng)格計(jì)算發(fā)展到一定階段的產(chǎn)物。其是利用網(wǎng)絡(luò)把龐大的計(jì)算處理程序自動(dòng)分拆為無數(shù)個(gè)相對(duì)較小的子程序，然后再利用由多部服務(wù)器組成的龐大系統(tǒng)對(duì)其進(jìn)行計(jì)算、分析，最終再將處理結(jié)果發(fā)送至各個(gè)終端用戶。云計(jì)算技術(shù)大大提高了數(shù)據(jù)信息的處理效率，可以實(shí)現(xiàn)與“超級(jí)計(jì)算機(jī)”相同的網(wǎng)絡(luò)服務(wù)功能。云存儲(chǔ)則是指通過集群應(yīng)用、網(wǎng)格技術(shù)或分布式文件系統(tǒng)功能，利用應(yīng)用軟件將網(wǎng)絡(luò)中大量的、不同類型的存儲(chǔ)設(shè)備集合起來，通過這些集合在一起的存儲(chǔ)設(shè)備向用戶提供數(shù)據(jù)存儲(chǔ)及業(yè)務(wù)訪問的功能。具體而言，云存儲(chǔ)可分為公共云存儲(chǔ)、內(nèi)部云存儲(chǔ)及混合云存儲(chǔ)。公共云存儲(chǔ)是目前應(yīng)用最為廣泛的，比如亞馬遜、百度云盤、搜狐企業(yè)網(wǎng)盤等均是采用的公共云存儲(chǔ)模式，供應(yīng)商可以保證每個(gè)客戶在獨(dú)立、私有的狀態(tài)下實(shí)現(xiàn)信息的存儲(chǔ)與應(yīng)用。公共云存儲(chǔ)還可以規(guī)劃出一部分用于私有云存儲(chǔ)，而私有云存儲(chǔ)通常部署于企業(yè)數(shù)據(jù)中心或相同地點(diǎn)的設(shè)施上。內(nèi)部云存儲(chǔ)與私有云存儲(chǔ)比較類似，其與私有云存儲(chǔ)最大的區(qū)別在于，前者位于企業(yè)的防火墻內(nèi)部，國內(nèi)聯(lián)想網(wǎng)盤提供的就是內(nèi)部云存儲(chǔ)服務(wù)?；旌显拼鎯?chǔ)顧名思義就是結(jié)合了公共云存儲(chǔ)、私有云存儲(chǔ)及內(nèi)部云存儲(chǔ)，根據(jù)用戶要求的訪問，尤其是需要臨時(shí)配置容量時(shí)，從公共云存儲(chǔ)中劃分出一部分容易，用于配置一種私有或內(nèi)部云，以幫助客戶應(yīng)對(duì)迅速增長(zhǎng)的負(fù)載波動(dòng)或高峰。

三、大數(shù)據(jù)環(huán)境下云存儲(chǔ)的應(yīng)用

現(xiàn)階段云存儲(chǔ)的應(yīng)用主要包括以下幾個(gè)方面：

（一）視頻監(jiān)控的應(yīng)用

城市建設(shè)與社會(huì)的發(fā)展使得視頻監(jiān)控技術(shù)的應(yīng)用與發(fā)展達(dá)到了空前繁榮的程度，而城市視頻監(jiān)控系統(tǒng)所面臨的重要問題就是如何處理龐大的高清視頻數(shù)據(jù)：網(wǎng)絡(luò)帶寬不足、存儲(chǔ)穿間過大、性能要求越來越高、系統(tǒng)擴(kuò)容升級(jí)存在壓力等，均是需要面臨的問題，而對(duì)PB級(jí)的海量網(wǎng)絡(luò)存儲(chǔ)需求，傳統(tǒng)的直連式存儲(chǔ)與網(wǎng)絡(luò)存儲(chǔ)技術(shù)根據(jù)無法滿足這一要求。而云存儲(chǔ)向視頻監(jiān)控系統(tǒng)提供了多種應(yīng)用接口，用戶無需安裝任何播放及管理軟件，其真正突破了傳統(tǒng)存儲(chǔ)方式的性能與容量的問題瓶頸，提高了系統(tǒng)性能及容量的線性擴(kuò)展，使得海量數(shù)據(jù)的存儲(chǔ)成為可能。并且由于不同的監(jiān)控區(qū)域處于不同的地理范圍，監(jiān)控點(diǎn)數(shù)據(jù)巨大，云存儲(chǔ)系統(tǒng)便于分布式管理與隨時(shí)擴(kuò)容。

（二）互聯(lián)網(wǎng)絡(luò)的應(yīng)用

云存儲(chǔ)技術(shù)在互聯(lián)網(wǎng)中的應(yīng)用越來越廣泛，互聯(lián)網(wǎng)可以提供一個(gè)有效的存儲(chǔ)媒介，供用戶進(jìn)行交流，通過媒介獲取豐富的相關(guān)信息資源，提高資源的利用率。隨著移動(dòng)互聯(lián)網(wǎng)及移動(dòng)終端的快速發(fā)展，用戶的同步與分享需求日益強(qiáng)烈，互聯(lián)網(wǎng)公司也將云存儲(chǔ)技術(shù)的研發(fā)與應(yīng)用作為自身的生果發(fā)展內(nèi)容，并將互聯(lián)網(wǎng)產(chǎn)品中需要存儲(chǔ)的個(gè)人信息與云存儲(chǔ)應(yīng)用綁定，大大提高了信息處理速度。云存儲(chǔ)平臺(tái)與各類消費(fèi)電子產(chǎn)品實(shí)現(xiàn)了互聯(lián)互通，各種形式的數(shù)據(jù)信息開始實(shí)現(xiàn)跨越時(shí)間與穿間的自由流通，為各個(gè)社交網(wǎng)絡(luò)用戶提供更為豐富的交流元素。

（三）其它應(yīng)用

其它應(yīng)用包括視頻編輯應(yīng)用及家庭網(wǎng)絡(luò)應(yīng)用等。云存儲(chǔ)技術(shù)可以實(shí)現(xiàn)不同設(shè)備的協(xié)同合作，通過虛擬化的管理技術(shù)大大簡(jiǎn)化了視頻數(shù)據(jù)管理的流程，提高整個(gè)系統(tǒng)的開拓性與敏捷性。云存儲(chǔ)系統(tǒng)對(duì)存儲(chǔ)設(shè)備進(jìn)行虛擬化管理，實(shí)現(xiàn)視頻數(shù)據(jù)與物理存儲(chǔ)位置的無關(guān)性，視頻數(shù)據(jù)可跨地域存儲(chǔ)與調(diào)用。家庭網(wǎng)絡(luò)應(yīng)用主要是實(shí)現(xiàn)家庭媒體文件的上傳與在線播放，通過云存儲(chǔ)訪問代理與云存儲(chǔ)平臺(tái)的交互，實(shí)現(xiàn)家庭內(nèi)多終端間的多媒體資源共享與多屏互動(dòng)等，優(yōu)化用戶的感知。

總之，云存儲(chǔ)不僅是存儲(chǔ)，更多的是應(yīng)用，隨著云存儲(chǔ)安全性、可靠性、實(shí)用性的不斷提升，云存儲(chǔ)必將在各個(gè)行業(yè)廣泛應(yīng)用，成為未來數(shù)據(jù)存儲(chǔ)的主要發(fā)展趨勢(shì)。

參考文獻(xiàn)：

[1]李國杰，程學(xué)旗.大數(shù)據(jù)研究：未來科技及經(jīng)濟(jì)社會(huì)發(fā)展的重大戰(zhàn)略領(lǐng)域——大數(shù)據(jù)的研究現(xiàn)狀與科學(xué)思考[J].中國科學(xué)院院刊，2014，02（15）：129-130.

[2]文必龍，宗文棟.海量并行處理系統(tǒng)的大數(shù)據(jù)讀寫接口優(yōu)化研究[J].鄭州輕工業(yè)學(xué)院學(xué)報(bào)（自然科學(xué)版），2013，04（19）：105-106.

[3]何鵬.移動(dòng)互聯(lián)網(wǎng)時(shí)代的企業(yè)信息聚合——從大數(shù)據(jù)的實(shí)踐到云計(jì)算的應(yīng)用[J].互聯(lián)網(wǎng)天地，2013，12（20）：206-207.

[4]景亞君，張永生，項(xiàng)文新.電子文件中心、電子文件備份中心和電子政務(wù)災(zāi)備中心辨析[J].辦公自動(dòng)化，2011，05（25）：206-207.

[5]陳力，郝守真，王志庚.網(wǎng)絡(luò)信息資源的采集與保存——國家圖書館的WICP和ODBN項(xiàng)目介紹[J].國家圖書館學(xué)刊，2013，03（25）：154-155