大數(shù)據(jù)場景下的云存儲技術(shù)與應(yīng)用

李華芳

隨著信息技術(shù)的發(fā)展，以大數(shù)據(jù)為背景的云存儲技術(shù)獲得良好的發(fā)展前景。它的應(yīng)用不僅方便了人們?nèi)粘Ｉ罟ぷ?，滿足人們的不同需求。還可降低系統(tǒng)內(nèi)部的負(fù)載率，提升工作效率。在這種情況下，為了滿足現(xiàn)代化社會發(fā)展需求，必須不斷對云存儲技術(shù)進(jìn)行升級優(yōu)化，以滿足大數(shù)據(jù)場景下用戶的工作需求。文章主要從基于大數(shù)據(jù)場景的云存儲技術(shù)概述出發(fā)，對大數(shù)據(jù)場景下云存儲技術(shù)的應(yīng)用進(jìn)行了分析，以供參考完善。

【關(guān)鍵詞】大數(shù)據(jù) 云存儲技術(shù) 應(yīng)用

傳統(tǒng)的以存儲介質(zhì)的信息技術(shù)已經(jīng)無法滿足社會多元化發(fā)展的需求，這時云存儲技術(shù)應(yīng)運而生。云存儲技術(shù)主要是通過服務(wù)器集群應(yīng)用和網(wǎng)格技術(shù)，借助網(wǎng)絡(luò)軟件協(xié)同作業(yè)，將系統(tǒng)數(shù)據(jù)庫的全部信息進(jìn)行集中管理，為用戶提供一個訪問功能系統(tǒng)，方便用戶實時操作，從而提升云計算工作效率與質(zhì)量。尤其是近年來，隨著云計算技術(shù)的日漸更新，云存儲技術(shù)因自身具有應(yīng)用范圍廣泛、操作簡單方便以及擴展性較強等優(yōu)點，已經(jīng)被廣泛應(yīng)用到各個領(lǐng)域中，受到人們的青睞與認(rèn)可。

1 基于大數(shù)據(jù)場景的云存儲技術(shù)概述

1.1 云存儲關(guān)鍵技術(shù)

要想充分發(fā)揮云存儲技術(shù)的效用，必須結(jié)合云儲存技術(shù)的基本原理與有關(guān)文獻(xiàn)資料，詳細(xì)分析云儲存技術(shù)的關(guān)鍵技術(shù)?；诖髷?shù)據(jù)場景下的云存儲的關(guān)鍵技術(shù)，主要包括虛擬技術(shù)、重復(fù)刪除技術(shù)以及數(shù)據(jù)備份技術(shù)等技術(shù)。云存儲技術(shù)的應(yīng)用能夠?qū)υL問權(quán)限進(jìn)行設(shè)置，提升資源信息使用的安全性，避免因資源信息泄漏、篡改或者是存儲不及時，給用戶造成損失。

1.2 虛擬技術(shù)

虛擬技術(shù)作為大數(shù)據(jù)場景下云存儲技術(shù)不可缺少一部分，是整個技術(shù)的核心，也是云計算的前提條件。利用云存儲技術(shù)，不僅能在每一個服務(wù)器中心通過虛擬技術(shù)來細(xì)分硬件資源的功能，還可按照用戶的具體需要，對資源信息進(jìn)行分類整合，為用戶提供需要的信息?？梢娫诖髷?shù)據(jù)場景下，要想滿足用戶的具體需要，必須改變傳統(tǒng)以存儲介質(zhì)為主的存儲模式，通過云存儲系統(tǒng)的虛擬技術(shù)共享資源信息。

1.3 重復(fù)刪除技術(shù)

雖然云存儲技術(shù)已經(jīng)實現(xiàn)了存儲容量的最大化，但是基于大數(shù)據(jù)場景下，云存儲系統(tǒng)的存儲容量日漸增加，考慮到系統(tǒng)容量增加的需求量，云存儲系統(tǒng)內(nèi)部必須通過重復(fù)刪除技術(shù)，將內(nèi)部存儲的無效資源信息刪除，才能確保云存儲系統(tǒng)有足夠的存儲空間，為用戶提供良好的網(wǎng)絡(luò)傳輸服務(wù)。

1.4 數(shù)據(jù)備份技術(shù)

數(shù)據(jù)備份技術(shù)與數(shù)據(jù)重復(fù)刪除技術(shù)相對比，具有明顯差距。數(shù)據(jù)備份的目的主要是在系統(tǒng)運行過程中，為了防止資源信息因各種因素影響，導(dǎo)致系統(tǒng)中的資源信息被刪除而發(fā)生丟失，云存儲系統(tǒng)的數(shù)據(jù)備份系統(tǒng)可及時恢復(fù)已經(jīng)被刪除的資源信息，避免存儲數(shù)據(jù)刪除、丟失。

2 大數(shù)據(jù)場景下云存儲技術(shù)的應(yīng)用

2.1 構(gòu)建大規(guī)模級別存儲系統(tǒng)

傳統(tǒng)的以存儲介質(zhì)為主的存儲技術(shù)主要是將信息數(shù)據(jù)存儲到一個設(shè)備、機架以及數(shù)據(jù)中心進(jìn)行集中管理，一旦存儲容量從最低級轉(zhuǎn)變成高級存儲后，設(shè)備難以獨立完成。基于大數(shù)據(jù)場景下的云存儲技術(shù)所構(gòu)建的大規(guī)模級別存儲系統(tǒng)，只需要在內(nèi)部建立一個子系統(tǒng)，即可跨數(shù)據(jù)中心、城市、省，甚至是跨國家進(jìn)行存儲、管理、收集數(shù)據(jù)信息。并且在大規(guī)模級別存儲系統(tǒng)中，用戶在系統(tǒng)對資源設(shè)置訪問權(quán)限后，即可提升資源信息存儲的安全性，使用人員要想訪問有關(guān)資源信息，必須經(jīng)過授權(quán)訪問才能使用，在確保資源信息安全使用同時，還可避免資源信息被不法分子篡改、泄漏。

2.2 存儲設(shè)備的在線擴展和收縮

基于大數(shù)據(jù)場景下，用戶在使用云存儲設(shè)備過程中，會遇到存儲資源池需要調(diào)整的需要。這時存儲資源池會按照用戶存儲的信息需求增加或者是減少存儲設(shè)備。但在調(diào)整資源信息存儲的過程中，不能中斷調(diào)整指令，也不能讓上一層調(diào)度感應(yīng)到存儲資源池發(fā)生的改變，以免影響數(shù)據(jù)正常使用。此外，被刪減的存儲設(shè)備中存儲的資源信息，還應(yīng)在短時間內(nèi)存儲到另一個系統(tǒng)中，做好數(shù)據(jù)備份。這就要求云存儲系統(tǒng)及時優(yōu)化與調(diào)整數(shù)據(jù)管理方法、結(jié)構(gòu)，通過多級緩存技術(shù)在線擴展與收縮存儲設(shè)備的規(guī)模，徹底打破傳統(tǒng)設(shè)備、處理器與網(wǎng)絡(luò)的性能限制，完成信息存儲。

2.3 系統(tǒng)全局的自動負(fù)載均衡

在云存儲系統(tǒng)中，物理存儲主機的節(jié)點規(guī)模已從幾萬轉(zhuǎn)變成幾十萬。面對大規(guī)模級別的數(shù)據(jù)請求與節(jié)點數(shù)量，采用何種方式來實現(xiàn)系統(tǒng)節(jié)點負(fù)載均衡，充分利用空閑節(jié)點，提升服務(wù)質(zhì)量，確保系統(tǒng)高效運行，已經(jīng)成為急需解決的問題。而大數(shù)據(jù)大規(guī)模的云存儲技術(shù)，能夠通過請求類別與前端節(jié)點負(fù)載實現(xiàn)均衡與差異化調(diào)度，將系統(tǒng)全局的自動負(fù)載均衡變成可能。例如云存儲技術(shù)在某消防信息化系統(tǒng)中的應(yīng)用，系統(tǒng)全局的自動負(fù)載均衡可通過用戶提交的火災(zāi)數(shù)據(jù)挖掘請求，經(jīng)過相應(yīng)的分解，在系統(tǒng)繁忙程度、存儲總?cè)萘恳约癐O吞吐能力等Qos信息內(nèi)為信息存儲選擇相應(yīng)的存儲區(qū)域，然后利用數(shù)據(jù)安全策略將火災(zāi)數(shù)據(jù)信息發(fā)送到指揮調(diào)度網(wǎng)上，并通過數(shù)據(jù)壓縮技術(shù)建立分布式緩存系統(tǒng)，增加系統(tǒng)緩存加載的數(shù)據(jù)量與系統(tǒng)性能，重復(fù)檢測資源信息的有效性，最終將獲得結(jié)果通過網(wǎng)絡(luò)平臺反饋給客戶端用戶，實現(xiàn)IO的負(fù)載均衡。

3 結(jié)束語

綜上所述，云存儲技術(shù)作為信息化體系新的思維模式，通過建立云計算平臺，能夠?qū)崿F(xiàn)資源信息實時共享，從而提高數(shù)據(jù)信息的利用率。但是在實際應(yīng)用云存儲技術(shù)過程中，還需了解有關(guān)的技術(shù)工作原理，構(gòu)建大規(guī)模級別存儲系統(tǒng)，在線擴展和收縮存儲設(shè)備的規(guī)模，通過系統(tǒng)全局的自動負(fù)載均衡，整合與優(yōu)化各種資源信息，最終實現(xiàn)資源信息的有效利用。

參考文獻(xiàn)

[1]王愛菊，邵華.大數(shù)據(jù)場景下的云存儲技術(shù)與應(yīng)用[J].電子技術(shù)與軟件工程，2016（17）：186-186.

[2]宋省偉，國健男，郭秉宜，等.大數(shù)據(jù)場景下的云存儲技術(shù)與應(yīng)用淺析[J].硅谷，2015（04）：128-128.

作者單位

核工業(yè)計算機應(yīng)用研究所 北京市 100048