淺析網(wǎng)絡(luò)大數(shù)據(jù)環(huán)境下的計(jì)算機(jī)信息處理技術(shù)

張國(guó)瑞 崔逸 李凱寧 譚詩(shī)勇 喬錦鵬

摘要：近年來(lái)，大數(shù)據(jù)技術(shù)被廣泛應(yīng)用于搜索引擎、云查殺等方面，大數(shù)據(jù)時(shí)代的到來(lái)，在給計(jì)算機(jī)技術(shù)發(fā)展帶來(lái)機(jī)遇的同時(shí)也帶來(lái)新的挑戰(zhàn)?；诖?，對(duì)網(wǎng)絡(luò)大數(shù)據(jù)環(huán)境下的計(jì)算機(jī)信息處理技術(shù)展開探討。

關(guān)鍵詞：網(wǎng)絡(luò);大數(shù)據(jù);計(jì)算機(jī);

信息處理信息化時(shí)代，計(jì)算機(jī)技術(shù)被廣泛應(yīng)用于各行業(yè)，大數(shù)據(jù)時(shí)代的到來(lái)，使得處于網(wǎng)絡(luò)系統(tǒng)終端的人們需要對(duì)海量數(shù)據(jù)執(zhí)行存儲(chǔ)、整理等任務(wù)。這對(duì)于傳統(tǒng)的信息處理技術(shù)來(lái)說(shuō)是個(gè)巨大的挑戰(zhàn)。所以，如何使計(jì)算機(jī)信息處理技術(shù)適用于大數(shù)據(jù)時(shí)代，如何向云計(jì)算網(wǎng)絡(luò)方向發(fā)展，成為當(dāng)前研究的熱點(diǎn)。

1 計(jì)算機(jī)信息處理技術(shù)

計(jì)算機(jī)信息處理的過(guò)程就是數(shù)據(jù)傳輸、獲取、分析和處理的過(guò)程。這是個(gè)非常麻煩的過(guò)程，需要運(yùn)用到的技術(shù)有微電子技術(shù)、網(wǎng)絡(luò)技術(shù)、計(jì)算機(jī)通信技術(shù)等。計(jì)算機(jī)處理技術(shù)的主要類型有信息系統(tǒng)技術(shù)、檢索技術(shù)、數(shù)據(jù)庫(kù)技術(shù)、通信網(wǎng)絡(luò)技術(shù)，人們?cè)谶M(jìn)行資料分析、整理時(shí)，主要依賴于數(shù)據(jù)庫(kù)技術(shù)。

2 大數(shù)據(jù)時(shí)代數(shù)據(jù)信息處理的挑戰(zhàn)

大數(shù)據(jù)在本質(zhì)上具有以下2個(gè)特點(diǎn)：①海量的數(shù)據(jù)，其存儲(chǔ)、整理是個(gè)巨大的工程，以人力和傳統(tǒng)的計(jì)算機(jī)技術(shù)是難以解決的;②人們可以通過(guò)有效的途徑，從中獲取對(duì)決策等有參考價(jià)值的信息。適應(yīng)大數(shù)據(jù)環(huán)境是計(jì)算機(jī)信息處理技術(shù)的必然結(jié)果，雖然它給計(jì)算機(jī)技術(shù)帶來(lái)了挑戰(zhàn)，但也是計(jì)算機(jī)信息處理技術(shù)得以發(fā)展的契機(jī)。相關(guān)的企業(yè)如果能抓住機(jī)會(huì)，加大對(duì)大數(shù)據(jù)環(huán)境下計(jì)算機(jī)信息處理技術(shù)的研究力度，優(yōu)先掌握新技術(shù)的核心技能，則會(huì)使其在業(yè)界內(nèi)的競(jìng)爭(zhēng)力大大提高，給企業(yè)帶來(lái)巨大的經(jīng)濟(jì)效益和社會(huì)效益。

大數(shù)據(jù)時(shí)代的數(shù)據(jù)信息處理技術(shù)挑戰(zhàn)主要有3方面：①數(shù)據(jù)存儲(chǔ)壓力。傳統(tǒng)的數(shù)據(jù)庫(kù)是無(wú)法存儲(chǔ)海量數(shù)據(jù)的，這些數(shù)據(jù)還要經(jīng)過(guò)數(shù)據(jù)管理機(jī)制的壓縮、備份管理等，這都是新技術(shù)要解決的。②數(shù)據(jù)查詢問(wèn)題。新技術(shù)需要做到對(duì)海量數(shù)據(jù)的查詢，并且能從中提取有價(jià)值的信息。傳統(tǒng)的計(jì)算機(jī)信息處理技術(shù)存儲(chǔ)量是以“GB”計(jì)算的，在查詢海量數(shù)據(jù)時(shí)需要花費(fèi)很長(zhǎng)的時(shí)間，且還不一定能得到準(zhǔn)確的信息，浪費(fèi)了時(shí)間。③數(shù)據(jù)安全問(wèn)題。在各種系統(tǒng)的傳輸、存儲(chǔ)過(guò)程中，由于系統(tǒng)的安全性得不到保證，因此海量數(shù)據(jù)容易受到病毒攻擊，使得大數(shù)據(jù)中有參考價(jià)值的信息不能準(zhǔn)確地被提取出來(lái)。這也是新技術(shù)需要解決的。

3 大數(shù)據(jù)環(huán)境下的計(jì)算機(jī)信息處理技術(shù)

3.1 分布型數(shù)據(jù)存儲(chǔ)及網(wǎng)絡(luò)深層空間技術(shù)

分布型數(shù)據(jù)存儲(chǔ)技術(shù)是一種新型的計(jì)算機(jī)信息處理技術(shù)，已被廣泛應(yīng)用于像 IBM 這樣的公司，它主要采用的是列存儲(chǔ)技術(shù)，以列為基本單位，能對(duì)數(shù)據(jù)及進(jìn)行有效的壓縮，還能進(jìn)行快速的循環(huán)。這是行存儲(chǔ)技術(shù)沒(méi)有的特性。由于行、列存儲(chǔ)技術(shù)有各自的局限性，目前應(yīng)用比較廣泛的是將兩者結(jié)合，即行列混合型存儲(chǔ)結(jié)構(gòu)。此種結(jié)構(gòu)比較適用于大數(shù)據(jù)環(huán)境，能對(duì)海量數(shù)據(jù)進(jìn)行存儲(chǔ)、整理、分析，高效運(yùn)用磁盤空間，方便人們及時(shí)搜尋并提取信息，不會(huì)浪費(fèi)時(shí)間，節(jié)約搜索成本。網(wǎng)絡(luò)深層空間技術(shù)在對(duì)數(shù)據(jù)進(jìn)行高效集成處理時(shí)，因其特殊的訪問(wèn)途徑和信息規(guī)模大的特性，方便人們利用此技術(shù)對(duì)數(shù)據(jù)進(jìn)行整理。

3.2 數(shù)據(jù)高效索引與遺傳算法

數(shù)據(jù)高效索引有很多種方式的索引，被廣泛應(yīng)用的有2種：①互補(bǔ)型聚簇索引，其創(chuàng)建互補(bǔ)的索引表，以多個(gè)副本作為索引列;②聚簇索引，其存儲(chǔ)數(shù)據(jù)時(shí)需要依據(jù)索引的順序。遺傳算法在機(jī)器學(xué)習(xí)、信號(hào)處理等方面得到了廣泛的應(yīng)用，這主要得益于其本身的隨機(jī)性及調(diào)整搜索方向時(shí)的自動(dòng)化。

3.3 在內(nèi)容信息的基礎(chǔ)上進(jìn)行數(shù)據(jù)挖掘

大數(shù)據(jù)時(shí)代，需要對(duì)海量數(shù)據(jù)進(jìn)行數(shù)據(jù)挖掘。數(shù)據(jù)挖掘技術(shù)是在內(nèi)容數(shù)據(jù)的基礎(chǔ)上，主要致力于實(shí)體關(guān)聯(lián)研究技術(shù)與網(wǎng)絡(luò)搜索。針對(duì)網(wǎng)絡(luò)搜索的算法主要是排序?qū)W習(xí)算法，媒體在整理以短文形式存在的大量數(shù)據(jù)時(shí)，非常麻煩，排序?qū)W習(xí)算法應(yīng)運(yùn)而生，逐列、逐點(diǎn)及逐對(duì)的算法得到了廣泛應(yīng)用。

3.4 數(shù)據(jù)分析技術(shù)和可視化技術(shù)

數(shù)據(jù)分析技術(shù)包括很多種分析，比如網(wǎng)絡(luò)分析、空間分析、情感分析等?；诰W(wǎng)絡(luò)特征進(jìn)行分析的是網(wǎng)絡(luò)分析，拓?fù)涞氖占?、地理編碼和統(tǒng)計(jì)幾何等分析工作就是空間分析，對(duì)自然語(yǔ)言進(jìn)行非客觀的分析是情感分析?？梢暬夹g(shù)使人們直觀地通過(guò)此技術(shù)創(chuàng)建的圖物品等來(lái)了解數(shù)據(jù)集的每個(gè)單一數(shù)據(jù)分配到集群中的途徑。

3.5 分類、聚類分析技術(shù)和關(guān)聯(lián)規(guī)則技術(shù)

分類分析技術(shù)是通過(guò)歸納原來(lái)的數(shù)據(jù)，對(duì)其進(jìn)行分析，找出規(guī)律，從而衍生出新的數(shù)據(jù)點(diǎn)。這種技術(shù)運(yùn)用在大數(shù)據(jù)時(shí)代，能通過(guò)客戶目前的需求預(yù)測(cè)出客戶潛在的需求，預(yù)測(cè)結(jié)果是合理的。聚類分析技術(shù)指的是受限于不明確的因素，為了使結(jié)果合理化、準(zhǔn)確度高，對(duì)集合處理進(jìn)行分類，分成多個(gè)對(duì)象組，然后再對(duì)對(duì)象組進(jìn)行科學(xué)的分析與處理。以上2種技術(shù)對(duì)數(shù)據(jù)挖掘方面有很大的幫助，因此得到了廣泛的應(yīng)用。數(shù)據(jù)挖掘還可以通過(guò)關(guān)聯(lián)規(guī)則技術(shù)和機(jī)械學(xué)習(xí)方法實(shí)現(xiàn)。顧名思義，“關(guān)聯(lián)規(guī)則技術(shù)”就是通過(guò)數(shù)據(jù)之間的關(guān)聯(lián)規(guī)律來(lái)進(jìn)行數(shù)據(jù)的挖掘。機(jī)械學(xué)習(xí)方法主要被運(yùn)用于計(jì)算機(jī)在人工智能方面的發(fā)展中。

4 結(jié)束語(yǔ)

大數(shù)據(jù)時(shí)代，計(jì)算機(jī)信息處理技術(shù)面臨著嚴(yán)峻的挑戰(zhàn)，通過(guò)研究，使得計(jì)算機(jī)技術(shù)能與時(shí)俱進(jìn)，適用于大數(shù)據(jù)環(huán)境，為人們處理海量數(shù)據(jù)，得到有參考價(jià)值的信息提供高質(zhì)量的服務(wù)。目前，我國(guó)正處于起步階段，計(jì)算機(jī)信息處理技術(shù)向云計(jì)算網(wǎng)絡(luò)方向發(fā)展是必然趨勢(shì)，研究人員要加大對(duì)大數(shù)據(jù)環(huán)境下計(jì)算機(jī)信息處理技術(shù)的研究力度，以使它更加完善，為人們提供更多的方便。

參考文獻(xiàn)

[1]鄭高峰.基于“大數(shù)據(jù)”環(huán)境下的計(jì)算機(jī)信息處理技術(shù)探討[J].信息通信，2015（02）：98.

[2]劉越.大數(shù)據(jù)時(shí)代下的計(jì)算機(jī)信息處理技術(shù)研究[J].計(jì)算機(jī)光盤軟件與應(yīng)用，2014（23）：108-109.

[3]李春輝.“大數(shù)據(jù)”背景下的計(jì)算機(jī)信息處理技術(shù)分析[J].電子技術(shù)與軟件工程，2014（09）：33-34.

[4]趙春雷，喬治·納漢.“大數(shù)據(jù)”時(shí)代的計(jì)算機(jī)信息處理技術(shù)[J].世界科學(xué)，2012（02）：30-31.