大數(shù)據(jù)時(shí)代下的計(jì)算機(jī)信息處理技術(shù)研究

摘 要：隨著社會(huì)的不斷發(fā)展和進(jìn)步，計(jì)算機(jī)信息技術(shù)在社會(huì)中得到廣泛的普及和應(yīng)用，并在社會(huì)應(yīng)用廣泛性不斷提升的過(guò)程中促使著海量信息的出現(xiàn)。面對(duì)龐大而復(fù)雜的信息，如何做到有效而正確的處理對(duì)數(shù)據(jù)作用的發(fā)揮非常重要，而這一功能實(shí)現(xiàn)還需加強(qiáng)計(jì)算機(jī)信息處理的能力，擴(kuò)大計(jì)算機(jī)信息處理技術(shù)的應(yīng)用。基于此，文章從大數(shù)據(jù)時(shí)代的相關(guān)概念和時(shí)代特點(diǎn)出發(fā)，對(duì)這一數(shù)據(jù)時(shí)代下計(jì)算機(jī)信息處理中所涉及的技術(shù)進(jìn)行了分析和探究。

關(guān)鍵詞：大數(shù)據(jù)時(shí)代；計(jì)算機(jī)；信息處理技術(shù)

引言

在網(wǎng)絡(luò)化技術(shù)的不斷普及中，計(jì)算機(jī)用戶群體的數(shù)量也隨之不斷的增加，這種情況的出現(xiàn)導(dǎo)致計(jì)算機(jī)在運(yùn)行的過(guò)程中不斷的產(chǎn)生大量的數(shù)據(jù)，促使大數(shù)據(jù)時(shí)代的到來(lái)。面對(duì)這一發(fā)展環(huán)境，計(jì)算機(jī)信息處理技術(shù)的發(fā)展也顯得越來(lái)越重要，并向計(jì)算機(jī)的數(shù)據(jù)處理能力提出了更高的要求，此時(shí)，要想讓計(jì)算機(jī)信息處理技術(shù)的發(fā)展更好的滿足大數(shù)據(jù)時(shí)代的信息處理要求，還需加強(qiáng)對(duì)計(jì)算機(jī)信息處理技術(shù)能力的研究，在不斷的探索和創(chuàng)新中提升技術(shù)水平，促使大數(shù)據(jù)時(shí)代的計(jì)算機(jī)信息處理技術(shù)能夠得到更高層次的發(fā)展。

1 大數(shù)據(jù)時(shí)代和計(jì)算機(jī)信息處理技術(shù)的相關(guān)概念

1.1 大數(shù)據(jù)時(shí)代的相關(guān)概念

從大數(shù)據(jù)的概念出發(fā)，所謂大數(shù)據(jù)就是指數(shù)據(jù)量非常龐大的數(shù)據(jù)，它不僅局限在數(shù)據(jù)信息量的巨大上，還表現(xiàn)在數(shù)據(jù)信息的復(fù)雜化、重復(fù)化，以及產(chǎn)生信息的多樣化中?，F(xiàn)如今，社會(huì)虛擬數(shù)據(jù)化正處于一個(gè)快速而不斷發(fā)展的階段，在這種社會(huì)環(huán)境下，大數(shù)據(jù)的產(chǎn)生是必然的，并顯示著比傳統(tǒng)計(jì)算更多的優(yōu)勢(shì)，如低廉的成本、高比率的資源利用率、較快的運(yùn)算速度等，并在這種龐大的大數(shù)據(jù)量中顯示著各種數(shù)據(jù)之間復(fù)雜的關(guān)系。社會(huì)生活和生產(chǎn)中，面對(duì)各種活動(dòng)所產(chǎn)生的數(shù)據(jù)，通過(guò)大數(shù)據(jù)能有效的做好記錄與存檔，極大的方便了人們?cè)谏詈蜕a(chǎn)中對(duì)龐大信息數(shù)據(jù)的檢索和應(yīng)用。同時(shí)，大數(shù)據(jù)還具有超前的洞察能力和決策能力，數(shù)據(jù)處理能力是傳統(tǒng)數(shù)據(jù)軟件所不能企及的，對(duì)人們的生活習(xí)慣產(chǎn)生變革性的影響。

1.2 計(jì)算機(jī)信息處理技術(shù)的相關(guān)概念

自計(jì)算機(jī)在人們的生活和工作中得以應(yīng)用之后，計(jì)算機(jī)信息處理技術(shù)就在現(xiàn)代辦公和企業(yè)管理中呈現(xiàn)著一個(gè)非常重要的角色，通過(guò)計(jì)算機(jī)信息處理技術(shù)，它將數(shù)據(jù)傳輸、信息的分析、處理和使用等各種技術(shù)結(jié)合在一起，極大的便利了數(shù)量信息的管理效率。同時(shí)，計(jì)算機(jī)信息處理技術(shù)所涉及的領(lǐng)域也比較多。在技術(shù)的應(yīng)用中，它以計(jì)算機(jī)技術(shù)為核心，將傳感、微電子、網(wǎng)絡(luò)工程、通信工程等各種先進(jìn)的科學(xué)技術(shù)都進(jìn)行了綜合應(yīng)用，促使員工在專業(yè)社會(huì)的協(xié)助下，能夠?qū)⑷恕④浖?、硬件進(jìn)行有機(jī)結(jié)合，不僅促進(jìn)著人們工作安排的合理性，還促使著人們辦公效率的提升。

2 大數(shù)據(jù)時(shí)代下的計(jì)算機(jī)信息處理技術(shù)分析

2.1 信息的采集與加工技術(shù)

大數(shù)據(jù)來(lái)源豐富多樣，需要挖掘、分析和存儲(chǔ)的數(shù)據(jù)量異常龐大，要提升計(jì)算機(jī)信息數(shù)據(jù)處理的高效性和可用性，需加大對(duì)計(jì)算機(jī)信息采集和加工技術(shù)的研究。傳統(tǒng)的數(shù)據(jù)處理方式是以處理器為中心的，這種數(shù)據(jù)處理方式已經(jīng)不適用大數(shù)據(jù)處理，需采取以數(shù)據(jù)為中心的模式，采取新的處理軟件和處理技術(shù)，來(lái)減少數(shù)據(jù)處理中因數(shù)據(jù)移動(dòng)所帶來(lái)的開(kāi)銷。

大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息采集和加工過(guò)程中，數(shù)據(jù)處理速度的提升至關(guān)重要，這一需求的實(shí)現(xiàn)可通過(guò)MapReduce技術(shù)。MapReduce是一種并行處理技術(shù)，將大量數(shù)據(jù)處理任務(wù)并行分配到多臺(tái)連接的服務(wù)器進(jìn)行處理，擴(kuò)展性強(qiáng)，尤其適合非結(jié)構(gòu)化復(fù)雜數(shù)據(jù)的混合海量處理。作為一套軟件框架，MapReduce以先分后和的數(shù)據(jù)處理方式為工作原理，分為Map映射和Reduce化簡(jiǎn)兩階段，Map將海量數(shù)據(jù)進(jìn)行分割，交由多臺(tái)服務(wù)器并行處理；Reduce將各處理結(jié)果進(jìn)行匯總，得到最終效果。在對(duì)海量數(shù)據(jù)信息進(jìn)行分隔、任務(wù)分解和結(jié)果匯總中，實(shí)現(xiàn)著海量數(shù)據(jù)信息的并行處理。

大數(shù)據(jù)時(shí)代，計(jì)算機(jī)信息采集和加工技術(shù)中新方法的應(yīng)用是多方面的，并體現(xiàn)在不同的信息處理需求中。（1）系統(tǒng)日志采集方法：很多互聯(lián)網(wǎng)企業(yè)用如Hadoop的Chukwa，Cloudera的Flume，F(xiàn)acebook的Scribe等這些分布式架構(gòu)工具對(duì)系統(tǒng)日志進(jìn)行采集，每秒采集傳輸速率達(dá)百M(fèi)B。（2）網(wǎng)絡(luò)數(shù)據(jù)采集方法：這種數(shù)據(jù)采集方法主要應(yīng)用在非結(jié)構(gòu)化數(shù)據(jù)的采集中，以網(wǎng)絡(luò)數(shù)據(jù)采集的模式而言，它主要是通過(guò)網(wǎng)絡(luò)爬蟲(chóng)和網(wǎng)站公開(kāi)API的方式，從網(wǎng)站中將數(shù)據(jù)、文字、圖片、音頻、視頻等多種文件或附件等非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換成結(jié)構(gòu)化數(shù)據(jù)并存儲(chǔ)在一個(gè)統(tǒng)一的本地?cái)?shù)據(jù)文件中。（3）其他數(shù)據(jù)采取方法：一般情況下，企業(yè)生產(chǎn)經(jīng)營(yíng)中的數(shù)據(jù)和學(xué)科研究重點(diǎn)數(shù)據(jù)，在保密性的要求上比較高，針對(duì)這類數(shù)據(jù)的處理和加工，可采取企業(yè)或研究機(jī)構(gòu)合作的方式，采取特定的系統(tǒng)接口展開(kāi)信息數(shù)據(jù)的采集和加工。

2.2 信息的存儲(chǔ)技術(shù)

計(jì)算機(jī)網(wǎng)絡(luò)信息中，不僅有很多數(shù)據(jù)文字信息，還有視頻、圖片等大量信息，數(shù)據(jù)種類在網(wǎng)絡(luò)的高度普及中呈現(xiàn)著一種日益豐富、數(shù)量急劇增加的趨勢(shì)，而這一趨勢(shì)的展現(xiàn)更是讓數(shù)據(jù)的存儲(chǔ)更加凸顯。一般情況下，針對(duì)一些大眾化的存儲(chǔ)需求，常規(guī)計(jì)算機(jī)就能滿足，但針對(duì)大數(shù)據(jù)時(shí)代的龐大數(shù)量，計(jì)算機(jī)的存儲(chǔ)能力還需更強(qiáng)。大數(shù)據(jù)存儲(chǔ)中，若采取常規(guī)數(shù)據(jù)存儲(chǔ)技術(shù)這會(huì)導(dǎo)致資源消耗問(wèn)題的發(fā)生，因此，還需從大數(shù)據(jù)的基本特點(diǎn)出發(fā)，采取最新的存儲(chǔ)手段，以保證大數(shù)據(jù)信息存儲(chǔ)中的真實(shí)性、可靠性和快捷性，而在這些需求的支配下，云技術(shù)應(yīng)運(yùn)而生。就這一技術(shù)而言，它能夠存儲(chǔ)運(yùn)行多種信息數(shù)據(jù)，并且能夠在功能齊全服務(wù)器的幫助下對(duì)數(shù)據(jù)信息進(jìn)行有效的處理，有效解決了原有信息存儲(chǔ)技術(shù)運(yùn)行低下、速度緩慢的問(wèn)題，還能將所得數(shù)據(jù)信息結(jié)構(gòu)映射到使用者中，明顯提升著數(shù)據(jù)存儲(chǔ)的效率。

2.3 信息安全技術(shù)

在大數(shù)據(jù)的到來(lái)中，人們不僅感受到了計(jì)算機(jī)信息處理技術(shù)給人們生活和工作所帶來(lái)的便捷性，還提升了人們對(duì)數(shù)據(jù)信息安全重要性的認(rèn)知，就大數(shù)據(jù)時(shí)代信息安全性和可靠性的提升而言，其可以通過(guò)以下幾個(gè)方面展開(kāi)。（1）建立計(jì)算機(jī)信息安全體系，加大資金投入，注重對(duì)專業(yè)技術(shù)人才的培養(yǎng)力度，以人才為支撐，為計(jì)算機(jī)安全體系的發(fā)展奠定堅(jiān)實(shí)的技術(shù)基礎(chǔ)。（2）加大計(jì)算機(jī)信息安全技術(shù)產(chǎn)品研究和開(kāi)發(fā)力度，面對(duì)傳統(tǒng)信息安全技術(shù)無(wú)法更好滿足大數(shù)據(jù)時(shí)代數(shù)據(jù)安全需求的情況，相關(guān)行業(yè)需要加大研究力度，尋找更好的解決方案，盡快改善信息數(shù)據(jù)運(yùn)行中所存在的安全問(wèn)題，有效避免數(shù)據(jù)信息受到威脅。（3）加強(qiáng)對(duì)重要數(shù)據(jù)的檢測(cè)程度，面對(duì)大數(shù)據(jù)時(shí)代數(shù)據(jù)量較為龐大這一突出性的特點(diǎn)，為了更好的提升數(shù)據(jù)安全系數(shù)，實(shí)現(xiàn)對(duì)每一個(gè)數(shù)據(jù)的檢測(cè)，需加強(qiáng)對(duì)重點(diǎn)數(shù)據(jù)信息的檢測(cè)力度，全面保證數(shù)據(jù)信息的安全性，促使大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息安全技術(shù)的不斷發(fā)展和進(jìn)步。

3 結(jié)束語(yǔ)

綜上所述，大數(shù)據(jù)時(shí)代的到來(lái)給計(jì)算機(jī)信息處理技術(shù)帶來(lái)機(jī)遇的同時(shí)也迎來(lái)了挑戰(zhàn)，而隨著計(jì)算機(jī)信息處理技術(shù)在社會(huì)中應(yīng)用廣泛性的提升，其技術(shù)的創(chuàng)新也被賦予了新的時(shí)代使命。在未來(lái)的發(fā)展中，面對(duì)大數(shù)據(jù)時(shí)代數(shù)據(jù)信息量的龐大和快速變化性，要想更好的滿足用戶的需求，適應(yīng)適合的發(fā)展需求，還需加強(qiáng)對(duì)計(jì)算機(jī)信息處理技術(shù)未來(lái)發(fā)展前景和需求的研究，不斷的完善不足之處，這樣才能促進(jìn)計(jì)算機(jī)信息處理技術(shù)應(yīng)用層次的更高提升。

參考文獻(xiàn)

[1]于沙.分析大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)[J].電子測(cè)試，2015，1（12）：20-21.

[2]吳恩生，王桂梅.大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)分析[J].江蘇科技信息，2015，3（12）：63-65.

作者簡(jiǎn)介：王小紅（1975-），女，漢族，陜西，本科，講師，陜西省委黨校，研究方向：計(jì)算機(jī)網(wǎng)絡(luò)信息安全。