米杰
摘 要:隨著網(wǎng)絡(luò)技術(shù)和信息技術(shù)的快速發(fā)展,計算機(jī)存儲的數(shù)據(jù)類型逐漸增多,且數(shù)據(jù)量有明顯增加的趨勢。傳統(tǒng)的數(shù)據(jù)存儲模式和信息處理技術(shù)在應(yīng)用上出現(xiàn)了一些短板,需要及時進(jìn)行優(yōu)化,這便是大數(shù)據(jù)技術(shù)進(jìn)入人們視野的宏觀背景??梢钥隙ǖ氖?,大數(shù)據(jù)技術(shù)是未來發(fā)展的主要方向,這種技術(shù)能夠較好地彌補人工搜集和分析數(shù)據(jù)的短板,在大力應(yīng)用該技術(shù)的基礎(chǔ)上,還需要研發(fā)出一種存儲量更大的計算機(jī)技術(shù),能夠在大數(shù)據(jù)分析工作中起到積極的輔助作用,這便是云計算技術(shù)。本研究主要闡述了云計算技術(shù)如何在計算機(jī)大數(shù)據(jù)分析中實現(xiàn)有效的運用。
關(guān)鍵詞:云計算技術(shù);計算機(jī);大數(shù)據(jù)分析;運用
中圖分類號:TP311.13 ? 文獻(xiàn)標(biāo)志碼:A ? 文章編號:1003-5168(2022)6-0016-04
DOI:10.19968/j.cnki.hnkj.1003-5168.2022.06.003
Application of Cloud Computing Technology in Computer Big Data Analysis
MI Jie
(School of Big Data Application, Xi'an vocational and technical college, Xi'an 710000, China)
Abstract:With the rapid development of network technology and information technology,the types of data stored by computer are gradually increasing,and the amount of data has been significantly improved.There are some shortcomings in the application of traditional data storage mode and information processing technology,which need to be reformed and optimized in time.This is the macro background for big data technology to enter people's vision.To be sure,big data technology is the main direction of development in the future.This technology makes up for the shortcomings of manpower in data collection and analysis.On the basis of vigorously applying this technology,we also need to develop a computer technology with greater storage capacity,which can play a positive auxiliary role in big data analysis.This is cloud computing technology.This paper mainly expounds the effective application of cloud computing technology in computer big data analysis.
Keywords:cloud computing technology;computer;big data analysis; using
1 云計算技術(shù)概述
當(dāng)今世界是一個高速發(fā)展的世界,同時也是一個競爭激烈的世界。世界各國都認(rèn)識到互聯(lián)網(wǎng)技術(shù)的重要性,都在積極爭奪現(xiàn)代信息技術(shù)應(yīng)用和發(fā)展的制高點。在各國發(fā)展過程中,要想真正實現(xiàn)計算機(jī)數(shù)據(jù)分析技術(shù)的大發(fā)展,云計算技術(shù)是一個關(guān)鍵因素。云計算技術(shù)建立在互聯(lián)網(wǎng)和計算機(jī)基礎(chǔ)上,由IT的創(chuàng)新發(fā)展模式,通過網(wǎng)絡(luò)與系統(tǒng)連接,在做好相關(guān)的數(shù)據(jù)采集工作后,進(jìn)行應(yīng)用程序的設(shè)計,從而能夠為社會各行各業(yè)和不同企業(yè)及用戶提供精準(zhǔn)的數(shù)據(jù)分析和服務(wù)。
早在2006年云計算技術(shù)就已經(jīng)成功研發(fā),在經(jīng)過十幾年的快速發(fā)展后,云計算技術(shù)已經(jīng)越來越成熟和完善,并對各行各業(yè)的發(fā)展中起到了推動作用。當(dāng)前,云計算技術(shù)的體系架構(gòu)有五個層面:①物理層,典型的產(chǎn)品有IBM-Morgan Stanley's Computing sublease等;②核心層,典型的產(chǎn)品有Condor、Globus等;③資源架構(gòu)層,基礎(chǔ)設(shè)施層(IaaS)典型的軟件服務(wù)層產(chǎn)品為AmazonEC2,軟件服務(wù)層(SaaS)典型的產(chǎn)品為EMC Storage Managed service等;④開發(fā)平臺層,典型的產(chǎn)品有Google AppEngine等;⑤應(yīng)用層,典型的產(chǎn)品有Sales force CRM System等。通過這五個層面,在網(wǎng)絡(luò)服務(wù)器端提供有效鏈接口,實現(xiàn)對用戶的高效、安全響應(yīng)。
隨著云計算技術(shù)的快速發(fā)展,云計算技術(shù)在計算機(jī)數(shù)據(jù)分析中的應(yīng)用范圍也越來越廣泛,并且競爭力也逐漸增強。在我國計算機(jī)數(shù)據(jù)分析和云計算領(lǐng)域中,最具代表性的高科技企業(yè)有阿里云、騰訊云、百度云、華為云等(見表1),其中阿里云的飛天云系統(tǒng)代表著我國云計算系統(tǒng)發(fā)展的最高水平,且在我國的社會主義經(jīng)濟(jì)建設(shè)中發(fā)揮著重要作用,其精準(zhǔn)的數(shù)據(jù)資源應(yīng)成為我國經(jīng)濟(jì)發(fā)展的重要支撐。隨著社會的快速發(fā)展,云計算技術(shù)在大數(shù)據(jù)分析中的應(yīng)用優(yōu)勢逐漸展現(xiàn)出來[1]。國內(nèi)外很多大型科技公司非常注重云計算技術(shù)和計算機(jī)數(shù)據(jù)分析之間的有效融合,在發(fā)展過程中其逐漸占據(jù)了較大的發(fā)展優(yōu)勢。
2 云計算關(guān)鍵技術(shù)分析
2.1 云計算虛擬化技術(shù)
在云計算系統(tǒng)中,虛擬化技術(shù)是最關(guān)鍵、最核心的技術(shù)之一。所謂的虛擬化技術(shù),是指將現(xiàn)實中的計算機(jī)組件與系統(tǒng)等,采用適當(dāng)?shù)姆绞?、方法?yīng)用到虛擬環(huán)境當(dāng)中,從而實現(xiàn)與硬件資源、軟件程序等共同組成虛擬層。
按照虛擬對象進(jìn)行劃分,虛擬化技術(shù)可以劃分為CPU虛擬化、I/O設(shè)施虛擬化、內(nèi)存虛擬化以及網(wǎng)絡(luò)虛擬化;按照虛擬程度虛擬化技術(shù)可劃分為全虛擬化技術(shù)(Full Virtualization)、半虛擬化技術(shù)(Para Virtualization)以及硬件輔助虛擬化技術(shù)(Hardware Assisted Virtualization)。云計算虛擬化技術(shù)在使用過程中可以很好地實現(xiàn)相關(guān)功能的整合,保證各種資源得以靈活運用。
2.2 鏈路加密技術(shù)
鏈路加密技術(shù)與節(jié)點加密技術(shù)相比有很大的相似性,二者都是在傳輸過程中進(jìn)行的,其主要目的都是保證傳輸?shù)陌踩?,避免在同一網(wǎng)絡(luò)內(nèi)兩點傳輸數(shù)據(jù)時出現(xiàn)信息泄露的情況。在采用鏈路加密的網(wǎng)絡(luò)中,每條通信鏈路上的加密都是獨立完成的,具體技術(shù)線路如圖1所示。
在實際應(yīng)用中,傳輸區(qū)域與傳輸過程分屬不同的路徑進(jìn)行,因此加密的方式也會存在很大的差異,其目的是最大限度地保證傳輸?shù)陌踩?,即便是受到了各種病毒的侵害,其也處于加密狀態(tài)中,大大降低了病毒對計算機(jī)的侵害,極大地增強了計算機(jī)的安全性,使得計算機(jī)中的各種資源得到很好的保護(hù)[2]。
鏈路加密可以有效保護(hù)數(shù)據(jù)資源,增強內(nèi)部數(shù)據(jù)的安全性,即便是計算機(jī)處于不工作的狀態(tài),鏈路加密技術(shù)也會對數(shù)據(jù)起到保護(hù)作用。另外,鏈路加密技術(shù)具有一定的靈活性和高端性,不僅可以有效地阻斷病毒對計算機(jī)的侵害,同時也能夠快速阻擋黑客的侵襲。在鏈路上傳輸?shù)臄?shù)據(jù)都是以密文形式出現(xiàn)的,而在服務(wù)端則是以明文的形式出現(xiàn)。因此,不管是起源端還是終端,鏈路加密技術(shù)都發(fā)揮著強大的保護(hù)作用。
2.3 安全掃描與模擬攻擊技術(shù)
在網(wǎng)絡(luò)技術(shù)應(yīng)用過程中,網(wǎng)絡(luò)安全問題極為重要。在實踐應(yīng)用中,安全掃描和模擬攻擊技術(shù)可以有效增強網(wǎng)絡(luò)安全。安全掃描主要針對的是存在安全隱患的端口或薄弱環(huán)節(jié),旨在通過掃描發(fā)現(xiàn)問題,避免風(fēng)險產(chǎn)生。端口掃描主要針對的是主機(jī)開機(jī)過程中的問題,或因計算機(jī)本身系統(tǒng)版本低且在升級中產(chǎn)生的漏洞,通過科學(xué)掃描發(fā)現(xiàn)隱患、消除隱患,及時采取應(yīng)對措施。所謂的模擬攻擊,是指為增強對抗外部侵襲能力而實施的有益攻擊行為,具體來說,就是技術(shù)人員扮演攻擊者,對系統(tǒng)進(jìn)行多樣性攻擊。模擬攻擊的重點在“模擬”,并非是要通過攻擊行為造成實質(zhì)影響,要盡可能避免產(chǎn)生不必要的損失和影響。對于參與這項工作的技術(shù)人員,其需要運用最先進(jìn)的攻擊工具和攻擊手段來進(jìn)行模擬攻擊。只有在真實的狀態(tài)下才能取得良好的試驗效果,找到網(wǎng)絡(luò)安全方面存在的問題和不足,從而積極進(jìn)行改善和優(yōu)化,真正做到知己知彼。在實踐中要注意的是,模擬攻擊的實施不能貿(mào)然開展,一定要獲得相關(guān)領(lǐng)導(dǎo)的審批,并做好完善的應(yīng)急預(yù)案,一旦發(fā)生突發(fā)事件,要能夠做到及時解決和應(yīng)對。
2.4 云計算技術(shù)的優(yōu)勢
對于計算機(jī)網(wǎng)絡(luò)云計算來說,最關(guān)鍵的就是服務(wù)器架構(gòu)的構(gòu)建。從當(dāng)前的實踐來看,云計算服務(wù)器的架構(gòu)尚未有統(tǒng)一的標(biāo)準(zhǔn)要求和制度。因此,需要提供更大的技術(shù)支撐,如網(wǎng)絡(luò)附屬存儲(NAS)、存儲局域網(wǎng)(SAN)等技術(shù)。NAS架構(gòu)具有顯著的分布式特征,文件計算系統(tǒng)采用的是比較松散的結(jié)構(gòu)型集群。NAS系統(tǒng)采集群所包含的節(jié)點都不是相互孤立的,而是相互影響、相互作用的,其最小的計量單位是文件,采集群的存儲文件可在數(shù)據(jù)信息計算過程中發(fā)揮積極作用,有降低計算機(jī)冗余性的功效,凸顯出系統(tǒng)的拓展性,且耗費的費用也比較有限,可以發(fā)揮較強的平穩(wěn)性,進(jìn)而在安全控制系統(tǒng)中發(fā)揮著不可小覷的力量。若客戶端發(fā)出的請求量過多,NAS系統(tǒng)便會自動進(jìn)行限制和阻隔,加之云服務(wù)功能的開啟,即可開展二級計算程序。
3 云計算技術(shù)在計算機(jī)大數(shù)據(jù)分析中的運用
3.1 搭建數(shù)據(jù)處理系統(tǒng)模型
云計算技術(shù)在計算機(jī)數(shù)據(jù)信息處理過程中發(fā)揮的優(yōu)勢較為明顯。通過云計算技術(shù)將各種數(shù)據(jù)信息和應(yīng)用都轉(zhuǎn)移到云端,這樣不僅大大降低了對硬件設(shè)施的需求,同時也可以減少企業(yè)的資金投入,有利于提高企業(yè)資金的使用效率。從社會角度來看,云計算技術(shù)能夠更好地整合社會資源,實現(xiàn)對社會資源的合理配置,從而進(jìn)一步提升社會資源的利用率,減少在計算機(jī)硬件方面的投入,同時也能最大化發(fā)揮云計算技術(shù)的優(yōu)勢,提高計算機(jī)大數(shù)據(jù)分析的工作效率和質(zhì)量。在大數(shù)據(jù)分析過程中,最重要的就是搭建數(shù)據(jù)處理系統(tǒng)模型。通過云計算技術(shù),一方面可以幫助企業(yè)有效降低運營成本,精簡企業(yè)的組織架構(gòu),實現(xiàn)企業(yè)運營中心的高效運轉(zhuǎn),另一方面有利于搭建出更具技術(shù)優(yōu)勢的數(shù)據(jù)處理系統(tǒng)模型,從而在云端收集更豐富的數(shù)據(jù)信息,不斷提高數(shù)據(jù)信息處理的效率和質(zhì)量。
從實踐來看,云計算技術(shù)在大數(shù)據(jù)分析數(shù)據(jù)處理系統(tǒng)模型中最具代表性的應(yīng)用是政務(wù)大數(shù)據(jù)系統(tǒng)。目前,我國政務(wù)大數(shù)據(jù)分析系統(tǒng)是建立在阿里云平臺基礎(chǔ)上的,充分利用和發(fā)揮阿里云飛天云系統(tǒng)的技術(shù)優(yōu)勢,從而實現(xiàn)對政務(wù)工作中的各種數(shù)據(jù)進(jìn)行高效處理,搭建起科學(xué)的數(shù)據(jù)處理系統(tǒng)模型,為政府部門的工作決策和管理提供了極大便利。時至今日,我國很多高等院校都積極參與到智慧校園系統(tǒng)建設(shè)中,國內(nèi)也有很多城市積極投入到智慧城市系統(tǒng)的建設(shè)中。
3.2 搭建計算機(jī)互聯(lián)網(wǎng)分析平臺
目前,互聯(lián)網(wǎng)平臺和云計算技術(shù)的有效融合是我國現(xiàn)代信息技術(shù)的發(fā)展方向。這種融合突出的表現(xiàn)是對每個客戶端在網(wǎng)頁上進(jìn)行的操作加以保護(hù),實現(xiàn)更具科學(xué)性的應(yīng)用,讓計算機(jī)用戶可以獲得安全的數(shù)據(jù)信息[3]。當(dāng)今社會,網(wǎng)絡(luò)是人們獲取信息的重要途徑,也是數(shù)據(jù)信息進(jìn)行傳輸、存儲和應(yīng)用的重要平臺。而云計算就是實現(xiàn)對互聯(lián)網(wǎng)的各種數(shù)據(jù)進(jìn)行采集、傳輸和反饋等操作的重要技術(shù)。積極構(gòu)建互聯(lián)網(wǎng)分析平臺,能夠最大化滿足用戶對信息資源的需求,并且能夠?qū)崿F(xiàn)對數(shù)據(jù)信息的有效處理,圖2為云計算技術(shù)的體系結(jié)構(gòu)。將云計算技術(shù)運用到大數(shù)據(jù)分析中,有利于發(fā)揮其價值,能夠有效地滿足用戶的需求,為其工作和生活提供更便捷的服務(wù),同時也有利于國家建設(shè)的高速推進(jìn)。
3.3 搭建符合時代發(fā)展的存儲應(yīng)用平臺
隨著網(wǎng)絡(luò)技術(shù)和信息技術(shù)的快速發(fā)展,人們的閱讀習(xí)慣也在悄然間發(fā)生了巨大變化,傳統(tǒng)的書籍已不能完全滿足現(xiàn)代人通過各種移動端進(jìn)行碎片化閱讀的要求。在這種背景下,建立起儲存量較大的數(shù)據(jù)存儲平臺是非常有必要的。借助云計算的技術(shù)優(yōu)勢,可以實現(xiàn)對各種圖片進(jìn)行分類、對各種視頻進(jìn)行整合、對各種語音信息進(jìn)行識別,使得傳統(tǒng)的書籍存儲模式得到徹底改變。運用云計算技術(shù)和計算機(jī)大數(shù)據(jù)分析技術(shù)建立起信息存儲平臺,可以大量地存儲圖片、視頻等數(shù)據(jù)信息,便于用戶對數(shù)據(jù)資料進(jìn)行檢索和查閱。
4 結(jié)語
隨著社會的發(fā)展和科學(xué)技術(shù)的進(jìn)步,云計算技術(shù)的應(yīng)用逐漸普及開來,特別是將云計算技術(shù)和計算機(jī)大數(shù)據(jù)分析技術(shù)整合在一起,在很多行業(yè)的發(fā)展中都能發(fā)揮重要作用,不斷推動國家建設(shè)。
參考文獻(xiàn):
[1] 陳卓昆.云計算技術(shù)在計算機(jī)大數(shù)據(jù)分析中的運用分析[J].中國新通信,2021(14):103-104.
[2] 高勝利.淺談云計算技術(shù)在計算機(jī)大數(shù)據(jù)分析中的應(yīng)用[J].網(wǎng)絡(luò)安全技術(shù)與應(yīng)用,2021(7):82-83.
[3] 張瑞.云計算技術(shù)在計算機(jī)大數(shù)據(jù)分析中的運用對策[J].信息與電腦(理論版),2021(9):40-42.