基于大數(shù)據(jù)和云計算平臺應(yīng)用

黃錦鋒

摘要

在IT行業(yè)中，大數(shù)據(jù)技術(shù)又被稱作是巨量數(shù)據(jù)集合，包含著高增長率、多樣性、海量的信息資產(chǎn)，與云計算平臺組合應(yīng)用，可以有效的發(fā)揮數(shù)據(jù)優(yōu)勢，在當(dāng)今的信息化時代中得到廣泛深刻的應(yīng)用。文章從應(yīng)用策略與常見技術(shù)兩方面，對其展開分析，為豐富技術(shù)手段，深化應(yīng)用水平提供參考。

【關(guān)鍵詞】大數(shù)據(jù) 云計算 平臺應(yīng)用

隨著互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展，大數(shù)據(jù)與云計算平臺的應(yīng)用范圍也逐漸擴(kuò)大，在各行各業(yè)的不同領(lǐng)域中發(fā)揮著不可替代的作用。所以，相關(guān)技術(shù)研究人員在進(jìn)行研發(fā)的過程中，更要關(guān)注技術(shù)落地工作，發(fā)揮技術(shù)優(yōu)勢，挖掘應(yīng)用方法，擴(kuò)展其在數(shù)據(jù)管理、審計、物聯(lián)網(wǎng)、策略決策、信息安全上的應(yīng)用價值。

1 應(yīng)用策略分析

1.1 對數(shù)據(jù)信息的管理

近年來，隨著網(wǎng)絡(luò)技術(shù)與移動通訊設(shè)備的發(fā)展，我國已經(jīng)全面進(jìn)入信息化時代。在人們的生產(chǎn)與生活中，產(chǎn)生了大量的信息數(shù)據(jù)，為了更好的適應(yīng)時代的發(fā)展，在信息管理工作上，也要與時俱進(jìn)，適應(yīng)信息化管理，提供先進(jìn)的管理方法。

在企業(yè)信息化進(jìn)程中，單機(jī)化的管理操作有很大的弊端，如果一旦出現(xiàn)機(jī)器故障，不僅會對工作進(jìn)度造成影響，甚至?xí)霈F(xiàn)信息丟失的情況，而且會對各個職能部門之間的有效溝通與關(guān)聯(lián)造成影響，阻礙信息共享。因此，在信息大數(shù)據(jù)的應(yīng)用中，使用云計算平臺，有著十分重要的作用。通過云計算平臺，可以實現(xiàn)數(shù)據(jù)信息的儲存與共享，防止因為機(jī)械故障而出現(xiàn)的信息脫節(jié)，保證工作進(jìn)度的同時，不會對部門互動共享造成不利影響。

從個人角度出發(fā)，也可以實現(xiàn)資料的隨時隨地提取，發(fā)揮云計算平臺的便捷性特點，提高數(shù)據(jù)的應(yīng)用效率，滿足用戶需求。

1.2 對審計工作的影響

審計是相對比較傳統(tǒng)的工作，通過大數(shù)據(jù)云計算平臺的應(yīng)用，徹底實現(xiàn)了工作方法的升級。在其技術(shù)的影響作用下，實現(xiàn)了審計模式、審計結(jié)果的互進(jìn)關(guān)系，同時也帶動了行業(yè)的信息化發(fā)展，讓審計師能更好的利用大數(shù)據(jù)與云計算平臺展開工作，實現(xiàn)了技術(shù)手段上的進(jìn)化，幫助其進(jìn)行科學(xué)、有效的數(shù)據(jù)分析工作。

在以往的審計工作中，審計師通過抽樣分析的方法展開工作，在時間上也受到受審單位的進(jìn)度限制，很難實現(xiàn)審計的準(zhǔn)確性和及時性，然而在新技術(shù)手段下，可以通過大數(shù)據(jù)實時提取整體數(shù)據(jù)，并在云計算平臺的支持下，完成運算，不僅使審計內(nèi)容更加全面，還可以隨時的進(jìn)行準(zhǔn)確的分析，不再受到時間的影響，大大的提高了工作效率和質(zhì)量。

1.3 物聯(lián)網(wǎng)理念中的用

物聯(lián)網(wǎng)是一種新興的概念，以高效的互聯(lián)網(wǎng)技術(shù)為有效依托，通過線上線下有效結(jié)合，實現(xiàn)其對傳統(tǒng)行業(yè)的支持。在通過網(wǎng)絡(luò)對物體信息進(jìn)行傳到的過程中，需要進(jìn)行大量的數(shù)據(jù)處理工作，也正是這一點，催生了大數(shù)據(jù)技術(shù)的快速發(fā)展。

同時，在大數(shù)據(jù)技術(shù)不斷發(fā)展中，也為物聯(lián)網(wǎng)提供了發(fā)展的必要前提，使得物品的信息與傳遞在覆蓋面上更加廣泛，促進(jìn)經(jīng)濟(jì)的高速前進(jìn)，實現(xiàn)互聯(lián)網(wǎng)與實體經(jīng)濟(jì)的互進(jìn)式發(fā)展。通過云計算平臺強(qiáng)大的數(shù)據(jù)處理能力，在豐富的數(shù)據(jù)庫支持下，也進(jìn)一步提升了物聯(lián)網(wǎng)合理性。

1.4 數(shù)據(jù)分析與決策上的支持

復(fù)雜性和多樣性是大數(shù)據(jù)技術(shù)的重要特點，如何利用龐大復(fù)雜的數(shù)據(jù)內(nèi)容為企業(yè)決策提供必要的參考成為了難點工作。通過云計算平臺，可以輕松的實現(xiàn)數(shù)據(jù)的運算，與大數(shù)據(jù)技術(shù)形成良好的互補(bǔ)性。

在云計算平臺中，有著強(qiáng)大的運算能力和存儲空間，是企業(yè)在進(jìn)行大數(shù)據(jù)處理過程中的有效保障，可以輕松的實現(xiàn)高效、便捷化處理，使決策過程變得更加的科學(xué)、高效、靈活。

1.5 信息安全的保障

即使信息化水平發(fā)展到極致，也應(yīng)當(dāng)存有屬于隱私范圍的空間，這一點對企業(yè)來說更為重要。數(shù)據(jù)信息的安全性直接影響著企業(yè)的自身利益，保證安全的基本前提，在大數(shù)據(jù)背景下，這一點顯得尤為重要。

云計算平臺在實現(xiàn)信息高速運算共享的同時，還可以通過存儲加密、傳輸加密的方法兼顧用戶信息的私密性，使企業(yè)的信息資料得到很好的保護(hù)，為信息的安全性提供必要保障，維護(hù)企業(yè)的正常經(jīng)濟(jì)利益。

2 常見應(yīng)用技術(shù)

2.1 Hadoop技術(shù)

作為開源軟件的框架技術(shù)，Hadoop可以將海聯(lián)的數(shù)據(jù)進(jìn)行分布式處理，并支持PB級別的數(shù)據(jù)信息，同時擁有者極強(qiáng)的擴(kuò)展能力，具有穩(wěn)定性、擴(kuò)展性、開源性、高效性的特點，使其在多種平臺的應(yīng)用中，得到了快速的發(fā)展。

以百度公司為例，搜索引擎是百度公司主打的服務(wù)項目，可以通過語義信息準(zhǔn)確定位用戶搜索的內(nèi)容，并提供相應(yīng)的結(jié)果。其搜索平臺就是基于Hadoop技術(shù)建立起來的，每天要面對十分龐大的用戶搜索量。在發(fā)掘商業(yè)數(shù)據(jù)、爬取網(wǎng)頁、儲存搜索日志、關(guān)聯(lián)推薦、廣告展示等方面都有著很好的應(yīng)用表現(xiàn)。

2.2 Spark技術(shù)

以內(nèi)存計算為依托，展開分布式計算是Spark技術(shù)系統(tǒng)的主要特點，這一技術(shù)可以對大數(shù)據(jù)信息進(jìn)行快速的運算分析處理。同時，由于其內(nèi)存式計算的特點，在運算的速率上比其他技術(shù)手段都要快捷，被廣泛的運用到實時的數(shù)據(jù)計算處理過程中，而與Hadoop技術(shù)擁有很好的兼容性特點，也使得Spark技術(shù)有很高的利用價值。

例如，在優(yōu)酷視頻網(wǎng)站的應(yīng)用中，Spark技術(shù)就有的突出的表現(xiàn)。在優(yōu)酷的核心技術(shù)中，原本使用的是Hadoop技術(shù)作為系統(tǒng)支持，但在具體的應(yīng)用過程中，發(fā)現(xiàn)了具體的問題，任務(wù)提交后分析時間過長、大數(shù)據(jù)計算效率不高、迭代資源的運算成本過高等[2]。通過添加Spark技術(shù)，有效的改善并解決了上面問題的影響，提高了整體的響應(yīng)效率。同時，在進(jìn)行模擬廣告的投放計算上，大大的增加了性能，減少了相應(yīng)能資源消耗、提高了速率、縮減了延遲，使其商務(wù)應(yīng)用上收獲了更好的效果，也使技術(shù)手段或的更廣泛深入的應(yīng)用。

3 總結(jié)

大數(shù)據(jù)與云計算平臺在具體的應(yīng)用過程中，是相輔相成的關(guān)系，通過兩者的有機(jī)結(jié)合，可以更好的發(fā)揮相互的優(yōu)勢，達(dá)到良性的互補(bǔ)，更好的為使用者提供技術(shù)支持。通過在不同應(yīng)用方向以及Hadoop、Spark技術(shù)中的應(yīng)用分析，不僅有利于技術(shù)本身使用價值的提升，同時也是拉動信息化水平發(fā)展的重要方法。

參考文獻(xiàn)

[1]張力平.人工智能、大數(shù)據(jù)和云計算的融合發(fā)展[J].電信快報，2017（09）：27.

[2]黃承寧.大數(shù)據(jù)和云計算架構(gòu)應(yīng)用技術(shù)研究[J].福建電腦，2017，33（02）：16-17.