基于大數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維及監(jiān)控技術(shù)研究

黃靚

摘 要：隨著當(dāng)今社會(huì)的不斷發(fā)展，科學(xué)技術(shù)也不斷的進(jìn)步，我們處于一個(gè)大數(shù)據(jù)的時(shí)代，充分發(fā)揮了大數(shù)據(jù)的優(yōu)勢(shì)和作用，并且被廣泛地應(yīng)用到人們的工作生活中，網(wǎng)絡(luò)的普及以及計(jì)算機(jī)軟件技術(shù)的應(yīng)用更為大數(shù)據(jù)平臺(tái)的運(yùn)行提供了動(dòng)力支撐，大數(shù)據(jù)時(shí)代的快速發(fā)展使人們的生活以及工作變得更加便利快捷，不僅表現(xiàn)在人與人之間的信息往來方面，微信掃碼支付以及淘寶購物平臺(tái)等技術(shù)軟件無一不體現(xiàn)著數(shù)據(jù)時(shí)代的軟件技術(shù)的便捷性。數(shù)據(jù)軟件技術(shù)的應(yīng)用不僅提高了人們生活的便捷度以及質(zhì)量還為軟件開發(fā)商帶來了強(qiáng)大的經(jīng)濟(jì)效益。而如今，在當(dāng)今網(wǎng)絡(luò)技術(shù)迅速普及以及計(jì)算機(jī)技術(shù)快速升級(jí)的背景下，大量的數(shù)據(jù)都可以使用計(jì)算機(jī)作為依托從而得到處理以及分析，但是數(shù)據(jù)也分有用和無用，數(shù)據(jù)為人們提供便利的同時(shí)部分無用的數(shù)據(jù)也會(huì)人們帶來不便。文章根據(jù)現(xiàn)階段大數(shù)據(jù)平臺(tái)的發(fā)展現(xiàn)狀，提出大數(shù)據(jù)平臺(tái)的自動(dòng)運(yùn)維及監(jiān)控技術(shù)中存在的問題，并針對(duì)性地提出合理化的解決措施。

關(guān)鍵詞：大數(shù)據(jù)平臺(tái)；自動(dòng)化運(yùn)維；監(jiān)控；問題；解決措施

0 引言

近些年來，在互聯(lián)網(wǎng)的快速發(fā)展計(jì)算機(jī)技術(shù)的迅速普及的大背景下，大數(shù)據(jù)技術(shù)的發(fā)展勢(shì)頭十分迅猛。大數(shù)據(jù)技術(shù)在發(fā)展的同時(shí)也相應(yīng)的伴隨著發(fā)展問題的出現(xiàn)，其同樣面臨著十分重大的挑戰(zhàn)。其中最大的挑戰(zhàn)當(dāng)屬臨床醫(yī)學(xué)上的數(shù)據(jù)問題，其中的主要問題可以表現(xiàn)為數(shù)據(jù)信息的采集以及信息的存儲(chǔ)兩個(gè)方面，其中信息數(shù)據(jù)的采集問題主要表現(xiàn)為不知如何處理數(shù)據(jù)以及怎樣提取有效的信息，而信息存儲(chǔ)方面的問題則是不知道將采集到的信息如何進(jìn)行數(shù)據(jù)儲(chǔ)存，其次，存儲(chǔ)上的問題還包含了儲(chǔ)存的形式以及方式等方面。因此，建設(shè)數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維及監(jiān)控技術(shù)就變得尤為重要。

1 自動(dòng)化運(yùn)維所具備的優(yōu)勢(shì)

自動(dòng)化簡(jiǎn)化IT運(yùn)維具有降低成本、提高生產(chǎn)力、高可用、可靠性高以及性能優(yōu)化五大優(yōu)勢(shì)。自動(dòng)化運(yùn)維可以降低IT運(yùn)維的風(fēng)險(xiǎn)及壓力負(fù)擔(dān)，在一定程度上還可以提高IT運(yùn)維的工作質(zhì)量以及工作水平。

1.1 降低投入成本

降低成本的優(yōu)勢(shì)主要表現(xiàn)為其自動(dòng)化運(yùn)維可以提高企業(yè)運(yùn)行的效率，減少工作人員認(rèn)為錯(cuò)誤等問題的發(fā)生，與此同時(shí)可以降低人力的需求量進(jìn)而降低企業(yè)在人力需求等方面的投入成本進(jìn)而降低企業(yè)的IT投入成本。

1.2 提高企業(yè)的生產(chǎn)力及生產(chǎn)水平

生產(chǎn)力提高是指自動(dòng)化的運(yùn)維技術(shù)不需要人工手動(dòng)地進(jìn)行工作產(chǎn)出，原本復(fù)雜的傳統(tǒng)因?yàn)楣ぷ餍枰獙ｉT的運(yùn)維負(fù)責(zé)人員來進(jìn)行操作，而自動(dòng)化運(yùn)維技術(shù)可以改變?cè)械倪\(yùn)維方式將運(yùn)維工作人員從復(fù)雜繁瑣的工作程序中釋放出來，那么原本負(fù)責(zé)運(yùn)維的工作人員就可以將其所具備的知識(shí)以及運(yùn)維技能施展于更具價(jià)值需求工作崗位中去。這樣一來，不僅降低了運(yùn)維工作所需要的工作時(shí)間，還可以為其他的工作崗位提供充足的動(dòng)力。系統(tǒng)運(yùn)行過程中出現(xiàn)故障會(huì)為企業(yè)的名譽(yù)以及財(cái)產(chǎn)等方面造成巨大的損失。而通過利用自動(dòng)化運(yùn)維技術(shù)可以實(shí)現(xiàn)自動(dòng)化保存數(shù)據(jù)，在數(shù)據(jù)損失時(shí)，還具備自動(dòng)化的恢復(fù)機(jī)制幫助企業(yè)進(jìn)行數(shù)據(jù)修復(fù)[1]。

1.3 高可用

自動(dòng)化運(yùn)維技術(shù)具有高可用的優(yōu)勢(shì)，自動(dòng)化運(yùn)維技術(shù)所具備的全天候系統(tǒng)監(jiān)控和遠(yuǎn)程通信技術(shù)可以在極大程度上降低網(wǎng)絡(luò)系統(tǒng)停機(jī)的概率以及縮短其停機(jī)的時(shí)間。即使系統(tǒng)出現(xiàn)故障，企業(yè)可以通過恢復(fù)機(jī)制將系統(tǒng)進(jìn)行快速的恢復(fù)，降低故障可能帶來的損失。

1.4 可靠性高

因?yàn)楣ぷ髦谐３?huì)出現(xiàn)重復(fù)性的工作，重復(fù)性的工作在運(yùn)維人員工作過程中出現(xiàn)，運(yùn)維人員由于完成過該工作可能在重復(fù)操作的過程中就會(huì)出現(xiàn)警惕性放低的問題，如此一來就會(huì)在極大程度上提高運(yùn)維工作出錯(cuò)的概率。而自動(dòng)化運(yùn)維技術(shù)的應(yīng)用不存在這些人為錯(cuò)誤的發(fā)生，剔除掉錯(cuò)誤發(fā)生的人為因素便會(huì)極大程度地降低重復(fù)性工作錯(cuò)誤發(fā)生的概率，進(jìn)而提高運(yùn)維工作的可靠性，與此同時(shí)還可以減輕運(yùn)維工作人員的工作負(fù)擔(dān)。

1.5 性能優(yōu)化

傳統(tǒng)運(yùn)維工作中的運(yùn)維方式主要依靠人工等方式進(jìn)行運(yùn)維操作，工作流程復(fù)雜繁瑣，執(zhí)行任務(wù)的效率低下。而自動(dòng)化的運(yùn)維技術(shù)在發(fā)揮自身優(yōu)勢(shì)的同時(shí)還可以彌補(bǔ)傳統(tǒng)運(yùn)維效率低下等問題，在降低運(yùn)維人員需求量的同時(shí)提高運(yùn)維工作的工作效率以及質(zhì)量等工作性能。

2 自動(dòng)化運(yùn)維監(jiān)控技術(shù)所具備的優(yōu)勢(shì)

傳統(tǒng)系統(tǒng)構(gòu)建中的運(yùn)行監(jiān)控系統(tǒng)可劃分為系統(tǒng)監(jiān)控、應(yīng)用監(jiān)控以及數(shù)據(jù)監(jiān)控等等監(jiān)控系統(tǒng)，其中的中間件監(jiān)控、應(yīng)用監(jiān)控、數(shù)據(jù)庫監(jiān)控以及網(wǎng)絡(luò)監(jiān)控等監(jiān)控方面的工作中要負(fù)責(zé)監(jiān)控的對(duì)象以及程序復(fù)雜繁瑣，只有做好多方面的監(jiān)控工作才能保證系統(tǒng)運(yùn)行的穩(wěn)定性以及可靠性。而自動(dòng)化運(yùn)維監(jiān)控系統(tǒng)則將以上索要監(jiān)控的對(duì)象全都改變，其核心仍然是以保證網(wǎng)絡(luò)的高可用、高性能等方面為主，但自動(dòng)化運(yùn)維監(jiān)控技術(shù)則將原本復(fù)雜多樣的監(jiān)控程序進(jìn)行了精簡(jiǎn)，提高監(jiān)控效率的同時(shí)提高監(jiān)控質(zhì)量[2]。

3 大數(shù)據(jù)平臺(tái)在傳統(tǒng)IT運(yùn)維所面對(duì)的問題

3.1 IT運(yùn)維機(jī)制不完善，流程操作層面缺乏統(tǒng)一

傳統(tǒng)的IT運(yùn)維工作中缺乏完備的規(guī)范的IT運(yùn)維機(jī)制，并且其IT操作的運(yùn)維流程缺乏統(tǒng)一的規(guī)范，例如，在事件單提交的工作環(huán)節(jié)中，IT運(yùn)維工作會(huì)忽略事件預(yù)判以及優(yōu)先級(jí)設(shè)定方面的統(tǒng)一規(guī)范，利用運(yùn)維人員的工作經(jīng)驗(yàn)以及主觀判斷來進(jìn)行事件的處理，此等運(yùn)維方式缺少整體統(tǒng)一的規(guī)范，雖然可以處理事件，但所處理的事件缺乏統(tǒng)一的參考依據(jù)，這樣會(huì)很容易因個(gè)體經(jīng)驗(yàn)水平差異等人為因素造成整體IT運(yùn)維工作的低質(zhì)量，進(jìn)而影響IT運(yùn)維的整體效果。

3.2 IT運(yùn)維缺乏有效的完善的CMBD（配置項(xiàng)數(shù)據(jù)管理庫）

現(xiàn)階段的IT運(yùn)維并不具備完善及有效的配置項(xiàng)數(shù)據(jù)管理庫，其雖然配置收集了部分配置的數(shù)據(jù)信息，但僅僅是針對(duì)比較核心比較關(guān)鍵的IT設(shè)備設(shè)施而言。不夠完善的配置項(xiàng)數(shù)據(jù)管理庫很難為信息的全面化發(fā)展提供強(qiáng)大的數(shù)據(jù)信息支撐。

3.3 過度依賴核心工作人員，工作負(fù)擔(dān)重、效率低

傳統(tǒng)的IT運(yùn)維工作中，部分IT運(yùn)維的工作者所具備的IT運(yùn)維知識(shí)以及技能僅僅留存于頭腦之中，沒有做過系統(tǒng)化、規(guī)范化的整理以及記錄。知識(shí)也好，經(jīng)驗(yàn)也罷僅僅留存在一個(gè)十分狹窄的范圍之內(nèi)，在較大的范圍中就無法得到大的發(fā)揮。那么這些IT運(yùn)維工作者的工作就會(huì)僅僅限定在一些技術(shù)性、知識(shí)性較為簡(jiǎn)單的工作層面，疑難問題，例如，時(shí)間性質(zhì)的判定以及優(yōu)先級(jí)等難度較為大的問題就會(huì)全部推給技術(shù)水平高的核心人員來負(fù)責(zé)，這樣一來加重了核心人員的工作負(fù)擔(dān)，工作量的增加會(huì)加大程度上提高錯(cuò)誤發(fā)生的概率，與此同時(shí)還會(huì)影響到IT運(yùn)維團(tuán)隊(duì)整體的工作效率以及質(zhì)量。

3.4 錯(cuò)綜復(fù)雜的IT元素難以有效的監(jiān)控

IT運(yùn)維設(shè)施組成復(fù)雜多樣并且種類繁多，從基礎(chǔ)的機(jī)房動(dòng)力環(huán)境到最終的實(shí)際應(yīng)用、從其配置的硬件到軟件、從后臺(tái)到前臺(tái)的支撐服務(wù)等IT運(yùn)維元素錯(cuò)綜復(fù)雜，運(yùn)維工作的流程也十分的復(fù)雜，這就導(dǎo)致其錯(cuò)綜復(fù)雜的IT元素很難實(shí)現(xiàn)高效率以及高質(zhì)量的監(jiān)控。就微觀層面而言，IT運(yùn)維設(shè)施的品牌及種類繁多，以信息的存儲(chǔ)為例，其品牌就包含了IBM、EMC以及華為等多個(gè)設(shè)施品牌。而運(yùn)維系統(tǒng)的監(jiān)控工作包含了硬盤的狀態(tài)、性能等多個(gè)方面的監(jiān)控對(duì)象，再加之 IT運(yùn)維設(shè)施品牌的繁多，每個(gè)品牌的硬盤結(jié)構(gòu)又大又不同，這就加劇了監(jiān)控工作的困難度。綜上可見，傳統(tǒng)的IT運(yùn)維中存在著多重弊端。推進(jìn)自動(dòng)化運(yùn)維及監(jiān)控技術(shù)是十分必要的存在[3]。

4 大數(shù)據(jù)平臺(tái)所涉及的關(guān)鍵技術(shù)

4.1 大數(shù)據(jù)平臺(tái)的體系構(gòu)建

對(duì)大數(shù)據(jù)平臺(tái)的研究繼承性問題進(jìn)行集中性的探討分析過后，在其應(yīng)用領(lǐng)域中，大數(shù)據(jù)平臺(tái)具有數(shù)據(jù)關(guān)聯(lián)緊密、集成規(guī)模大等特點(diǎn)，并且大數(shù)據(jù)的應(yīng)用匯方向更加傾向于企業(yè)的商業(yè)決策以及股市的行情分析等數(shù)據(jù)集成量較大的行業(yè)。

4.2 自動(dòng)化運(yùn)維功能設(shè)計(jì)

自動(dòng)化運(yùn)維平臺(tái)在進(jìn)行功能設(shè)計(jì)的時(shí)候可以將自動(dòng)化運(yùn)維平臺(tái)的功能劃分為巡查管理、設(shè)備管理、運(yùn)維監(jiān)控、數(shù)據(jù)庫管理、信息管理等方面。

4.2.1 巡查管理

設(shè)置專門負(fù)責(zé)巡查的管理部門，將運(yùn)維工作中所產(chǎn)出的數(shù)據(jù)進(jìn)行整合然后統(tǒng)一分送到相應(yīng)的巡查管理部門，由管理部門的人員進(jìn)行統(tǒng)一的檢查后上交給核心負(fù)責(zé)人員進(jìn)行審批，以此來提高數(shù)據(jù)的可靠性。

4.2.2 設(shè)備管理

通過集中化的平臺(tái)以及集中化的設(shè)備信息處理系統(tǒng)來獲取查詢服務(wù)器的運(yùn)行信息。

4.2.3 運(yùn)維監(jiān)控

采取互聯(lián)網(wǎng)構(gòu)建的監(jiān)控系統(tǒng)實(shí)時(shí)地對(duì)數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行全天候的監(jiān)控，以此來保證數(shù)據(jù)信息的可靠性。

4.2.4 知識(shí)庫及信息管理

要對(duì)IT運(yùn)維工作的知識(shí)以及工作經(jīng)驗(yàn)進(jìn)行統(tǒng)一的規(guī)范化整理，然后建立起統(tǒng)一的知識(shí)庫，以便為IT運(yùn)維人員提供查閱各類知識(shí)信息的有效途徑。首先，對(duì)于數(shù)據(jù)集成量較大的企業(yè)，其企業(yè)內(nèi)部的決策數(shù)據(jù)、運(yùn)維條例以及經(jīng)營體系等方面都需要進(jìn)行集中性的信息化處理，在確定沒有問題之后在進(jìn)行發(fā)布，以此來保證數(shù)據(jù)信息的精準(zhǔn)度。其次，大數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維數(shù)據(jù)處理還包含了數(shù)據(jù)匹配安全性、數(shù)據(jù)監(jiān)控處理以及監(jiān)控系統(tǒng)的冗余等多方面的數(shù)據(jù)處理優(yōu)勢(shì)。

5 結(jié)語

綜上所述，大數(shù)據(jù)平臺(tái)數(shù)據(jù)信息的精準(zhǔn)度等問題應(yīng)受到高度的重視，自動(dòng)化運(yùn)維及監(jiān)控技術(shù)可以提高數(shù)據(jù)信息的精準(zhǔn)度，提高數(shù)據(jù)信息的可靠性，使其實(shí)現(xiàn)高可用、高效率。其所構(gòu)建的監(jiān)控技術(shù)也轉(zhuǎn)變了原有監(jiān)控技術(shù)中復(fù)雜繁多的監(jiān)控特點(diǎn)，呈現(xiàn)出精簡(jiǎn)高效的監(jiān)控系統(tǒng)，為各行各業(yè)數(shù)據(jù)平臺(tái)的穩(wěn)定運(yùn)行提供了保障。大數(shù)據(jù)平臺(tái)自動(dòng)化運(yùn)維技術(shù)及監(jiān)控技術(shù)的發(fā)展還需要進(jìn)行不斷的優(yōu)化和升級(jí)，這就要求相關(guān)的技術(shù)人員要時(shí)刻關(guān)注數(shù)據(jù)平臺(tái)的運(yùn)行狀態(tài)，及時(shí)發(fā)現(xiàn)并處理運(yùn)行過程中出現(xiàn)的問題，以此來保證自動(dòng)化運(yùn)維及監(jiān)控技術(shù)能夠高效貫徹的實(shí)施。

[參考文獻(xiàn)]

[1]曹鐵男，李昊，喇元.大數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維及監(jiān)控技術(shù)分析[J].電子世界，2021（5）：19-20.

[2]廖鵬.基于大數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維及監(jiān)控技術(shù)[J].造紙裝備及材料，2020（6）：33-35.

[3]王二輝，周高強(qiáng)，李英杰，等.基于大數(shù)據(jù)平臺(tái)的自動(dòng)化運(yùn)維及監(jiān)控技術(shù)研究[J].通訊世界，2020（1）：158-159.

（編輯 傅金睿）

Research on automatic operation and monitoring technology based on Big Data platform

Huang Liang

（Hubei Second Normal University， Huangliang 430205， China）

Abstract：With the continuous development of today’s society and the continuous progress of science and technology， we are in an era of Big Data， giving full play to the advantages and functions of Big Data， which is widely used in people’s work and life. The popularity of the network and the application of computer software technology provide a driving force for the operation of Big Data platform. The rapid development of Big Data era makes people’s life and work more convenient and fast， not only in the information exchange between people， WeChat scan code payment and Taobao shopping platform， etc. The application of data software technology not only improves the convenience and quality of people’s lives， but also brings powerful economic benefits to software developers. Nowadays， with the rapid popularization of network technology and the rapid upgrading of computer technology， a large amount of data can be processed and analyzed by using computers， but the data is also useful and useless， and some useless data will bring inconvenience to people while providing convenience for people. According to the development status of Big Data platform at present， this paper puts forward the problems existing in automatic operation and maintenance and monitoring technology of Big Data platform， and puts forward reasonable solutions.

Key words：Big Data platform； automated operation and maintenance； monitoring； problem； solutions