大數(shù)據(jù)與精準(zhǔn)運(yùn)維

■

什么是大數(shù)據(jù)

大數(shù)據(jù)，就是隨著信息化技術(shù)的發(fā)展，特別是互聯(lián)網(wǎng)技術(shù)的發(fā)展，積累了大量的信息數(shù)據(jù)資產(chǎn)，這些資產(chǎn)具有四個特點(diǎn)：第一，數(shù)據(jù)體量巨大。從TB級別，躍升到PB級別；第二，數(shù)據(jù)類型繁多。如網(wǎng)絡(luò)日志、視頻、圖片、地理位置信息等等。第三，處理速度快，1秒定律，可從各種類型的數(shù)據(jù)中快速獲得高價值的信息，這一點(diǎn)也是和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同。第四，只要合理利用數(shù)據(jù)并對其進(jìn)行正確、準(zhǔn)確的分析，將會帶來很高的價值回報。業(yè)界將其歸納為4個“V”——Volume（數(shù)據(jù)體量大）、Variety（數(shù)據(jù)類型繁多）、Velocity（處理速度快）、Value（價值密度低）。

大數(shù)據(jù)分析從最早來源于運(yùn)維人的日志分析，到逐漸發(fā)展對各種業(yè)務(wù)的分析，人們發(fā)現(xiàn)這些數(shù)據(jù)蘊(yùn)涵著非常大的價值。當(dāng)前，對大數(shù)據(jù)的處理分析正成為新一代信息技術(shù)融合應(yīng)用的結(jié)點(diǎn)，大數(shù)據(jù)成為信息產(chǎn)業(yè)持續(xù)高速增長的新引擎，其利用將成為提高核心競爭力的關(guān)鍵因素。同時，大數(shù)據(jù)時代科學(xué)研究的方法手段也將發(fā)生重大改變。在大數(shù)據(jù)時代，可通過實(shí)時監(jiān)測、跟蹤研究對象在互聯(lián)網(wǎng)上產(chǎn)生的海量行為數(shù)據(jù)，進(jìn)行挖掘分析，揭示出規(guī)律性的東西，提出研究結(jié)論和對策。

精準(zhǔn)運(yùn)維及與大數(shù)據(jù)的關(guān)系

所謂運(yùn)維，既可理解為信息系統(tǒng)的運(yùn)行維護(hù)，又可理解為IT業(yè)務(wù)的運(yùn)營及維護(hù)工作，兩種理解都正確，只是適用的企業(yè)類型不一樣，前者是傳統(tǒng)的理解，主要適用于一些大型傳統(tǒng)企業(yè)和IT業(yè)界傳統(tǒng)作業(yè)部分；后者的理解更活躍在一批IT服務(wù)的創(chuàng)新企業(yè)里，他們更需要企業(yè)的經(jīng)營與用戶的需求同步。而精準(zhǔn)運(yùn)維是一種IT服務(wù)方法，它是要讓IT運(yùn)維服務(wù)圍繞被服務(wù)對象的業(yè)務(wù)來展開，進(jìn)行同步心跳式的服務(wù)，而不是僅圍繞信息系統(tǒng)本身（軟硬件）來服務(wù)，這在書籍《IT運(yùn)維之道》有闡述。作為運(yùn)行維護(hù)，精準(zhǔn)運(yùn)維是通過一系列方法掌握服務(wù)對象的信息系統(tǒng)特征以及該信息系統(tǒng)所服務(wù)的企業(yè)業(yè)務(wù)特征，找準(zhǔn)目標(biāo)，把握企業(yè)運(yùn)行脈搏，從而精準(zhǔn)地規(guī)劃服務(wù)，同步應(yīng)變，實(shí)現(xiàn)服務(wù)與業(yè)務(wù)的匹配。作為運(yùn)營維護(hù)，就是從業(yè)者以客戶為導(dǎo)向，讓業(yè)務(wù)與用戶的要求心跳同步，并確保支撐業(yè)務(wù)的信息系統(tǒng)，隨需應(yīng)變。兩種理解作為精準(zhǔn)運(yùn)維沒有本質(zhì)的差異，就是第一人稱還是第三人稱而已，前者是用“我”的視角看精準(zhǔn)運(yùn)維，后者是以“用戶”的視角看精準(zhǔn)運(yùn)維。

精準(zhǔn)運(yùn)維本質(zhì)是要保持用戶的需求與業(yè)務(wù)心跳同步，以人為本，要達(dá)到的效果與四個因素有關(guān)，即人、軟件、硬件、環(huán)境有關(guān)，具體的關(guān)聯(lián)如圖1所示：

圖1 精確運(yùn)維關(guān)聯(lián)圖

應(yīng)用軟件是指對業(yè)務(wù)的邏輯編程，支撐軟件包括操作系統(tǒng)、中間件、開發(fā)工具、數(shù)據(jù)庫等，硬件包括：客戶端設(shè)備、服務(wù)器、網(wǎng)路設(shè)施，環(huán)境包括機(jī)房設(shè)施等，人員主要指開發(fā)和運(yùn)營維護(hù)的企業(yè)員工。

從圖1我們可以看到，前面對后面是要求，后面對前面產(chǎn)生影響，用戶或客戶對系統(tǒng)的要求是通過對業(yè)務(wù)的要求來實(shí)現(xiàn)的，而用戶對業(yè)務(wù)的要求又是動態(tài)的，還各有特色，如果后臺準(zhǔn)備不足，就可能導(dǎo)致滿意度下降，甚至流失客戶，特別是互聯(lián)網(wǎng)企業(yè)。互聯(lián)網(wǎng)企業(yè)更重視用戶體驗(yàn)，由于信息系統(tǒng)本身的易用性差或穩(wěn)定性低往往直接影響用戶體驗(yàn)，進(jìn)而對企業(yè)的用戶群體規(guī)模產(chǎn)生致命的影響。值得一提的是，互聯(lián)網(wǎng)企業(yè)一般客戶與用戶是一致的，傳統(tǒng)企業(yè)則不一定。

它的運(yùn)用是要建立在充分感知被服務(wù)對象的業(yè)務(wù)情況，并能預(yù)測業(yè)務(wù)情況的基礎(chǔ)上的。既要掌握用戶對業(yè)務(wù)的動態(tài)要求，甚至預(yù)測和引導(dǎo)用戶的行為，就需要大數(shù)據(jù)來幫忙。幫助企業(yè)找找關(guān)聯(lián)性，發(fā)現(xiàn)趨勢，引領(lǐng)趨勢，即大數(shù)據(jù)是來輔助實(shí)現(xiàn)精準(zhǔn)運(yùn)維的，使企業(yè)的經(jīng)營做到更加精、更加準(zhǔn)。

為什么企業(yè)需要精準(zhǔn)運(yùn)維

在以人為本的時代，雖然客戶是上帝，但“上帝”除了盡量滿足還需要合理引導(dǎo)。我們說決定客戶滿意度的因素一般有三，第一是客戶或用戶的欲望和要求，第二是競爭對手的情況與態(tài)勢，第三是自身的水平與實(shí)力。第一和第二均為外部因素，只有第三點(diǎn)是內(nèi)部因素。根據(jù)實(shí)踐經(jīng)驗(yàn)我們發(fā)現(xiàn)：滿足、引導(dǎo)和控制外部并提升內(nèi)部是提高滿意度的最佳之法。當(dāng)然。內(nèi)外密切相關(guān)，提升內(nèi)部必須是圍繞外部的，而只有對外部的情況準(zhǔn)確掌握，才能做到對外部的滿足、引導(dǎo)與控制。所以，目前一切的智能活動都是基于“明白”這個概念出發(fā)的，明白客戶（用戶），明白對手，這樣才能做到貼心服務(wù)。這是一個以人為本的社會，如何明白人們的心思，那就是所謂的“察言觀色”。怎樣察言觀色呢，道理很簡單，因?yàn)槿嘶蛉藗冊诩彝ズ蜕鐣顒又辛粝略S多痕跡，這些痕跡數(shù)據(jù)，就是企業(yè)來判斷人們行為的依據(jù)，這些大數(shù)據(jù)加上合適的分析，能幫助我們隨需應(yīng)變。現(xiàn)在互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)正在逐步成熟，一些巨型的傳統(tǒng)企業(yè)或IT服務(wù)企業(yè)，如：騰訊、阿里、百度、京東、Google、Amazon、中國電網(wǎng)、銀行等，具備了這樣的分析條件。

我在《IT運(yùn)維之道》中提到過，大部分IT系統(tǒng)在設(shè)計(jì)和開發(fā)階段，受開發(fā)周期、運(yùn)行效率和成本等因素的影響，都不可能做到無限柔性，要做到隨需應(yīng)變，就需要運(yùn)維工作來幫忙。當(dāng)然，這對運(yùn)維工作本身也提出了較高的要求，首先，運(yùn)維不僅僅是運(yùn)行維護(hù)而是運(yùn)營維護(hù)，需要全面、準(zhǔn)確把握業(yè)務(wù)需求；其次，運(yùn)維工作需要精準(zhǔn)，將業(yè)務(wù)需求和信息系統(tǒng)性能、功能等進(jìn)行匹配度分析，為系統(tǒng)升級改造、優(yōu)化完善提供依據(jù)和解決方案；再次，要對運(yùn)營過程中的大數(shù)據(jù)從業(yè)務(wù)角度進(jìn)行精準(zhǔn)分析，從而找到新的業(yè)務(wù)增長點(diǎn)或改進(jìn)方向。精準(zhǔn)運(yùn)維有助于我們的企業(yè)服務(wù)精準(zhǔn)化、個性化、甚至引領(lǐng)潮流化，使企業(yè)強(qiáng)者恒強(qiáng)。

當(dāng)前，互聯(lián)網(wǎng)企業(yè)正進(jìn)入爭奪“入口”戰(zhàn)的白熱化階段，一是互聯(lián)網(wǎng)正在顛覆傳統(tǒng)信息獲取、生活消費(fèi)以及商務(wù)方式的入口渠道，二是面臨眾多互聯(lián)網(wǎng)企業(yè)搶奪的現(xiàn)實(shí)，而且互聯(lián)網(wǎng)企業(yè)扁平化程度越來越高，如何成為第一、穩(wěn)住第一，都是CEO思考的課題，質(zhì)量、速度、成本是互聯(lián)網(wǎng)企業(yè)產(chǎn)品的主要考量?；ヂ?lián)網(wǎng)企業(yè)的產(chǎn)品從策劃、設(shè)計(jì)、研發(fā)、上線、運(yùn)營都要考慮這三個問題，這里的質(zhì)量是廣義的質(zhì)量，包含了用戶的忠誠度，所以作為運(yùn)營維護(hù)人一開始就要參加到整個周期中，并匹配全局，才能真正與用戶的需求心跳同步，精準(zhǔn)運(yùn)維。

這里我們拿一個經(jīng)典案例來說，2015年微信發(fā)紅包，除夕搖一搖總次數(shù)110億次，峰值1400萬次/秒，8.1億次每分鐘，微信紅包收發(fā)達(dá)10.1億次!驚人數(shù)字再次讓人們好奇，2015年微信紅包方式與去年用戶與用戶之間互發(fā)紅包相比，搖紅包的方式對業(yè)務(wù)量來說是一個極大的爆發(fā)，光是除夕10：30送出的一波紅包就達(dá)到了1.2億個，已經(jīng)是2014年除夕夜峰值的4800倍之巨(2014年峰值每分鐘被拆開紅包數(shù)量僅2.5W)! 大量用戶在同一時間搖紅包，瞬間產(chǎn)生每秒千萬級的請求，這個量級的請求如果不加以疏導(dǎo)處理直接到達(dá)后臺，必定會導(dǎo)致后端服務(wù)過載甚至崩潰。微信后臺運(yùn)維團(tuán)隊(duì)主要通過三大應(yīng)對策略應(yīng)對：有損服務(wù)，柔性可用，大系統(tǒng)小做。我們在驚嘆騰訊再次創(chuàng)造奇跡的同時，仔細(xì)想想，哪些可損、哪些可柔、哪些可小做，微信搖紅包是個業(yè)務(wù)，實(shí)現(xiàn)這個業(yè)務(wù)的是它的信息系統(tǒng)，就是說配什么樣的員工、用什么樣的硬件、怎樣的應(yīng)用更合理，需要什么樣的環(huán)境，這些決策都需要基于預(yù)測用戶的群體意識，決定確保哪部分業(yè)務(wù)的正常運(yùn)作，對應(yīng)的資源怎么調(diào)整，都與大數(shù)據(jù)有關(guān)。

企業(yè)怎樣做好精準(zhǔn)運(yùn)維

傳統(tǒng)企業(yè)

傳統(tǒng)企業(yè)運(yùn)維的關(guān)注重點(diǎn)是在安全、權(quán)限管理等方面，以及舊IT資產(chǎn)利用率，如何利用好現(xiàn)有的IT資產(chǎn)是他們目前迫切需要解決的問題。傳統(tǒng)企業(yè)的內(nèi)網(wǎng)，使用大量的小型機(jī)（IBM Power小型機(jī)、HP小型機(jī)、Sun小型機(jī)等）、高端網(wǎng)絡(luò)和存儲設(shè)備（Cisco、EMC、日立等），使用大量的商業(yè)數(shù)據(jù)庫、ERP和中間件技術(shù)（IBM DB2、Oracle、SAP 等）。企業(yè)的核心業(yè)務(wù)運(yùn)行于這些設(shè)備和軟件之上，業(yè)務(wù)年限長、歷史遺留問題多，數(shù)據(jù)安全、業(yè)務(wù)連續(xù)性等是這些企業(yè)的生命線。在運(yùn)維方面，傳統(tǒng)企業(yè)往往通過購買廠商和集成商（即第三方）的服務(wù)來保證其IT業(yè)務(wù)的穩(wěn)定性。

那么，傳統(tǒng)企業(yè)如何做好精準(zhǔn)運(yùn)維呢？主要有三個關(guān)鍵點(diǎn)，具體如下：

（1）企業(yè)高層要有戰(zhàn)略高度，能夠意識到業(yè)務(wù)的發(fā)展與信息系統(tǒng)的運(yùn)行休戚相關(guān)，并重視精準(zhǔn)運(yùn)維在促進(jìn)業(yè)務(wù)發(fā)展中的重要作用；

（2）引入一個專業(yè)的運(yùn)維團(tuán)隊(duì)（這個團(tuán)隊(duì)往往是第三方專業(yè)運(yùn)維服務(wù)商或是監(jiān)理服務(wù)商），能夠協(xié)助本企業(yè)搜集業(yè)務(wù)需求以及與信息系統(tǒng)密切相關(guān)的人、軟件、硬件、環(huán)境等信息，并進(jìn)行信息系統(tǒng)與業(yè)務(wù)的匹配度分析，進(jìn)而提出對信息系統(tǒng)的優(yōu)化建議；

（3）企業(yè)根據(jù)上述優(yōu)化建議進(jìn)行綜合評估，從成本效益角度選擇部分或全部予以實(shí)施，并由專業(yè)運(yùn)維團(tuán)隊(duì)來跟蹤實(shí)施效果。

互聯(lián)網(wǎng)企業(yè)

對于互聯(lián)網(wǎng)企業(yè)的運(yùn)維，如何快速有效地部署、如何保證可利用率、如何處理大并發(fā)訪問等是他們的頭等要事?，F(xiàn)代的互聯(lián)網(wǎng)企業(yè)，大量使用PC服務(wù)器、普通硬盤盤陣和集群、先進(jìn)的SSD技術(shù)，大量使用Linux、MySQL等開源軟件。業(yè)務(wù)模式單一，軟件技術(shù)、硬件設(shè)備更替迅速。性能優(yōu)化、部署靈活、提升IT硬件利用率是他們的工作重點(diǎn)，業(yè)務(wù)領(lǐng)先的互聯(lián)網(wǎng)企業(yè)背后都有一個強(qiáng)大的IT運(yùn)維技術(shù)團(tuán)隊(duì)，而這個運(yùn)維技術(shù)團(tuán)隊(duì)往往是互聯(lián)網(wǎng)企業(yè)內(nèi)一個信息部門或運(yùn)維部門。

對于互聯(lián)網(wǎng)企業(yè)來說，要做好精準(zhǔn)運(yùn)維，主要關(guān)注以下幾個方面：

（1）企業(yè)高層要把握大生態(tài)環(huán)境，要時刻關(guān)注用戶體驗(yàn)和發(fā)展趨勢，并將其作為業(yè)務(wù)發(fā)展的一個重要任務(wù)來抓。

（2）企業(yè)內(nèi)部的專業(yè)技術(shù)團(tuán)隊(duì)要開展大數(shù)據(jù)分析，要掌握用戶對業(yè)務(wù)的動態(tài)要求，并預(yù)測和引導(dǎo)用戶的行為，通過大數(shù)據(jù)來輔助開展精確預(yù)測；同時，將預(yù)測結(jié)果轉(zhuǎn)化為對信息系統(tǒng)的需求，包括人員、軟件、硬件、環(huán)境需求等，從而提出性能提升和服務(wù)創(chuàng)新的優(yōu)化建議。

（3）運(yùn)維實(shí)施團(tuán)隊(duì)根據(jù)內(nèi)部專業(yè)技術(shù)團(tuán)隊(duì)的優(yōu)化建議，進(jìn)行系統(tǒng)性能優(yōu)化或新服務(wù)產(chǎn)品設(shè)計(jì)，以精確匹配用戶需求。

展望未來，“連接一切”將是一個時尚的詞句，物物相連，人人相連，人物相連。在這個巨大且復(fù)雜的網(wǎng)絡(luò)中，以大數(shù)據(jù)、云計(jì)算為基礎(chǔ)的智能感知世界，就在未來十年誕生，讓我們張開雙臂，擁抱未來，以大數(shù)據(jù)為基礎(chǔ)，精準(zhǔn)感知、精準(zhǔn)運(yùn)維，未來我們是主人。