大連氣象云平臺設(shè)計

李永超， 程 航， 周麗麗， 張 悅

(1.遼寧省大連市氣象信息中心，遼寧大連 116001；2.遼寧省大連市氣象臺，遼寧大連 116001)

?

大連氣象云平臺設(shè)計

李永超1， 程 航2， 周麗麗1， 張 悅1

(1.遼寧省大連市氣象信息中心，遼寧大連 116001；2.遼寧省大連市氣象臺，遼寧大連 116001)

摘要立足解決大連市氣象局數(shù)據(jù)中心面臨的IT運維管理難題，結(jié)合大連市氣象局的實際業(yè)務(wù)應(yīng)用情況，討論了構(gòu)建氣象云平臺的必要性和實際意義。通過分析云平臺的整體設(shè)計部分分層討論了各部分功能及特點，并對比分析傳統(tǒng)數(shù)據(jù)中心服務(wù)器及存儲管理方式，發(fā)現(xiàn)氣象云平臺能夠極大地降低IT中心TCO(總體擁有成本)、提高運營效率和提高服務(wù)水平，且實現(xiàn)了對舊硬件和操作系統(tǒng)的投資保護。

關(guān)鍵詞云計算；服務(wù)器虛擬化；氣象云平臺；設(shè)計

隨著國內(nèi)氣象業(yè)務(wù)的不斷發(fā)展，越來越多的氣象業(yè)務(wù)系統(tǒng)依賴于數(shù)據(jù)中心的支撐，其中包括門戶網(wǎng)站系統(tǒng)和各類其他便民系統(tǒng)以及各類測試系統(tǒng)等，這些業(yè)務(wù)迅速發(fā)展給IT帶來很大壓力，服務(wù)器需求不斷增多，機房空間、電力成為瓶頸，導(dǎo)致應(yīng)用所需服務(wù)器資源緊張，正常項目開展受到限制。在數(shù)據(jù)中心的建設(shè)過程中，隨著各種業(yè)務(wù)系統(tǒng)的建設(shè)和更新?lián)Q代，每個業(yè)務(wù)系統(tǒng)均占用了大量的新舊服務(wù)器，其硬件利用率低下、管理復(fù)雜、運行成本居高不下等問題正逐漸顯現(xiàn)。由于傳統(tǒng)服務(wù)器的硬件和操作系統(tǒng)的綁定，使得服務(wù)器之間無法復(fù)用計算資源，只能通過為不同業(yè)務(wù)單元分別堆加服務(wù)器來滿足業(yè)務(wù)要求，隨著企業(yè)規(guī)模發(fā)展，顯然傳統(tǒng)模式的數(shù)據(jù)中心無法在快速響應(yīng)和節(jié)省成本之間找到平衡點。為了應(yīng)對這些壓力，人們開始尋求新的技術(shù)和管理解決方案[1]。

大連市氣象局數(shù)據(jù)中心作為數(shù)據(jù)資料密集型事業(yè)單位，信息化建設(shè)不斷發(fā)展，目前信息化網(wǎng)絡(luò)以信息中心為運營維護單位，覆蓋自動站采集、數(shù)值預(yù)報計算等多套業(yè)務(wù)系統(tǒng)，服務(wù)器資源龐大[2]。雖然大連市氣象局完成了對其數(shù)據(jù)中心的服務(wù)器虛擬化改造，大幅度提高云計算系統(tǒng)中資源和應(yīng)用程序的效率和可用性，但僅僅完成服務(wù)器的虛擬化已經(jīng)遠遠不能滿足各種業(yè)務(wù)對其數(shù)據(jù)中心的新需求，盡快地完成云計算建設(shè)是一件勢在必行的大事。在這種模式下，從管理和資源使用方面來講均存在諸多問題，如不斷增加的服務(wù)器數(shù)量導(dǎo)致耗能、制冷，甚至空間占用都十分巨大；資源共享困難，使得服務(wù)器利用率很低；氣象數(shù)據(jù)資料的迅猛增加，存儲資源成為一大難題。為此，筆者提出氣象云平臺的研究與設(shè)計，嘗試從根本上改變氣象業(yè)務(wù)系統(tǒng)的傳統(tǒng)部署方式，解決目前存在的種種問題。

1現(xiàn)狀分析

1.1需求分析目前大連市氣象局的磁盤陣列劃分孤立、分散，造成了磁盤陣列的浪費以及數(shù)據(jù)的高風(fēng)險性，且十分不易于維護。隨著之后系統(tǒng)和數(shù)據(jù)量的不斷增加，這一現(xiàn)象將會持續(xù)加劇。服務(wù)器中，除了視頻服務(wù)器和下載服務(wù)器外，其他服務(wù)器的負載均非常小，遠沒有達到充分利用的狀態(tài)。雖然視頻服務(wù)器和下載服務(wù)器的負載相對較高，但也沒有充分發(fā)揮硬件平臺的資源效率。另外還有一些運行邊緣業(yè)務(wù)的服務(wù)器，由于設(shè)備老舊以及所在位置等原因，此次尚未統(tǒng)計在內(nèi)。在存儲陣列方面，大連市氣象局數(shù)據(jù)中心的主要存儲設(shè)備及其相應(yīng)系統(tǒng)的容量與使用率情況如下：①IBM DS4700陣列上，網(wǎng)管系統(tǒng)可使用的總?cè)萘繛? 400 G，現(xiàn)已使用了800 G，使用率為57%；郵件系統(tǒng)可使用的總?cè)萘繛? 950 G，現(xiàn)統(tǒng)計分析系統(tǒng)已使用了900 G，使用率為67%。人力資源系統(tǒng)可使用的容量已全部分配完畢。②IBM FastT600陣列上，庫存管理系統(tǒng)可使用的總?cè)萘繛? 340 G，現(xiàn)已使用了1 340 G，使用率為100%；身份認證系統(tǒng)可使用的總?cè)萘繛?40 G，現(xiàn)已使用了170 G，使用率為50%。③IBM DS5020陣列上，視頻服務(wù)器可使用的總?cè)萘繛? 540 G，現(xiàn)已使用了1 530 G，使用率為97%；防病毒系統(tǒng)可使用的總?cè)萘繛?70 G，現(xiàn)已使用了206 G，使用率為76%。④EMC CX3-40陣列上，財務(wù)系統(tǒng)可用總?cè)萘繛?41 G，現(xiàn)已使用了325 G，使用率為32%；移動站業(yè)務(wù)管理系統(tǒng)可用總?cè)萘繛?00 G，現(xiàn)已使用了270 G，使用率為34%；安全評估系統(tǒng)可用總?cè)萘繛?00 G，現(xiàn)已使用了305 G，使用率為51%。

通過對大連市氣象局服務(wù)器和存儲現(xiàn)狀的分析，目前IT基礎(chǔ)架構(gòu)有以下幾個問題亟待解決：①資源孤立且利用率低下?，F(xiàn)有數(shù)據(jù)中心中，計算、存儲以及網(wǎng)絡(luò)資源均是緊耦合的，也就是說數(shù)據(jù)中心內(nèi)的IT建設(shè)是煙囪式的，根據(jù)客戶需求一個項目建設(shè)一套系統(tǒng)，這樣便形成了一個個的“項目孤島” 。這種系統(tǒng)牽一發(fā)而動全身，很難做任何改變，擴展起來要對系統(tǒng)進行重新設(shè)計。在這種環(huán)境下，系統(tǒng)之間無法相互通信，資源不能在整個數(shù)據(jù)中心里實時、動態(tài)調(diào)度與共享，這樣便使服務(wù)器與存儲以及網(wǎng)絡(luò)資源得不到充分利用，各種資源的利用效率全面低下。②服務(wù)器和存儲購置成本高，維護成本遞增。隨著應(yīng)用的不斷增加，服務(wù)器數(shù)量也隨之增加，每年要支出高額購置費用，還有部分服務(wù)器已經(jīng)過保修期，部件逐漸進入老化期，維護、維修預(yù)算費用也逐年增加[3]。③可用性低下。首先，幾乎每個應(yīng)用服務(wù)器均是單機，如果某臺服務(wù)器出現(xiàn)故障，相對應(yīng)的業(yè)務(wù)也將中斷。其次是當硬件需要維護、升級或出現(xiàn)硬件故障時，上層業(yè)務(wù)系統(tǒng)均會出現(xiàn)較長時間的中斷，影響業(yè)務(wù)的連續(xù)性，其中包括一些重要業(yè)務(wù)系統(tǒng)，一旦中斷服務(wù)影響很大，未來數(shù)據(jù)中心搬遷時會更加麻煩。④兼容性差。業(yè)務(wù)系統(tǒng)和應(yīng)用遷移到其他服務(wù)器上時，需要考慮與舊系統(tǒng)關(guān)聯(lián)的兼容性。新的軟件包括操作系統(tǒng)和應(yīng)用軟件無法運行在老的硬件平臺，而老的代碼有時候也很難移植到新的硬件平臺上。如由于各種資源數(shù)據(jù)庫不同公司分別開發(fā)，需要運行的軟硬平臺很多時候不能保證兼容。為節(jié)省時間、物力和保持系統(tǒng)部署的順利，只能用增加服務(wù)器單獨部署的方法來解決。

1.2云平臺創(chuàng)建的必要性虛擬化技術(shù)在一定程度上緩解了上述問題帶來的影響，如服務(wù)器虛擬化可以幫助數(shù)據(jù)中心減少物理服務(wù)器的數(shù)量，進而使企業(yè)在電源、散熱以及機房面積上節(jié)省巨大的成本。此外，它還可以減少數(shù)據(jù)中心UPS和網(wǎng)絡(luò)設(shè)備的費用以及所占用的空間，同時還可以大幅減少管理物理服務(wù)器的寶貴時間，提高部署服務(wù)器的效率。當前的企業(yè)環(huán)境中，IT的運營管理存在浪費、低效率等通病，傳統(tǒng)的管理模式無法滿足動態(tài)變化的虛擬化和云環(huán)境。傳統(tǒng)的垂直豎井式管理把特定應(yīng)用和基礎(chǔ)架構(gòu)捆綁在一起，這種方式脆弱且不便管理。為了增加業(yè)務(wù)敏捷性，許多企業(yè)希望縮短由豎井式的手動操作導(dǎo)致的冗長的服務(wù)響應(yīng)時間，由于操作的不靈活，IT專家經(jīng)常需要數(shù)天甚至數(shù)周來交付急需的資源和應(yīng)用[4]。此外，業(yè)務(wù)系統(tǒng)應(yīng)用的開發(fā)較以往任何時期都要發(fā)展迅速，功能每日都會更新，規(guī)模每小時都在改變，因此，用戶需求帶來的持續(xù)壓力使得業(yè)務(wù)應(yīng)用系統(tǒng)面臨著變更不及時的問題。云平臺的業(yè)務(wù)應(yīng)用系統(tǒng)需要實時訪問云基礎(chǔ)架構(gòu)，而構(gòu)建應(yīng)用程序仍需管理員在各個虛擬機上分別安裝和配置應(yīng)用程序組件，以便插入到應(yīng)用體系結(jié)構(gòu)中。在當下的云計算時代中，企業(yè)和組織需要更高效的應(yīng)用部署方法。

2氣象云平臺整體設(shè)計

2.1整體架構(gòu)

2.1.1服務(wù)器虛擬化層。由vCloud Suite所構(gòu)建的云計算數(shù)據(jù)中心的整體概念架構(gòu)(圖1)最底層是最基礎(chǔ)的服務(wù)器和網(wǎng)絡(luò)與安全虛擬化，該層是整個云計算數(shù)據(jù)中心的基石，用來實現(xiàn)對物理服務(wù)器以及相關(guān)聯(lián)的網(wǎng)絡(luò)與安全組件的虛擬化功能，對應(yīng)的vCloud Suite產(chǎn)品組件是vSphere。

圖1　VMware vCloud Suite整體架構(gòu)Fig.1　The overall framework of VMware vCloud Suite

2.1.2服務(wù)編排層。服務(wù)器虛擬化層之上是服務(wù)編排層，這一層可以對所支持的相關(guān)服務(wù)進行編排，協(xié)調(diào)多個系統(tǒng)以實現(xiàn)組合操作，從而避免在不同系統(tǒng)上執(zhí)行多個單獨的操作。該層對應(yīng)的產(chǎn)品組件是vRealize Orchestrator (vRO)，該組件目前打包在vCenter Server中，無需單獨購買。

2.1.3服務(wù)調(diào)配層。服務(wù)編排層之上是服務(wù)調(diào)配層，通過該層，客戶可以對通過自助式門戶和目錄向終端用戶提供的預(yù)定義基礎(chǔ)架構(gòu)和桌面服務(wù)進行自動化調(diào)配，同時，它還可以調(diào)配和管理應(yīng)用服務(wù)或部署用戶自己的PaaS。該層自身不具備虛擬化資源的能力，而是與底層虛擬化平臺協(xié)作，來提供調(diào)配和管理基礎(chǔ)架構(gòu)、桌面和應(yīng)用服務(wù)的能力。該層對應(yīng)的產(chǎn)品組件是vRealize Automation (vRA)以及vRA企業(yè)版所包含的組件vRealize Automation Application Services。

2.1.4運維管理模塊。概念架構(gòu)圖的右側(cè)是運維管理模塊，該模塊用來對整個云計算數(shù)據(jù)中心進行性能、容量以及應(yīng)用依賴關(guān)系相關(guān)的管理。該模塊使 IT 部門可以獲得更好的可見性和可操作的智能信息，從而主動確保動態(tài)虛擬環(huán)境以及整個云計算數(shù)據(jù)中心中的服務(wù)級別、資源利用率優(yōu)化和配置合規(guī)性。該模塊對應(yīng)的產(chǎn)品組件是vRealize Operations。

圖 2　云平臺安裝流程Fig.2　The installation process of cloud platform

2.1.5可用性與災(zāi)難恢復(fù)模塊。架構(gòu)圖的最左側(cè)是可用性與災(zāi)難恢復(fù)模塊，該模塊可以最大程度上提升云計算數(shù)據(jù)中心的可靠性、可用性和災(zāi)難恢復(fù)的能力。該模塊對應(yīng)的產(chǎn)品

組件包括vSphere的相關(guān)高可用機制，如vMotion、Storage vMotion、vSphere Replication以及災(zāi)難恢復(fù)解決方案vCenter Site Recovery Manager。2.2簡單部署氣象云平臺的部署過程簡單來說分為4個步驟，首先是準備階段，需要整理軟件安裝包和數(shù)據(jù)等，接下來是安裝系統(tǒng)文件和數(shù)據(jù)庫，然后是安裝云管理平臺軟件(圖2)。

3小結(jié)

該研究立足解決大連市氣象局數(shù)據(jù)中心面臨的IT運維管理難題，結(jié)合大連市氣象局的實際業(yè)務(wù)應(yīng)用情況，討論了構(gòu)建氣象云平臺的必要性和實際意義?；诖筮B氣象云計算管理平臺的關(guān)鍵模塊展開研究，通過分析VMware vCloud Suite架構(gòu)中服務(wù)器虛擬化、可用性與災(zāi)難恢復(fù)、運維管理與服務(wù)調(diào)配等方面技術(shù)特點及優(yōu)勢，并對比分析傳統(tǒng)數(shù)據(jù)中心服務(wù)器及存儲管理方式，發(fā)現(xiàn)氣象云平臺能夠極大地降低IT中心TCO(總體擁有成本)、提高運營效率和提高服務(wù)水平，且實現(xiàn)了對舊硬件和操作系統(tǒng)的投資保護。

參考文獻

[1] 王學(xué)芹.云計算安全問題研究與探討[J].科技與創(chuàng)新,2015(17)：41，45.

[2] 何明華.云計算環(huán)境下的信息處理技術(shù)[J].信息通信,2015,23(1):10-11．

[3] 臧勁松.基于云計算的實驗平臺設(shè)計[J].計算機時代,2015,18(12):80-81．

[4] 盧良進.基于云計算的電子商務(wù)服務(wù)模式研究[J].軟件導(dǎo)刊,2015,2(2):80-81．

作者簡介李永超(1982- )，男，河南原陽人，工程師，碩士，從事計算機應(yīng)用技術(shù)研究。

收稿日期2016-04-29

中圖分類號S 16

文獻標識碼A

文章編號0517-6611(2016)16-196-02

Design of Dalian Meteorological Cloud Computing Platform

LI Yong-chao1, CHENG Hang2, ZHOU Li-li1et al

(1. Dalian Meteorological Information Center, Dalian, Liaoning 116001; 2. Dalian Meteorological Station, Dalian, Liaoning 116001)

AbstractBased on solving the problems of IT operation and maintenance faced by data center of Dalian Meteorological Bureau, combining with the actual situation, the necessity and practical significance for constructing meteorology cloud computing platform were discussed. Through analyzing the overall design of cloud computing platform, the functions and characteristics of each part were discussed. Traditional data center server and storage management mode were analyzed, it was found that meteorology cloud computing platform could significantly reduce TCO of IT center, improve operation efficiency and service level, realize the investment protection of old hardware and operating system.

Key wordsCloud computing; Server virtualization; Meteorological cloud platform; Design