劉彬 梁建交
中國商用飛機(jī)有限責(zé)任公司 航空工業(yè)信息技術(shù)中心(金航數(shù)碼)
基于復(fù)雜組織體架構(gòu)方法的企業(yè)數(shù)據(jù)中心總體設(shè)計(jì)
劉彬 梁建交
中國商用飛機(jī)有限責(zé)任公司 航空工業(yè)信息技術(shù)中心(金航數(shù)碼)
本文提出在工業(yè)企業(yè)數(shù)據(jù)中心建設(shè)過程中,引入復(fù)雜組織體架構(gòu)(Enterprise Architecture,EA)方法,從業(yè)務(wù)、應(yīng)用、數(shù)據(jù)、技術(shù)四個方面對數(shù)據(jù)中心架構(gòu)進(jìn)行定義,提出了工業(yè)企業(yè)數(shù)據(jù)中心頂層參考架構(gòu)。采用復(fù)雜組織體架構(gòu)方法,可以將企業(yè)戰(zhàn)略、運(yùn)營和管控需求與數(shù)據(jù)中心的業(yè)務(wù)定位、軟硬件環(huán)境進(jìn)行很好地匹配,保證數(shù)據(jù)中心運(yùn)營和數(shù)據(jù)資源管理能夠很好地支撐企業(yè)運(yùn)營發(fā)展。
復(fù)雜組織體架構(gòu) 數(shù)據(jù)中心 數(shù)據(jù)中心總體設(shè)計(jì)
“數(shù)據(jù)中心”一直以來被認(rèn)為是一組硬件設(shè)備及容納這些硬件的建筑物,例如:維基百科針對數(shù)據(jù)中心給出的定義是“一整套復(fù)雜的設(shè)施,它不僅僅包括計(jì)算機(jī)系統(tǒng)和其它與之配套的設(shè)備(例如通信和存儲系統(tǒng)),還包含冗余的數(shù)據(jù)通信連接、環(huán)境控制設(shè)備、監(jiān)控設(shè)備以及各種安全裝置”。谷歌在其發(fā)布的《The Datacenter as a Computer》一書中,將數(shù)據(jù)中心解釋為“多功能的建筑物,能容納多個服務(wù)器以及通信設(shè)備。這些設(shè)備被放置在一起是因?yàn)樗鼈兙哂邢嗤膶Νh(huán)境的要求以及物理安全上的需求,并且這樣放置便于維護(hù)”,而“并不僅僅是一些服務(wù)器的集合”。隨著企業(yè)數(shù)據(jù)資源作為新型資產(chǎn)越來越受到重視以及大數(shù)據(jù)與數(shù)據(jù)分析技術(shù)的發(fā)展和普及,人們對數(shù)據(jù)中心的理解也在發(fā)生變化,逐漸從關(guān)注硬件環(huán)境建設(shè)到關(guān)注數(shù)據(jù)資源本身的管理。本人認(rèn)為,在DT時代這個大背景下,數(shù)據(jù)中心建設(shè)應(yīng)聚焦數(shù)據(jù)資源管理,將數(shù)據(jù)中心理解為:是企業(yè)數(shù)據(jù)資源和對數(shù)據(jù)資源進(jìn)行集成、共享、分析的標(biāo)準(zhǔn)、流程、工具及所依托的軟件、硬件和物理、組織環(huán)境的集合。數(shù)據(jù)中心既是一個技術(shù)體系,也是一個組織體(Enterprise)。數(shù)據(jù)中心是企業(yè)數(shù)據(jù)資源開發(fā)利用的重要的載體,其相關(guān)技術(shù)應(yīng)用近些年來重新燃起了許多企業(yè)的熱情。
但是,由于數(shù)據(jù)中心一直以來主要沿用數(shù)據(jù)倉庫(Data Warehouse,DW)、 商 務(wù) 智 能(Business Intelligence,BI)等技術(shù)及相關(guān)工程經(jīng)驗(yàn),缺乏始于業(yè)務(wù)終于業(yè)務(wù)的成體系的設(shè)計(jì)和實(shí)施方法論,很多企業(yè)的數(shù)據(jù)中心還主要聚焦于數(shù)據(jù)分析與展示,價值存在很大的局限性,失去了數(shù)據(jù)中心的許多意義。而復(fù)雜組織體架構(gòu)(Enterprise Architecture,EA)正是解決從戰(zhàn)略到業(yè)務(wù)再到IT的一套科學(xué)方法,被國際上眾多組織(企業(yè)組織和政府等非盈利性組織)所采用。EA最早可以追溯到20世紀(jì)80年代中期,由當(dāng)時還在IBM工作的John Zachman首先提出了“信息系統(tǒng)架構(gòu)框架”的概念。1996年美國的Clinger-Cohen 法案導(dǎo)致了術(shù)語“IT架構(gòu)”(ITA),ITA現(xiàn)在被解釋為IT企業(yè)架構(gòu)(EA)。經(jīng)過近二十年的發(fā)展,EA相關(guān)理論日益成熟,IBM、美國聯(lián)邦政府、波音、空客、羅羅都基于EA思想在構(gòu)建和管理自己的IT系統(tǒng)。在中國,EA也被中國航空工業(yè)集團(tuán)、中國航天科工集團(tuán)、華為、用友、金蝶等工業(yè)企業(yè)集團(tuán)、軟件廠商所采用。中國航空工業(yè)集團(tuán)公司提出了以復(fù)雜組織體架構(gòu)方法應(yīng)對組織與管理的復(fù)雜性,通過與國際開放組TOG開展廣泛合作,系統(tǒng)地導(dǎo)入架構(gòu)方法論和知識體系,已經(jīng)將EA方法運(yùn)用到企業(yè)戰(zhàn)略分析、業(yè)務(wù)和組織架構(gòu)設(shè)計(jì)、IT架構(gòu)設(shè)計(jì)、數(shù)據(jù)中心建設(shè)和企業(yè)治理等方方面面,“十二五”期間取得了明顯的應(yīng)用成效。
數(shù)據(jù)中心是一個企業(yè)(復(fù)雜組織體)的有機(jī)組成部分,一個現(xiàn)代化的企業(yè)數(shù)據(jù)中心具備復(fù)雜組織體的所有特征。因此,數(shù)據(jù)中心架構(gòu)設(shè)計(jì)可以參考國際上最主流的架構(gòu)方法TOGAF-ADM(如圖1)。在這個方法框架基礎(chǔ)上,通過修改或擴(kuò)展,以及在每個階段中融入特定的方法論和技巧(如:業(yè)務(wù)九要素法、信息資源規(guī)劃IRP,甚至DoDAF等)來適應(yīng)數(shù)據(jù)中心架構(gòu)設(shè)計(jì)的需要。TOGAF-ADM將一個復(fù)雜組織體架構(gòu)的開發(fā)過程劃分為A-H八個階段,ADM中的需求管理是一個連續(xù)的階段,它確保通過適當(dāng)?shù)闹卫砹鞒虂硖幚砣魏涡枨笞兏⒎从吃谒衅渌A段中。
圖1 數(shù)據(jù)中心設(shè)計(jì)方法框架
本階段重點(diǎn)需要掌握數(shù)據(jù)中心關(guān)鍵利益攸關(guān)者的核心關(guān)注,選擇架構(gòu)開發(fā)的方法,以及建立架構(gòu)開發(fā)方法與其他相關(guān)管理框架(如:項(xiàng)目管理方法、軟件開發(fā)方法、運(yùn)行管理方法等)之間的關(guān)系,明確數(shù)據(jù)中心架構(gòu)設(shè)計(jì)的原則,在組織內(nèi)部對數(shù)據(jù)中心形成高層次的一致共識。
本階段重點(diǎn)是完成立項(xiàng),并識別利益攸關(guān)者,了解他們對數(shù)據(jù)中心的關(guān)注焦點(diǎn)和業(yè)務(wù)需求。提出數(shù)據(jù)中心規(guī)劃設(shè)計(jì)與建設(shè)、運(yùn)行的基本原則,明確數(shù)據(jù)中心建設(shè)范圍和目標(biāo),評價數(shù)據(jù)中心建設(shè)所需要的基礎(chǔ)條件,識別風(fēng)險,制訂相關(guān)措施等。
本階段重點(diǎn)是完成數(shù)據(jù)中心或數(shù)據(jù)管理的業(yè)務(wù)現(xiàn)狀,如:數(shù)據(jù)管理組織、流程和相關(guān)制度,以及企業(yè)內(nèi)部各部門在數(shù)據(jù)管理與信息資源開發(fā)利用方面的協(xié)作關(guān)系。參照國際標(biāo)準(zhǔn)和國內(nèi)外數(shù)據(jù)管理與數(shù)據(jù)中心管理的先進(jìn)經(jīng)驗(yàn),對未來數(shù)據(jù)中心的業(yè)務(wù)架構(gòu)進(jìn)行定義和描述,重點(diǎn)是組織、流程和業(yè)務(wù)功能,及配套的標(biāo)準(zhǔn)規(guī)范。
本階段重點(diǎn)是完成數(shù)據(jù)集成交換、數(shù)據(jù)管理和數(shù)據(jù)分析等相關(guān)應(yīng)用的現(xiàn)狀,結(jié)合業(yè)務(wù)需求,對未來數(shù)據(jù)中心信息系統(tǒng)進(jìn)行架構(gòu)、功能設(shè)計(jì),對未來數(shù)據(jù)中心的數(shù)據(jù)存儲、數(shù)據(jù)分析所涉及的數(shù)據(jù)架構(gòu)(如:數(shù)據(jù)緩沖區(qū)、數(shù)據(jù)倉庫、數(shù)據(jù)集市等)進(jìn)行設(shè)計(jì)。描述信息系統(tǒng)如何實(shí)現(xiàn)業(yè)務(wù)架構(gòu)和架構(gòu)愿景,關(guān)鍵利益攸關(guān)者數(shù)據(jù)架構(gòu)視圖、應(yīng)用架構(gòu)視圖。
本階段重點(diǎn)完成數(shù)據(jù)中心軟硬件平臺的架構(gòu)設(shè)計(jì),包括數(shù)據(jù)中心所涉及的技術(shù)譜系、技術(shù)標(biāo)準(zhǔn)及服務(wù)器、存儲設(shè)備、安全設(shè)備、信息安全體系、軟件部署與集成技術(shù)架構(gòu)等。同時,要描述技術(shù)組件與應(yīng)用系統(tǒng)的關(guān)系。
本階段重點(diǎn)根據(jù)數(shù)據(jù)中心目標(biāo)架構(gòu)與現(xiàn)狀(架構(gòu))的差距分析,制定實(shí)施策略,對推進(jìn)數(shù)據(jù)中心建設(shè)的風(fēng)險和準(zhǔn)備度進(jìn)行確認(rèn),識別主要的工作包并將這些工作包分組,以便開展項(xiàng)目組合。本階段也需要判斷是否要開發(fā)過渡的架構(gòu),以指導(dǎo)分步實(shí)施。
本階段重點(diǎn)是對數(shù)據(jù)中心建設(shè)相關(guān)工作的優(yōu)先級進(jìn)行評估,制訂詳細(xì)的實(shí)施計(jì)劃,確保數(shù)據(jù)中心建設(shè)項(xiàng)目與其他相關(guān)工作的協(xié)調(diào),同時,確保數(shù)據(jù)中心建設(shè)項(xiàng)目和相關(guān)工作取得關(guān)鍵利益攸關(guān)者的理解。本階段對數(shù)據(jù)中心架構(gòu)進(jìn)行最終確認(rèn)。
本階段重點(diǎn)是實(shí)施已經(jīng)明確的數(shù)據(jù)中心項(xiàng)目,包括識別相關(guān)資源和技能、軟硬件的選型、解決方案開發(fā)與部署,對項(xiàng)目進(jìn)度、質(zhì)量和風(fēng)險進(jìn)行管理,開展業(yè)務(wù)和IT試運(yùn)行等,本階段的目的是通過實(shí)施治理確保規(guī)劃的數(shù)據(jù)中心架構(gòu)的實(shí)現(xiàn)。
本階段的工作是保證數(shù)據(jù)中心具有能迅速演進(jìn)以響應(yīng)技術(shù)和業(yè)務(wù)環(huán)境變化的柔性。通過對業(yè)務(wù)需求、數(shù)據(jù)中心運(yùn)行進(jìn)行監(jiān)控,識別架構(gòu)變更、解決方案變更的機(jī)會,并對變更(如:軟硬件升級)進(jìn)行管理。
需求管理結(jié)穿數(shù)據(jù)中心架構(gòu)開發(fā)的始終,在數(shù)據(jù)中心架構(gòu)開發(fā)各階段,都應(yīng)識別各種需求,包括功能性需求、非功能性需求。數(shù)據(jù)中心的各類需求應(yīng)進(jìn)行統(tǒng)一管理。
參照復(fù)雜組織體架構(gòu)框架,企業(yè)數(shù)據(jù)中心架構(gòu)可以從業(yè)務(wù)架構(gòu)、應(yīng)用架構(gòu)、數(shù)據(jù)架構(gòu)和技術(shù)架構(gòu)等四個方面來定義和描述,如下圖所示:
圖2 數(shù)據(jù)中心總體架構(gòu)
企業(yè)數(shù)據(jù)中心的業(yè)務(wù)架構(gòu)組成要素包括:組織、人員、流程、績效、標(biāo)準(zhǔn)規(guī)范等。數(shù)據(jù)中心建設(shè)過程中,應(yīng)建立和優(yōu)化數(shù)據(jù)中心組織,配置數(shù)據(jù)管理、分析人員,建立支撐數(shù)據(jù)中心運(yùn)行和數(shù)據(jù)服務(wù)的流程、績效衡量指標(biāo)體系和相關(guān)的標(biāo)準(zhǔn)規(guī)范。企業(yè)數(shù)據(jù)中心自身的管理包括對數(shù)據(jù)資產(chǎn)的管理,如:數(shù)據(jù)標(biāo)準(zhǔn)化、數(shù)據(jù)交換與集成、數(shù)據(jù)治理等,還包括對數(shù)據(jù)中心軟硬件環(huán)境的運(yùn)行管理和數(shù)據(jù)中心的人財(cái)物等綜合管理。數(shù)據(jù)中心對外提供的服務(wù)包括:數(shù)據(jù)存儲服務(wù)(結(jié)構(gòu)化數(shù)據(jù)存儲、大數(shù)據(jù)存儲)、數(shù)據(jù)共享服務(wù)和數(shù)據(jù)分析服務(wù),數(shù)據(jù)分析服務(wù)又可以分為報(bào)表服務(wù)、聯(lián)機(jī)分析處理、數(shù)據(jù)挖掘等。
企業(yè)數(shù)據(jù)中心的應(yīng)用架構(gòu)描述了支撐數(shù)據(jù)中心內(nèi)外部業(yè)務(wù)的核心應(yīng)用組成及其關(guān)系。核心應(yīng)用可以分為四類:一是數(shù)據(jù)交換系統(tǒng)(如:ETL、ESB),主要功能包括異構(gòu)信息系統(tǒng)的數(shù)據(jù)集成、抽取、清洗、轉(zhuǎn)換,并加載到數(shù)據(jù)倉庫。二是數(shù)據(jù)存儲系統(tǒng),主要實(shí)現(xiàn)對各種類型數(shù)據(jù)的集中存儲。第三是數(shù)據(jù)治理系統(tǒng),主要實(shí)現(xiàn)對元數(shù)據(jù)的管理、對主數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)質(zhì)量的控制和數(shù)據(jù)模型的管理。第四是數(shù)據(jù)分析系統(tǒng),主要是用于滿足不同人員對數(shù)據(jù)的分析需求,提供報(bào)表分析、即席查詢、多維數(shù)據(jù)分析和數(shù)據(jù)挖掘等。
企業(yè)數(shù)據(jù)可以分為元數(shù)據(jù)、主數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)和主題分析數(shù)據(jù)。元數(shù)據(jù)是描述數(shù)據(jù)的數(shù)據(jù),主要描述數(shù)據(jù)對象的結(jié)構(gòu)、數(shù)據(jù)倉庫中有關(guān)數(shù)據(jù)源定義和轉(zhuǎn)化規(guī)則;主數(shù)據(jù)是指需在企業(yè)全局保持一致的核心業(yè)務(wù)實(shí)體的數(shù)據(jù),同時也是在企業(yè)范圍內(nèi)需要共享的數(shù)據(jù);業(yè)務(wù)數(shù)據(jù)是指為完成業(yè)務(wù)處理而產(chǎn)生的事務(wù)性數(shù)據(jù),是業(yè)務(wù)活動的描述,更新頻繁且快速增長;主題分析數(shù)據(jù)是指按照業(yè)務(wù)邏輯結(jié)構(gòu)對各業(yè)務(wù)數(shù)據(jù)進(jìn)行識別和運(yùn)算,根據(jù)業(yè)務(wù)需求統(tǒng)一定義和組織的相關(guān)數(shù)據(jù),由業(yè)務(wù)數(shù)據(jù)按照分析需要抽取后按主題存儲。數(shù)據(jù)中心數(shù)據(jù)架構(gòu)定義了數(shù)據(jù)分類、數(shù)據(jù)模型、數(shù)據(jù)存儲的方式與結(jié)構(gòu)(包括:數(shù)據(jù)緩沖區(qū)、數(shù)據(jù)倉庫、數(shù)據(jù)集市、大數(shù)據(jù)存儲區(qū)等)和各類數(shù)據(jù)的標(biāo)準(zhǔn)。
數(shù)據(jù)中心的技術(shù)架構(gòu)由技術(shù)平臺、基礎(chǔ)設(shè)施、標(biāo)準(zhǔn)體系和安全體系組成。技術(shù)平臺指數(shù)據(jù)中心應(yīng)用系統(tǒng)的開發(fā)和運(yùn)行平臺、數(shù)據(jù)集成與展示平臺、數(shù)據(jù)庫系統(tǒng)等。基礎(chǔ)設(shè)施包括機(jī)房、服務(wù)器、存儲設(shè)備和基礎(chǔ)軟件(如:操作系統(tǒng)、郵件系統(tǒng)等)等。標(biāo)準(zhǔn)體系指企業(yè)的信息化標(biāo)準(zhǔn)體系,定義了信息化技術(shù)、應(yīng)用、管理等的規(guī)范化要求。安全體系定義了確保數(shù)據(jù)安全所需要的技術(shù)、流程、制度等。
通過對數(shù)據(jù)中心目標(biāo)架構(gòu)和現(xiàn)狀架構(gòu)之間的差距分析來識別和定義路線圖組件或工作包,這些組件或工作包通??梢宰鳛楠?dú)立的項(xiàng)目來組織實(shí)施。典型的路線圖組件包括:數(shù)據(jù)中心現(xiàn)狀調(diào)研與診斷、數(shù)據(jù)中心總體規(guī)劃、數(shù)據(jù)中心架構(gòu)設(shè)計(jì)、數(shù)據(jù)模型設(shè)計(jì)與驗(yàn)證、數(shù)據(jù)治理體系設(shè)計(jì)與構(gòu)建、數(shù)據(jù)中心物理環(huán)境建設(shè)、數(shù)據(jù)中心IT運(yùn)行環(huán)境建設(shè)、數(shù)據(jù)交換平臺建設(shè)、數(shù)據(jù)管理平臺建設(shè)、數(shù)據(jù)分析平臺建設(shè)、特定專題的數(shù)據(jù)分析應(yīng)用、數(shù)據(jù)中心運(yùn)行維護(hù)等。
企業(yè)數(shù)據(jù)中心建設(shè)可以劃分為三個發(fā)展階段:數(shù)據(jù)中心設(shè)計(jì)與平臺驗(yàn)證、數(shù)據(jù)中心深化建設(shè)和數(shù)據(jù)中心優(yōu)化應(yīng)用,如圖3所示。第一階段重點(diǎn)完成數(shù)據(jù)中心總體規(guī)劃、架構(gòu)設(shè)計(jì)和初步的軟硬件環(huán)境建設(shè),通過選擇試點(diǎn)單位、試點(diǎn)業(yè)務(wù)驗(yàn)證相關(guān)技術(shù)和設(shè)計(jì)方案的可行性。第二階段重點(diǎn)在橫縱兩個方向上深化建設(shè),橫向擴(kuò)大試點(diǎn)單位、試點(diǎn)業(yè)務(wù)的范圍,縱向擴(kuò)展數(shù)據(jù)資源開發(fā)利用的深度,如:數(shù)據(jù)鉆取、數(shù)據(jù)挖掘、大數(shù)據(jù)實(shí)時分析等。第三階段重點(diǎn)是優(yōu)化,包括運(yùn)行環(huán)境的優(yōu)化、應(yīng)用系統(tǒng)的優(yōu)化、數(shù)據(jù)模型的優(yōu)化、數(shù)據(jù)中心業(yè)務(wù)架構(gòu)的優(yōu)化等。
圖3 數(shù)據(jù)中心實(shí)施路線
當(dāng)然,由于企業(yè)各級人員對數(shù)據(jù)的需求是變化的,數(shù)據(jù)中心建設(shè)主體工程雖然呈現(xiàn)一定的階段性,可以依托特定的項(xiàng)目來完成,但從數(shù)據(jù)中心的運(yùn)行和數(shù)據(jù)資源開發(fā)利用角度來看,數(shù)據(jù)中心建設(shè)實(shí)際上是一個持續(xù)工程,其價值往往需要依賴于數(shù)據(jù)中心的日常運(yùn)行管理,因此,數(shù)據(jù)中心治理是整個數(shù)據(jù)中心建設(shè)的核心。
在企業(yè)數(shù)據(jù)中心建設(shè)過程中,引入架構(gòu)思想,采用復(fù)雜組織體架構(gòu)方法開展數(shù)據(jù)中心架構(gòu)設(shè)計(jì)與治理,有助于將數(shù)據(jù)中心資產(chǎn)與企業(yè)發(fā)展戰(zhàn)略、運(yùn)營管理目標(biāo)進(jìn)行很好地對接,使數(shù)據(jù)資源管理能夠動態(tài)滿足管理與決策的需求,實(shí)現(xiàn)數(shù)據(jù)中心價值最大化。
[1]TOGAF標(biāo)準(zhǔn)9.1版,The Open GroupA著,張新國等譯,2017年1月第1版
[2]中國航空工業(yè)集團(tuán)統(tǒng)一IT架構(gòu)要求V2.0,2016年
[3]中國商用飛機(jī)有限責(zé)任公司十三五信息化規(guī)劃,2017年
[4]https://baike.baidu.com/item/%E6%95%B0%E6%8D%AE%E4%B8%AD%E5%BF%83/967340?fr=aladdin