五礦集團(tuán)：用心構(gòu)建企業(yè)級數(shù)據(jù)倉庫

張苗苗

中國五礦集團(tuán)公司（以下簡稱“五礦集團(tuán)”）是一家國際化的礦業(yè)公司，成立于1950年。五礦主要機(jī)構(gòu)遍布全球28個(gè)國家和地區(qū)，擁有17.7萬員工，控股9家境內(nèi)外上市公司。近年來，五礦集團(tuán)深入推進(jìn)戰(zhàn)略轉(zhuǎn)型，通過富有成效的國內(nèi)外重組并購和業(yè)務(wù)整合，已從過去計(jì)劃經(jīng)濟(jì)色彩濃厚的傳統(tǒng)國有企業(yè)轉(zhuǎn)變?yōu)樽灾鹘?jīng)營、具有較強(qiáng)競爭力的現(xiàn)代企業(yè)，從單一的進(jìn)出口貿(mào)易公司轉(zhuǎn)變?yōu)橐再Y源為依托、上下游一體化的金屬礦產(chǎn)集團(tuán)，從單純從事產(chǎn)品經(jīng)營的專業(yè)化公司已經(jīng)轉(zhuǎn)變?yōu)楫a(chǎn)融結(jié)合的綜合型企業(yè)集團(tuán)。

目前，五礦集團(tuán)擁有有色金屬、黑色金屬流通、黑色金屬礦業(yè)、金融、地產(chǎn)建設(shè)、科技六大業(yè)務(wù)中心，其中在金屬礦產(chǎn)三大核心主業(yè)方面，五礦集團(tuán)上中下游一體化產(chǎn)業(yè)鏈基本貫通，形成了全球化營銷網(wǎng)絡(luò)布局;在三大多元化主業(yè)方面，五礦優(yōu)化產(chǎn)業(yè)結(jié)構(gòu)，推進(jìn)產(chǎn)融結(jié)合，加速經(jīng)營布局，逐步提升對核心主業(yè)的協(xié)同與支撐能力。如此龐大的集團(tuán)運(yùn)轉(zhuǎn)起來無疑困難重重，而信息化建設(shè)就是解決這些問題的動力和武器。

近年來，多元化經(jīng)營帶來的管理問題并沒有成為五礦發(fā)展的瓶頸，這背后重要的功臣是信息化技術(shù)的有力支撐。五礦是央企信息化建設(shè)先進(jìn)單位，連續(xù)三年在央企信息化水平評測中達(dá)到A級。

早在2000年，五礦的第一個(gè)信息化規(guī)劃出爐之時(shí)，秉承“小步快跑、量身定做”的規(guī)劃理念，五礦信息管理部就自己打造了鋼鐵貿(mào)易ERP、有色貿(mào)易ERP等系統(tǒng)，把業(yè)務(wù)流程管理起來。此后，五礦又陸續(xù)開發(fā)了統(tǒng)一的標(biāo)準(zhǔn)用戶權(quán)限管理系統(tǒng)以及十幾套業(yè)務(wù)管理系統(tǒng)，這些系統(tǒng)的基礎(chǔ)數(shù)據(jù)和用戶權(quán)限都由統(tǒng)一平臺進(jìn)行管理。2006年是五礦信息化建設(shè)的一個(gè)關(guān)鍵年，因其企業(yè)內(nèi)部經(jīng)營范圍的多元以及業(yè)務(wù)流程的繁雜，他們決定引進(jìn)國際套裝軟件SAP ERP來整合業(yè)務(wù)與管理信息系統(tǒng)。

但是在系統(tǒng)上線后，五礦信息管理部發(fā)現(xiàn)經(jīng)常使用SAP系統(tǒng)的領(lǐng)導(dǎo)層并不多，主要是因?yàn)橄到y(tǒng)中的數(shù)據(jù)非常細(xì)化，更適合運(yùn)營部門使用。另外，五礦還有諸多如物流系統(tǒng)、分銷系統(tǒng)、郵件系統(tǒng)等涉及不同業(yè)務(wù)范圍和流程的專業(yè)系統(tǒng)，其中大部分都已運(yùn)行多年，累積了大量的歷史數(shù)據(jù)。隨著業(yè)務(wù)的發(fā)展，無論領(lǐng)導(dǎo)層還是各級公司的管理人員、業(yè)務(wù)人員、HR人員，都希望能從龐雜的歷史 數(shù)據(jù)中獲得更多更準(zhǔn)確的信息，將不同業(yè)務(wù)系統(tǒng)中的相關(guān)信息集中起來，實(shí)現(xiàn)各部門、各分支間的信息共享，為業(yè)務(wù)決策提供更多實(shí)時(shí)的、橫向的、全局的支持，以提高效率，幫助公司提高市場競爭力和效益。因此，建立一個(gè)統(tǒng)一的、高質(zhì)量的管理與決策支持系統(tǒng)，成為中國五礦的迫切需求。

打好數(shù)據(jù)倉庫“地基”

需求明確后，2008年，數(shù)據(jù)倉庫項(xiàng)目建設(shè)正式開始。信息中心經(jīng)過縝密分析得出結(jié)論，建設(shè)高效的管理與決策支持系統(tǒng)，其首要一點(diǎn)就是要進(jìn)行高質(zhì)量的數(shù)據(jù)整合存儲，其中涉及對多源數(shù)據(jù)的甄別存儲、數(shù)據(jù)處理流程的改造、保證高質(zhì)量前提下的數(shù)據(jù)統(tǒng)一整合等，這些問題需要通過數(shù)據(jù)倉庫技術(shù)來解決。

具體來講，系統(tǒng)建設(shè)過程中面臨的數(shù)據(jù)整合存儲的問題包括：

■由于源數(shù)據(jù)來自于SAP R3、物流系統(tǒng)、分銷系統(tǒng)等系統(tǒng)，無法快速的對這些系統(tǒng)的數(shù)據(jù)進(jìn)行整合，并實(shí)現(xiàn)全量和增量的抽取;

■在讀取數(shù)據(jù)的時(shí)候，無法保障對源系統(tǒng)的影響，對各業(yè)務(wù)系統(tǒng)帶來很大壓力數(shù)據(jù)抽取壓力較大;

■最終的數(shù)據(jù)展現(xiàn)涉及到很多的業(yè)務(wù)系統(tǒng)，很難保證數(shù)據(jù)能規(guī)則并且準(zhǔn)確的進(jìn)入各個(gè)展現(xiàn)系統(tǒng);

■由單獨(dú)數(shù)據(jù)采集平臺處理的手工錄入數(shù)據(jù)，也需要統(tǒng)一集成處理;

運(yùn)行多年的諸多業(yè)務(wù)范圍和流程的專業(yè)業(yè)務(wù)系統(tǒng)，累積的大量歷史數(shù)據(jù)如何更好地存儲。

數(shù)據(jù)倉庫可以稱之為管理與決策支持系統(tǒng)的“地基”，能夠把來自于不同業(yè)務(wù)系統(tǒng)的數(shù)據(jù)有機(jī)地集中整合處理，建立統(tǒng)一數(shù)據(jù)整合存儲平臺。五礦對于數(shù)據(jù)平臺的要求不僅僅是能夠提供及時(shí)靈活查詢和分析，還能夠提供符合五礦要求的復(fù)雜報(bào)表，只有這 樣的數(shù)據(jù)展現(xiàn)平臺才能夠滿足五礦的不同管理層和業(yè)務(wù)部門的需求。

提升數(shù)據(jù)整合性能

在制定數(shù)據(jù)整合方案時(shí)，五礦信息中心綜合對比、測試了多種ETL產(chǎn)品，反復(fù)運(yùn)行測試最終決定建立高效穩(wěn)定的數(shù)據(jù)集成平臺，對多平臺、多業(yè)務(wù)系統(tǒng)、多數(shù)據(jù)庫狀況下復(fù)雜結(jié)構(gòu)的數(shù)據(jù)進(jìn)行整合，并實(shí)現(xiàn)全量和增量的抽取。

談到方案制定之初的歷程時(shí)，五礦信息管理部副總經(jīng)理何瑞娟表示，他們從ETL對平臺的支持、對數(shù)據(jù)源的支持、數(shù)據(jù)轉(zhuǎn)換功能、集成和開放性等方面進(jìn)行了全方位評估，綜合考慮選中了各方面性能都很出色的產(chǎn)品。同時(shí)，系統(tǒng)在接駁SAP系統(tǒng)方面表現(xiàn)除了成熟的實(shí)施經(jīng)驗(yàn)，滿足了現(xiàn)有的業(yè)務(wù)需求。

據(jù)了解，五礦整個(gè)數(shù)據(jù)倉庫分為源數(shù)據(jù)層、緩沖層、整合層及展示層四部分，具體來講，通過控制中心對各種源數(shù)據(jù)的整合，把SAP、物流、分銷、集中結(jié)算等系統(tǒng)數(shù)據(jù)采集到一個(gè)臨時(shí)緩沖區(qū)中，然后通過產(chǎn)品的數(shù)據(jù)清洗和標(biāo)準(zhǔn)化功能，把采集到的數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化?？刂浦行牡母咝阅艿耐掏铝亢蛯?fù)雜業(yè)務(wù)的強(qiáng)大計(jì)算優(yōu)勢，能夠把標(biāo)準(zhǔn)化的數(shù)據(jù)進(jìn)行復(fù)雜的計(jì)算后準(zhǔn)確的展現(xiàn)在報(bào)表平臺，然后應(yīng)用于各個(gè)系統(tǒng)中。

平臺提升決策水平

通過建立企業(yè)級數(shù)據(jù)倉庫，五礦建立了一個(gè)高效穩(wěn)定的數(shù)據(jù)整合平臺，將不同業(yè)務(wù)系統(tǒng)中的相關(guān)信息集中統(tǒng)一管理，實(shí)現(xiàn)了數(shù)據(jù)的標(biāo)準(zhǔn)化處理以及面向銷售、采購、財(cái)務(wù)、庫存、預(yù)算即時(shí)查詢、多維分析功能。作為一個(gè)核心數(shù)據(jù)整合引擎，控制中心幫助五礦實(shí)現(xiàn)了下述功能：

■集成了SAP R3、物流、分銷、集中結(jié)算等業(yè)務(wù)系統(tǒng)，以及財(cái)務(wù)、銷售、內(nèi)控等系統(tǒng)的數(shù)據(jù)，擴(kuò)展性強(qiáng);

■提供高效穩(wěn)定的數(shù)據(jù)集成平臺，快速且準(zhǔn)確的提供各個(gè)展現(xiàn)系統(tǒng)所需要的數(shù)據(jù);

■無編碼、圖形化的開發(fā)，大大縮短了項(xiàng)目上線周期;

在數(shù)據(jù)流動的過程中，大大減輕了各業(yè)務(wù)系統(tǒng)的供數(shù)壓力，實(shí)現(xiàn)了完整的全公司數(shù)據(jù)統(tǒng)一集中管理環(huán)境，各種取數(shù)和報(bào)表不需要在業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫中直接抽取，確保業(yè)務(wù)系統(tǒng)的絕對安全。

對于數(shù)據(jù)整合平臺的作用，何瑞娟做了一個(gè)形象的比喻，認(rèn)為它更像是企業(yè)管理與決策支持系統(tǒng)底層的一個(gè)樞紐與基石，如果不出問題，可能發(fā)現(xiàn)不了它的重要性，一旦發(fā)生一點(diǎn)閃失造成的結(jié)果會是造成整個(gè)系統(tǒng)全部癱瘓。

現(xiàn)在，五礦的管理與決策支持系統(tǒng)應(yīng)用情況非常好，五礦對內(nèi)、對外的所有權(quán)威統(tǒng)計(jì)數(shù)字都來自此系統(tǒng)，高質(zhì)量的數(shù)據(jù)為領(lǐng)導(dǎo)決策提供了有力的支持。

比如，五礦每個(gè)季度舉辦的高層戰(zhàn)略咨詢會，集團(tuán)各執(zhí)行部門領(lǐng)導(dǎo)和各業(yè)務(wù)單位的管理人員都會通過系統(tǒng)的各種數(shù)據(jù)分析進(jìn)行整體業(yè)務(wù)經(jīng)營討論，發(fā)現(xiàn)問題、制定下階段計(jì)劃。不僅僅是決策支持，在戰(zhàn)略、業(yè)務(wù)、管理、流程、人才等五個(gè)層面，管理與決策支持系統(tǒng)都發(fā)揮了重要作用，并且各業(yè)務(wù)單位也紛紛在此平臺上搭建各自的系統(tǒng)，利用統(tǒng)一的數(shù)據(jù)整合平臺擴(kuò)展業(yè)務(wù)，提升競爭力。

“企業(yè)在不斷發(fā)展的同時(shí)，信息化建設(shè)肯定也要不斷的進(jìn)步，目前，五礦正信心十足地實(shí)踐著他們對未來的規(guī)劃。”何瑞娟表示。