主數(shù)據(jù)管理系統(tǒng)在企業(yè)的應(yīng)用研究

張春燕 王國玲

（中海油信息科技有限公司信息技術(shù)分公司 天津 300450）

當(dāng)前，隨著世界經(jīng)濟(jì)全球化不斷地走深走實(shí)，國內(nèi)各類企業(yè)在市場上面臨越來越激烈的競爭，不論是國內(nèi)市場還是國外市場，國內(nèi)企業(yè)均面臨來自多方面的機(jī)遇與挑戰(zhàn)。所以，當(dāng)前企業(yè)增強(qiáng)互聯(lián)網(wǎng)意識(shí)和信息化基礎(chǔ)建設(shè)顯得非常重要。根據(jù)已有的信息統(tǒng)計(jì)，在過去的很長一段時(shí)間內(nèi)，全球企業(yè)在信息化建設(shè)上投入了大量的資金和技術(shù)支持。為了保護(hù)企業(yè)內(nèi)部的機(jī)密、結(jié)構(gòu)與穩(wěn)定性，各種國內(nèi)企業(yè)建立了各自的專屬信息化技術(shù)管理系統(tǒng)，幫助企業(yè)提高生產(chǎn)效率，創(chuàng)造更大的效益和價(jià)值。本文正是在此大背景下，介紹企業(yè)數(shù)據(jù)管理的現(xiàn)狀，介紹企業(yè)主數(shù)據(jù)管理系統(tǒng)的架構(gòu)，分析企業(yè)實(shí)現(xiàn)主數(shù)據(jù)管理的方法，總結(jié)相關(guān)經(jīng)驗(yàn)，為后續(xù)企業(yè)數(shù)據(jù)管理提供參考價(jià)值。

1 企業(yè)數(shù)據(jù)管理現(xiàn)狀

在當(dāng)前已有的國內(nèi)優(yōu)秀企業(yè)當(dāng)中，尤其是國有企業(yè)、大型的私有企業(yè)等，其已經(jīng)跟上了時(shí)代的步伐，形成了一些比較先進(jìn)的管理經(jīng)驗(yàn)，建設(shè)了屬于本企業(yè)的信息化管理技術(shù)。在企業(yè)信息化管理當(dāng)中，普遍存在多個(gè)不同的企業(yè)數(shù)據(jù)管理系統(tǒng)。這些管理系統(tǒng)在每日的數(shù)據(jù)處理當(dāng)中會(huì)產(chǎn)生龐大的數(shù)據(jù)庫，因此，需要專人對其進(jìn)行管理，來應(yīng)對企業(yè)大數(shù)據(jù)體量下的運(yùn)行與發(fā)展。已有的企業(yè)數(shù)據(jù)，不僅包括滿足企業(yè)基礎(chǔ)運(yùn)行的云數(shù)據(jù)，也包括過去企業(yè)發(fā)展當(dāng)中保留的歷史遺留數(shù)據(jù)。歷史遺留數(shù)據(jù)是不需要后續(xù)繼續(xù)使用的，因此，在發(fā)展過程中可以定期對其進(jìn)行清除。若從數(shù)據(jù)的共享性與變化的角度來看，也可以把數(shù)據(jù)分為交流數(shù)據(jù)與主流數(shù)據(jù)，這兩種數(shù)據(jù)從時(shí)間的角度上看，都屬于主數(shù)據(jù)，也可稱之為當(dāng)前數(shù)據(jù)。在實(shí)際的管理中，企業(yè)的信息技術(shù)管理人員需要將不同的數(shù)據(jù)，采用不同的辦法，對其進(jìn)行處理與分類，這也是一種高效的數(shù)據(jù)管理方式［1］。

目前來看，企業(yè)的數(shù)據(jù)可以分為正在運(yùn)行當(dāng)中的主流數(shù)據(jù)和出現(xiàn)故障亟需維修的備用數(shù)據(jù)。這兩種數(shù)據(jù)在運(yùn)行過程中，其數(shù)量會(huì)發(fā)生轉(zhuǎn)化，換言之，主流數(shù)據(jù)可能會(huì)轉(zhuǎn)化成備用數(shù)據(jù)，而備用數(shù)據(jù)經(jīng)過維修后也可轉(zhuǎn)化成為主流數(shù)據(jù)。現(xiàn)今，在“互聯(lián)網(wǎng)+”時(shí)代，國內(nèi)大多數(shù)企業(yè)還沒有形成全面、系統(tǒng)的主流數(shù)據(jù)管理模式，很多管理經(jīng)驗(yàn)還借鑒于國外的優(yōu)秀企業(yè)。企業(yè)內(nèi)部分主流數(shù)據(jù)往往并沒有整合在一起，大多分布在企業(yè)內(nèi)多個(gè)不同的業(yè)務(wù)系統(tǒng)當(dāng)中。而不同的業(yè)務(wù)系統(tǒng)有其各自的基本發(fā)展模式，有些管理辦法在系統(tǒng)內(nèi)并不適用，所以目前來看，亟須形成一種完善的企業(yè)數(shù)據(jù)管理模式。

當(dāng)前，國內(nèi)主流企業(yè)主要有以下兩種管理內(nèi)部數(shù)據(jù)的方式。

第一種是分散式管理。在此管理模式中，企業(yè)內(nèi)的各個(gè)信息系統(tǒng)的關(guān)聯(lián)應(yīng)用會(huì)歸屬于各自不同的管理渠道，也就是所謂的各司其職管理方式。但是這種管理方式存在一個(gè)弊端，那就是信息調(diào)用比較困難。如果企業(yè)要想調(diào)用相關(guān)聯(lián)系統(tǒng)中的數(shù)據(jù)，或者是把其他數(shù)據(jù)進(jìn)行整合來滿足關(guān)聯(lián)系統(tǒng)使用，則需要采取比較繁瑣的方式進(jìn)行調(diào)用。例如，企業(yè)內(nèi)人力資源池需管理客戶關(guān)系，必然要建立企業(yè)與客戶、企業(yè)內(nèi)部員工等多種人員關(guān)系的管理方式［2］。然而，這些系統(tǒng)應(yīng)用數(shù)據(jù)可能歸屬各個(gè)不同的部門，人力資源部門往往對其難以把握。因此，企業(yè)可以考慮在人力資源總系統(tǒng)中建立多種人員關(guān)系的管理模式，或者放開管理權(quán)限，讓人力資源部門的工作人員參與管理，這樣也可以使管理的效率得到提升，并且提高管理質(zhì)量。所以，企業(yè)總的管理方式必然不是分散的，而是最終要匯聚在一起的，這才是未來企業(yè)管理的大方向。

第二種管理方式就是現(xiàn)在比較常見的統(tǒng)一數(shù)據(jù)管理模式。企業(yè)根據(jù)各種不同的管理辦法，將各個(gè)部門所管理的第一手?jǐn)?shù)據(jù)進(jìn)行處理與分析，然后統(tǒng)一歸整到企業(yè)最終的總數(shù)據(jù)庫中，在總數(shù)據(jù)庫中統(tǒng)籌進(jìn)行調(diào)用、管理、運(yùn)行，而權(quán)限歸屬于企業(yè)的主要領(lǐng)導(dǎo)人員所有。這種數(shù)據(jù)庫的問題在于數(shù)據(jù)體量龐大，后期不便于維護(hù)，若數(shù)據(jù)庫在運(yùn)行中出現(xiàn)數(shù)據(jù)的錯(cuò)誤或遺失，則會(huì)影響其他數(shù)據(jù)的使用，造成數(shù)據(jù)的“多米諾骨牌”效應(yīng)。但是仍然不可否認(rèn)，這種管理模式具有其他管理模式所沒有的優(yōu)點(diǎn)，它不僅具有比較強(qiáng)的安全性，便于維護(hù)，也可以從已有的管理系統(tǒng)當(dāng)中較快且全面地進(jìn)行調(diào)用。例如，如果某數(shù)據(jù)出現(xiàn)了異常，需要停止數(shù)據(jù)庫運(yùn)行進(jìn)行維護(hù)，則中央處理器可以考慮將主數(shù)據(jù)管理系統(tǒng)的問題提前告知各個(gè)子系統(tǒng)，各個(gè)子系統(tǒng)則會(huì)停止運(yùn)行，待主系統(tǒng)的問題處理完畢后，再進(jìn)行運(yùn)行，這樣極大地提高了數(shù)據(jù)的處理與信息的使用效率，從而能夠?qū)崿F(xiàn)主數(shù)據(jù)的管理與維修一體化，維護(hù)了企業(yè)的數(shù)據(jù)安全，提高了主數(shù)據(jù)的運(yùn)行效率［3］。

2 企業(yè)主數(shù)據(jù)管理系統(tǒng)的架構(gòu)

2.1 企業(yè)主數(shù)據(jù)管理系統(tǒng)總體結(jié)構(gòu)

眾所周知，當(dāng)前已有的主數(shù)據(jù)管理系統(tǒng)模型設(shè)計(jì)可以滿足當(dāng)前企業(yè)大多數(shù)基本需求。根據(jù)目前已有的主流設(shè)計(jì)方案可以發(fā)現(xiàn)，能夠滿足系統(tǒng)總體架構(gòu)的設(shè)計(jì)是基于中間渠道的主體架構(gòu)。中間渠道承擔(dān)主要的信息交換之責(zé)，在實(shí)際的數(shù)據(jù)處理過程中，主要承擔(dān)起數(shù)據(jù)交換、信息加工及數(shù)據(jù)庫基本運(yùn)行的工作。由此，企業(yè)的信息技術(shù)管理人員經(jīng)過多方比較，形成了企業(yè)的主數(shù)據(jù)管理系統(tǒng)。而主數(shù)據(jù)管理系統(tǒng)也可以說是信息交流中間渠道的載體，上述辦法把信息交流與信息加工結(jié)合起來，完全凸顯中間渠道的作用，做到了信息交流主流系統(tǒng)與總數(shù)據(jù)庫相結(jié)合［4］。另外，這一方法賦予了主數(shù)據(jù)庫更大的容量與處理水平。從以上企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本結(jié)構(gòu)中可以發(fā)現(xiàn)，企業(yè)基本管理系統(tǒng)主要包括信息交流基本適配器、基本適配器的管控與處理、主數(shù)據(jù)的基本管理、系統(tǒng)應(yīng)用的基本管理。在此基礎(chǔ)上，管理系統(tǒng)保證各類數(shù)據(jù)進(jìn)行交換，建立適配器的運(yùn)行交換環(huán)境，形成交換空間。企業(yè)主數(shù)據(jù)管理系統(tǒng)要在中間渠道交流的基礎(chǔ)上進(jìn)行信息交換，且要符合企業(yè)主數(shù)據(jù)庫的基本要求。綜上所述，企業(yè)主數(shù)據(jù)管理系統(tǒng)最主要的是中間渠道操作平臺(tái)，其次是數(shù)據(jù)交換環(huán)境。在已有的數(shù)據(jù)交換環(huán)境中，最重要的內(nèi)容是適配器的基本運(yùn)行條件，換言之，企業(yè)要構(gòu)建符合適配器運(yùn)行的基本環(huán)境。在良好的環(huán)境下，主數(shù)據(jù)管理系統(tǒng)才能夠滿足輸入與輸出的良性轉(zhuǎn)換，將輸入數(shù)據(jù)按照已有的要求轉(zhuǎn)換成輸出數(shù)據(jù)，提高數(shù)據(jù)處理的效率。如果數(shù)據(jù)處理處于良性運(yùn)行，那么數(shù)據(jù)的監(jiān)控與管理則變得更加高效，它將為系統(tǒng)提供全方位、多角度、高質(zhì)量的管理，為系統(tǒng)的安全、穩(wěn)定運(yùn)行提供保障。

2.2 基于流水線的數(shù)據(jù)管理模式

從已有的數(shù)據(jù)交流方式中可以發(fā)現(xiàn)，主數(shù)據(jù)管理系統(tǒng)的適配器在主數(shù)據(jù)管理系統(tǒng)結(jié)構(gòu)中起著非常關(guān)鍵的作用，可以說，大部分主數(shù)據(jù)的處理與分析需要借助主數(shù)據(jù)的適配器的合理運(yùn)行。所以，要構(gòu)建良好的數(shù)據(jù)適配器工作環(huán)境，把完善適配環(huán)境當(dāng)成建立主數(shù)據(jù)管理系統(tǒng)的重點(diǎn)工作。在企業(yè)的信息數(shù)據(jù)管理系統(tǒng)中，需要大量的主數(shù)據(jù)相互變換與轉(zhuǎn)化，轉(zhuǎn)化需要建立符合各自數(shù)據(jù)體量的適配器來滿足適配合理運(yùn)行。在此背景下，通過向多種渠道借鑒學(xué)習(xí)，吸取了常見的流水線作業(yè)管理經(jīng)驗(yàn)，以提高數(shù)據(jù)庫管理的效率。由于不同的數(shù)據(jù)適配器所需要轉(zhuǎn)化的數(shù)據(jù)類型和數(shù)據(jù)基本格式存在差異，因此，需要對已有的數(shù)據(jù)適配器進(jìn)行一定的加工與處理，使各種數(shù)據(jù)適配器能夠較快地處理各自已有的數(shù)據(jù)。因此，可以嘗試在系統(tǒng)定義的基礎(chǔ)數(shù)據(jù)庫中，找到相應(yīng)的基本適配器，再根據(jù)已有的需求合理加工，最終在系統(tǒng)中創(chuàng)造出符合實(shí)際情況的數(shù)據(jù)適配器［5］。這樣不僅可以保證適配器的基本工作要求，也可以使適配器更符合實(shí)際需求，提高數(shù)據(jù)處理的工作效率。

3 實(shí)現(xiàn)企業(yè)主數(shù)據(jù)管理系統(tǒng)的方法

為了發(fā)揮主數(shù)據(jù)管理系統(tǒng)的功能，應(yīng)該先將各個(gè)不同的關(guān)聯(lián)系統(tǒng)整合起來，充分實(shí)現(xiàn)各個(gè)不同的子系統(tǒng)與關(guān)鍵數(shù)據(jù)的相互聯(lián)系。當(dāng)前，數(shù)據(jù)管理系統(tǒng)主要采用兩種不同的解決方案來實(shí)現(xiàn)既定目標(biāo)：一是基于ETL 工具的方式來實(shí)現(xiàn)；二是基于SOA 的基本體系架構(gòu)來實(shí)現(xiàn)。

對于第一種方式，ETL 工具的實(shí)現(xiàn)途徑常用ETL工具本身，其具有數(shù)據(jù)捕捉與數(shù)據(jù)轉(zhuǎn)化的能力，通常使用它來實(shí)現(xiàn)MDM系統(tǒng)中異構(gòu)系統(tǒng)的數(shù)據(jù)關(guān)聯(lián)、整合與排列。目前，很多相關(guān)的廠商都推出了自己的數(shù)據(jù)系統(tǒng)，它們均是基于ETL 來解決數(shù)據(jù)管理的問題。當(dāng)其中的一個(gè)數(shù)據(jù)系統(tǒng)發(fā)生變化時(shí)，其關(guān)聯(lián)的部位就會(huì)捕捉到相關(guān)的變化，進(jìn)而把這種變化傳遞到主數(shù)據(jù)管理系統(tǒng)中去，改變主數(shù)據(jù)管理系統(tǒng)中的數(shù)值。ETL 工具會(huì)根據(jù)這種轉(zhuǎn)變清除過去的歷史記錄，從而形成新的重組數(shù)據(jù)。同時(shí)，系統(tǒng)也會(huì)將不同的數(shù)據(jù)分發(fā)給相關(guān)聯(lián)的業(yè)務(wù)系統(tǒng)，由業(yè)務(wù)相關(guān)的業(yè)務(wù)系統(tǒng)進(jìn)行審批。在后續(xù)的設(shè)計(jì)中，可以考慮把ETL 系統(tǒng)加入相關(guān)的流程引擎，可以提前布局流程的系統(tǒng)設(shè)計(jì)，使得不同的流程實(shí)現(xiàn)前后切換?；贓TL系統(tǒng)的設(shè)計(jì)的優(yōu)點(diǎn)是工作時(shí)效高，而缺點(diǎn)是工作選擇的途徑較為單一，且受到網(wǎng)絡(luò)影響的程度較大。

第二種方法是基于SOA 架構(gòu)的主數(shù)據(jù)管理系統(tǒng)，這種方法主要采用web service來實(shí)現(xiàn)不同的系統(tǒng)互聯(lián)互通，這種系統(tǒng)處理數(shù)據(jù)的方法主要是使用數(shù)據(jù)應(yīng)用和關(guān)聯(lián)適配器，通過不同類型的適配器，使得關(guān)聯(lián)數(shù)據(jù)推送消息。SOA 系統(tǒng)自帶監(jiān)控功能，可以實(shí)現(xiàn)對系統(tǒng)中的工作流引擎進(jìn)行監(jiān)控，并且能夠?qū)崟r(shí)控制主數(shù)據(jù)的全過程。另外，該系統(tǒng)的基本架構(gòu)是基于J2EE的架構(gòu)，系統(tǒng)的方法將更加多樣化，拓展性也比較好。當(dāng)然，如果數(shù)據(jù)量較大，該系統(tǒng)的效率會(huì)降低。

4 實(shí)現(xiàn)效果

當(dāng)企業(yè)主數(shù)據(jù)管理系統(tǒng)完工后，工作人員需要測試系統(tǒng)的運(yùn)行情況。根據(jù)已有的既定方案，企業(yè)內(nèi)部各個(gè)部門的應(yīng)用系統(tǒng)都是獨(dú)立運(yùn)行的，它們存儲(chǔ)的數(shù)據(jù)都具有唯一性，并由專門管理的人員進(jìn)行管理。例如，在企業(yè)人力資源部門中，部門會(huì)派專門的人員輸入或輸出數(shù)據(jù)，也包括后期數(shù)據(jù)安全管理與數(shù)據(jù)運(yùn)行維護(hù)。但是，企業(yè)其他部門也存在不同的客戶關(guān)系，需要其他部門內(nèi)相應(yīng)的管理人員對其進(jìn)行數(shù)據(jù)梳理，這也就是所謂的“專人專職”管理模式。雖然系統(tǒng)內(nèi)管理的工作量略有增加，但管理質(zhì)量和安全性都得到了保證。在目前的數(shù)據(jù)管理信息系統(tǒng)中，相同的數(shù)據(jù)僅需在主流數(shù)據(jù)信息系統(tǒng)便可以實(shí)現(xiàn)數(shù)據(jù)處理與信息交換，可以通過中間渠道交換到其他的子數(shù)據(jù)系統(tǒng)中去，使數(shù)據(jù)交換具有非常高的靈活性。待企業(yè)的主信息管理系統(tǒng)實(shí)現(xiàn)后發(fā)現(xiàn)，它大大提高了企業(yè)的數(shù)據(jù)管理效率與質(zhì)量。從量變和質(zhì)變兩個(gè)角度進(jìn)行統(tǒng)計(jì)與維護(hù)發(fā)現(xiàn)，在實(shí)施主數(shù)據(jù)管理系統(tǒng)后，企業(yè)能夠更好地把控已有的業(yè)務(wù)伙伴、客戶關(guān)系、供應(yīng)鏈等，也能更容易地統(tǒng)計(jì)這些數(shù)據(jù)。從數(shù)據(jù)質(zhì)量的角度來看，主數(shù)據(jù)管理系統(tǒng)可以避免傳送錯(cuò)誤數(shù)據(jù)，對于已有的錯(cuò)誤，數(shù)據(jù)會(huì)進(jìn)行自糾與系統(tǒng)管理，把已有錯(cuò)誤數(shù)據(jù)及時(shí)剔除，并更換為正確的數(shù)據(jù)，提高了系統(tǒng)中數(shù)據(jù)庫數(shù)據(jù)的安全性與準(zhǔn)確性。

此外，數(shù)據(jù)的數(shù)量和質(zhì)量是存在關(guān)聯(lián)的。數(shù)據(jù)的數(shù)量降低，質(zhì)量必然會(huì)下降；數(shù)據(jù)的數(shù)量提高，質(zhì)量必然也會(huì)提高。在未來，主數(shù)據(jù)管理系統(tǒng)的數(shù)據(jù)處理報(bào)錯(cuò)數(shù)據(jù)將會(huì)越來越少，說明目前的主數(shù)據(jù)管理系統(tǒng)取得了非常好的成效。這使得關(guān)聯(lián)的數(shù)據(jù)在企業(yè)各個(gè)部門的子數(shù)據(jù)管理系統(tǒng)中也得到了比較充分的調(diào)用，提高了關(guān)聯(lián)數(shù)據(jù)的運(yùn)行效率，降低了部門間關(guān)聯(lián)性數(shù)據(jù)的錯(cuò)誤率，避免發(fā)生安全數(shù)據(jù)泄露等安全性問題。通過主數(shù)據(jù)管理系統(tǒng)的效果反饋發(fā)現(xiàn)，在企業(yè)實(shí)施主數(shù)據(jù)管理系統(tǒng)后，企業(yè)在數(shù)據(jù)系統(tǒng)運(yùn)行效率、數(shù)據(jù)的自動(dòng)化管理、數(shù)據(jù)一體化、數(shù)據(jù)質(zhì)量與數(shù)量等方面取得了顯著提高，其數(shù)據(jù)處理的工作效率也大大提升，給企業(yè)平穩(wěn)運(yùn)行與盈利帶來了極大的改善。

5 結(jié)語

現(xiàn)如今，世界經(jīng)濟(jì)全球化正在進(jìn)一步演變與發(fā)展，國內(nèi)的各種企業(yè)也在不斷改革與轉(zhuǎn)化。為了更好地滿足國內(nèi)企業(yè)的發(fā)展，我國需要提高企業(yè)主信息管理系統(tǒng)的應(yīng)用水平，并且進(jìn)一步深化企業(yè)主信息管理系統(tǒng)的程序調(diào)節(jié)、信息調(diào)用、子系統(tǒng)分配等問題。本文分析了企業(yè)主數(shù)據(jù)管理系統(tǒng)的發(fā)展現(xiàn)狀，在此基礎(chǔ)上，詳細(xì)劃分了企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本架構(gòu)，接著概述了企業(yè)主數(shù)據(jù)管理系統(tǒng)的實(shí)現(xiàn)途徑，主要包括基于ETL工具的實(shí)現(xiàn)方法與基于SOA體系架構(gòu)的實(shí)現(xiàn)方法。最后，對已有的企業(yè)主數(shù)據(jù)管理系統(tǒng)的實(shí)現(xiàn)效果進(jìn)行分析并發(fā)現(xiàn)，當(dāng)前我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)取得了顯著的進(jìn)步，在各個(gè)方面均有提高。隨著企業(yè)管理信息化的進(jìn)一步走深走實(shí)，在未來，我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)將會(huì)更加信息化、智能化與人性化。