基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)的實(shí)現(xiàn)

芮忠

摘? 要：為解決數(shù)據(jù)問題，數(shù)據(jù)治理技術(shù)開始進(jìn)入各企業(yè)的視野，諸多相關(guān)的數(shù)據(jù)治理產(chǎn)品也隨之涌現(xiàn)。但當(dāng)前市場已有的相關(guān)數(shù)據(jù)治理系統(tǒng)均存在一定的不足：數(shù)據(jù)管理的方法、流程和策略等方面缺乏統(tǒng)一的標(biāo)準(zhǔn);數(shù)據(jù)的質(zhì)量、合規(guī)性和安全性難以得到保障;數(shù)據(jù)管理的范圍較為狹窄，且管理的流程較為復(fù)雜化，需要輔助大量的人工操作，增加了使用成本。

關(guān)鍵詞：數(shù)據(jù)中臺;信息技術(shù);數(shù)據(jù)治理;大數(shù)據(jù)

中圖分類號：TP311.13 文獻(xiàn)標(biāo)志碼：A? ? ? ? ?文章編號：2095-2945（2020）26-0039-02

Abstract： In order to solve the problems， data governance technology began to enter the vision of enterprises， and many related data governance products emerged. However， there are some deficiencies in the existing data governance systems in current market： the methods， processes and strategies of data management are lack of unified standards; the quality， compliance and security of data are difficult to be guaranteed; the scope of data management is relatively narrow， and the management process is complex. It requires much manual operations and increases the cost of use.

Keywords： data middleground; information technology; data management; big data

引言

當(dāng)前，信息化建設(shè)工作一直在火熱持續(xù)進(jìn)行中，《教育信息化2.0行動計(jì)劃》標(biāo)志著智能時代教育教學(xué)創(chuàng)新發(fā)展新時代的到來，“體驗(yàn)、開放、融合、數(shù)據(jù)、連接、服務(wù)、創(chuàng)新、引領(lǐng)、變革、智慧”是2.0行動計(jì)劃創(chuàng)新引領(lǐng)和生態(tài)變革的主要特征。但事與愿違的是，當(dāng)前高校的信息化建設(shè)在開放、數(shù)據(jù)、服務(wù)、智慧等方面仍與實(shí)際需求有著較大的差距，而且高校的基礎(chǔ)業(yè)務(wù)較為匱乏，數(shù)據(jù)來源也有一定的限制，相較于《中國教育現(xiàn)代化2035》中要求的“統(tǒng)籌建設(shè)一體化智能化教學(xué)、管理與服務(wù)平臺”的目標(biāo)而言不過才剛起步而已。這勢必要求我們在之后的智慧校園建設(shè)過程中進(jìn)一步革新理念、統(tǒng)一認(rèn)識、放眼未來、大膽創(chuàng)新，實(shí)現(xiàn)將云計(jì)算、人工智能、物聯(lián)網(wǎng)、大數(shù)據(jù)等高新技術(shù)與高校教育教學(xué)的進(jìn)一步深度融合，讓信息技術(shù)真正地、有效地融入到企業(yè)發(fā)展的每個環(huán)節(jié)當(dāng)中，為企業(yè)管理、創(chuàng)新跨越式發(fā)展提供信息化深度支撐，實(shí)現(xiàn)“持續(xù)的創(chuàng)新”“智慧的場景”“智慧的數(shù)據(jù)”“智慧的教學(xué)”等信息化、一體化的智慧目標(biāo)。

本課題的研究意義在于開發(fā)并設(shè)計(jì)一個基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)，結(jié)合國內(nèi)外最新的相關(guān)課題研究內(nèi)容，幫助用戶了解數(shù)據(jù)的真實(shí)情況并做出合理決策，從根源幫助解決數(shù)據(jù)處理過程中遭遇的數(shù)據(jù)問題，可視化數(shù)據(jù)治理各步操作環(huán)節(jié)，使數(shù)據(jù)管理與運(yùn)維人員充分認(rèn)識到數(shù)據(jù)治理工作帶來的巨大價(jià)值，更好地挖掘和發(fā)揮數(shù)據(jù)的隱含價(jià)值。因此，基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)是值得去設(shè)計(jì)和開發(fā)的。

1 數(shù)據(jù)中臺相關(guān)理論

1.1 數(shù)據(jù)中臺基本概念

數(shù)據(jù)中臺并非指大數(shù)據(jù)平臺，而是指通過數(shù)據(jù)技術(shù)對海量的數(shù)據(jù)進(jìn)行采集、計(jì)算、存儲和加工，并統(tǒng)一標(biāo)準(zhǔn)和口徑。數(shù)據(jù)中臺完成數(shù)據(jù)統(tǒng)一后會形成標(biāo)準(zhǔn)數(shù)據(jù)，然后再對數(shù)據(jù)進(jìn)行存儲，進(jìn)而形成大數(shù)據(jù)資產(chǎn)層，為用戶提供高效的優(yōu)質(zhì)服務(wù)[1-2]。

在數(shù)據(jù)的開發(fā)過程中，核心數(shù)據(jù)模型的變化相對緩慢，但維護(hù)數(shù)據(jù)的工作量卻特別大，而業(yè)務(wù)創(chuàng)新的速度以及對數(shù)據(jù)產(chǎn)生新需求的變化卻是十分快速的。因此，數(shù)據(jù)中臺的出現(xiàn)彌補(bǔ)了數(shù)據(jù)開發(fā)和應(yīng)用開發(fā)之間由于開發(fā)速度不匹配而出現(xiàn)的響應(yīng)力不足等缺陷問題。

數(shù)據(jù)中臺解決的問題大致可分為三點(diǎn)：效率問題、協(xié)作問題和能力問題，這三類問題會影響開發(fā)團(tuán)隊(duì)的開發(fā)速度，而這一點(diǎn)恰恰是中臺的關(guān)鍵——讓前臺的開發(fā)團(tuán)隊(duì)的開發(fā)速度不受后臺數(shù)據(jù)開發(fā)的影響。

簡而言之，數(shù)據(jù)中臺是聚合和治理跨域數(shù)據(jù)，將數(shù)據(jù)抽象封裝成服務(wù)，提供給前臺以業(yè)務(wù)價(jià)值的邏輯概念。

1.2 數(shù)據(jù)中臺的建設(shè)原則

數(shù)據(jù)中臺的建立并非一蹴而就的事情，企業(yè)應(yīng)基于自身的實(shí)際情況出發(fā)，打造獨(dú)有的中臺能力[1，3]，數(shù)據(jù)中臺在建設(shè)時需遵循一些建設(shè)原則，具體如下：（1）企業(yè)的組織架構(gòu)和機(jī)制應(yīng)順勢而變。（2）工作方式需做出改變，數(shù)據(jù)人員需深入研究業(yè)務(wù)、數(shù)據(jù)和模型，端到端的實(shí)踐，這樣打造出數(shù)據(jù)中臺才是最大的價(jià)值創(chuàng)造。（3）數(shù)據(jù)中臺的團(tuán)隊(duì)需從傳統(tǒng)支撐角色向運(yùn)營角色轉(zhuǎn)變，不僅是數(shù)據(jù)上，業(yè)務(wù)上也需努力，中臺人員不僅僅是接受需求的角色，更能夠提出合理建議，為業(yè)務(wù)帶來新的增長點(diǎn)。（4）中臺的建設(shè)需適合企業(yè)特點(diǎn)。IT時代整個社會將進(jìn)入數(shù)據(jù)開放、共享的時代，致力于大數(shù)據(jù)變現(xiàn)的企業(yè)最大的價(jià)值就是將這些核心數(shù)據(jù)能力進(jìn)行對外開放運(yùn)營，到那時，數(shù)據(jù)中臺將成為企業(yè)最為寶貴的資產(chǎn)[4]。

2 系統(tǒng)總體架構(gòu)

基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)以全數(shù)據(jù)鏈路管理為基礎(chǔ)[5]，以元數(shù)據(jù)驅(qū)動數(shù)據(jù)生產(chǎn)、加工、管理及可視化輸出，進(jìn)而實(shí)現(xiàn)高校數(shù)據(jù)的智能化管理體系。圖1給出了基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)架構(gòu)圖。

3 系統(tǒng)功能結(jié)構(gòu)

基于數(shù)據(jù)中臺的數(shù)據(jù)治理系統(tǒng)主要可劃分為數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)監(jiān)測查詢幾個功能模塊[6]。

由系統(tǒng)的功能結(jié)構(gòu)圖可以看出，系統(tǒng)主要可分為元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理以及數(shù)據(jù)監(jiān)測與查詢四個功能模塊。其中，元數(shù)據(jù)管理主要負(fù)責(zé)數(shù)據(jù)元的配置、數(shù)據(jù)模型的管理以及元數(shù)據(jù)屬性模型的管理;主數(shù)據(jù)模塊主要負(fù)責(zé)以服務(wù)的方式將統(tǒng)一、完整、準(zhǔn)確且具有權(quán)威性的主數(shù)據(jù)傳給企業(yè)內(nèi)需要使用到這些數(shù)據(jù)的應(yīng)用系統(tǒng);數(shù)據(jù)質(zhì)量管理模塊則主要針對數(shù)據(jù)質(zhì)量的校驗(yàn)與管理;數(shù)據(jù)監(jiān)測模塊可對全局?jǐn)?shù)據(jù)進(jìn)行異常監(jiān)測，也可實(shí)現(xiàn)全局?jǐn)?shù)據(jù)的檢索功能。

4 數(shù)據(jù)底層設(shè)計(jì)

4.1 數(shù)據(jù)梳理規(guī)劃

數(shù)據(jù)梳理和數(shù)據(jù)規(guī)劃服務(wù)是數(shù)據(jù)治理服務(wù)中不可或缺的一部分，同時也是數(shù)據(jù)治理實(shí)際應(yīng)用的關(guān)鍵所在。通過數(shù)據(jù)梳理與規(guī)劃可形成規(guī)范的業(yè)務(wù)模型，通過標(biāo)準(zhǔn)化的設(shè)計(jì)理念對數(shù)據(jù)資產(chǎn)進(jìn)行頂層設(shè)計(jì)和規(guī)范控制，從全局的角度來管理高校各業(yè)務(wù)領(lǐng)域內(nèi)的數(shù)據(jù)資源，對數(shù)據(jù)源進(jìn)行統(tǒng)一化的管理，進(jìn)而提供可信的數(shù)據(jù)來源與標(biāo)準(zhǔn)，形成企業(yè)業(yè)務(wù)的數(shù)據(jù)架構(gòu)，為后續(xù)的高校數(shù)據(jù)治理工作提供前期的工作基礎(chǔ)。

4.2 數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)

企業(yè)信息標(biāo)準(zhǔn)建設(shè)是整個校園智慧建設(shè)的關(guān)鍵所在。信息標(biāo)準(zhǔn)的制定不僅需要考慮企業(yè)的實(shí)際建設(shè)情況與各業(yè)務(wù)領(lǐng)域的實(shí)際狀況，還需要考慮企業(yè)的當(dāng)前及后期發(fā)展規(guī)劃等客觀因素，通過提供完整的校園信息標(biāo)準(zhǔn)建設(shè)，形成校區(qū)編碼、組織機(jī)構(gòu)等一系列的校級標(biāo)準(zhǔn)，最大化地滿足企業(yè)的信息化建設(shè)與發(fā)展的應(yīng)用需求。

4.3 數(shù)據(jù)治理服務(wù)

數(shù)據(jù)治理服務(wù)對推動企業(yè)發(fā)展、提高信息化服務(wù)水平等方面都具有重要意義。數(shù)據(jù)治理是一個不斷深入與迭代的過程，從建設(shè)的內(nèi)容與目標(biāo)來看可將數(shù)據(jù)治理劃分為不同階段，各階段均要完成不同的任務(wù)。除此之外，不同的企業(yè)所需要考慮的切入點(diǎn)與實(shí)際應(yīng)用需求也各有不同，需要做到具體情況具體分析，依據(jù)高校自身的建設(shè)特點(diǎn)與實(shí)際業(yè)務(wù)需求來考慮數(shù)據(jù)治理服務(wù)。根據(jù)數(shù)據(jù)的標(biāo)準(zhǔn)規(guī)范對企業(yè)現(xiàn)有的業(yè)務(wù)數(shù)據(jù)，如教務(wù)管理系統(tǒng)、一卡通、辦事大廳等業(yè)務(wù)，進(jìn)行整合關(guān)聯(lián)，并按照業(yè)務(wù)模型對數(shù)據(jù)進(jìn)行抽取，抽取過后再對數(shù)據(jù)做標(biāo)準(zhǔn)化轉(zhuǎn)換與數(shù)據(jù)清洗，從而實(shí)現(xiàn)全校的基礎(chǔ)數(shù)據(jù)資產(chǎn)的有效管理。

5 結(jié)束語

本文設(shè)計(jì)并闡述了的數(shù)據(jù)中臺的在數(shù)據(jù)治理方面的實(shí)際需求，且取得了一定的工作成果，但系統(tǒng)也存在著一些不盡人意的地方需要改進(jìn)與完善。從理論依據(jù)與實(shí)際業(yè)務(wù)需求來看，由于數(shù)據(jù)治理系統(tǒng)仍處于新生狀態(tài)，仍需要在不斷的發(fā)展過程中去探索和完善。

參考文獻(xiàn)：

[1]李炳森，胡全貴，陳小峰，等.電網(wǎng)企業(yè)數(shù)據(jù)中臺的研究與設(shè)計(jì)[J].電力信息與通信技術(shù)，2019，17（07）：29-34.

[2]付威.東方金信數(shù)據(jù)中臺[J].軟件和集成電路，2019（08）：98.

[3]高洪福.又到了打造“鐵腰”的時候！——“IT生存法則”之?dāng)?shù)據(jù)中臺初探[J].網(wǎng)絡(luò)安全和信息化，2019（09）：24-25.

[4]王翔，鄭磊.面向數(shù)據(jù)開放的地方政府?dāng)?shù)據(jù)治理：問題與路徑[J].電子政務(wù)，2019，194（02）：32-38.

[5]翟軍，李曉彤，苗珍珍，等.我國開放政府?dāng)?shù)據(jù)“臟數(shù)據(jù)”問題研究及應(yīng)對——地方政府?dāng)?shù)據(jù)平臺數(shù)據(jù)質(zhì)量調(diào)查與分析[J].圖書館，

2019，292（01）：46-55.

[6]韓旭，曹增義，王昭陽.企業(yè)數(shù)據(jù)資產(chǎn)治理與管理[J].電子世界，2018，557（23）：97+99.