企業(yè)大數(shù)據(jù)應(yīng)用下的數(shù)據(jù)治理

劉伯宇 陰皓 閆麗景

摘要

隨著社會經(jīng)濟的高速發(fā)展和科技不斷創(chuàng)新，信息的利用發(fā)生了翻天覆地的變化，在《2017全球信息社會發(fā)展報告》中指出，2017年全球信息社會指數(shù)（工si）達到0.5748，總體上即將從工業(yè)社會進入信息社會。126個國家中，有57個國家進入信息社會，發(fā)達國家全部進入了信息社會，而絕大多數(shù)發(fā)展中國家正在加速向信息社會轉(zhuǎn)型，在經(jīng)歷國際金融危機沖擊后，各國積極把握信息技術(shù)新一輪大發(fā)展機遇，創(chuàng)新云計算、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等技術(shù)內(nèi)涵和應(yīng)用場景，全球信息社會發(fā)展再上新臺階，經(jīng)濟活力有效復(fù)蘇。

【關(guān)鍵詞】大數(shù)據(jù) 數(shù)據(jù)資產(chǎn) 數(shù)據(jù)治理 數(shù)據(jù)質(zhì)量 人工智能 機器學(xué)習(xí)

目前大多數(shù)企業(yè)都上線投入運行了與自身管理經(jīng)營相關(guān)的業(yè)務(wù)系統(tǒng)，這些業(yè)務(wù)系統(tǒng)在輔助工作人員在工作效率提高方面取得了顯著成效，使企業(yè)管理更加規(guī)范和富有競爭力。通過使用業(yè)務(wù)應(yīng)用系統(tǒng)，企業(yè)積累了大量、甚至海量的數(shù)據(jù)，為了讓這些數(shù)據(jù)變成企業(yè)的數(shù)據(jù)資產(chǎn)，發(fā)揮更大的數(shù)據(jù)價值，開始建設(shè)如數(shù)據(jù)中心平臺、數(shù)據(jù)集成服務(wù)平臺等數(shù)據(jù)集中、管理、服務(wù)為一體的服務(wù)平臺，來滿足企業(yè)全面的數(shù)據(jù)管理和立體應(yīng)用，使數(shù)據(jù)資產(chǎn)更有效的服務(wù)于企業(yè)的生產(chǎn)、經(jīng)營和管理。

1 數(shù)據(jù)治理概述

數(shù)據(jù)治理就是集數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量提升和數(shù)據(jù)應(yīng)用為一體的一個體系，通過因地制宜，構(gòu)建一系列的管理機制、管理辦法和規(guī)范以及管理輔助工具，使企業(yè)數(shù)據(jù)依據(jù)設(shè)計規(guī)范進行存儲，通過監(jiān)控手段不斷改善數(shù)據(jù)質(zhì)量，根據(jù)應(yīng)用確認數(shù)據(jù)資產(chǎn)并不斷提升數(shù)據(jù)價值的過程，整個治理過程是一個相互關(guān)聯(lián)、互相促進和完善的閉環(huán)過程，是解決數(shù)據(jù)不知道、數(shù)據(jù)不能控、數(shù)據(jù)無法用的一個過程。

2 數(shù)據(jù)治理方案

從數(shù)據(jù)的生成、質(zhì)量提升、應(yīng)用到注銷的全生命周期看，數(shù)據(jù)治理是一個長期性的、系統(tǒng)性的和全方位的工作，為了快速取得數(shù)據(jù)治理的效果，數(shù)據(jù)治理工作過程應(yīng)嚴格按照管（數(shù)據(jù)管理）、梳（數(shù)據(jù)梳理）、治（監(jiān)控核查）、用（高效利用）四字方針執(zhí)行，整個過程如圖1所示。

2.1 數(shù)據(jù)管理

數(shù)據(jù)管理是數(shù)據(jù)治理的關(guān)鍵也是數(shù)據(jù)治理的保障和基礎(chǔ)，通過數(shù)據(jù)管理我們可以解決目前企業(yè)有哪些數(shù)據(jù)，數(shù)據(jù)屬性以及數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系是什么？那些已經(jīng)被確認為數(shù)據(jù)資產(chǎn)可以合理應(yīng)用，這些數(shù)據(jù)怎么使用？使用數(shù)據(jù)的管理流程是什么？根據(jù)數(shù)據(jù)管理的需求數(shù)據(jù)管理需做好如下4項工作：

2.1.1 管理機制

數(shù)據(jù)管理是全方位的，涉及公司的管理部門、應(yīng)用部門、使用部門，需要全員參與，建立數(shù)據(jù)管理組織機構(gòu)，制定職責(zé)。

（1）數(shù)據(jù)治理領(lǐng)導(dǎo)委員會。成立由公司領(lǐng)導(dǎo)擔(dān)任組長，各業(yè)務(wù)部門負責(zé)人為成員的數(shù)據(jù)治理領(lǐng)導(dǎo)委員會，指導(dǎo)數(shù)據(jù)治理工作組開展工作，對工作過程中出現(xiàn)的重大問題進行協(xié)調(diào)。

（2）數(shù)據(jù)治理辦公室。成立由數(shù)據(jù)管理部門負責(zé)人為組長，數(shù)據(jù)治理工作涉及業(yè)務(wù)部門負責(zé)人為成員的數(shù)據(jù)治理辦公室，在領(lǐng)導(dǎo)委員會指導(dǎo)下，對數(shù)據(jù)治理整體工作進行管理、監(jiān)督、控制。召集各業(yè)務(wù)部門，定期召開例會，聽取數(shù)據(jù)治理工作組工作匯報，并對數(shù)據(jù)治理過程中發(fā)現(xiàn)的問題進行協(xié)調(diào)，對問題解決方案進行確認。

（3）數(shù)據(jù)治理工作組。成立由數(shù)據(jù)治理工作涉及業(yè)務(wù)系統(tǒng)顧問為成員的工作小組，根據(jù)管理辦公室要求對數(shù)據(jù)治理工作進行組織、計劃和管理，配合數(shù)據(jù)治理辦公室完成各系統(tǒng)專項治理方案的制定，并按方案開展相關(guān)工作。通過數(shù)據(jù)質(zhì)量管控系統(tǒng)定期對各系統(tǒng)數(shù)據(jù)進行稽查，形成數(shù)據(jù)質(zhì)量月（周）報，上報數(shù)據(jù)治理辦公室。對數(shù)據(jù)治理過程中發(fā)現(xiàn)的問題提供技術(shù)性解決方案。

2.1.2 管理辦法及規(guī)范

建立健全企業(yè)數(shù)據(jù)管理機制，完成企業(yè)數(shù)據(jù)管理辦法編制，從制度與流程、組織與人員、技術(shù)與工具等方面支撐數(shù)據(jù)資源的統(tǒng)一管理，確保企業(yè)級數(shù)據(jù)資源集中融合、規(guī)范有序，有效共享，高效應(yīng)用。

2.1.3 管理輔助工具

建設(shè)數(shù)據(jù)資源管理工具，利用工具的元數(shù)據(jù)管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)接口配置、接口監(jiān)控、數(shù)據(jù)模型管理、數(shù)據(jù)流管理、數(shù)據(jù)資源查詢、系統(tǒng)數(shù)據(jù)集成流程管理、基礎(chǔ)數(shù)據(jù)維護等功能，實現(xiàn)對數(shù)據(jù)管理到梳理，梳理到監(jiān)控，監(jiān)控到質(zhì)量提升，再到支撐應(yīng)用，輔助數(shù)據(jù)管理人員全方位管理數(shù)據(jù)。

2.1.4 數(shù)據(jù)安全

數(shù)據(jù)從管理到應(yīng)用的整個過程涉及存儲、處理和共享應(yīng)用，為了保障數(shù)據(jù)的安全，在存儲方面需要制定高可用的存儲方案及應(yīng)急措施;在處理過程中要加強管理意識;在使用方面制定數(shù)據(jù)安全等級，依據(jù)數(shù)據(jù)安全級別訪問和使用數(shù)據(jù)。

2.2 數(shù)據(jù)梳理

企業(yè)數(shù)據(jù)資源集成服務(wù)可完成企業(yè)數(shù)據(jù)資源的集成、集中和應(yīng)用，要發(fā)揮和提升這些數(shù)據(jù)資源的價值，必須對這些數(shù)據(jù)資源進行梳理并規(guī)范化，使數(shù)據(jù)字典可用，數(shù)據(jù)可查，并經(jīng)過核對確認后形成數(shù)據(jù)資產(chǎn)進行流通使其產(chǎn)生更大的數(shù)據(jù)價值。

2.3 數(shù)據(jù)質(zhì)量

數(shù)據(jù)質(zhì)量是數(shù)據(jù)治理的核心工作，數(shù)據(jù)質(zhì)量越高數(shù)據(jù)價值就越高，無論何種數(shù)據(jù)分析，其結(jié)果的精準(zhǔn)性來自于高質(zhì)量的數(shù)據(jù)，因此數(shù)據(jù)質(zhì)量管理提升是數(shù)據(jù)質(zhì)量的核心。數(shù)據(jù)質(zhì)量管理提升是以數(shù)據(jù)管理體系為保障，以數(shù)據(jù)治理手段和數(shù)據(jù)治理信息系統(tǒng)為輔助，來提升和確保數(shù)據(jù)的及時性、完整性、準(zhǔn)確性、唯一性和時效性。數(shù)據(jù)治理手段主要包括數(shù)據(jù)監(jiān)控、數(shù)據(jù)稽查、數(shù)據(jù)驗證、數(shù)據(jù)更新，輔助系統(tǒng)工具包括數(shù)據(jù)質(zhì)量管控系統(tǒng)、數(shù)據(jù)資源管理工具。

2.4 數(shù)據(jù)應(yīng)用

數(shù)據(jù)應(yīng)用是對數(shù)據(jù)質(zhì)量的有效驗證和對數(shù)據(jù)資產(chǎn)價值的有效體現(xiàn)途徑，通過數(shù)據(jù)應(yīng)用可是數(shù)據(jù)資產(chǎn)產(chǎn)生直接和間接的經(jīng)濟效益，效益主要體現(xiàn)在三個方面：

（1）報表統(tǒng)計分析實現(xiàn)數(shù)據(jù)的智能化、自動化及可視化應(yīng)用，使大量手工工作實現(xiàn)自動化，大幅提高工作人員的工作效率;

（2）大數(shù)據(jù)挖掘分析，幫助客戶挖掘更多的潛在客戶以及可能存在的市場機會，使公司管理層及時了解企業(yè)經(jīng)營情況;

（3）人工智能、機器學(xué)習(xí)及預(yù)測分析，輔助企業(yè)更好的發(fā)展規(guī)劃和經(jīng)營決策。

3 結(jié)語

隨著信息化技術(shù)的不斷創(chuàng)新、互聯(lián)網(wǎng)應(yīng)用全覆蓋和企業(yè)市場競爭加劇，數(shù)據(jù)資產(chǎn)越加顯得舉足輕重，為了提升企業(yè)市場競爭力和智能化服務(wù)能力，需要擴大數(shù)據(jù)集成服務(wù)范圍，加強數(shù)據(jù)價值的深度挖掘，為企業(yè)發(fā)展戰(zhàn)略和經(jīng)營提供輔助決策。是資產(chǎn)就會有價值，數(shù)據(jù)資產(chǎn)的價值形成不是一日之功，需要長期的數(shù)據(jù)積累和治理，只有滿足及時性、完整性、準(zhǔn)確性、唯一性和可用性的數(shù)據(jù)才是富有價值的數(shù)據(jù)資產(chǎn)，我們要不斷的通過數(shù)據(jù)治理來提高企業(yè)的數(shù)據(jù)價值。

參考文獻

[1]王漢生.為什么數(shù)據(jù)治理這么重要[J].北京大學(xué)光華管理學(xué)院商務(wù)統(tǒng)計與經(jīng)濟計量系教授、系主任，2011.