交通運輸行業(yè)數(shù)據(jù)治理體系研究

劉天須 王子昂 張雪揚

摘 要 數(shù)據(jù)資產(chǎn)是交通運輸行業(yè)信息化建設的重要成果。如何保障數(shù)據(jù)資產(chǎn)有效、規(guī)范管理，本文從數(shù)據(jù)資源管理、數(shù)據(jù)標準符合性檢測、數(shù)據(jù)質(zhì)量管理等三個方面進行應用研究。

關鍵詞 數(shù)據(jù)資源管理;數(shù)據(jù)標準符合性檢測;數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)治理是通過對交通運輸行業(yè)數(shù)據(jù)資源進行綜合管控，保障數(shù)據(jù)準確性、一致性、完整性、可用性和安全性。數(shù)據(jù)治理是為了規(guī)范數(shù)據(jù)標準、提高數(shù)據(jù)質(zhì)量和保證數(shù)據(jù)安全而建立的政策、組織、流程、技術保障體系。

1總體框架

為實現(xiàn)數(shù)據(jù)資源“一數(shù)一源，一源多用”，應建立數(shù)據(jù)治理體系，確保采集源頭的唯一性和標準化，提高數(shù)據(jù)質(zhì)量，確保數(shù)據(jù)資源能在不同部門之間互聯(lián)互通和深層次應用，為數(shù)據(jù)作為資產(chǎn)的價值與效益提供基礎保障。

交通運輸行業(yè)數(shù)據(jù)治理總體框架如下圖1所示。

如上圖所示，交通運輸數(shù)據(jù)治理主要內(nèi)容包括：

（1）治理對象：包括各業(yè)務領域形成的基礎數(shù)據(jù)庫、主題數(shù)據(jù)庫、業(yè)務數(shù)據(jù)庫、共享數(shù)據(jù)庫;

（2）治理支撐：在交通運輸行業(yè)信息化建設過程中，為保證數(shù)據(jù)的可靠性和一致性實現(xiàn)數(shù)據(jù)資源有效的管控，需要從管控組織、管控流程、管控工具和評價考核四個方面進行建設，四項工作內(nèi)容相互作用、相互支撐;

（3）治理任務：主要是實現(xiàn)數(shù)據(jù)治理的具體途徑（方法），包括元數(shù)據(jù)資源管理、數(shù)據(jù)標準符合性測試和數(shù)據(jù)質(zhì)量管理。

本文主要針對數(shù)據(jù)治理任務進行應用研究[1]。

2數(shù)據(jù)資源管理

數(shù)據(jù)資源目錄管理主要面向行業(yè)業(yè)務管理部門，其目的是協(xié)助行業(yè)管理部門掌握各自數(shù)據(jù)“固定資產(chǎn)”，以便讓各級授權用戶了解各自業(yè)務領域已經(jīng)沉淀了哪些數(shù)據(jù)資源？保存在什么地方？數(shù)據(jù)的質(zhì)量如何？找什么人聯(lián)系或通過什么方式可以獲?。繑?shù)據(jù)資源目錄管理是確保交通運輸行業(yè)數(shù)據(jù)資源“一數(shù)一源、一源多用”的基礎和關鍵。

數(shù)據(jù)資源目錄管理應在全行業(yè)數(shù)據(jù)資源整體規(guī)劃的基礎上，按照《交通運輸政務信息資源目錄（2017版）》要求，對全行業(yè)政務信息進行統(tǒng)一目錄編制。

（1）現(xiàn)有數(shù)據(jù)資源梳理：全面梳理省級、市級交通運輸管理部門現(xiàn)有系統(tǒng)數(shù)據(jù)資源，細化到數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)項。

（2）明確權威數(shù)據(jù)源：基于數(shù)據(jù)資源規(guī)劃理論，進行業(yè)務和數(shù)據(jù)流程分析，描述交通運輸行業(yè)各類業(yè)務過程之間輸入、輸出、存儲的數(shù)據(jù)流，以及與外單位之間的數(shù)據(jù)輸入、輸出數(shù)據(jù)流。

（3）目錄編制：基于交通運輸行業(yè)數(shù)據(jù)資源分類標準和目錄編制指南，對省市兩級現(xiàn)有梳理的數(shù)據(jù)資源和服務資源提取特征，形成元數(shù)據(jù)，編制省、市交通運輸數(shù)據(jù)資源目錄。

（4）目錄著錄：將本部門目錄編目形成的所有元數(shù)據(jù)通過元數(shù)據(jù)注冊系統(tǒng)向省、市級目錄中心的管理機構(gòu)注冊。

數(shù)據(jù)資源管理用于協(xié)助交通運輸行業(yè)各相關業(yè)務部門實現(xiàn)數(shù)據(jù)資源治理、檢索、管理和共享，有效梳理數(shù)據(jù)資源，高效利用數(shù)據(jù)資產(chǎn)。數(shù)據(jù)資源管理功能包括數(shù)據(jù)資源目錄管理和元數(shù)據(jù)管理兩部分，其中數(shù)據(jù)資源目錄管理包括目錄生成、目錄審核、目錄發(fā)布、目錄更新和目錄查詢等功能，元數(shù)據(jù)管理包括元數(shù)據(jù)生成、元數(shù)據(jù)審核、元數(shù)據(jù)發(fā)布、元數(shù)據(jù)更新、元數(shù)據(jù)一張圖展示、元數(shù)據(jù)查詢分析等功能。

3數(shù)據(jù)標準符合性檢測

數(shù)據(jù)標準符合性測試系統(tǒng)的基本思路是基于JT/T 697.1-14、JT/T 1058-2016、JT/T 1021-2016等國家、交通運輸部數(shù)據(jù)標準，將待檢系統(tǒng)（各業(yè)務應用系統(tǒng)）數(shù)據(jù)字典、數(shù)據(jù)庫結(jié)構(gòu)、數(shù)據(jù)與標準進行對比，從而檢測各待測業(yè)務應用系統(tǒng)數(shù)據(jù)的數(shù)據(jù)類型、數(shù)據(jù)格式、數(shù)據(jù)值域、數(shù)據(jù)約束等是否滿足標準相關要求。

數(shù)據(jù)標準符合性檢測針對數(shù)據(jù)的類型、格式、單位、值域、約束等多維度進行檢測，數(shù)據(jù)標準符合性檢測是確保各業(yè)務應用系統(tǒng)按照國家、行業(yè)相關數(shù)據(jù)標準采標、貫標的重要支撐手段，是大數(shù)據(jù)平臺數(shù)據(jù)資源標準化、共享化和真正由數(shù)據(jù)資源轉(zhuǎn)變?yōu)閿?shù)據(jù)資產(chǎn)的保障。

各業(yè)務應用系統(tǒng)建設時，在軟件系統(tǒng)數(shù)據(jù)字典編制、軟件開發(fā)、驗收準備（試運行）等階段應進行交通運輸數(shù)據(jù)標準符合性檢測。

——軟件詳細設計階段：數(shù)據(jù)字典編制完成后，業(yè)務應用系統(tǒng)建設單位應組織利用標準符合性檢測系統(tǒng)對數(shù)據(jù)字典進行標準符合性檢測，檢測文檔中數(shù)據(jù)項的類型、格式、單位、值域等的定義以及數(shù)據(jù)集的約束、出現(xiàn)次數(shù)等屬性是否滿足相關標準要求。軟件詳細設計階段數(shù)據(jù)字典通過標準符合性檢測后方可進行軟件開發(fā)階段;

——軟件開發(fā)階段：應嚴格按照軟件詳細設計階段數(shù)據(jù)字典的設計，利用標準符合性檢測系統(tǒng)對數(shù)據(jù)庫表結(jié)構(gòu)進行標準符合性檢測，檢測數(shù)據(jù)庫中數(shù)據(jù)項的類型、格式、單位、值域等的定義以及數(shù)據(jù)集的約束、出現(xiàn)次數(shù)等屬性是否滿足相關標準要求，生成數(shù)據(jù)庫表結(jié)構(gòu)的標準符合性檢測報告;

——驗收準備（試運行）：在業(yè)務應用系統(tǒng)試運行并積累一定數(shù)據(jù)量后（主要業(yè)務數(shù)據(jù)表記錄超過50條），應用系統(tǒng)建設單位應組織對系統(tǒng)數(shù)據(jù)庫表結(jié)構(gòu)和數(shù)據(jù)庫內(nèi)容（數(shù)據(jù)記錄）進行標準符合性檢測，生成數(shù)據(jù)庫內(nèi)容的標準符合性檢測報告。

標準符合性測試主要包括數(shù)據(jù)標準管理、檢測標準庫管理、檢測數(shù)據(jù)采集管理、標準符合性檢測和標準符合性檢測評估等功能。

4數(shù)據(jù)質(zhì)量管理

隨著交通行業(yè)信息化工程建設的不斷推進，交通運輸行業(yè)對行業(yè)內(nèi)外各業(yè)務單位之間、與相關政府部門之間、相關省份之間信息共享與業(yè)務協(xié)同的需求越發(fā)迫切，對數(shù)據(jù)的完整性、準確性、一致性、時效性、可訪問性和安全性提出了更高的質(zhì)量要求。

——數(shù)據(jù)的完整性：數(shù)據(jù)覆蓋的空間范圍、數(shù)據(jù)內(nèi)容、時間范圍應完整，滿足應用需求;

——數(shù)據(jù)的準確性：數(shù)據(jù)應正確、真實、客觀地描述交通業(yè)務或?qū)ο蟮膶傩?

——數(shù)據(jù)的一致性：從多個渠道獲取的數(shù)據(jù)應保持一致;

——數(shù)據(jù)的時效性：數(shù)據(jù)采集、更新應符合規(guī)定要求;

——數(shù)據(jù)的可訪問性：數(shù)據(jù)能被有效訪問;

——數(shù)據(jù)的安全性：數(shù)據(jù)在存儲、傳輸、處理過程中不被泄漏、破壞和免受未授權的修改。

數(shù)據(jù)質(zhì)量管理是根據(jù)定制的數(shù)據(jù)質(zhì)量校驗規(guī)則對數(shù)據(jù)資源進行檢查，形成質(zhì)量問題數(shù)據(jù)記錄;同時實現(xiàn)數(shù)據(jù)質(zhì)量問題發(fā)現(xiàn)登記、發(fā)布、修正反饋。

數(shù)據(jù)質(zhì)量管理主要功能包括數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)質(zhì)量問題處理、數(shù)據(jù)質(zhì)量評估、數(shù)據(jù)質(zhì)量報告、數(shù)據(jù)質(zhì)量知識庫管理、數(shù)據(jù)質(zhì)量對外服務等6個功能。

5技術實現(xiàn)

如下圖2所示，通過對行業(yè)數(shù)據(jù)資源的整理，形成了全行業(yè)數(shù)據(jù)資源目錄管理體系。

圖2 交通運輸行業(yè)數(shù)據(jù)資源目錄管理界面原型圖

基于行業(yè)數(shù)據(jù)標準，實現(xiàn)了行業(yè)數(shù)據(jù)資源標準符合性檢測，如下圖3所示。

圖3 交通運輸行業(yè)數(shù)據(jù)標準符合性檢測界面原型圖

參考文獻

[1] 佚名.交通運輸信息系統(tǒng)數(shù)據(jù)標準符合性檢測技術規(guī)程（報批稿）[ED/OL].https：//wenku.baidu.com/view/9706872bcd84b9d528ea81c758f5f61fb736282f.html，2020-6-18.

作者簡介

劉天須（1988-），男，河南人;專業(yè)：交通運輸信息化，學歷：碩士研究生，現(xiàn)就職單位：河南省交通通信中心。