王文強(qiáng) 藍(lán)小明
(中國(guó)煙草總公司福建省公司,福建 福州 350003)
2020年4月,國(guó)家煙草專賣局印發(fā)《全國(guó)煙草生產(chǎn)經(jīng)營(yíng)管理一體化平臺(tái)建設(shè)及營(yíng)銷先行建設(shè)試點(diǎn)工作方案》(國(guó)煙辦綜〔2020〕80號(hào)),要求以形成覆蓋全產(chǎn)業(yè)鏈、全治理鏈、全生態(tài)圈和全生產(chǎn)要素的一體化、智能化平臺(tái)為總體目標(biāo),構(gòu)建行業(yè)一體化平臺(tái),以一個(gè)云平臺(tái)、兩個(gè)中臺(tái)(業(yè)務(wù)中臺(tái)、數(shù)據(jù)中臺(tái))、四大企業(yè)應(yīng)用和兩大行業(yè)應(yīng)用為主體,形成“1242”總體架構(gòu)。福建煙草按照“強(qiáng)后臺(tái)、厚中臺(tái)、薄前臺(tái)”的架構(gòu)打造服務(wù)共享式的能力開放平臺(tái),最大化利用行業(yè)數(shù)據(jù)中臺(tái)對(duì)技術(shù)、數(shù)據(jù)、業(yè)務(wù)的支撐和共享能力,構(gòu)建福建煙草行業(yè)大數(shù)據(jù)資源目錄,形成數(shù)據(jù)共享服務(wù)體系,提供數(shù)據(jù)服務(wù)的設(shè)計(jì)、開發(fā)、測(cè)試、上線到銷毀的全生命周期管理,以數(shù)據(jù)中臺(tái)的方式提供數(shù)據(jù)服務(wù)的發(fā)布及訪問,不斷沉淀共性數(shù)據(jù)服務(wù),實(shí)現(xiàn)數(shù)據(jù)資源的共享和應(yīng)用[1]。
福建煙草數(shù)據(jù)中臺(tái)是集數(shù)據(jù)采集、融合、治理、組織管理、智能分析為一體,以提升業(yè)務(wù)運(yùn)行效率、持續(xù)促進(jìn)業(yè)務(wù)創(chuàng)新為目標(biāo)的整體平臺(tái)。數(shù)據(jù)中臺(tái)構(gòu)建起了完整的數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范,實(shí)現(xiàn)了數(shù)據(jù)統(tǒng)一的命名、格式、算法、粒度、口徑等規(guī)范;數(shù)據(jù)整合方面,數(shù)據(jù)中臺(tái)實(shí)現(xiàn)了全域數(shù)據(jù)集成,包含營(yíng)銷、物流、專賣、煙葉等數(shù)據(jù)的全面采集匯聚,沉淀了企業(yè)級(jí)跨域數(shù)據(jù)資產(chǎn),在OneData的數(shù)據(jù)整合管理方法下,構(gòu)建統(tǒng)一、可共享的全域數(shù)據(jù)體系、避免數(shù)據(jù)煙囪、數(shù)據(jù)冗余;數(shù)據(jù)處理分析方面,數(shù)據(jù)中臺(tái)實(shí)現(xiàn)大數(shù)據(jù)量的數(shù)據(jù)存儲(chǔ)、支持極高的作業(yè)并發(fā)數(shù),具有百PB級(jí)的存儲(chǔ)處理能力和每日 PB 級(jí)別的計(jì)算吞吐能力,并提供準(zhǔn)實(shí)時(shí)的數(shù)據(jù)分析計(jì)算能力;數(shù)據(jù)服務(wù)方面,基于OneService的數(shù)據(jù)服務(wù)方法論,構(gòu)建統(tǒng)一的數(shù)據(jù)服務(wù)平臺(tái),提供穩(wěn)定、高效、安全的全域數(shù)據(jù)服務(wù),以及標(biāo)準(zhǔn)化的數(shù)據(jù)共享、數(shù)據(jù)互通的API服務(wù),實(shí)現(xiàn)數(shù)據(jù)與業(yè)務(wù)的高效閉環(huán)。
福建煙草現(xiàn)有數(shù)據(jù)中心構(gòu)建了面向主題、集成、反映歷史變化的數(shù)據(jù)集合,用于支持管理決策和全局信息共享[2]。在建設(shè)過程中形成了一定的標(biāo)準(zhǔn)規(guī)范,對(duì)全省信息系統(tǒng)的主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)交換以及信息資源分類編碼進(jìn)行標(biāo)準(zhǔn)化定義,為企業(yè)數(shù)據(jù)的標(biāo)準(zhǔn)化治理打下基礎(chǔ);數(shù)據(jù)分析方面,具備一定的數(shù)據(jù)分析處理能力,能對(duì)數(shù)據(jù)進(jìn)行統(tǒng)計(jì),形成各業(yè)務(wù)系統(tǒng)的指標(biāo)、報(bào)表,滿足省市兩級(jí)領(lǐng)導(dǎo)、管理人員、業(yè)務(wù)人員對(duì)指標(biāo)數(shù)據(jù)的需求。目前數(shù)據(jù)中心可以提供1724張相關(guān)報(bào)表和看板數(shù)據(jù);數(shù)據(jù)服務(wù)方面,實(shí)現(xiàn)ESB(企業(yè)服務(wù)總線)為核心的數(shù)據(jù)交換平臺(tái)搭建,提供省市兩級(jí)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)應(yīng)用的服務(wù)能力,能實(shí)現(xiàn)基本的數(shù)據(jù)交互服務(wù)功能。
大數(shù)據(jù)平臺(tái)將企業(yè)所有數(shù)據(jù)(包括結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù))抽取出來放到一起,成為一個(gè)大的數(shù)據(jù)集,構(gòu)成解決數(shù)據(jù)的存儲(chǔ)、計(jì)算、治理問題的數(shù)據(jù)基礎(chǔ)平臺(tái)。大數(shù)據(jù)平臺(tái)注重?cái)?shù)據(jù)的存儲(chǔ)和計(jì)算能力,同時(shí)還具有一定的實(shí)時(shí)分析、數(shù)據(jù)管理能力,屬于一種技術(shù)平臺(tái)和技術(shù)實(shí)現(xiàn)手段。
福建煙草數(shù)據(jù)中臺(tái)、現(xiàn)有數(shù)據(jù)中心與大數(shù)據(jù)平臺(tái)的區(qū)別如表1所示。
表1 福建煙草數(shù)據(jù)中臺(tái)、現(xiàn)有數(shù)據(jù)中心與大數(shù)據(jù)
福建煙草數(shù)據(jù)中臺(tái)以IAAS、PAAS層組件工具為支撐,以數(shù)據(jù)中臺(tái)為建設(shè)主體,圍繞福建煙草全領(lǐng)域、全終端“一切業(yè)務(wù)數(shù)據(jù)化,一切數(shù)據(jù)業(yè)務(wù)化”的戰(zhàn)略目標(biāo),推進(jìn)福建煙草全面數(shù)字化轉(zhuǎn)型,形成“數(shù)據(jù)集中統(tǒng)一、應(yīng)用百花齊放”的格局,最終實(shí)現(xiàn)福建煙草的業(yè)務(wù)、數(shù)據(jù)應(yīng)用智能化升級(jí)。
福建煙草數(shù)據(jù)中臺(tái)的總體架構(gòu)如圖1所示,分為統(tǒng)一賦能前臺(tái)、統(tǒng)一數(shù)據(jù)平臺(tái)、統(tǒng)一計(jì)算后臺(tái)三層。
圖1 福建煙草數(shù)據(jù)中臺(tái)總體架構(gòu)
其中,統(tǒng)一賦能前臺(tái)通過數(shù)據(jù)平臺(tái)提供的數(shù)據(jù)能力,支持經(jīng)營(yíng)管理平臺(tái)等業(yè)務(wù)系統(tǒng),打造“智慧營(yíng)銷”“智慧物流”“智慧煙葉”等福建煙草大數(shù)據(jù)應(yīng)用體系,實(shí)現(xiàn)消費(fèi)者畫像、零售客戶洞察等通用基礎(chǔ)服務(wù)能力,以及銷量預(yù)測(cè),智能配貨等個(gè)性化場(chǎng)景的分析服務(wù)能力,以數(shù)據(jù)賦能前端業(yè)務(wù),實(shí)現(xiàn)數(shù)據(jù)分析價(jià)值化與服務(wù)化。
統(tǒng)一數(shù)據(jù)平臺(tái)依托福建煙草沉淀的數(shù)據(jù)資產(chǎn),整合行業(yè)產(chǎn)業(yè)鏈供應(yīng)鏈各個(gè)環(huán)節(jié)數(shù)據(jù),實(shí)行統(tǒng)一管理、運(yùn)營(yíng),形成四個(gè)“統(tǒng)一”模式:數(shù)據(jù)整合、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)服務(wù)、數(shù)據(jù)治理。
一是數(shù)據(jù)整合,包括公共數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)開發(fā)。公共數(shù)據(jù)存儲(chǔ)分為三個(gè)層面。第一層,緩沖數(shù)據(jù)層,匯聚、采集福建煙草的業(yè)務(wù)數(shù)據(jù)和管理數(shù)據(jù),包括營(yíng)銷、專賣、物流、煙葉等業(yè)務(wù)系統(tǒng)的結(jié)構(gòu)化及非結(jié)構(gòu)化數(shù)據(jù),并按照不同業(yè)務(wù)、組織進(jìn)行縱向分類存儲(chǔ)。第二層,公共數(shù)據(jù)層,面向主題的數(shù)據(jù)組織方式,對(duì)數(shù)據(jù)進(jìn)行歸類,按業(yè)務(wù)主題劃分,形成營(yíng)銷域、專賣域、煙葉域、人事域等,進(jìn)行統(tǒng)一、標(biāo)準(zhǔn)化管理。第三層,萃取數(shù)據(jù)層,對(duì)搬運(yùn)的數(shù)據(jù)進(jìn)行萃取加工,形成以業(yè)務(wù)對(duì)象和萃取標(biāo)簽為核心的數(shù)據(jù)體系,包含基礎(chǔ)數(shù)據(jù)標(biāo)簽、統(tǒng)計(jì)算法數(shù)據(jù)標(biāo)簽等;數(shù)據(jù)開發(fā)包括模型設(shè)計(jì)、指標(biāo)體系、數(shù)據(jù)開發(fā)、數(shù)據(jù)目錄、標(biāo)簽體系等一站式數(shù)據(jù)開發(fā)框架。
二是數(shù)據(jù)標(biāo)準(zhǔn),建立新的面向大數(shù)據(jù)管理和應(yīng)用的技術(shù)標(biāo)準(zhǔn),包括數(shù)據(jù)采集標(biāo)準(zhǔn)、數(shù)據(jù)模型標(biāo)準(zhǔn)、數(shù)據(jù)交換標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)、數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)、數(shù)據(jù)安全標(biāo)準(zhǔn)等。
三是數(shù)據(jù)服務(wù),統(tǒng)一數(shù)據(jù)服務(wù)包括各類共享數(shù)據(jù)服務(wù)的開發(fā),按照數(shù)據(jù)服務(wù)工廠的理念,通過對(duì)數(shù)據(jù)中臺(tái)各方面能力的總結(jié)、提煉,實(shí)現(xiàn)數(shù)據(jù)共享能力的目錄化、服務(wù)化。
四是數(shù)據(jù)治理,數(shù)據(jù)治理要考慮建立數(shù)據(jù)治理及運(yùn)營(yíng)機(jī)制,針對(duì)企業(yè)數(shù)據(jù)資產(chǎn)開展治理和運(yùn)營(yíng)工作,包含權(quán)限控制、資產(chǎn)管理、質(zhì)量管理、運(yùn)維管理等。
統(tǒng)一計(jì)算平臺(tái)則是基于福建煙草的專有云平臺(tái)能力,借助大數(shù)據(jù)組件及分布式計(jì)算存儲(chǔ)框架,實(shí)現(xiàn)企業(yè)大數(shù)據(jù)量存儲(chǔ),同時(shí)為數(shù)據(jù)中臺(tái)提供基礎(chǔ)計(jì)算能力。通過離線計(jì)算平臺(tái) MaxCompute、流計(jì)算平臺(tái)StreamComputed 等提供的數(shù)據(jù)管理和計(jì)算能力,為數(shù)據(jù)整合、數(shù)據(jù)分析算法提供高效的計(jì)算支持,支撐離線計(jì)算、實(shí)時(shí)計(jì)算、在線分析等大數(shù)據(jù)能力。
福建煙草數(shù)據(jù)中臺(tái)充分發(fā)揮大數(shù)據(jù)底座能力,整合各業(yè)務(wù)系統(tǒng)數(shù)據(jù),構(gòu)建數(shù)據(jù)挖掘模型,用數(shù)據(jù)驅(qū)動(dòng)營(yíng)銷、物流、專賣、煙葉等業(yè)務(wù)的決策管理,為業(yè)務(wù)提供共享、可靠的數(shù)據(jù)服務(wù),通過數(shù)據(jù)賦能業(yè)務(wù),逐步實(shí)現(xiàn)系統(tǒng)集成、資源整合、信息共享[3],構(gòu)建數(shù)據(jù)中臺(tái)的底座能力,推進(jìn)行業(yè)的數(shù)字化轉(zhuǎn)型。
一是打造資源共享。福建煙草在信息化建設(shè)過程中,信息、應(yīng)用、資源孤島化現(xiàn)象嚴(yán)重,信息難以交互,數(shù)據(jù)無法互通。通過構(gòu)建福建煙草數(shù)據(jù)中臺(tái),有效整合數(shù)據(jù)資源,做到數(shù)據(jù)共享和資源統(tǒng)籌,從全局視角實(shí)現(xiàn)全域管控和應(yīng)用集成,賦能行業(yè)資源配置和管理效率不斷提升,推進(jìn)行業(yè)生產(chǎn)鏈供應(yīng)鏈的高效運(yùn)轉(zhuǎn)。
二是促進(jìn)業(yè)務(wù)協(xié)同。福建煙草數(shù)據(jù)中臺(tái)集成不同業(yè)務(wù)系統(tǒng)中的數(shù)據(jù),通過數(shù)據(jù)處理分析、價(jià)值挖掘,建立結(jié)構(gòu)完備、組織有序、靈活可拓展的數(shù)據(jù)資源體系,支持跨部門、跨領(lǐng)域的業(yè)務(wù)協(xié)同;構(gòu)建營(yíng)銷、物流、專賣、煙葉、財(cái)務(wù)等應(yīng)用,通過數(shù)據(jù)資源共享,實(shí)現(xiàn)信息、數(shù)據(jù)在不同業(yè)務(wù)系統(tǒng)中的交互,增強(qiáng)橫向業(yè)務(wù)協(xié)同,助推福建煙草構(gòu)建統(tǒng)一、集成和可擴(kuò)展的信息化平臺(tái)。
三是提供開放服務(wù)。福建煙草數(shù)據(jù)中臺(tái)搭建統(tǒng)一的數(shù)據(jù)服務(wù)總線,提供統(tǒng)一的API服務(wù)和服務(wù)管理能力。支持將現(xiàn)有API注冊(cè)到開放服務(wù)平臺(tái)進(jìn)行統(tǒng)一的發(fā)布和管理。同時(shí),開放服務(wù)平臺(tái)和API網(wǎng)關(guān)打通,能夠?qū)PI服務(wù)一鍵發(fā)布到API網(wǎng)關(guān)。開放服務(wù)平臺(tái)與API網(wǎng)關(guān),一同為用戶提供低成本、易上手、安全穩(wěn)定的數(shù)據(jù)開放共享服務(wù)。
四是保障數(shù)據(jù)安全。福建煙草數(shù)據(jù)中臺(tái)建設(shè)堅(jiān)持“歸我所有、有我所控、為我所用”的基本原則,以平臺(tái)自主可控和安全可信為底線,確保數(shù)據(jù)為自身所有、平臺(tái)為自身所控。依托云原生安全能力加強(qiáng)信息系統(tǒng)的安全防護(hù),通過安全檢測(cè)、安全評(píng)估和應(yīng)急處理能力,有力保障行業(yè)數(shù)據(jù)資產(chǎn)安全和渠道安全,實(shí)現(xiàn)信息系統(tǒng)和業(yè)務(wù)數(shù)據(jù)的安全使用。
1.4.1 品牌會(huì)員畫像模型
通過數(shù)據(jù)挖掘分析不同卷煙的潛在消費(fèi)者特征,對(duì)比不同卷煙消費(fèi)群體的標(biāo)簽特點(diǎn),針對(duì)各品牌卷煙的特定消費(fèi)群體,制定差異化、精準(zhǔn)化的營(yíng)銷方案。
第一步,以卷煙熱力模型作為基礎(chǔ),城市網(wǎng)格為空間對(duì)象,計(jì)算所有地市網(wǎng)格中某款卷煙的消費(fèi)熱度占全部卷煙消費(fèi)熱度的比例,作為衡量該款卷煙在該網(wǎng)格的消費(fèi)熱度(受歡迎程度),同時(shí)標(biāo)記消費(fèi)熱度最高與最低的網(wǎng)格區(qū)域。
第二步,通過對(duì)兩類網(wǎng)格區(qū)域消費(fèi)人群進(jìn)行聚類分析,挖掘差異度高的特征作為該款卷煙消費(fèi)人群的特征屬性標(biāo)簽,進(jìn)而勾勒出該款卷煙消費(fèi)群體的基礎(chǔ)畫像。首先根據(jù)某款卷煙的受歡迎度,對(duì)相應(yīng)網(wǎng)格內(nèi)的消費(fèi)人群數(shù)據(jù)進(jìn)行逐一標(biāo)注,然后分別將消費(fèi)人群的每一個(gè)屬性標(biāo)簽和受歡迎程度進(jìn)行組合,使用均值偏移聚類算法(Mean shift)[4],進(jìn)行聚類分析,對(duì)其進(jìn)行分類,每一次的迭代使用偏移公式計(jì)算移動(dòng)距離,直到偏移均值收斂,完成分類。
圖2 聚類分析算法示意圖
Mean shift的基礎(chǔ)偏移量公式:
Sh:以x為中心點(diǎn),半徑為h的高維球區(qū)域;k:包含在Sh范圍內(nèi)點(diǎn)的個(gè)數(shù);xi:包含在Sh范圍內(nèi)的點(diǎn)。
在均值漂移中引入核函數(shù)的概念,能夠使計(jì)算中距離中心的點(diǎn)具有更大的權(quán)值,反映距離越短,權(quán)值越大的特性。改進(jìn)的偏移均值:
中心點(diǎn)移動(dòng)到偏移均值位置:
xt+1=Mt+xt
通過觀察分類結(jié)果可以直觀地判斷出屬性標(biāo)簽與該款卷煙受歡迎程度之間是否相關(guān),以及不同屬性與受歡迎程度之間的關(guān)聯(lián)性。
第三步,根據(jù)上一步確定的相關(guān)屬性和偏好特征值,將占比較高的N個(gè)特征值作為篩選條件,結(jié)合相關(guān)的地理數(shù)據(jù)和人口數(shù)據(jù),匹配出具有類似人口特征的區(qū)域,作為卷煙產(chǎn)品推廣的重點(diǎn)區(qū)域,為品牌培育、精準(zhǔn)營(yíng)銷做出有力支撐。
1.4.2 智能訂貨推薦
在零售客戶訂貨平臺(tái)融入智能訂貨推薦系統(tǒng),通過計(jì)算零售客戶歷史銷售數(shù)據(jù)、掃碼數(shù)據(jù)以及商圈環(huán)境數(shù)據(jù),形成客戶標(biāo)簽、產(chǎn)品標(biāo)簽、市場(chǎng)單元標(biāo)簽,構(gòu)建零售客戶與卷煙商品的關(guān)聯(lián)性,結(jié)合推薦算法,輔助零售客戶進(jìn)行智能訂貨,為零售客戶推薦適銷對(duì)路的卷煙商品,提升卷煙經(jīng)營(yíng)利潤(rùn)收入。智能訂貨推薦流程見圖3。
圖3 智能訂貨推薦流程
如圖3所示,采集客戶、卷煙銷售相關(guān)數(shù)據(jù)進(jìn)行標(biāo)簽計(jì)算,產(chǎn)生特征標(biāo)簽,通過推薦算法形成卷煙、客戶的相似度矩陣,由協(xié)同過濾算法處理后輸出卷煙推薦結(jié)果。
1.4.3 企業(yè)大屏建設(shè)
開發(fā)建設(shè)面向省市兩級(jí)的企業(yè)大屏。通過對(duì)行業(yè)各業(yè)務(wù)領(lǐng)域核心KPI指標(biāo)的梳理和提煉,利用DataV數(shù)據(jù)可視化工具,以直觀的圖表形式展示福建煙草總體運(yùn)行態(tài)勢(shì)、卷煙非煙銷售、專賣監(jiān)管、物流管理、煙葉管理等主題,實(shí)現(xiàn)全方位、多維度、多粒度的企業(yè)數(shù)據(jù)大屏展示,支撐福建煙草數(shù)字化轉(zhuǎn)型和高質(zhì)量發(fā)展。
數(shù)據(jù)中臺(tái)建設(shè)是企業(yè)宏觀戰(zhàn)略規(guī)劃的一個(gè)重要部分,福建煙草數(shù)據(jù)中臺(tái)將縱向形成領(lǐng)導(dǎo)層、管理層和執(zhí)行層的多級(jí)管理,橫向拉通企業(yè)數(shù)據(jù)相關(guān)方,包括中臺(tái)建設(shè)團(tuán)隊(duì)、中臺(tái)運(yùn)維團(tuán)隊(duì)、數(shù)據(jù)資產(chǎn)管理團(tuán)隊(duì)、數(shù)據(jù)運(yùn)營(yíng)團(tuán)隊(duì)等,共同構(gòu)建福建煙草職能明確、部門協(xié)同、責(zé)權(quán)分明的弱矩陣組織架構(gòu)。如圖4所示,組織架構(gòu)自頂而下分為三層。
圖4 福建煙草數(shù)據(jù)中臺(tái)組織架構(gòu)
其中,決策層由領(lǐng)導(dǎo)層和數(shù)據(jù)管理委員會(huì)(CIO)管理,對(duì)公司數(shù)據(jù)管理相關(guān)的重大方針、戰(zhàn)略進(jìn)行決策。
管理層作為日常企業(yè)數(shù)據(jù)管理的核心團(tuán)隊(duì),由一個(gè)核心的數(shù)據(jù)管理辦公室組成,對(duì)領(lǐng)導(dǎo)層和CIO負(fù)責(zé),執(zhí)行數(shù)據(jù)管理的日常工作,包括對(duì)數(shù)據(jù)管理政策和辦法的執(zhí)行、監(jiān)管、考核與協(xié)調(diào)。
執(zhí)行層由各業(yè)務(wù)和技術(shù)線條的核心負(fù)責(zé)人組成,接受數(shù)據(jù)中臺(tái)管理組織的管理和協(xié)調(diào),共同完成企業(yè)的數(shù)據(jù)管理工作,包括數(shù)據(jù)責(zé)任人、數(shù)據(jù)使用人員、系統(tǒng)責(zé)任人等。
福建煙草參考國(guó)家局?jǐn)?shù)據(jù)標(biāo)準(zhǔn)建設(shè)要求建立數(shù)據(jù)標(biāo)準(zhǔn)體系,形成數(shù)據(jù)元、主數(shù)據(jù)、信息分類編碼的標(biāo)準(zhǔn)化。在福建煙草現(xiàn)有數(shù)據(jù)標(biāo)準(zhǔn)體系基礎(chǔ)上,結(jié)合大數(shù)據(jù)的建設(shè)要求,在新的數(shù)據(jù)源、采集方式和應(yīng)用需求驅(qū)動(dòng)下,對(duì)原有的數(shù)據(jù)標(biāo)準(zhǔn)體系進(jìn)行適配性升級(jí),建立新的面向大數(shù)據(jù)管理和數(shù)據(jù)應(yīng)用的標(biāo)準(zhǔn)體系。數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)貫穿數(shù)據(jù)完整的生命周期(如圖5所示),包括數(shù)據(jù)模型標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)、數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)以及數(shù)據(jù)安全標(biāo)準(zhǔn)等,共同組成一套完整、規(guī)范、準(zhǔn)確的數(shù)據(jù)標(biāo)準(zhǔn)體系。
圖5 福建煙草數(shù)據(jù)中臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)體系規(guī)劃
一是建立數(shù)據(jù)采集標(biāo)準(zhǔn)。數(shù)據(jù)中臺(tái)的建設(shè)體系下,數(shù)據(jù)采集需要面向更多異構(gòu)、實(shí)時(shí)數(shù)據(jù)的對(duì)接和交換需求,包括各種物聯(lián)網(wǎng)設(shè)備、外部數(shù)據(jù)等,數(shù)據(jù)類別也涉及半結(jié)構(gòu)化與非結(jié)構(gòu)化的數(shù)據(jù)。根據(jù)數(shù)據(jù)特征,針對(duì)不同的業(yè)務(wù)類型、技術(shù)架構(gòu),制定不同數(shù)據(jù)采集策略,建立標(biāo)準(zhǔn)規(guī)范的數(shù)據(jù)采集體系。
二是建立數(shù)據(jù)模型標(biāo)準(zhǔn)。對(duì)福建煙草企業(yè)級(jí)數(shù)據(jù)模型進(jìn)行規(guī)范定義,包括定義數(shù)據(jù)維度、業(yè)務(wù)過程、原子指標(biāo)、業(yè)務(wù)限定等。數(shù)據(jù)標(biāo)準(zhǔn)定義范圍從事實(shí)明細(xì)數(shù)據(jù)、匯總數(shù)據(jù)的寬表模型,到萃取數(shù)據(jù)的標(biāo)簽?zāi)P?、指?biāo)模型。通過構(gòu)建數(shù)據(jù)模型的標(biāo)準(zhǔn)化體系,實(shí)現(xiàn)數(shù)據(jù)模型的規(guī)范化管理。
三是建立數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)。基于業(yè)務(wù)數(shù)據(jù)特點(diǎn),制定數(shù)據(jù)質(zhì)量評(píng)估標(biāo)準(zhǔn),并基于數(shù)據(jù)標(biāo)準(zhǔn)構(gòu)建數(shù)據(jù)質(zhì)量校驗(yàn)規(guī)則庫(kù);建立面向源頭的數(shù)據(jù)責(zé)任標(biāo)準(zhǔn)、面向數(shù)據(jù)發(fā)布的數(shù)據(jù)質(zhì)量發(fā)布標(biāo)準(zhǔn)等。
四是建立數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)。數(shù)據(jù)服務(wù)是面向應(yīng)用系統(tǒng)提供的數(shù)據(jù)處理、算法模型、標(biāo)簽分析等服務(wù)形式,以數(shù)據(jù)服務(wù)化為目標(biāo),構(gòu)建數(shù)據(jù)服務(wù)工廠理念,建立數(shù)據(jù)服務(wù)目錄,對(duì)服務(wù)的申請(qǐng)、使用、對(duì)接、運(yùn)行維護(hù)進(jìn)行規(guī)范化約束,構(gòu)成數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)。
五是建立數(shù)據(jù)安全標(biāo)準(zhǔn)。數(shù)據(jù)安全涉及到數(shù)據(jù)存儲(chǔ)、傳輸、使用等過程,根據(jù)數(shù)據(jù)安全管理要求,對(duì)數(shù)據(jù)從產(chǎn)生、采集、傳輸、集成、存儲(chǔ)、處理、交換、共享和銷毀等方面進(jìn)行約束和管理,同時(shí)對(duì)多組戶的數(shù)據(jù)訪問權(quán)限制定規(guī)范的安全管理標(biāo)準(zhǔn)體系。
福建煙草數(shù)據(jù)中臺(tái)面向大數(shù)據(jù)治理需求,堅(jiān)持問題導(dǎo)向,構(gòu)建數(shù)據(jù)中臺(tái)治理體系,實(shí)現(xiàn)福建煙草數(shù)據(jù)資產(chǎn)的系統(tǒng)性治理。福建煙草數(shù)據(jù)中臺(tái)數(shù)據(jù)治理體系規(guī)劃如圖6所示,貫穿數(shù)據(jù)的全生命周期,福建煙草數(shù)據(jù)中臺(tái)打造“四化”數(shù)據(jù)治理體系。
圖6 福建煙草數(shù)據(jù)中臺(tái)數(shù)據(jù)治理體系規(guī)劃圖
一是治理范圍“全域化”。數(shù)據(jù)治理具備企業(yè)數(shù)據(jù)資產(chǎn)全鏈路管理能力,以元數(shù)據(jù)、主數(shù)據(jù)、數(shù)據(jù)質(zhì)量和數(shù)據(jù)生命周期管理為基礎(chǔ),對(duì)企業(yè)的標(biāo)簽庫(kù)、模型庫(kù)、指標(biāo)庫(kù)和規(guī)則庫(kù)等核心數(shù)據(jù)進(jìn)行一體化管理,同時(shí)依托數(shù)據(jù)血緣關(guān)系圖譜、資源運(yùn)營(yíng)視圖和端到端的運(yùn)維監(jiān)控實(shí)現(xiàn)數(shù)據(jù)全生命周期完整跟蹤及治理能力。
二是治理模塊“協(xié)同化”。數(shù)據(jù)治理體系統(tǒng)籌管理企業(yè)數(shù)據(jù)資產(chǎn),包括數(shù)據(jù)標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)安全管理等,各模塊協(xié)同運(yùn)營(yíng),確保數(shù)據(jù)中臺(tái)的數(shù)據(jù)一致、共享、有效。在福建煙草現(xiàn)有代碼管理中心、主數(shù)據(jù)管理系統(tǒng)基礎(chǔ)上,構(gòu)建、完善福建煙草大數(shù)據(jù)相關(guān)模塊的協(xié)同化管理。
三是治理模式“規(guī)范化”。隨著時(shí)間推移,數(shù)據(jù)存量在不斷增加,治理成本、治理難度不斷加大。為了避免產(chǎn)生“成本中心”,數(shù)據(jù)治理需要考慮建立完備的組織、角色、制度、流程,構(gòu)建企業(yè)全域的數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)架構(gòu)、存儲(chǔ)架構(gòu)等規(guī)范,實(shí)現(xiàn)數(shù)據(jù)中臺(tái)對(duì)數(shù)據(jù)資產(chǎn)的管用和挖掘數(shù)據(jù)價(jià)值的能力。
四是治理能力“可靠化”。數(shù)據(jù)資產(chǎn)建設(shè)完畢后,充分盤點(diǎn)資產(chǎn)分布和使用情況、計(jì)算存儲(chǔ)成本情況以及資源應(yīng)用情況,保障資產(chǎn)的可用和運(yùn)營(yíng);對(duì)資產(chǎn)的使用價(jià)值進(jìn)行評(píng)估,通過機(jī)制、工具和方法保障優(yōu)質(zhì)資產(chǎn),對(duì)質(zhì)量較差的資產(chǎn)進(jìn)行完善和優(yōu)化;實(shí)現(xiàn)問題發(fā)現(xiàn)、缺陷預(yù)警和質(zhì)量處理的功能,保障數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全。
福建煙草長(zhǎng)期以來重視科技創(chuàng)新及管理創(chuàng)新工作,每年由省、市兩級(jí)單位組織科技創(chuàng)新課題、QC課題、五小課題等多種形式的創(chuàng)新活動(dòng),但由于缺少統(tǒng)一的技術(shù)平臺(tái)、技術(shù)架構(gòu)和運(yùn)營(yíng)組織管理,創(chuàng)新成果無法共享、推廣,一定程度上會(huì)產(chǎn)生重復(fù)投入、重復(fù)建設(shè)等問題。為此,福建煙草基于數(shù)據(jù)中臺(tái)能力成立數(shù)字化轉(zhuǎn)型融合創(chuàng)新中心。
福建煙草數(shù)字化轉(zhuǎn)型融合創(chuàng)新中心,依托數(shù)據(jù)中臺(tái)的底座能力,充分發(fā)揮福建煙草和生態(tài)伙伴的自身優(yōu)勢(shì),將云計(jì)算、大數(shù)據(jù)、工業(yè)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、人工智能、區(qū)塊鏈、邊緣計(jì)算等新技術(shù)與煙草產(chǎn)業(yè)相融合,以業(yè)務(wù)需求為導(dǎo)向推進(jìn)產(chǎn)品孵化和科技創(chuàng)新,同時(shí)結(jié)合福建煙草的信創(chuàng)、攻防演練、大數(shù)據(jù)、云平臺(tái)等應(yīng)用場(chǎng)景的測(cè)試、培訓(xùn)以及人才孵化等,構(gòu)建煙草信息化的創(chuàng)新研究、技術(shù)孵化、系統(tǒng)測(cè)試、人員培訓(xùn)等的展示空間和功能空間,賦能行業(yè)數(shù)字化轉(zhuǎn)型,促進(jìn)行業(yè)高質(zhì)量發(fā)展。融合創(chuàng)新中心功能架構(gòu)圖如圖7所示。
圖7 福建煙草數(shù)字化轉(zhuǎn)型融合創(chuàng)新中心功能架構(gòu)
創(chuàng)新中心基于數(shù)據(jù)中臺(tái)的大數(shù)據(jù)存儲(chǔ)和離線計(jì)算能力,建立大數(shù)據(jù)實(shí)驗(yàn)室,為大數(shù)據(jù)的應(yīng)用研究、數(shù)據(jù)挖掘、大數(shù)據(jù)人才培養(yǎng)提供實(shí)驗(yàn)基地和人才孵化基地;探索通過大數(shù)據(jù)集成,打通農(nóng)、工、商、零、銷一體的全產(chǎn)業(yè)鏈供應(yīng)鏈數(shù)據(jù);探索產(chǎn)業(yè)互聯(lián)網(wǎng)的數(shù)字化路徑,并通過全鏈路公共數(shù)據(jù),研究構(gòu)建數(shù)字化科學(xué)監(jiān)管體系。
創(chuàng)新中心的建設(shè)聚焦要素激活,依托行業(yè)數(shù)據(jù)中臺(tái)的數(shù)據(jù)沉淀,以創(chuàng)新中心為載體,深挖數(shù)據(jù)價(jià)值、盤活數(shù)據(jù)資產(chǎn),探索大數(shù)據(jù)、人工智能等新興技術(shù)與煙草產(chǎn)業(yè)鏈的深度融合,實(shí)現(xiàn)數(shù)據(jù)要素激活;注重改革創(chuàng)新,通過數(shù)據(jù)資源孵化再生、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)價(jià)值挖掘,形成有效的“數(shù)據(jù)業(yè)務(wù)化、業(yè)務(wù)數(shù)據(jù)化”的生態(tài)鏈條,提供專一平臺(tái),加快建設(shè)數(shù)字化企業(yè),以數(shù)字化驅(qū)動(dòng)生產(chǎn)方式、商業(yè)模式和治理方式變革,推進(jìn)行業(yè)的數(shù)字化轉(zhuǎn)型和改革創(chuàng)新。
隨著云計(jì)算和大數(shù)據(jù)浪潮的來襲,煙草行業(yè)的數(shù)字化轉(zhuǎn)型全面開啟,企業(yè)業(yè)務(wù)數(shù)據(jù)向協(xié)同、共享的方向發(fā)展。推進(jìn)數(shù)據(jù)驅(qū)動(dòng)、精細(xì)化管理,打通數(shù)據(jù)與應(yīng)用孤島,實(shí)現(xiàn)數(shù)據(jù)與應(yīng)用資產(chǎn)的全球化管理,快速挖掘數(shù)據(jù)價(jià)值,是行業(yè)數(shù)字化轉(zhuǎn)型中需要解決的問題,數(shù)據(jù)中臺(tái)是實(shí)現(xiàn)數(shù)字轉(zhuǎn)型的必要?jiǎng)?chuàng)新技術(shù)和方法。數(shù)據(jù)是行業(yè)不可或缺的重要資產(chǎn),也是需要深挖價(jià)值的潛在資源。構(gòu)建企業(yè)數(shù)據(jù)中臺(tái)是實(shí)現(xiàn)數(shù)據(jù)價(jià)值、賦能業(yè)務(wù)應(yīng)用的重要方式,數(shù)據(jù)中臺(tái)建設(shè)也必將成為煙草行業(yè)數(shù)字化轉(zhuǎn)型和高質(zhì)量發(fā)展的趨勢(shì)和方向。本文結(jié)合福建煙草數(shù)據(jù)中心的建設(shè)背景以及數(shù)據(jù)中臺(tái)的建設(shè)情況,深入分析數(shù)據(jù)中臺(tái)與福建煙草產(chǎn)業(yè)鏈供應(yīng)鏈的深度融合,闡述數(shù)據(jù)中臺(tái)在一體化平臺(tái)試點(diǎn)工作建設(shè)與數(shù)字化轉(zhuǎn)型過程中起到的關(guān)鍵作用,為福建煙草以及煙草行業(yè)數(shù)據(jù)中臺(tái)建設(shè)與高質(zhì)量發(fā)展提供建議和意見。