一個(gè)數(shù)據(jù)中臺的誕生

為了提升生產(chǎn)和管理效率，降低創(chuàng)新成本，制造企業(yè)迫切需要一個(gè)平臺，統(tǒng)一管理企業(yè)海量的數(shù)據(jù)資產(chǎn)，挖掘數(shù)據(jù)的核心價(jià)值，最大程度地釋放數(shù)據(jù)生產(chǎn)力，支撐智慧運(yùn)營與業(yè)務(wù)創(chuàng)新。這個(gè)平臺就是人們常說的數(shù)據(jù)中臺，也就是企業(yè)不可或缺的“數(shù)據(jù)大腦”。

作為全球知名的制造企業(yè)，海信從2019年2月開始搭建其大數(shù)據(jù)平臺，并于4月30日正式上線，兩個(gè)多月時(shí)間內(nèi)完成了5000多個(gè)調(diào)度，以及數(shù)千個(gè)表的遷移，雖然時(shí)間緊、任務(wù)重，但在戴爾公司的全力配合下，加班加點(diǎn)、傾斜資源，最終保證了大數(shù)據(jù)平臺按期成功上線。

數(shù)據(jù)驅(qū)動業(yè)務(wù)

海信從2015年開始了大數(shù)據(jù)方面的探索，并于2018年重組IT與數(shù)據(jù)管理部，下設(shè)大數(shù)據(jù)部，眾多大數(shù)據(jù)相關(guān)項(xiàng)目持續(xù)上馬，2018年年底，大數(shù)據(jù)平臺項(xiàng)目完成了論證。

“我們部門的核心職能是數(shù)據(jù)中臺建設(shè)、數(shù)據(jù)應(yīng)用和數(shù)據(jù)治理?！焙Ｐ偶瘓F(tuán)有限公司IT與數(shù)據(jù)管理部大數(shù)據(jù)部長羅慶干表示，對于制造企業(yè)而言，數(shù)字化主要解決了以下三個(gè)方面的業(yè)務(wù)問題：首先，支撐領(lǐng)導(dǎo)快速、準(zhǔn)確的決策；其次，有效助力生產(chǎn)，尤其是在供應(yīng)鏈端，將工業(yè)大數(shù)據(jù)、工業(yè)互聯(lián)網(wǎng)等與業(yè)務(wù)緊密結(jié)合，提升生產(chǎn)線的自動化程度；最后，以數(shù)據(jù)為驅(qū)動，支持一些創(chuàng)新應(yīng)用，比如防竄貨和資金占用，進(jìn)而提升效率，降低成本，建立核心競爭優(yōu)勢。

海信集團(tuán)有限公司IT與數(shù)據(jù)管理部大數(shù)據(jù)部數(shù)據(jù)中臺總監(jiān)劉海波回憶說，在大數(shù)據(jù)平臺籌建前，存在數(shù)據(jù)孤島、數(shù)據(jù)時(shí)效性低和數(shù)據(jù)質(zhì)量差等問題。它是阻礙海信集團(tuán)數(shù)字化進(jìn)程、影響數(shù)據(jù)創(chuàng)新能力的絆腳石。首先，由于數(shù)據(jù)量越來越大，傳統(tǒng)的數(shù)據(jù)倉庫已捉襟見肘。其次，從2015年開始大規(guī)模應(yīng)用的數(shù)據(jù)倉庫在性能上已經(jīng)跟不上業(yè)務(wù)發(fā)展的要求，尤其是在數(shù)據(jù)處理的時(shí)效性方面，雖然系統(tǒng)一直在優(yōu)化，數(shù)據(jù)處理的效率不斷提升，處理周期從一天逐漸縮短至12個(gè)小時(shí)、8個(gè)小時(shí)甚至2個(gè)小時(shí)，但2個(gè)小時(shí)基本上已是傳統(tǒng)數(shù)據(jù)倉庫的處理極限。最后，問題數(shù)據(jù)找不到具體的責(zé)任人、流程和機(jī)制。如何突破這一瓶頸，讓業(yè)務(wù)處理的時(shí)效性和數(shù)據(jù)應(yīng)用再上一個(gè)臺階呢？數(shù)據(jù)中臺和數(shù)據(jù)管理體系的建設(shè)成了當(dāng)務(wù)之急，戴爾積極參與其中。

懂業(yè)務(wù) 更懂?dāng)?shù)據(jù)

在很多人的印象中，戴爾一直是一個(gè)IT基礎(chǔ)架構(gòu)解決方案提供商，而非典型意義上的“大數(shù)據(jù)廠商”。但是經(jīng)過嚴(yán)格的招標(biāo)流程，海信集團(tuán)最終還是屬意戴爾公司，這背后有何原委？

劉海波表示，戴爾的加入帶動了整個(gè)項(xiàng)目的成功。戴爾本身就是一家成功的制造企業(yè)。它對客戶需求的理解，以及作為制造企業(yè)本身數(shù)字化的經(jīng)驗(yàn)是一種有益的借鑒和啟示。制造企業(yè)的數(shù)據(jù)遠(yuǎn)比互聯(lián)網(wǎng)企業(yè)復(fù)雜，數(shù)據(jù)類型、處理邏輯、業(yè)態(tài)等更加多樣化，如此復(fù)雜的數(shù)據(jù)和處理再集成到一起，就如同一座橫亙在用戶面前的大山。海信自身還有更大的“特殊性”，那就是它有歷史積累的7套SAP系統(tǒng)，將這7套SAP系統(tǒng)的所有數(shù)據(jù)有效集成起來，僅此一項(xiàng)可能就會讓一些大數(shù)據(jù)廠商望而卻步。戴爾的突出優(yōu)勢在于，其項(xiàng)目經(jīng)理在制造企業(yè)數(shù)字化知識的深度和廣度上更勝一籌，尤其是對客戶數(shù)據(jù)集成和處理需求的理解很到位，在項(xiàng)目執(zhí)行過程中遇到問題時(shí)，可以采取更加積極有效的辦法，協(xié)調(diào)資源，克服難關(guān)。

“戴爾為我們推薦了Gre enplum企業(yè)級數(shù)據(jù)倉庫。20 18年年底，我們對Greenplum做過一次POC，其優(yōu)異表現(xiàn)得到了一致的認(rèn)可?！眲⒑２ń榻B說，“Greenplum在部署之后，對某些業(yè)務(wù)場景起到了十分有效的優(yōu)化作用，并開發(fā)了一些與大數(shù)據(jù)平臺對接的接口，方便業(yè)務(wù)查詢。”

如今，包括供應(yīng)鏈中的質(zhì)量管理系統(tǒng)等在內(nèi)的許多大數(shù)據(jù)項(xiàng)目正逐步遷移到大數(shù)據(jù)平臺之上。在這些應(yīng)用從原來的數(shù)據(jù)庫遷移到Greenplum平臺的過程中，戴爾團(tuán)隊(duì)提出了很多優(yōu)化的建設(shè)和提案，取得令人滿意的效果。

7套SAP系統(tǒng)，版本各不相同，在戴爾的幫助下，大數(shù)據(jù)部通過逐一實(shí)施，不僅打補(bǔ)丁，而且又填平了很多技術(shù)上的“坑”，將SAP SLT全面充分地應(yīng)用起來，很好地解決了管理報(bào)表的相關(guān)問題。另外，為了實(shí)現(xiàn)敏捷開發(fā)，大數(shù)據(jù)部在戴爾的協(xié)助下還開發(fā)了一些工具。以前，開發(fā)一個(gè)ETL至少需要15分鐘，現(xiàn)在借助這些新的開發(fā)工具，可能只需要5分鐘，簡單配置一下，就能將數(shù)據(jù)提取出來，改善了應(yīng)用體驗(yàn)。在大數(shù)據(jù)平臺正式上線后，大數(shù)據(jù)部曾經(jīng)做了測試，整體的數(shù)據(jù)處理效率提升200%以上。讓劉海波印象深刻的是，與產(chǎn)品大數(shù)據(jù)處理相關(guān)的一項(xiàng)作業(yè)，以前需要跑15～20個(gè)小時(shí)，而采用Greenplum后，處理時(shí)間只需兩分鐘。而且數(shù)據(jù)量越大，效率提升得越明顯?！疤嵘鎯δ芰?、計(jì)算效率和數(shù)據(jù)處理的時(shí)效性，這三大目標(biāo)在大數(shù)據(jù)平臺建立后得以完全實(shí)現(xiàn)?！眲⒑２ū硎?。

從大數(shù)據(jù)平臺到數(shù)據(jù)中臺

在大數(shù)據(jù)平臺上線運(yùn)行后的大約一年時(shí)間里，已有幾十個(gè)項(xiàng)目安全平穩(wěn)地運(yùn)行在這一平臺之上?！?019年初，我們在建設(shè)這個(gè)大數(shù)據(jù)平臺時(shí)，對‘?dāng)?shù)據(jù)中臺’概念還沒有很深的體會。但在與戴爾合作完成大數(shù)據(jù)平臺建設(shè)并上線運(yùn)行后，我們感覺數(shù)據(jù)中臺的意味越來越濃。”劉海波表示，“搭平臺只是第一步，接下來更重要的是基于此平臺將所有數(shù)據(jù)盡快整合起來，再在業(yè)務(wù)數(shù)據(jù)整合的基礎(chǔ)上建立數(shù)據(jù)集市。從應(yīng)用的角度，數(shù)據(jù)中臺的完善要與業(yè)務(wù)的發(fā)展同步，以保障智能制造、供應(yīng)鏈自動化等場景的實(shí)現(xiàn)和優(yōu)化。”

2020年，大數(shù)據(jù)部將通過數(shù)據(jù)預(yù)言及時(shí)發(fā)現(xiàn)業(yè)務(wù)中存在的問題，不斷深化在大數(shù)據(jù)方面的探索。

劉海波點(diǎn)出了在大數(shù)據(jù)應(yīng)用方面的最大閃光點(diǎn)，那就是其大數(shù)據(jù)平臺更加多元化，不僅支持Hadoop等開源大數(shù)據(jù)應(yīng)用，而且兼顧傳統(tǒng)數(shù)據(jù)庫和像Greenplum這樣的新型數(shù)據(jù)庫，即使是新興的5G、物聯(lián)網(wǎng)等應(yīng)用也不在話下?！皩⒍喾N類型的數(shù)據(jù)庫無縫集成在一起，根據(jù)數(shù)據(jù)的需要將其存儲在最適合的數(shù)據(jù)庫中，并且做好規(guī)劃，這樣才能事半功倍?！眲⒑２ū硎尽?/p>

經(jīng)過幾年的摸索和實(shí)踐，大數(shù)據(jù)部做得最成熟的就是報(bào)表應(yīng)用，以及防竄貨和資金占用等應(yīng)用。讓很多企業(yè)感到頭痛的是，由于報(bào)表開發(fā)一味追求大而全，不僅越來越復(fù)雜，而且成本居高不下。在搭建數(shù)據(jù)中臺的過程中，大數(shù)據(jù)部同步開發(fā)了信數(shù)平臺，基于敏捷開發(fā)的方式實(shí)現(xiàn)了快速開發(fā)、快速交付和快速迭代，當(dāng)用戶提出需求后，一天之內(nèi)便可實(shí)現(xiàn)報(bào)表上線并推送數(shù)據(jù)，發(fā)現(xiàn)問題后還能及時(shí)修正。

“基于信數(shù)平臺，我們實(shí)現(xiàn)了報(bào)表的生命周期管理，比如在報(bào)表長期不用的情況下，系統(tǒng)可自動將閑置的資源重新釋放出來?！眲⒑２ń榻B說，“在Tableau、永洪BI、Java自開發(fā)等多種報(bào)表工具并存的情況下，我們還是通過信數(shù)平臺將不同的報(bào)表無縫集成起來，用戶不必關(guān)心報(bào)表產(chǎn)生自哪個(gè)平臺或業(yè)務(wù)系統(tǒng)，通過目錄檢索即可輕松找到所需的報(bào)表數(shù)據(jù)，然后推送到應(yīng)用前端。這個(gè)信數(shù)平臺的后端就是之前建立的大數(shù)據(jù)平臺?！?/p>

供應(yīng)鏈?zhǔn)俏磥淼陌l(fā)力點(diǎn)

從大數(shù)據(jù)平臺上線到現(xiàn)在，大數(shù)據(jù)部一直保持著與戴爾團(tuán)隊(duì)的密切溝通和協(xié)作，比如Greenplum或SAP SLT需要進(jìn)一步優(yōu)化和調(diào)整，戴爾的技術(shù)人員都會在第一線時(shí)間解決問題。另外，大數(shù)據(jù)部還在戴爾的協(xié)助下開發(fā)了一些腳本，進(jìn)一步簡化應(yīng)用與管理，比如從Greenplum內(nèi)部實(shí)現(xiàn)數(shù)據(jù)同步，以前都需要手工實(shí)現(xiàn)，現(xiàn)在通過一個(gè)開發(fā)的自動化程序即可完成。諸如此類的優(yōu)化還有很多。

與戴爾團(tuán)隊(duì)的合作，讓劉海波深切感受到，戴爾不僅僅是大數(shù)據(jù)平臺項(xiàng)目的一個(gè)解決方案提供商，而是更像一個(gè)目標(biāo)一致、行動一致的戰(zhàn)略合作伙伴。羅慶干表示，未來我們在大數(shù)據(jù)方面將重點(diǎn)在兩個(gè)方向上發(fā)力：一是繼續(xù)提升數(shù)據(jù)質(zhì)量，建立整體的數(shù)據(jù)管理體系；二是在供應(yīng)鏈方面，更好地支持集團(tuán)的智能制造、人工智能等應(yīng)用。

眾所周知，戴爾在IT產(chǎn)品制造領(lǐng)域以高效的供應(yīng)鏈管理而聞名，特別是在利用數(shù)字化技術(shù)降低庫存和成本，實(shí)現(xiàn)定制化生產(chǎn)，強(qiáng)化供應(yīng)鏈上的信息流通速度和透明度方面獨(dú)樹一幟。這些成功的經(jīng)驗(yàn)也是很多制造企業(yè)可以借鑒的。在與戴爾團(tuán)隊(duì)合作的過程中，羅慶干對于戴爾在供應(yīng)鏈方面的技術(shù)和知識儲備以及實(shí)操能力印象深刻。以現(xiàn)在的數(shù)據(jù)中臺為著力點(diǎn)，雙方很可能在供應(yīng)鏈和營銷等方面有更加深入的合作，共同探索和挖掘一些新的應(yīng)用場景。

此次新冠疫情的出現(xiàn)，讓我們再次認(rèn)識到制造業(yè)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型和智能化升級的重要性和必要性。通過先進(jìn)的技術(shù)平臺和現(xiàn)代化的流程設(shè)計(jì)，尤其是數(shù)據(jù)中臺的溝通和連接，將為制造業(yè)的復(fù)蘇和再次騰飛插上數(shù)字化的翅膀。