【摘要】數(shù)據(jù)中臺是行業(yè)和企業(yè)管理數(shù)據(jù)資產(chǎn)的核心，它為一體化應(yīng)用、創(chuàng)新場景、決策分析等提供標(biāo)準(zhǔn)化、智能化、場景化的數(shù)據(jù)服務(wù)。數(shù)據(jù)中臺是實(shí)現(xiàn)行業(yè)和企業(yè)數(shù)據(jù)業(yè)務(wù)化、資產(chǎn)化和服務(wù)化轉(zhuǎn)型的關(guān)鍵所在。掌握數(shù)據(jù)中臺的作用、構(gòu)建理念和演進(jìn)特點(diǎn)，明確數(shù)據(jù)中臺與業(yè)務(wù)中臺、數(shù)據(jù)管理系統(tǒng)（主數(shù)據(jù)管理系統(tǒng)或數(shù)據(jù)管理系統(tǒng)本文中簡稱為MDM）、大數(shù)據(jù)平臺、BI系統(tǒng)（BI數(shù)據(jù)倉庫、BI數(shù)據(jù)湖倉本文中簡稱為BI系統(tǒng)）的關(guān)系，對行業(yè)和企業(yè)實(shí)現(xiàn)數(shù)據(jù)轉(zhuǎn)型的“早見效”至關(guān)重要。

盤塘創(chuàng)客從數(shù)據(jù)中臺的作用和理念出發(fā)，分析其內(nèi)部構(gòu)建要素。根據(jù)其演進(jìn)特點(diǎn)，梳理了數(shù)據(jù)中臺與業(yè)務(wù)中臺、MDM、大數(shù)據(jù)平臺、BI系統(tǒng)的區(qū)別；并以行業(yè)一體化項(xiàng)目煙葉平臺為例，深入探討數(shù)據(jù)中臺省級基線版的實(shí)施方法、路徑。希望能為煙草行業(yè)數(shù)字化轉(zhuǎn)型提供一些參考和啟示，為行業(yè)探索數(shù)據(jù)中臺運(yùn)營提供一些借鑒和支持。

關(guān)鍵詞：數(shù)據(jù)中臺；MDM；大數(shù)據(jù)平臺；BI系統(tǒng)；數(shù)據(jù)資產(chǎn)

在數(shù)據(jù)驅(qū)動時代，數(shù)據(jù)作為最重要的生產(chǎn)要素和戰(zhàn)略資源，對于企業(yè)決策支持、業(yè)務(wù)創(chuàng)新、價值創(chuàng)造等方面具有至關(guān)重要的作用。為安全、高效利用好企業(yè)內(nèi)外部的海量數(shù)據(jù)，近年來出現(xiàn)了數(shù)據(jù)中臺這種新型架構(gòu)模式。

數(shù)據(jù)中臺是行業(yè)和企業(yè)管理數(shù)據(jù)資產(chǎn)的核心，但究竟它的作用和理念是什么？如何在企業(yè)整體技術(shù)架構(gòu)中演進(jìn)？與業(yè)務(wù)中臺、MDM、大數(shù)據(jù)平臺和BI系統(tǒng)之間又存在怎樣的區(qū)別和聯(lián)系？這些問題，行業(yè)每一位數(shù)字化轉(zhuǎn)型項(xiàng)目的參與者都需要深入理解和掌握。

1、數(shù)據(jù)中臺的作用及理念

數(shù)據(jù)中臺是指企業(yè)通過內(nèi)外部多源異構(gòu)的數(shù)據(jù)采集、治理、建模、分析、應(yīng)用，使數(shù)據(jù)對內(nèi)優(yōu)化管理提高效率，對外可以數(shù)據(jù)合作釋放價值。作為企業(yè)數(shù)據(jù)資產(chǎn)管理中樞，數(shù)據(jù)中臺旨在打通企業(yè)各個業(yè)務(wù)系統(tǒng)之間的數(shù)據(jù)壁壘，構(gòu)建一個統(tǒng)一、開放、高效、安全的數(shù)據(jù)平臺，為各類業(yè)務(wù)場景提供標(biāo)準(zhǔn)化、智能化、場景化的數(shù)據(jù)服務(wù)，實(shí)現(xiàn)數(shù)據(jù)賦能。數(shù)據(jù)中臺的核心理念是將數(shù)據(jù)轉(zhuǎn)化為資產(chǎn)，通過規(guī)范化、標(biāo)準(zhǔn)化、智能化、共享化等手段，實(shí)現(xiàn)數(shù)據(jù)的價值最大化。

從數(shù)據(jù)中臺的功能和理念出發(fā)，我們可以總結(jié)出數(shù)據(jù)中臺的內(nèi)部構(gòu)建要素：首先，數(shù)據(jù)中臺需要有強(qiáng)大的數(shù)據(jù)技術(shù)平臺基礎(chǔ)設(shè)施支撐，包括大數(shù)據(jù)平臺、數(shù)據(jù)倉庫和數(shù)據(jù)湖等支撐能力。其次，數(shù)據(jù)中臺的核心作用是將數(shù)據(jù)轉(zhuǎn)化為有價值的資產(chǎn)。再次，數(shù)據(jù)中臺應(yīng)具備一套完善的數(shù)據(jù)資產(chǎn)管理體系，涵蓋數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)建模、數(shù)據(jù)標(biāo)簽、數(shù)據(jù)開放和數(shù)據(jù)安全等各方面的管理與控制。最后，數(shù)據(jù)中臺還需要建立一套全面的數(shù)據(jù)服務(wù)運(yùn)營體系，包括數(shù)據(jù)接入、數(shù)據(jù)存儲、數(shù)據(jù)計算、數(shù)據(jù)分析和數(shù)據(jù)應(yīng)用等。

2、數(shù)據(jù)中臺的演進(jìn)

根據(jù)應(yīng)用架構(gòu)和數(shù)據(jù)集成處理方式的變化，盤塘創(chuàng)客將數(shù)據(jù)中臺的演進(jìn)劃分為五個階段。

第一階段，傳統(tǒng)單體應(yīng)用架構(gòu)階段。信息系統(tǒng)由企業(yè)自行建設(shè)，系統(tǒng)架構(gòu)、數(shù)據(jù)庫、開發(fā)模式各異，形成了煙囪式的結(jié)構(gòu)。基礎(chǔ)數(shù)據(jù)由各業(yè)務(wù)系統(tǒng)產(chǎn)生、維護(hù)，不同系統(tǒng)的數(shù)據(jù)屬性不一致，導(dǎo)致數(shù)據(jù)孤島或信息孤島等問題。數(shù)據(jù)處理采用電子表格或手工方式填報。如圖1所示：

圖1 ?傳統(tǒng)單體應(yīng)用架構(gòu)

第二階段，BI階段。行業(yè)對系統(tǒng)架構(gòu)、網(wǎng)絡(luò)架構(gòu)、平臺架構(gòu)進(jìn)行了統(tǒng)一，通過一號工程實(shí)現(xiàn)行業(yè)各單位部分基礎(chǔ)數(shù)據(jù)代碼與行業(yè)代碼的對應(yīng)、訂閱。使用ETL工具等，實(shí)現(xiàn)動態(tài)業(yè)務(wù)數(shù)據(jù)的同步和定時抽取。但是，仍存在基礎(chǔ)數(shù)據(jù)屬性不一致的情況，數(shù)據(jù)同步、數(shù)據(jù)鉆取、分析延遲較大。如圖2所示：

圖2 ?傳統(tǒng)BI

第三階段，數(shù)據(jù)集成階段。針對基礎(chǔ)數(shù)據(jù)由各業(yè)務(wù)系統(tǒng)產(chǎn)生、維護(hù)，導(dǎo)致的數(shù)據(jù)不一致問題，各企業(yè)在應(yīng)用系統(tǒng)集成時，建立了數(shù)據(jù)管理系統(tǒng)或主數(shù)據(jù)管理系統(tǒng)。在MDM中實(shí)現(xiàn)基礎(chǔ)數(shù)據(jù)統(tǒng)一管理維護(hù)，業(yè)務(wù)系統(tǒng)或其他新建系統(tǒng)需要使用時，通過接口分發(fā)的方式調(diào)用。此時的BI系統(tǒng)也發(fā)生了很大的變化，數(shù)據(jù)抽取分為兩部分：靜態(tài)基礎(chǔ)數(shù)據(jù)從MDM系統(tǒng)抽取到ODS，動態(tài)共享數(shù)據(jù)從業(yè)務(wù)系統(tǒng)中抽取。這樣，數(shù)據(jù)分析、決策能力明顯提升，基礎(chǔ)數(shù)據(jù)不一致問題得到較好解決。如圖3所示：

圖3：數(shù)據(jù)集成階段

第四階段，數(shù)字中臺實(shí)施階段（現(xiàn)階段）。數(shù)字中臺省級基線版部署上線，行業(yè)一體化應(yīng)用復(fù)用業(yè)務(wù)中臺共享中心能力并沉淀數(shù)據(jù)。業(yè)務(wù)數(shù)據(jù)化已技術(shù)實(shí)現(xiàn)，數(shù)據(jù)業(yè)務(wù)化尚在形成中。此階段各企業(yè)根據(jù)自身環(huán)境，結(jié)合《關(guān)于構(gòu)建煙草行業(yè)數(shù)字中臺體系的指導(dǎo)意見》和《煙草行業(yè)新型數(shù)字基礎(chǔ)設(shè)施體系技術(shù)架構(gòu)》內(nèi)容，開始同步運(yùn)營數(shù)字中臺，朝“早見效”發(fā)力。數(shù)字中臺尚未全面接管企業(yè)基礎(chǔ)數(shù)據(jù)，需與MDM系統(tǒng)實(shí)現(xiàn)能力互補(bǔ)，并集成整合企業(yè)現(xiàn)有內(nèi)外部數(shù)據(jù)資源。如圖4所示：

圖4 ?數(shù)字中臺現(xiàn)階段

第五階段，數(shù)字中臺運(yùn)營階段（見效階段）。基礎(chǔ)數(shù)據(jù)管理功能已下沉到業(yè)務(wù)中臺的各能力中心。數(shù)據(jù)中臺作為業(yè)務(wù)應(yīng)用的數(shù)據(jù)唯一服務(wù)提供方，通過自身的平臺能力和業(yè)務(wù)中臺數(shù)據(jù)的輸送（業(yè)務(wù)數(shù)據(jù)化），已形成一套高效可靠的數(shù)據(jù)資產(chǎn)體系和數(shù)據(jù)服務(wù)運(yùn)營能力（數(shù)據(jù)業(yè)務(wù)化、資產(chǎn)化、服務(wù)化）。當(dāng)企業(yè)員工、創(chuàng)新團(tuán)隊(duì)或業(yè)務(wù)部門在面對市場環(huán)境變化需構(gòu)建前臺應(yīng)用時，數(shù)據(jù)中臺能實(shí)時提供數(shù)據(jù)服務(wù)能力。如圖5所示：

圖5 ?見效階段

3、數(shù)據(jù)中臺與業(yè)務(wù)中臺、BI系統(tǒng)、大數(shù)據(jù)平臺的區(qū)別

在《淺析行業(yè)1242架構(gòu)下的業(yè)務(wù)中臺設(shè)計》文中，筆者認(rèn)為“中臺是基于企業(yè)資源整合的需要，形成的能力樞紐和能力共享中心。中臺是在集中的基礎(chǔ)上建設(shè)分權(quán)的業(yè)務(wù),進(jìn)行聯(lián)通,并為各業(yè)務(wù)提供統(tǒng)一的服務(wù)，將企業(yè)各式各樣的資源轉(zhuǎn)化為易于前臺使用的能力”。對于業(yè)務(wù)中臺來說比較好理解，就是將企業(yè)共性業(yè)務(wù)能力下沉，形成多個微服務(wù)化的業(yè)務(wù)能力中心供上層應(yīng)用使用。對數(shù)據(jù)中臺的理解則是指，把企業(yè)內(nèi)外部數(shù)據(jù)資源整合形成資產(chǎn)，以共享的數(shù)據(jù)服務(wù)能力提供上層各類業(yè)務(wù)應(yīng)用使用，并持續(xù)地迭代循環(huán)。

3.1 數(shù)據(jù)中臺與業(yè)務(wù)中臺

數(shù)據(jù)中臺和業(yè)務(wù)中臺本身是相輔相成的，業(yè)務(wù)中臺沉淀的業(yè)務(wù)數(shù)據(jù)進(jìn)入到數(shù)據(jù)中臺進(jìn)行體系化加工，再以服務(wù)化的方式支撐業(yè)務(wù)中臺上層應(yīng)用，而這些應(yīng)用產(chǎn)生的新數(shù)據(jù)又重新流轉(zhuǎn)到數(shù)據(jù)中臺，形成循環(huán)不息的數(shù)據(jù)資產(chǎn)服務(wù)閉環(huán)。兩者的區(qū)別在于，業(yè)務(wù)中臺重點(diǎn)是業(yè)務(wù)數(shù)據(jù)化，而數(shù)據(jù)中臺重點(diǎn)是數(shù)據(jù)業(yè)務(wù)化。

3.2 數(shù)據(jù)中臺與BI系統(tǒng)

BI系統(tǒng)主要支持管理決策和業(yè)務(wù)分析，數(shù)據(jù)中臺則是將數(shù)據(jù)服務(wù)化，為業(yè)務(wù)應(yīng)用提供數(shù)據(jù)能力，讓數(shù)據(jù)能力滲透到各個業(yè)務(wù)環(huán)節(jié)，不僅限于決策分析。數(shù)據(jù)中臺不斷將數(shù)據(jù)資產(chǎn)化、價值化，并運(yùn)營數(shù)據(jù)價值。數(shù)據(jù)中臺和BI系統(tǒng)有共性，也有特性。共性是都需要數(shù)據(jù)采集集成，數(shù)據(jù)存儲，數(shù)據(jù)模型構(gòu)建，數(shù)據(jù)開發(fā)和分析。特性是數(shù)據(jù)中臺需要有統(tǒng)一的數(shù)據(jù)服務(wù)能力開放層，而BI系統(tǒng)更注重數(shù)據(jù)分析和報表展現(xiàn)；此外，數(shù)據(jù)中臺實(shí)時協(xié)同于業(yè)務(wù)應(yīng)用，服務(wù)于業(yè)務(wù)增值、業(yè)務(wù)創(chuàng)新等需求，BI系統(tǒng)服務(wù)于管理經(jīng)營決策。這導(dǎo)致兩者在數(shù)據(jù)模型構(gòu)建，數(shù)據(jù)開放和提供策略上有所不同，但核心的底層數(shù)據(jù)平臺能力則是一致的。

3.3 數(shù)據(jù)中臺與大數(shù)據(jù)平臺

數(shù)據(jù)中臺底層架構(gòu)包含了大數(shù)據(jù)平臺的核心架構(gòu)和分布式存儲，以及實(shí)時計算和流處理能力。此外，數(shù)據(jù)中臺架構(gòu)中為業(yè)務(wù)應(yīng)用提供數(shù)據(jù)能力的數(shù)據(jù)服務(wù)層，這是傳統(tǒng)的數(shù)據(jù)湖倉或大數(shù)據(jù)平臺所沒有的。如圖6所示，紅色框?yàn)閿?shù)據(jù)中臺的大數(shù)據(jù)能力支撐層。

圖6? 數(shù)據(jù)中臺架構(gòu)

正因數(shù)據(jù)中臺與企業(yè)已有的MDM、BI系統(tǒng)、大數(shù)據(jù)平臺有諸多共性，所以在實(shí)施數(shù)據(jù)中臺項(xiàng)目時，首先需要對企業(yè)現(xiàn)有數(shù)字資產(chǎn)分析評估，看如何保留資產(chǎn)、復(fù)用資產(chǎn)，如何遷移數(shù)據(jù)。

4、數(shù)據(jù)中臺省級基線版的實(shí)施路徑探討

《關(guān)于構(gòu)建煙草行業(yè)數(shù)字中臺體系的指導(dǎo)意見》明確指出：“數(shù)據(jù)中臺省級基線版擁有10項(xiàng)數(shù)據(jù)管控和3項(xiàng)數(shù)據(jù)運(yùn)營能力，同時構(gòu)建了4項(xiàng)數(shù)據(jù)應(yīng)用中心。”從技術(shù)架構(gòu)的角度看，數(shù)據(jù)中臺省級基線版已具備數(shù)據(jù)資產(chǎn)管理體系和數(shù)據(jù)服務(wù)運(yùn)營體系管控能力的雛形。數(shù)據(jù)中臺省級基線版的實(shí)施工作主要包括兩個方面：一是建設(shè)數(shù)據(jù)技術(shù)平臺；二是按照信息分類與編碼管理要求，做好數(shù)據(jù)內(nèi)容和數(shù)據(jù)資產(chǎn)的建設(shè)。如圖7所示（藍(lán)色部分表示企業(yè)實(shí)施工作內(nèi)容）。

圖7 ?數(shù)據(jù)中臺省級基線版實(shí)施工作內(nèi)容

但在實(shí)施過程中，我們不能忽視數(shù)據(jù)與業(yè)務(wù)之間的緊密關(guān)系。數(shù)據(jù)中臺的實(shí)施需要將業(yè)務(wù)數(shù)據(jù)和前臺應(yīng)用緊密結(jié)合。以行業(yè)一體化平臺的煙葉應(yīng)用為例，它在數(shù)據(jù)中臺基礎(chǔ)上覆蓋了多種業(yè)務(wù)應(yīng)用場景，如圖8所示（藍(lán)色部分表示企業(yè)實(shí)施工作內(nèi)容）。在這種情況下，數(shù)據(jù)中臺省級基線版實(shí)施工作的項(xiàng)目范圍和技術(shù)難度都已明顯增大。然而，在現(xiàn)有組織形式和項(xiàng)目知識領(lǐng)域下，除開數(shù)據(jù)技術(shù)平臺建設(shè)的實(shí)施工作之外，其他實(shí)施工作內(nèi)容都只能由煙葉平臺項(xiàng)目組承擔(dān)，數(shù)據(jù)資產(chǎn)分層、建模等技術(shù)挑戰(zhàn)也只能由煙葉平臺項(xiàng)目組應(yīng)對。這一切只因數(shù)據(jù)資產(chǎn)源于業(yè)務(wù)（詳見《淺析行業(yè)數(shù)字化轉(zhuǎn)型之煙葉平臺運(yùn)營的挑戰(zhàn)與思考》）。

圖8? 疊加煙葉業(yè)務(wù)場景后的數(shù)據(jù)中臺實(shí)施內(nèi)容

在疊加業(yè)務(wù)平臺應(yīng)用場景后，數(shù)據(jù)中臺省級基線版實(shí)施的目標(biāo)就顯而易見了。即實(shí)現(xiàn)業(yè)務(wù)中臺共享數(shù)據(jù)和企業(yè)內(nèi)外部基礎(chǔ)數(shù)據(jù)的跨域整合，再經(jīng)數(shù)據(jù)資產(chǎn)管控體系如采集、清洗、建模、標(biāo)簽等流程加工處理后形成企業(yè)的數(shù)據(jù)資產(chǎn)，并按運(yùn)營體系要求提供數(shù)據(jù)資產(chǎn)服務(wù)。為實(shí)現(xiàn)企業(yè)數(shù)據(jù)業(yè)務(wù)化、資產(chǎn)化、服務(wù)化轉(zhuǎn)型 “早見效”的目標(biāo)，可以采取以下技術(shù)路徑：

一是分析評估現(xiàn)有企業(yè)數(shù)字資產(chǎn)，包括大數(shù)據(jù)平臺、數(shù)據(jù)集成平臺、MDM、BI系統(tǒng)等，確定哪些可以保留、哪些可以復(fù)用，以此構(gòu)建底層數(shù)據(jù)技術(shù)平臺；

二是配合行業(yè)一體化項(xiàng)目建設(shè)進(jìn)度，分業(yè)務(wù)線開展業(yè)務(wù)領(lǐng)域分析，厘清行業(yè)一體化應(yīng)用與企業(yè)應(yīng)用的邊界，同步梳理業(yè)務(wù)架構(gòu)和數(shù)據(jù)架構(gòu)。形成滿足行業(yè)管控和省級業(yè)務(wù)需求的，業(yè)務(wù)能力域藍(lán)圖和業(yè)務(wù)數(shù)據(jù)藍(lán)圖（例如，煙葉平臺行業(yè)側(cè)計劃物流管控的8大業(yè)務(wù)流程及數(shù)據(jù)，省級側(cè)業(yè)務(wù)運(yùn)營涉及的生產(chǎn)、收購、調(diào)撥、復(fù)烤加工等業(yè)務(wù)流程及數(shù)據(jù)）；

三是結(jié)合信息分類與編碼管理要求及研發(fā)管控系統(tǒng)開展業(yè)務(wù)域數(shù)據(jù)治理（數(shù)據(jù)中臺管控范圍不能完全覆蓋企業(yè)所有數(shù)據(jù)治理的規(guī)范流程，但通過信息分類與編碼及研發(fā)管控系統(tǒng)管理后數(shù)據(jù)治理的規(guī)范流程就能延伸到原有IT系統(tǒng)及新建IT系統(tǒng)）；

四是結(jié)合一體化平臺業(yè)務(wù)應(yīng)用、省級擴(kuò)展應(yīng)用，構(gòu)建數(shù)據(jù)視圖形式的數(shù)據(jù)資產(chǎn)服務(wù)提供能力，實(shí)現(xiàn)基礎(chǔ)數(shù)據(jù)在雙中臺間閉環(huán)流轉(zhuǎn)；

五是利用底層數(shù)據(jù)技術(shù)平臺，將業(yè)務(wù)關(guān)聯(lián)的內(nèi)外部系統(tǒng)、業(yè)務(wù)中臺、MDM進(jìn)行數(shù)據(jù)采集和集成，匯聚形成數(shù)據(jù)中臺的ODS層，按照業(yè)務(wù)場景構(gòu)建不同層級的數(shù)據(jù)資產(chǎn)（如DWD、DWS、ADS等），并進(jìn)行各層的數(shù)據(jù)建模；

六是如果企業(yè)自身的數(shù)據(jù)內(nèi)容管理還不完善，而且短期內(nèi)無暇對省級原有業(yè)務(wù)應(yīng)用進(jìn)行微服務(wù)架構(gòu)轉(zhuǎn)型，那么筆者建議優(yōu)先完善和改造MDM，使其能夠適配數(shù)據(jù)中臺的數(shù)據(jù)資產(chǎn)管控和運(yùn)營服務(wù)管控。這樣比去構(gòu)建一個大而全的業(yè)務(wù)中臺，或構(gòu)建一個全業(yè)務(wù)能力中心，更高效、更加切合實(shí)際。

七是數(shù)據(jù)中臺是企業(yè)寶貴的數(shù)據(jù)資產(chǎn),受到數(shù)據(jù)安全法和信息系統(tǒng)等級保護(hù)等法律法規(guī)的制約。為了保障數(shù)據(jù)的安全性和合規(guī)性，實(shí)施過程中的安裝、部署、調(diào)試等操作環(huán)節(jié)最好由企業(yè)自身人員親力親為，以便在后期運(yùn)營中及時應(yīng)對可能出現(xiàn)的問題和挑戰(zhàn)。

結(jié)語：盤塘創(chuàng)客所述，僅是對數(shù)據(jù)中臺省級基線版實(shí)施的一家之言，主要說明其實(shí)施的核心要義。數(shù)據(jù)中臺省級基線版實(shí)施不僅是搭建一個大數(shù)據(jù)技術(shù)平臺，也不僅是服務(wù)于行業(yè)一體化應(yīng)用。它需要充分考慮法律法規(guī)、企業(yè)自身的業(yè)務(wù)需求、數(shù)據(jù)資源狀況、組織結(jié)構(gòu)和文化背景等多方面因素，并在此基礎(chǔ)上以行業(yè)數(shù)據(jù)資產(chǎn)管控和省級業(yè)務(wù)運(yùn)營為導(dǎo)向，整合企業(yè)的數(shù)據(jù)資產(chǎn)和數(shù)據(jù)內(nèi)容，打造一個支持行業(yè)數(shù)據(jù)資產(chǎn)管控和省級業(yè)務(wù)運(yùn)營的數(shù)據(jù)服務(wù)能力。通過業(yè)務(wù)數(shù)據(jù)化、數(shù)據(jù)業(yè)務(wù)化的迭代循環(huán),提升企業(yè)數(shù)據(jù)資產(chǎn)的價值和效益，實(shí)現(xiàn)數(shù)據(jù)業(yè)務(wù)化、資產(chǎn)化、服務(wù)化轉(zhuǎn)型的“早見效”目標(biāo)。這才是數(shù)據(jù)中臺省級基線版實(shí)施的真正價值所在。