關(guān)于數(shù)據(jù)中臺(tái)建設(shè)思路的探討

張 潔，許建宏，肖 偉（中國聯(lián)通研究院，北京 100048）

0 前言

當(dāng)市場(chǎng)不再處于空白期、快速發(fā)展期，而是進(jìn)入了增長放緩、存量維系階段時(shí)，企業(yè)之間的競(jìng)爭力就主要體現(xiàn)在服務(wù)質(zhì)量和運(yùn)營成本等方面，此時(shí)，IT 系統(tǒng)的智能化支撐尤為重要，而這嚴(yán)重依賴于企業(yè)各方面數(shù)據(jù)信息的掌握、貫通、應(yīng)用甚至預(yù)測(cè)。數(shù)據(jù)中臺(tái)應(yīng)運(yùn)而生，很多知名先進(jìn)企業(yè)早已開始了數(shù)據(jù)中臺(tái)的嘗試。本文將從建設(shè)數(shù)據(jù)中臺(tái)的意義、數(shù)據(jù)中臺(tái)在IT架構(gòu)中的定位、數(shù)據(jù)中臺(tái)功能架構(gòu)及數(shù)據(jù)中臺(tái)建設(shè)的關(guān)鍵要素等幾方面，論述數(shù)據(jù)中臺(tái)建設(shè)思路。

1 建設(shè)數(shù)據(jù)中臺(tái)的意義

在傳統(tǒng)的煙囪式IT 架構(gòu)中，各系統(tǒng)從后端到前端相互獨(dú)立，緊耦合開發(fā)，導(dǎo)致系統(tǒng)臃腫、建設(shè)效率低、無法快速響應(yīng)業(yè)務(wù)，且存在大量重復(fù)建設(shè)工作。為解決上述問題，需要整合出一個(gè)中間組織，為所有的項(xiàng)目提供一些公共資源。這個(gè)中間組織即為“中臺(tái)”，其中，匯聚數(shù)據(jù)資源，統(tǒng)一提供數(shù)據(jù)及相關(guān)服務(wù)的就是“數(shù)據(jù)中臺(tái)”。

數(shù)據(jù)中臺(tái)是企業(yè)級(jí)公共的、可復(fù)用的數(shù)據(jù)及其衍生能力的組合，相比數(shù)據(jù)倉庫或數(shù)據(jù)平臺(tái)，數(shù)據(jù)中臺(tái)更強(qiáng)調(diào)面向業(yè)務(wù)的賦能，其良性結(jié)果是平臺(tái)化、生態(tài)化企業(yè)的構(gòu)建，以數(shù)據(jù)為核心、平臺(tái)為支撐，來驅(qū)動(dòng)前線業(yè)務(wù)變革。

1.1 數(shù)據(jù)中臺(tái)適用場(chǎng)景

構(gòu)建中臺(tái)必然需要建設(shè)成本、組織成本、時(shí)間成本，并非所有企業(yè)都適合建設(shè)中臺(tái)。創(chuàng)業(yè)型公司，以生存為首要目的，需以最快速度打造產(chǎn)品，野蠻生長是其必然選擇；發(fā)展到一定規(guī)模的企業(yè)，產(chǎn)品得到市場(chǎng)認(rèn)可，公司的目標(biāo)從“生存”走向“發(fā)展得更好”，可以考慮向中臺(tái)架構(gòu)發(fā)展；大規(guī)模的企業(yè)，各類產(chǎn)品、服務(wù)、部門、系統(tǒng)錯(cuò)綜復(fù)雜，為了滿足市場(chǎng)競(jìng)爭要求，即便困難重重，也需調(diào)整架構(gòu)，打破以往的職能模式，向“前中后臺(tái)”的平臺(tái)式組織過渡，進(jìn)而向更加靈活的形態(tài)發(fā)展。其中，數(shù)據(jù)中臺(tái)的價(jià)值在于加速從原始數(shù)據(jù)到價(jià)值數(shù)據(jù)的過程，提高企業(yè)的響應(yīng)力，滿足當(dāng)前以“提高靈活性和速度”為重的新運(yùn)營模式的支撐需求。

1.2 先進(jìn)企業(yè)的數(shù)據(jù)中臺(tái)實(shí)踐

不少先進(jìn)企業(yè)早已開始進(jìn)行數(shù)據(jù)中臺(tái)的實(shí)踐，并取得了理想效果，為企業(yè)創(chuàng)造了價(jià)值，提升了競(jìng)爭實(shí)力。

a）Supercell：基于中臺(tái)，打造快速業(yè)務(wù)試錯(cuò)的核心競(jìng)爭力。Supercell（芬蘭移動(dòng)游戲巨頭），以《部落沖突》等全球熱門游戲聞名，經(jīng)過6年時(shí)間將游戲開發(fā)過程中公共、通用的游戲開發(fā)素材、算法做了很好的沉淀，支撐2～7 個(gè)員工組成的開發(fā)團(tuán)隊(duì)在此基礎(chǔ)上進(jìn)行快速創(chuàng)新、試錯(cuò)，從而用最快時(shí)間找到用戶真正喜愛的游戲。這種強(qiáng)大的業(yè)務(wù)試錯(cuò)能力是Supercell 的核心競(jìng)爭力。阿里的中臺(tái)戰(zhàn)略也是由此受到啟發(fā)。

b）阿里：賦能業(yè)務(wù)前臺(tái)快速構(gòu)建，促進(jìn)企業(yè)線上線下業(yè)務(wù)線的擴(kuò)張。阿里繼共享事業(yè)部成功建設(shè)業(yè)務(wù)中臺(tái)后，于2014 年成立“公共數(shù)據(jù)平臺(tái)及產(chǎn)品部”，將原來各自為戰(zhàn)的煙囪式業(yè)務(wù)線支撐模式轉(zhuǎn)變?yōu)閿?shù)據(jù)共享戰(zhàn)略模式。阿里數(shù)據(jù)中臺(tái)的發(fā)展經(jīng)歷了2012年以前的“追隨業(yè)務(wù)期”，2012—2014 的“頂層設(shè)計(jì)初探期”，2014—2015 的“頂層設(shè)計(jì)質(zhì)變期”，2015 年3 月底，已實(shí)現(xiàn)同時(shí)服務(wù)20 多個(gè)BU，與業(yè)務(wù)中臺(tái)一起，賦能了應(yīng)用前臺(tái)的快速構(gòu)建，促進(jìn)企業(yè)線上線下業(yè)務(wù)線的擴(kuò)張，并成功支撐雙十一等大型活動(dòng)。

c）百度：企業(yè)級(jí)的組織與架構(gòu)，快速響應(yīng)專業(yè)線的需求。由全企業(yè)統(tǒng)一的“數(shù)據(jù)工廠”組織團(tuán)隊(duì)，負(fù)責(zé)公共數(shù)據(jù)的建設(shè)及服務(wù)，基于公司級(jí)通用數(shù)據(jù)倉庫，形成了全公司數(shù)據(jù)統(tǒng)一展示、管理、使用的運(yùn)營模式，同時(shí)進(jìn)行數(shù)據(jù)拉通、建模，快速響應(yīng)公司各專業(yè)線的業(yè)務(wù)需求。

經(jīng)研究發(fā)現(xiàn)，先進(jìn)企業(yè)的數(shù)據(jù)中臺(tái)有以下幾條共同特點(diǎn)。

a）形成過程：中臺(tái)戰(zhàn)略并不是一個(gè)新型產(chǎn)品或概念，都是在業(yè)務(wù)發(fā)展過程中，逐步演進(jìn)出來的，都經(jīng)歷了“部門各自建設(shè)—出現(xiàn)問題（重復(fù)建維、系統(tǒng)壁壘、數(shù)據(jù)多份等）—公共沉淀”的過程。

b）團(tuán)隊(duì)組織：數(shù)據(jù)中臺(tái)都是由一個(gè)獨(dú)立的團(tuán)隊(duì)統(tǒng)一建設(shè)，上層應(yīng)用可由不同的業(yè)務(wù)支撐團(tuán)隊(duì)搭建。團(tuán)隊(duì)成員首先要熟悉業(yè)務(wù)，需要技術(shù)與業(yè)務(wù)專家從業(yè)務(wù)視角建設(shè)數(shù)據(jù)中臺(tái)，保證中臺(tái)對(duì)業(yè)務(wù)的賦能。

c）建設(shè)模式：企業(yè)級(jí)公共數(shù)據(jù)在源頭統(tǒng)一，確保大家使用同一份公共數(shù)據(jù)；公共數(shù)據(jù)統(tǒng)一加工，以業(yè)務(wù)需求為導(dǎo)向，遵循同一套標(biāo)準(zhǔn)規(guī)范；上層數(shù)據(jù)應(yīng)用依賴公共數(shù)據(jù)可以百花齊放。

d）服務(wù)機(jī)制：數(shù)據(jù)中臺(tái)所有數(shù)據(jù)服務(wù)必須通過統(tǒng)一的出口提供，并保證服務(wù)的一致性、可靠性，供上層應(yīng)用一點(diǎn)調(diào)用。數(shù)據(jù)中臺(tái)建設(shè)過程中，盡量不對(duì)現(xiàn)有業(yè)務(wù)服務(wù)造成影響。建設(shè)完畢后對(duì)業(yè)務(wù)前臺(tái)賦能效果有很大提升。

e）高效運(yùn)營：中臺(tái)團(tuán)隊(duì)必須要找到高效的業(yè)務(wù)運(yùn)營模式，以主動(dòng)服務(wù)為導(dǎo)向提升自身重要性，才能夠真正轉(zhuǎn)型成為企業(yè)的“共享業(yè)務(wù)事業(yè)部”，而不是某種換湯不換藥的“共享IT支撐部門”。

2 數(shù)據(jù)中臺(tái)IT架構(gòu)

由于每家企業(yè)的業(yè)務(wù)和組織情況不同，不存在通用的數(shù)據(jù)中臺(tái)標(biāo)準(zhǔn)架構(gòu)，本文旨在根據(jù)數(shù)據(jù)中臺(tái)的使命及必要需求，設(shè)計(jì)一個(gè)基礎(chǔ)的數(shù)據(jù)中臺(tái)參考框架，企業(yè)可在此基礎(chǔ)上定制出符合自身?xiàng)l件的數(shù)據(jù)中臺(tái)架構(gòu)。

2.1 數(shù)據(jù)中臺(tái)在企業(yè)IT架構(gòu)中的定位

如圖1所示，在企業(yè)前中后臺(tái)的整體架構(gòu)設(shè)計(jì)中，數(shù)據(jù)中臺(tái)與業(yè)務(wù)中臺(tái)并列處于中間層，基于計(jì)算后臺(tái)，面向業(yè)務(wù)前臺(tái)。兩類中臺(tái)各司其職，業(yè)務(wù)中臺(tái)面向業(yè)務(wù)運(yùn)營，進(jìn)行共性流程的服務(wù)化沉淀，如將支付流程、訂單流程沉淀為支付中心、訂單中心；數(shù)據(jù)中臺(tái)負(fù)責(zé)數(shù)據(jù)管理，進(jìn)行原始數(shù)據(jù)到數(shù)據(jù)資產(chǎn)的加工，并進(jìn)一步將加工結(jié)果包裝為可調(diào)用的數(shù)據(jù)服務(wù)，為企業(yè)的業(yè)務(wù)及管理進(jìn)行智慧化賦能。

圖1 數(shù)據(jù)中臺(tái)在企業(yè)整體IT架構(gòu)中的定位

在企業(yè)IT 架構(gòu)設(shè)計(jì)中，計(jì)算后臺(tái)、業(yè)務(wù)中臺(tái)、數(shù)據(jù)中臺(tái)與前端應(yīng)用的分工及關(guān)系如下。

a）計(jì)算后臺(tái)負(fù)責(zé)基礎(chǔ)設(shè)施的統(tǒng)一管理劃配，統(tǒng)籌管理運(yùn)維前中臺(tái)所使用的硬件資源、中間件、數(shù)據(jù)庫軟件、框架組件等資源。

b）業(yè)務(wù)中臺(tái)與數(shù)據(jù)中臺(tái)各司其責(zé)，統(tǒng)一面向前臺(tái)提供不同類型的專業(yè)服務(wù)。

c）隨著業(yè)務(wù)模式的變更，前臺(tái)應(yīng)用向OLTP&OLAP 的混合形式發(fā)展，應(yīng)用在充分了解中臺(tái)能力的情況下，自由組合各中臺(tái)的服務(wù)能力。

2.2 數(shù)據(jù)中臺(tái)的基本構(gòu)成

數(shù)據(jù)中臺(tái)的典型構(gòu)成包括3 個(gè)基本層級(jí)，從下到上依次為數(shù)據(jù)湖、數(shù)據(jù)倉庫及數(shù)據(jù)超市（見圖2）。

圖2 數(shù)據(jù)中臺(tái)的基本構(gòu)成

a）企業(yè)數(shù)據(jù)：企業(yè)所有IT 系統(tǒng)產(chǎn)生的數(shù)據(jù)，以服務(wù)業(yè)務(wù)生產(chǎn)為目的，標(biāo)準(zhǔn)化程度差，存儲(chǔ)周期短，包含無業(yè)務(wù)價(jià)值、冗余數(shù)據(jù)，無法直接提供數(shù)據(jù)服務(wù)。

b）數(shù)據(jù)湖：從企業(yè)基礎(chǔ)數(shù)據(jù)中，選取具有業(yè)務(wù)價(jià)值的數(shù)據(jù)，恢復(fù)數(shù)據(jù)完整性、可讀性，保留數(shù)據(jù)原始結(jié)構(gòu)，形成數(shù)據(jù)湖。數(shù)據(jù)湖可長期存儲(chǔ)歷史數(shù)據(jù)，并且具備統(tǒng)一權(quán)限、安全等管理功能，以支持?jǐn)?shù)據(jù)科學(xué)家類角色進(jìn)行數(shù)據(jù)挖掘、探索。

c）數(shù)據(jù)倉庫：以O(shè)LAP數(shù)據(jù)關(guān)聯(lián)分析為目的，采用數(shù)據(jù)倉庫建模方法對(duì)分析所需數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化分層建模，供前臺(tái)和業(yè)務(wù)人員使用。

d）數(shù)據(jù)超市：基于數(shù)據(jù)倉庫明細(xì)，匯總數(shù)據(jù)，沉淀常用的數(shù)據(jù)產(chǎn)品，并封裝為各種形式的數(shù)據(jù)服務(wù)，供前臺(tái)應(yīng)用直接調(diào)用、業(yè)務(wù)人員直接使用，進(jìn)行高效數(shù)據(jù)分析等工作。

2.3 數(shù)據(jù)中臺(tái)的架構(gòu)設(shè)計(jì)

根據(jù)數(shù)據(jù)中臺(tái)的基本構(gòu)成，將其IT 架構(gòu)細(xì)化設(shè)計(jì)，整體框架如圖3所示。

圖3 數(shù)據(jù)中臺(tái)IT架構(gòu)-level0

2.3.1 數(shù)據(jù)匯聚

為了進(jìn)行全面的業(yè)務(wù)分析預(yù)測(cè)，需要廣泛地匯聚企業(yè)內(nèi)外部系統(tǒng)的數(shù)據(jù)，以通信運(yùn)營商為例，數(shù)據(jù)源可以分為如圖4所示的四大類。

圖4 通信運(yùn)營商的數(shù)據(jù)采集范圍

除了廣泛覆蓋企業(yè)內(nèi)IT 系統(tǒng)數(shù)據(jù)之外，根據(jù)企業(yè)業(yè)務(wù)，還需采集相關(guān)的非IT 系統(tǒng)數(shù)據(jù)，如基站信令、互聯(lián)網(wǎng)站數(shù)據(jù)、第三方合作伙伴的用戶數(shù)據(jù)等，打通整合后，為公司業(yè)務(wù)發(fā)展、決策提供支撐。

完成數(shù)據(jù)匯聚后還需要做好數(shù)據(jù)地圖的展示，讓企業(yè)人員了解公司的數(shù)據(jù)資產(chǎn)及分布情況。

由于數(shù)據(jù)源的種類、存儲(chǔ)類型不同，數(shù)據(jù)中臺(tái)的采集層需要具備滿足多種典型場(chǎng)景的采集技術(shù)，如數(shù)據(jù)庫直連采集、文件采集、爬蟲、實(shí)時(shí)消息采集、日志采集等。

2.3.2 數(shù)據(jù)加工

2.3.2.1 數(shù)據(jù)加工技術(shù)

根據(jù)主要業(yè)務(wù)場(chǎng)景，混搭使用多種業(yè)界先進(jìn)數(shù)據(jù)處理技術(shù)，快速、高效、穩(wěn)定處理各類結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。典型的數(shù)據(jù)處理場(chǎng)景分為以下3類。

a）批量處理：大數(shù)據(jù)分布式處理技術(shù)，以HDFS為基礎(chǔ)，具備常見的Hadoop 生態(tài)圈中的常用框架組件，用于處理實(shí)時(shí)性要求低的大批量數(shù)據(jù)。

b）流式處理：具備Flink、SparkStreaming、Storm 等典型框架，滿足不同場(chǎng)景的流式數(shù)據(jù)處理要求，用于處理實(shí)時(shí)性要求高的數(shù)據(jù)。

c）機(jī)器學(xué)習(xí)：具備成熟的機(jī)器學(xué)習(xí)框架、算法庫，提供復(fù)雜業(yè)務(wù)模型的訓(xùn)練環(huán)境。

2.3.2.2 數(shù)據(jù)倉庫構(gòu)建

“數(shù)據(jù)智能”（Data Intelligence）中一個(gè)必要且基礎(chǔ)的環(huán)節(jié)，就是數(shù)據(jù)倉庫的建設(shè)，同時(shí)，數(shù)據(jù)倉庫也是公司數(shù)據(jù)發(fā)展到一定規(guī)模后必然會(huì)提供的一種基礎(chǔ)服務(wù)。以主流的數(shù)據(jù)倉庫建模理論（如Kimball 模型等）為指導(dǎo)，做好數(shù)據(jù)標(biāo)準(zhǔn)化分層建設(shè)。按照企業(yè)業(yè)務(wù)總線，梳理出各類維度、事實(shí)，再以常用業(yè)務(wù)域分類，進(jìn)行匯總、整合拉通，達(dá)到可復(fù)用、快速查找的目的。

2.3.3 能力沉淀

在進(jìn)行一段時(shí)間的數(shù)據(jù)需求服務(wù)后，可將加工過程中常用的數(shù)據(jù)結(jié)果及功能沉淀下來，避免重復(fù)開發(fā)，同時(shí)，可以縮短需求響應(yīng)時(shí)間。在大數(shù)據(jù)服務(wù)中，常見的數(shù)據(jù)能力有以下幾類。

a）數(shù)據(jù)產(chǎn)品：大部分?jǐn)?shù)據(jù)加工結(jié)果可通過標(biāo)簽、指標(biāo)、業(yè)務(wù)挖掘模型來沉淀、共享，數(shù)據(jù)產(chǎn)品需要根據(jù)業(yè)務(wù)發(fā)展不斷補(bǔ)充并調(diào)優(yōu)，保持產(chǎn)品的更新及準(zhǔn)確性。

b）AI 能力：人工智能已在各行各業(yè)逐漸普及，基礎(chǔ)的AI 能力需要以低門檻的形式提供，方便使用，降本增效。

c）工具：常用的數(shù)據(jù)分析工具可沉淀在數(shù)據(jù)中臺(tái)，用戶直接云化使用，避免各個(gè)前臺(tái)應(yīng)用分別部署維護(hù)，浪費(fèi)資源。

2.3.4 開放共享

數(shù)據(jù)開放共享是數(shù)據(jù)中臺(tái)最重要的目的。做好數(shù)據(jù)開放，需從清晰展示數(shù)據(jù)目錄、多樣化開放手段、多角色多場(chǎng)景用戶交互及良好的平臺(tái)運(yùn)營維護(hù)方面努力，讓數(shù)據(jù)使用者“了解”數(shù)據(jù)、“會(huì)用”數(shù)據(jù)、“敢用”數(shù)據(jù)。

a）數(shù)據(jù)目錄：以數(shù)據(jù)商店的形式，直觀展現(xiàn)大數(shù)據(jù)平臺(tái)加工的數(shù)據(jù)及能力內(nèi)容，統(tǒng)一數(shù)據(jù)服務(wù)門戶；設(shè)計(jì)友好的交互界面，以業(yè)務(wù)語言解釋說明數(shù)據(jù)及能力的內(nèi)容、使用方法和場(chǎng)景；讓用戶“了解”數(shù)據(jù)及能力。

b）開放方式：以多種技術(shù)手段開放數(shù)據(jù)及能力，包裝成完整的產(chǎn)品及服務(wù)，以支持各種不同場(chǎng)景的數(shù)據(jù)開放。

c）交互場(chǎng)景：面向不同層級(jí)的用戶，提供多種場(chǎng)景的數(shù)據(jù)服務(wù)，讓用戶“會(huì)用”數(shù)據(jù)及能力。目前數(shù)據(jù)服務(wù)主要分為自助式服務(wù)和主動(dòng)式服務(wù)2 類，前者面向技術(shù)人員以租戶和交互式探索形式提供服務(wù)，面向非技術(shù)人員提供可視化自助分析工具，如拖拉拽配置組合各類數(shù)據(jù)標(biāo)簽指標(biāo)等；后者有專人對(duì)口不同業(yè)務(wù)部門，了解業(yè)務(wù)后深度服務(wù)業(yè)務(wù)分析，如建模、分析報(bào)告等。

d）開放運(yùn)營：展示產(chǎn)品質(zhì)量和使用情況，讓用戶“敢用”數(shù)據(jù)；做好平臺(tái)運(yùn)維，保證使用穩(wěn)定性、及時(shí)性；統(tǒng)計(jì)分析使用效果，反向促進(jìn)能力提升；建立并維護(hù)問題反饋渠道，提升使用感知。

2.3.5 數(shù)據(jù)治理

數(shù)據(jù)治理目標(biāo)：保證數(shù)據(jù)質(zhì)量，促進(jìn)數(shù)據(jù)開放，保持大數(shù)據(jù)工作可持續(xù)發(fā)展。

數(shù)據(jù)治理原則：輕量化、便捷化，以解決實(shí)際問題為導(dǎo)向，對(duì)數(shù)據(jù)生產(chǎn)起正向作用。

根據(jù)數(shù)據(jù)中臺(tái)常見痛點(diǎn)問題，提出以下幾個(gè)必要的數(shù)據(jù)治理要求。

a）基礎(chǔ)數(shù)據(jù)規(guī)范：制定基礎(chǔ)模型、編碼、指標(biāo)及標(biāo)簽的標(biāo)準(zhǔn)規(guī)范，并系統(tǒng)化支撐，可編輯可查詢，靈活更新。在各類系統(tǒng)開發(fā)建設(shè)過程中，所創(chuàng)建的數(shù)據(jù)如果在標(biāo)準(zhǔn)規(guī)范內(nèi)已有定義，則直接引用標(biāo)準(zhǔn)，如果要?jiǎng)?chuàng)建標(biāo)準(zhǔn)規(guī)范以外的新型數(shù)據(jù)，需要先修訂標(biāo)準(zhǔn)再建設(shè)，保持?jǐn)?shù)據(jù)規(guī)范、可復(fù)用、口徑清晰且一致。

b）數(shù)據(jù)開發(fā)規(guī)范：制定輕量化開發(fā)規(guī)范，標(biāo)準(zhǔn)化數(shù)據(jù)命名、加工腳本等常用關(guān)鍵環(huán)節(jié)；規(guī)范各場(chǎng)景開發(fā)/測(cè)試流程及路徑區(qū)域，避免相互影響，節(jié)省算力；同時(shí)，需通過統(tǒng)一開發(fā)平臺(tái)，系統(tǒng)化支撐標(biāo)準(zhǔn)落地，對(duì)開發(fā)過程進(jìn)行監(jiān)測(cè)、預(yù)警，維持有序的開發(fā)環(huán)境。

c）生命周期規(guī)范：制定各類數(shù)據(jù)的存儲(chǔ)策略，并寫入系統(tǒng)，到期前通知負(fù)責(zé)人，確認(rèn)下線；定期清理長時(shí)間無訪問量的數(shù)據(jù)表，降低存儲(chǔ)計(jì)算成本。

d）數(shù)據(jù)監(jiān)控：平臺(tái)元數(shù)據(jù)定期掃描比對(duì)，發(fā)現(xiàn)差異及時(shí)通知負(fù)責(zé)人；資源畫像、作業(yè)畫像、存儲(chǔ)畫像、計(jì)算畫像、用戶操作審計(jì)，多方位監(jiān)控。

e）數(shù)據(jù)安全：主要分為內(nèi)部數(shù)據(jù)安全和外部數(shù)據(jù)安全，前者涉及事前權(quán)限控制，事后操作日志可追溯；后者要保證數(shù)據(jù)不出門（在內(nèi)部完成數(shù)據(jù)加工，輸出數(shù)據(jù)分析結(jié)果），并對(duì)關(guān)鍵信息加密、脫敏。

3 數(shù)據(jù)中臺(tái)建設(shè)關(guān)鍵要素

數(shù)據(jù)中臺(tái)的建設(shè)，除了滿足IT 系統(tǒng)技術(shù)條件之外，還有一些非技術(shù)性的關(guān)鍵要素，如果這些要素不能滿足，將會(huì)直接影響數(shù)據(jù)中臺(tái)的使用結(jié)果。

3.1 團(tuán)隊(duì)組織

目前大型企業(yè)內(nèi)部組織結(jié)構(gòu)復(fù)雜，常見情況有本專業(yè)數(shù)據(jù)為部門私有資產(chǎn)，不愿意共享；各專業(yè)線人員對(duì)其他專業(yè)不理解，即使有業(yè)務(wù)場(chǎng)景，也不能發(fā)揮最優(yōu)價(jià)值。這樣就導(dǎo)致數(shù)據(jù)中臺(tái)難成體系、難于推廣、難以發(fā)揮實(shí)質(zhì)作用；數(shù)據(jù)拉通受阻，不能從根本上解決數(shù)據(jù)壁壘問題。

因此，跨域、互通的中臺(tái)建設(shè)需要跨域、跨專業(yè)的人員，如果人員分散在不同組織中，工作職責(zé)各不相關(guān)，接觸的領(lǐng)域各不相關(guān)，那么，任何跨域系統(tǒng)層級(jí)的技術(shù)性調(diào)整都難以發(fā)揮預(yù)想的作用。

參考先進(jìn)企業(yè)的中臺(tái)團(tuán)隊(duì)模式，由統(tǒng)一、跨部門的專業(yè)化團(tuán)隊(duì)負(fù)責(zé)數(shù)據(jù)中臺(tái)的建設(shè)。成立企業(yè)級(jí)數(shù)據(jù)中臺(tái)團(tuán)隊(duì)，由業(yè)務(wù)領(lǐng)域的分析人員、技術(shù)相關(guān)的數(shù)據(jù)研發(fā)工程師、運(yùn)營相關(guān)的服務(wù)團(tuán)隊(duì)構(gòu)成，確保團(tuán)隊(duì)構(gòu)成的全面性與專業(yè)性，同時(shí)借此環(huán)境重點(diǎn)培養(yǎng)自有專業(yè)人才。以業(yè)務(wù)需求為導(dǎo)向，各域需求方參與中臺(tái)建設(shè)，相互支持依賴、監(jiān)督要求。專業(yè)人員集中，在統(tǒng)一架構(gòu)、規(guī)范下，逐漸優(yōu)化公共數(shù)據(jù)能力。

前臺(tái)由各專業(yè)線IT 支撐團(tuán)隊(duì)自由建設(shè)，但所有數(shù)據(jù)分析類功能，必須經(jīng)過數(shù)據(jù)中臺(tái)，即明確是否調(diào)用中臺(tái)能力或?qū)?shù)據(jù)能力沉淀至中臺(tái)，中臺(tái)團(tuán)隊(duì)權(quán)責(zé)匹配。

引入市場(chǎng)化、互聯(lián)網(wǎng)化的績效評(píng)價(jià)機(jī)制，對(duì)數(shù)據(jù)中臺(tái)團(tuán)隊(duì)的建設(shè)及服務(wù)進(jìn)行衡量，以使用效果為導(dǎo)向，包括所提供服務(wù)的使用頻率、前臺(tái)應(yīng)用滿意度等。

3.2 數(shù)據(jù)中臺(tái)部署架構(gòu)

需要建設(shè)數(shù)據(jù)中臺(tái)的大型企業(yè)，一般都是發(fā)展到一定規(guī)模后，發(fā)現(xiàn)煙囪林立的IT 結(jié)構(gòu)不適合大型的改造、重構(gòu)建設(shè)，影響業(yè)務(wù)支撐。對(duì)于這種情況，建議該企業(yè)采用邏輯上統(tǒng)一的中臺(tái)架構(gòu)，以服務(wù)業(yè)務(wù)前端為前提，遵循統(tǒng)一標(biāo)準(zhǔn)，統(tǒng)一服務(wù)運(yùn)營，并支持分布式部署。

a）統(tǒng)一需求入口：由各域業(yè)務(wù)人員、需求分析人員組成的專業(yè)需求團(tuán)隊(duì)對(duì)上層應(yīng)用需求進(jìn)行分析、梳理、分解、指派。

b）統(tǒng)一服務(wù)出口：服務(wù)出口的責(zé)任方需要負(fù)責(zé)數(shù)據(jù)服務(wù)的統(tǒng)一封裝、制定并執(zhí)行服務(wù)標(biāo)準(zhǔn)，提供標(biāo)準(zhǔn)、一致的服務(wù)。

c）數(shù)據(jù)研發(fā)：各域數(shù)據(jù)研發(fā)團(tuán)隊(duì)組織統(tǒng)一但工作內(nèi)容不變，橫向引入標(biāo)準(zhǔn)團(tuán)隊(duì)，負(fù)責(zé)牽頭各類數(shù)據(jù)研發(fā)標(biāo)準(zhǔn)的制定，對(duì)現(xiàn)有模型、指標(biāo)進(jìn)行梳理，發(fā)現(xiàn)問題并牽頭與各域研發(fā)人員一起解決問題。

d）架構(gòu)可擴(kuò)展性：新業(yè)務(wù)或新技術(shù)（如5G、合作伙伴能力）帶來的新的公共能力模塊，可以按照目前的統(tǒng)一框架擴(kuò)展分布節(jié)點(diǎn)。

3.3 互聯(lián)網(wǎng)化服務(wù)運(yùn)營

發(fā)揮數(shù)據(jù)中臺(tái)價(jià)值的關(guān)鍵在運(yùn)營。中臺(tái)團(tuán)隊(duì)需要在建立系統(tǒng)化、規(guī)范化的開放機(jī)制基礎(chǔ)上，轉(zhuǎn)變思路，從被動(dòng)服務(wù)轉(zhuǎn)變?yōu)橹鲃?dòng)“營銷式”服務(wù)，為業(yè)務(wù)前端創(chuàng)造價(jià)值，營造良好的開放生態(tài)。

a）明確統(tǒng)一的數(shù)據(jù)開放機(jī)制：數(shù)據(jù)是全企業(yè)的共有數(shù)據(jù)，讓更多的人用起來，才能充分發(fā)揮數(shù)據(jù)的價(jià)值。明確規(guī)定什么角色可以用什么數(shù)據(jù)、開通什么服務(wù)，并將規(guī)則固化落地到統(tǒng)一開放平臺(tái)中，系統(tǒng)化正規(guī)化，減少線下靠“刷臉”“打招呼”等人為交互。

b）服務(wù)化的中臺(tái)運(yùn)營：以用戶視角主動(dòng)服務(wù)，培養(yǎng)數(shù)據(jù)中臺(tái)使用習(xí)慣及模式，提升使用率（見圖5）。

圖5 服務(wù)化的中臺(tái)運(yùn)營

3.4 數(shù)據(jù)中臺(tái)分階段建設(shè)

由于需求企業(yè)的復(fù)雜情況（如業(yè)務(wù)支撐已穩(wěn)定運(yùn)行、IT 系統(tǒng)煙囪眾多、部門壁壘等），數(shù)據(jù)中臺(tái)的建設(shè)無法從零開始，需要在不影響現(xiàn)有業(yè)務(wù)支撐的條件下，分階段進(jìn)行，一般可以分為以下四大階段。

a）一階段：制定標(biāo)準(zhǔn)規(guī)范、方法論并細(xì)化實(shí)施計(jì)劃，統(tǒng)一整合基礎(chǔ)數(shù)據(jù)層。

b）二階段：按照業(yè)界標(biāo)準(zhǔn)方法論，梳理企業(yè)業(yè)務(wù)總線，同時(shí)從梳理重點(diǎn)業(yè)務(wù)的底層數(shù)據(jù)入手，逐步優(yōu)化構(gòu)建數(shù)據(jù)中間層。

c）三階段：通過統(tǒng)一開放平臺(tái)優(yōu)先支持新建的應(yīng)用，同時(shí)對(duì)老應(yīng)用進(jìn)行改造遷移。

d）持續(xù)運(yùn)維：數(shù)據(jù)中臺(tái)人員深入業(yè)務(wù)場(chǎng)景，不斷沉淀優(yōu)化公共數(shù)據(jù)層。每年可針對(duì)公司戰(zhàn)略重點(diǎn)，與業(yè)務(wù)、前端IT人員合力建設(shè)。

4 結(jié)束語

隨著市場(chǎng)競(jìng)爭的加劇，增速放緩，業(yè)務(wù)復(fù)雜的大型企業(yè)迫切需要建設(shè)信息共享中臺(tái)，即數(shù)據(jù)中臺(tái)，以打破部門間的信息壁壘，提升企業(yè)的智能化程度。而中臺(tái)本質(zhì)上是改革，是一種戰(zhàn)略選擇，是資源的再分配與流程的再造，需要新的組織、管理模式與之匹配，而不僅僅是系統(tǒng)的建設(shè)。除了強(qiáng)大的數(shù)據(jù)匯聚、處理能力，有效的開放服務(wù)機(jī)制外，還需要配套的組織團(tuán)隊(duì)、靈活的部署落地、互聯(lián)網(wǎng)化服務(wù)運(yùn)營支撐，保證達(dá)到應(yīng)有的效果。