詳解數(shù)據(jù)中臺(tái)

詳解數(shù)據(jù)中臺(tái)關(guān)于數(shù)據(jù)中臺(tái)，目前業(yè)界并沒有一個(gè)標(biāo)準(zhǔn)的定義，不同廠商、不同企業(yè)對(duì)數(shù)據(jù)中臺(tái)都有著不同的理解。但對(duì)于數(shù)據(jù)中臺(tái)大家也有一個(gè)共識(shí)就是它是用來(lái)解決企業(yè)數(shù)據(jù)各類數(shù)據(jù)問(wèn)題，使得企業(yè)數(shù)據(jù)資源轉(zhuǎn)化為數(shù)據(jù)資產(chǎn)的解決方案。

今天給大家分享的這篇文章是關(guān)于數(shù)據(jù)中臺(tái)定義、價(jià)值、架構(gòu)和建設(shè)方法，文章來(lái)源于公眾號(hào)“實(shí)時(shí)數(shù)倉(cāng)架構(gòu)”，配圖來(lái)源云徙科技。以下為本文大綱：

1.數(shù)據(jù)中臺(tái)定義2.

數(shù)據(jù)中臺(tái)價(jià)值3.

數(shù)據(jù)中臺(tái)VS業(yè)務(wù)中臺(tái)4.

數(shù)據(jù)中臺(tái)功能架構(gòu)5.

數(shù)據(jù)中臺(tái)技術(shù)架構(gòu)6.

數(shù)據(jù)中臺(tái)構(gòu)建的三大路徑7.

數(shù)據(jù)中臺(tái)構(gòu)建5步法

—01—

數(shù)據(jù)中臺(tái)定義

數(shù)據(jù)中臺(tái)是一種將企業(yè)沉睡的數(shù)據(jù)變成數(shù)據(jù)資產(chǎn)，持續(xù)使用數(shù)據(jù)、產(chǎn)生智能、為業(yè)務(wù)服務(wù)，從而實(shí)現(xiàn)數(shù)據(jù)價(jià)值變現(xiàn)的系統(tǒng)和機(jī)制。

通過(guò)數(shù)據(jù)中臺(tái)提供的方法和運(yùn)行機(jī)制，形成匯聚整合、提純加工、建模處理、算法學(xué)習(xí)，并以共享服務(wù)的方式將數(shù)據(jù)提供給業(yè)務(wù)使用，從而與業(yè)務(wù)聯(lián)動(dòng)。再者，結(jié)合業(yè)務(wù)中臺(tái)的數(shù)據(jù)生產(chǎn)能力，最終構(gòu)建數(shù)據(jù)生產(chǎn)—消費(fèi)—再生的閉環(huán)。

—02—數(shù)據(jù)中臺(tái)價(jià)值

數(shù)據(jù)中臺(tái)不等于大數(shù)據(jù)平臺(tái)，數(shù)據(jù)中臺(tái)的核心工作也并不是將企業(yè)的數(shù)據(jù)全部收集起來(lái)做匯總就夠了。

數(shù)據(jù)中臺(tái)的使命是利用大數(shù)據(jù)技術(shù)、通過(guò)全局規(guī)劃來(lái)治理好企業(yè)的數(shù)據(jù)資產(chǎn)，讓數(shù)據(jù)使用者能隨時(shí)隨地獲取到可靠的數(shù)據(jù)。因此，數(shù)據(jù)中臺(tái)一旦建成并得以持續(xù)運(yùn)營(yíng)，其價(jià)值將隨著時(shí)間的推移將呈指數(shù)級(jí)增長(zhǎng)。

2.1幫助企業(yè)建立數(shù)據(jù)標(biāo)準(zhǔn)在有數(shù)據(jù)中臺(tái)之前，企業(yè)基本不會(huì)有全局的數(shù)據(jù)標(biāo)準(zhǔn)，即使有相關(guān)的數(shù)據(jù)標(biāo)準(zhǔn)，由于沒有數(shù)據(jù)中臺(tái)這個(gè)實(shí)體形態(tài)，數(shù)據(jù)標(biāo)準(zhǔn)也無(wú)從執(zhí)行。

數(shù)據(jù)中臺(tái)的建設(shè)天然會(huì)幫助企業(yè)建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)，包括數(shù)據(jù)建設(shè)規(guī)范和數(shù)據(jù)消費(fèi)規(guī)范。數(shù)據(jù)建設(shè)規(guī)范有諸如數(shù)據(jù)接入規(guī)范、數(shù)據(jù)建模規(guī)范、數(shù)據(jù)存儲(chǔ)規(guī)范和數(shù)據(jù)安全規(guī)范等，數(shù)據(jù)消費(fèi)規(guī)范包含數(shù)據(jù)權(quán)限規(guī)范、數(shù)據(jù)調(diào)用規(guī)范以及數(shù)據(jù)銷毀規(guī)范等。

這些標(biāo)準(zhǔn)都是建設(shè)數(shù)據(jù)中臺(tái)時(shí)必須建立起來(lái)并依托數(shù)據(jù)中臺(tái)去執(zhí)行和落地的。

2.2促進(jìn)中臺(tái)組織形成再宏偉的企業(yè)戰(zhàn)略規(guī)劃，都離不開一套科學(xué)合理的組織去落地執(zhí)行。

數(shù)據(jù)中臺(tái)建設(shè)將是企業(yè)宏觀戰(zhàn)略規(guī)劃的一個(gè)重要部分，那么在踐行數(shù)據(jù)中臺(tái)建設(shè)的過(guò)程中，擺在企業(yè)第一位的問(wèn)題就是如何搭建起一套能穩(wěn)定護(hù)航數(shù)據(jù)中臺(tái)建設(shè)及運(yùn)營(yíng)的數(shù)據(jù)中臺(tái)班子。

數(shù)據(jù)中臺(tái)這種體系化工程將橫向拉通企業(yè)數(shù)據(jù)相關(guān)方，包括中臺(tái)建設(shè)團(tuán)隊(duì)、中臺(tái)運(yùn)維團(tuán)隊(duì)、數(shù)據(jù)產(chǎn)品經(jīng)理團(tuán)隊(duì)、數(shù)據(jù)資產(chǎn)管理團(tuán)隊(duì)、數(shù)據(jù)運(yùn)營(yíng)團(tuán)隊(duì)等，組成標(biāo)準(zhǔn)的企業(yè)數(shù)據(jù)委員會(huì)，從而形成企業(yè)真正的中臺(tái)組織。

需要說(shuō)明的是，中臺(tái)組織可以是一個(gè)橫跨各個(gè)業(yè)務(wù)部門的弱矩陣組織，也可以是一個(gè)完整的實(shí)體組織。這需要因地制宜，因企業(yè)不同而異。

2.3全面賦能業(yè)務(wù)，促使降本增效數(shù)據(jù)中臺(tái)的終極價(jià)值是降本增效，無(wú)論是建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)還是形成中臺(tái)組織，其核心目標(biāo)都是幫助企業(yè)達(dá)成戰(zhàn)略規(guī)劃。

通過(guò)數(shù)據(jù)中臺(tái)，可以更加合理地布局團(tuán)隊(duì)；數(shù)據(jù)從加工生產(chǎn)到使用的整個(gè)時(shí)間周期將大大縮短；以中臺(tái)之力拉通整合企業(yè)營(yíng)銷、交易、服務(wù)、庫(kù)存、物流等一方數(shù)據(jù)，結(jié)合二方及三方數(shù)據(jù)，以全局視角，形成強(qiáng)大的數(shù)據(jù)資產(chǎn)，滋養(yǎng)各業(yè)務(wù)板塊。

同時(shí)有目的性地針對(duì)場(chǎng)景，設(shè)計(jì)出賦能場(chǎng)景的數(shù)據(jù)應(yīng)用，幫助其從研、產(chǎn)、銷等多個(gè)方面縮短產(chǎn)品研發(fā)周期，生產(chǎn)未來(lái)一段時(shí)間暢銷的產(chǎn)品，精準(zhǔn)找到愿意購(gòu)買公司產(chǎn)品的群體，以至于增強(qiáng)用戶對(duì)企業(yè)產(chǎn)品及服務(wù)的友好體驗(yàn)，提高用戶對(duì)于企業(yè)品牌的忠誠(chéng)度，降低企業(yè)運(yùn)營(yíng)過(guò)程中的損耗，壓縮供應(yīng)鏈端的周期等。

—03—數(shù)據(jù)中臺(tái)VS業(yè)務(wù)中臺(tái)

無(wú)論是業(yè)務(wù)中臺(tái)還是數(shù)據(jù)中臺(tái)，都是在企業(yè)IT系統(tǒng)架構(gòu)演進(jìn)過(guò)程中形成的，并從企業(yè)自身IT系統(tǒng)規(guī)劃、建設(shè)、運(yùn)營(yíng)、運(yùn)維等多年的經(jīng)驗(yàn)中提煉出來(lái)的共性能力。

業(yè)務(wù)中臺(tái)和數(shù)據(jù)中臺(tái)作為兩個(gè)輪子并肩構(gòu)建了數(shù)字中臺(tái)，支撐前臺(tái)對(duì)會(huì)員的從營(yíng)銷推廣、轉(zhuǎn)化交易到智能服務(wù)業(yè)務(wù)的閉環(huán)，促進(jìn)企業(yè)業(yè)務(wù)的提升和發(fā)展。數(shù)字中臺(tái)對(duì)內(nèi)連接企業(yè)的后臺(tái)系統(tǒng)，諸如ERP、人力資源、協(xié)同辦公、財(cái)務(wù)管理等。

業(yè)務(wù)中臺(tái)與數(shù)據(jù)中臺(tái)雙輪驅(qū)動(dòng)的數(shù)字中臺(tái)支撐前臺(tái)業(yè)務(wù)。

業(yè)務(wù)中臺(tái)抽象、包裝和整合后臺(tái)資源，轉(zhuǎn)化為便于前臺(tái)使用的可重用共享的核心能力，實(shí)現(xiàn)了后端業(yè)務(wù)資源到前臺(tái)易用能力的轉(zhuǎn)化，為前臺(tái)應(yīng)用提供了強(qiáng)大的“炮火支援”能力，隨叫隨到。

業(yè)務(wù)中臺(tái)的共享服務(wù)中心提供了統(tǒng)一、標(biāo)準(zhǔn)的數(shù)據(jù)，減少了系統(tǒng)間的交互和團(tuán)隊(duì)間的協(xié)作成本。

數(shù)據(jù)中臺(tái)接入業(yè)務(wù)中臺(tái)、后臺(tái)和其它第三方數(shù)據(jù)，完成海量數(shù)據(jù)的存儲(chǔ)、清洗、計(jì)算、匯總等，構(gòu)成企業(yè)的核心數(shù)據(jù)能力，為前臺(tái)基于數(shù)據(jù)的定制化創(chuàng)新和業(yè)務(wù)中臺(tái)基于數(shù)據(jù)反饋的持續(xù)演進(jìn)提供了強(qiáng)大支撐。

可以認(rèn)為數(shù)據(jù)中臺(tái)為前臺(tái)戰(zhàn)場(chǎng)提供了強(qiáng)大的“雷達(dá)監(jiān)測(cè)”能力，實(shí)時(shí)掌控戰(zhàn)場(chǎng)情況，料敵先機(jī)。

不過(guò)數(shù)據(jù)中臺(tái)所提供的數(shù)據(jù)處理能力和之上建設(shè)的數(shù)據(jù)分析產(chǎn)品，也不局限于服務(wù)業(yè)務(wù)中臺(tái)。數(shù)據(jù)中臺(tái)的能力可以開放給所有業(yè)務(wù)方使用。

業(yè)務(wù)中臺(tái)與數(shù)據(jù)中臺(tái)相輔相成，互相支撐。

對(duì)于業(yè)務(wù)方來(lái)說(shuō)，自己產(chǎn)生數(shù)據(jù)，并同時(shí)消費(fèi)自己的數(shù)據(jù)，在消費(fèi)自己的數(shù)據(jù)時(shí)又在繼續(xù)產(chǎn)生數(shù)據(jù)，從而形成數(shù)據(jù)閉環(huán)。

數(shù)據(jù)中臺(tái)并不是截然獨(dú)立的，它與業(yè)務(wù)中臺(tái)一起組成了支撐業(yè)務(wù)的兩個(gè)輪子。

—04—數(shù)據(jù)中臺(tái)功能架構(gòu)

數(shù)據(jù)中臺(tái)建設(shè)是一個(gè)宏大的工程，涉及整體規(guī)劃、組織搭建、中臺(tái)落地與運(yùn)營(yíng)等方方面面的工作，本節(jié)重點(diǎn)從物理形態(tài)上講述企業(yè)的數(shù)據(jù)中臺(tái)應(yīng)該如何搭建。一般來(lái)講，企業(yè)的數(shù)據(jù)中臺(tái)在物理形態(tài)上分為三個(gè)大層：工具平臺(tái)層、數(shù)據(jù)資產(chǎn)層和數(shù)據(jù)應(yīng)用層。

4.1工具平臺(tái)層工具平臺(tái)層是數(shù)據(jù)中臺(tái)的載體，包含大數(shù)據(jù)處理的基礎(chǔ)能力技術(shù)，如集數(shù)據(jù)采集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算、數(shù)據(jù)安全等于一體的大數(shù)據(jù)平臺(tái)；還包含建設(shè)數(shù)據(jù)中臺(tái)的一系列工具，如離線或?qū)崟r(shí)數(shù)據(jù)研發(fā)工具、數(shù)據(jù)聯(lián)通工具、標(biāo)簽計(jì)算工具、算法平臺(tái)工具、數(shù)據(jù)服務(wù)工具及自助分析工具。

以上工具集基本覆蓋了數(shù)據(jù)中臺(tái)的數(shù)據(jù)加工過(guò)程。

4.2數(shù)據(jù)資產(chǎn)層數(shù)據(jù)資產(chǎn)層是數(shù)據(jù)中臺(tái)的核心層，總體來(lái)講，可以劃分為主題域模型區(qū)、標(biāo)簽?zāi)Ｐ蛥^(qū)和算法模型區(qū)。

①主題域模型主題域模型是指面向業(yè)務(wù)分析，將業(yè)務(wù)過(guò)程或維度進(jìn)行抽象的集合。業(yè)務(wù)過(guò)程可以概括為一個(gè)個(gè)不可拆分的行為事件，如訂單、合同、營(yíng)銷等。

為了保障整個(gè)體系的生命力，主題域即數(shù)據(jù)域需要抽象提煉，并且長(zhǎng)期維護(hù)和更新，但是不輕易變動(dòng)。在劃分?jǐn)?shù)據(jù)域時(shí)，既要涵蓋當(dāng)前所有業(yè)務(wù)的需求，又要保證新業(yè)務(wù)能夠無(wú)影響地被包含進(jìn)已有的數(shù)據(jù)域中或者很容易擴(kuò)展新的數(shù)據(jù)域.

②標(biāo)簽?zāi)Ｐ蜆?biāo)簽?zāi)Ｐ偷脑O(shè)計(jì)與主題域模型方法大同小異，同樣需要結(jié)合業(yè)務(wù)過(guò)程進(jìn)行設(shè)計(jì)，需要充分理解業(yè)務(wù)過(guò)程。

標(biāo)簽一般會(huì)涉及企業(yè)經(jīng)營(yíng)過(guò)程中的實(shí)體對(duì)象，如會(huì)員、商品、門店、經(jīng)銷商等。這些主體一般來(lái)說(shuō)都穿插在各個(gè)業(yè)務(wù)流程中，比如會(huì)員一般都穿插在關(guān)注、注冊(cè)、瀏覽、下單、評(píng)價(jià)、服務(wù)等環(huán)節(jié)。那么在設(shè)計(jì)標(biāo)簽的時(shí)候就需要充分理解這些業(yè)務(wù)流程，在流程中發(fā)現(xiàn)標(biāo)簽的應(yīng)用點(diǎn)，結(jié)合這些應(yīng)用點(diǎn)來(lái)搭建企業(yè)的標(biāo)簽體系。標(biāo)簽?zāi)Ｐ桶从?jì)算模式一般分為客觀標(biāo)簽和主觀標(biāo)簽。

設(shè)計(jì)標(biāo)簽?zāi)Ｐ蜁r(shí)非常關(guān)鍵的要素是標(biāo)簽?zāi)Ｐ鸵欢ㄒ哂锌蓴U(kuò)展性。畢竟標(biāo)簽這種數(shù)據(jù)資產(chǎn)是需要持續(xù)運(yùn)營(yíng)的，也是有生命周期的，在運(yùn)營(yíng)的過(guò)程中隨時(shí)可能增加新的標(biāo)簽。

③算法模型算法模型更加貼近業(yè)務(wù)場(chǎng)景。在設(shè)計(jì)算法模型的時(shí)候要反復(fù)推演算法模型使用的場(chǎng)景，包括模型的冷啟動(dòng)等問(wèn)題。整個(gè)模型搭建過(guò)程包含定場(chǎng)景、數(shù)據(jù)源準(zhǔn)備、特征工程、模型設(shè)計(jì)、模型訓(xùn)練、正式上線、參數(shù)調(diào)整7個(gè)環(huán)節(jié)。

以新零售企業(yè)為例，常用的機(jī)器學(xué)習(xí)算法有決策樹、神經(jīng)網(wǎng)絡(luò)、關(guān)聯(lián)規(guī)則、聚類、貝葉斯、支持向量機(jī)等。這些算法已經(jīng)非常成熟，可以用來(lái)實(shí)現(xiàn)商品個(gè)性化推薦、銷量預(yù)測(cè)、流失預(yù)測(cè)、商品組貨優(yōu)化等新零售場(chǎng)景的算法模型。

4.3數(shù)據(jù)應(yīng)用層數(shù)據(jù)應(yīng)用層嚴(yán)格來(lái)說(shuō)不屬于數(shù)據(jù)中臺(tái)的范疇，但數(shù)據(jù)中臺(tái)的使命就是為業(yè)務(wù)賦能，幾乎所有企業(yè)在建設(shè)數(shù)據(jù)中臺(tái)的同時(shí)都已規(guī)劃好數(shù)據(jù)應(yīng)用。數(shù)據(jù)應(yīng)用可按數(shù)據(jù)使用場(chǎng)景來(lái)劃分為以下多個(gè)使用領(lǐng)域：分析與決策應(yīng)用、標(biāo)簽應(yīng)用、智能應(yīng)用。

—05—數(shù)據(jù)中臺(tái)技術(shù)架構(gòu)

隨著大數(shù)據(jù)與人工智能技術(shù)的不斷迭代以及商業(yè)大數(shù)據(jù)工具產(chǎn)品的推出，數(shù)據(jù)中臺(tái)的架構(gòu)設(shè)計(jì)大可不必從零開始，可以采購(gòu)一站式的研發(fā)平臺(tái)產(chǎn)品，或者基于一些開源產(chǎn)品進(jìn)行組裝。

以開源技術(shù)為例，數(shù)據(jù)中臺(tái)的技術(shù)架構(gòu)如圖所示，總體來(lái)看一般包含以下幾種功能：

—06—數(shù)據(jù)中臺(tái)構(gòu)建的三大路徑

云徙在服務(wù)近200家行業(yè)頭部客戶的實(shí)踐經(jīng)驗(yàn)中，通過(guò)企業(yè)數(shù)字化戰(zhàn)略決心、數(shù)字化現(xiàn)狀、組織架構(gòu)匹配度、業(yè)務(wù)緊急度等4個(gè)維度綜合分析，分析出企業(yè)建設(shè)數(shù)據(jù)中臺(tái)總體而言有三大路徑：

如果一個(gè)企業(yè)，數(shù)字化戰(zhàn)略路徑非常清晰，但其業(yè)務(wù)模式需要多樣化擴(kuò)展，數(shù)據(jù)賦能業(yè)務(wù)痛點(diǎn)的比較明顯，且對(duì)應(yīng)的中臺(tái)組織架構(gòu)已經(jīng)形成，則建議企業(yè)采用雙中臺(tái)一體化，即同時(shí)建設(shè)業(yè)務(wù)中臺(tái)和數(shù)據(jù)中臺(tái)。

如果一個(gè)企業(yè)數(shù)據(jù)賦能業(yè)務(wù)的痛點(diǎn)非常明顯，即緊迫度很高，業(yè)務(wù)在線能力比較完善，但其組織架構(gòu)相對(duì)薄弱，數(shù)字化現(xiàn)狀以及中臺(tái)戰(zhàn)略不是特別清晰，則推薦先行建設(shè)領(lǐng)域數(shù)據(jù)中臺(tái)。因?yàn)轭I(lǐng)域數(shù)據(jù)中臺(tái)的突出特點(diǎn)是快。

而全域數(shù)據(jù)中臺(tái)則適用于數(shù)字化戰(zhàn)略清晰，但業(yè)務(wù)部門還是在用傳統(tǒng)的BI分析來(lái)解決問(wèn)題，數(shù)據(jù)資產(chǎn)混亂且需要治理的企業(yè)。

6.1建設(shè)路徑一：雙中臺(tái)一體化雙中臺(tái)一體化是指同時(shí)建設(shè)業(yè)務(wù)中臺(tái)與數(shù)據(jù)中臺(tái)。以下以云徙科技雙中臺(tái)解決方案為參考。

通過(guò)低代碼開發(fā)平臺(tái)提供的大數(shù)據(jù)開發(fā)、可視化算法開發(fā)、標(biāo)簽引擎等支撐業(yè)務(wù)開發(fā)與數(shù)據(jù)開發(fā)。使用開發(fā)平臺(tái)，建設(shè)模型層，包括洞察模型和智能模型，并將這些模型組裝成智能應(yīng)用，諸如會(huì)員健康診斷、黃金購(gòu)買、流失挽回、庫(kù)存健康診斷、智能補(bǔ)貨、銷量預(yù)測(cè)等。如此就可以在做營(yíng)銷自動(dòng)化時(shí)將精準(zhǔn)營(yíng)銷的數(shù)據(jù)能力嵌入進(jìn)去，從而真正把業(yè)務(wù)與數(shù)據(jù)融合在一起。

雙中臺(tái)一體化建設(shè)的特點(diǎn)是體系化，業(yè)務(wù)與數(shù)據(jù)是閉環(huán)的，但周期較長(zhǎng)。

6.2建設(shè)路徑二：領(lǐng)域數(shù)據(jù)中臺(tái)領(lǐng)域數(shù)據(jù)中臺(tái)的特點(diǎn)是有明確的領(lǐng)域業(yè)務(wù)導(dǎo)向。在此以營(yíng)銷領(lǐng)域?yàn)槔?，展示了消費(fèi)者數(shù)據(jù)平臺(tái)即CDP的功能藍(lán)圖。

左邊是數(shù)據(jù)源，只需收集與消費(fèi)者相關(guān)數(shù)據(jù)，而供應(yīng)鏈、財(cái)務(wù)等數(shù)據(jù)源都無(wú)需納入建設(shè)范圍，大大縮減數(shù)據(jù)治理的壓力。

數(shù)據(jù)處理過(guò)程則采用輕量和敏捷的方式，盡量簡(jiǎn)化模型的建設(shè)、簡(jiǎn)化模型的分層，簡(jiǎn)化處理過(guò)程的校驗(yàn)等。

而上層的應(yīng)用，則貼近消費(fèi)者運(yùn)營(yíng)業(yè)務(wù)的數(shù)據(jù)賦能，便于運(yùn)營(yíng)人員使用，通過(guò)API或推送的方式，與營(yíng)銷、客服、廣告投放等與消費(fèi)者相關(guān)的系統(tǒng)進(jìn)行連接。

以上就是領(lǐng)域數(shù)據(jù)中臺(tái)，以聚焦貼近業(yè)務(wù)、敏捷、短周期為特點(diǎn)。

6.3建設(shè)路徑三：全域數(shù)據(jù)中臺(tái)集約化的建設(shè)模式，這也是數(shù)據(jù)中臺(tái)一開始面世被大家所熟知和采用的建設(shè)路徑。

企業(yè)全域數(shù)據(jù)中臺(tái)的特點(diǎn)，就是數(shù)據(jù)全面資產(chǎn)化、進(jìn)行體系化的布局。

體系化，既需要有一整套機(jī)制來(lái)護(hù)航數(shù)據(jù)中臺(tái)的運(yùn)營(yíng)，比如保障已制定的規(guī)范的執(zhí)行落地，又需要體系化的工具，還需要體系化的思考，比如考慮多業(yè)務(wù)之間的交叉賦能共享等。因此其周期就較長(zhǎng)。

正由于周期較長(zhǎng)，所以很難一步到位。因此，企業(yè)可以設(shè)計(jì)分階段實(shí)施，比如第一階段打基礎(chǔ)，第二階段建模型、第三階段賦能業(yè)務(wù)。這就需要在企業(yè)內(nèi)部首先達(dá)成共識(shí)，才能保證系統(tǒng)建設(shè)的穩(wěn)步推進(jìn)。急功近利是建設(shè)不好企業(yè)全域的數(shù)據(jù)中臺(tái)的。

總結(jié)之，以上三種路徑，雖然各行其道，但無(wú)論是雙中臺(tái)一體化、領(lǐng)域數(shù)據(jù)中臺(tái)還是全域數(shù)據(jù)的治理化，都只不過(guò)是建設(shè)的范圍、先后的步驟不太一樣，但最終都需要與業(yè)務(wù)結(jié)合，為業(yè)務(wù)賦能，發(fā)揮數(shù)據(jù)的價(jià)值，是為推進(jìn)企業(yè)的數(shù)字化轉(zhuǎn)型服務(wù)的。

—07—數(shù)據(jù)中臺(tái)構(gòu)建5步法

系統(tǒng)都是為應(yīng)用而生的，數(shù)據(jù)中臺(tái)也不例外。要構(gòu)建一套數(shù)據(jù)中臺(tái)服務(wù)于企業(yè)內(nèi)部和外部運(yùn)營(yíng)，需要有成熟的數(shù)據(jù)中臺(tái)建設(shè)方法論作為指導(dǎo)。企業(yè)建設(shè)數(shù)據(jù)中臺(tái)遵循的方法論就像菜譜，初學(xué)者根據(jù)菜譜按部就班就可以輕松完成一道道菜肴，高階玩家根據(jù)菜譜可以查漏補(bǔ)缺，使廚藝精進(jìn)。

數(shù)據(jù)中臺(tái)建設(shè)方法論可分為高階規(guī)劃、系統(tǒng)設(shè)計(jì)、開發(fā)實(shí)施、試運(yùn)行和持續(xù)運(yùn)營(yíng)5個(gè)階段。

7.1高階規(guī)劃數(shù)據(jù)中臺(tái)規(guī)劃階段可細(xì)分為業(yè)務(wù)架構(gòu)師主導(dǎo)的業(yè)務(wù)規(guī)劃和數(shù)據(jù)架構(gòu)師主導(dǎo)的數(shù)據(jù)規(guī)劃。

這兩部分內(nèi)容是相輔相成的，由業(yè)務(wù)規(guī)劃進(jìn)行業(yè)務(wù)輸入，由技術(shù)規(guī)劃對(duì)數(shù)據(jù)現(xiàn)狀進(jìn)行探查，判斷業(yè)務(wù)規(guī)劃藍(lán)圖的可行性，最終形成可行的藍(lán)圖規(guī)劃與應(yīng)用設(shè)計(jì)。

7.2系統(tǒng)設(shè)計(jì)

①總體設(shè)計(jì)第一階段的規(guī)劃工作完成后，進(jìn)入總體的架構(gòu)設(shè)計(jì)階段。

②數(shù)據(jù)設(shè)計(jì)數(shù)據(jù)設(shè)計(jì)包括數(shù)據(jù)集成、模型設(shè)計(jì)和服務(wù)詳設(shè)。

③平臺(tái)設(shè)計(jì)平臺(tái)設(shè)計(jì)指的是大數(shù)據(jù)運(yùn)行平臺(tái)在資源規(guī)劃、技術(shù)選型、部署方案等方面的設(shè)計(jì)，是根據(jù)總體架構(gòu)中的平臺(tái)架構(gòu)展開的。平臺(tái)能力具有通用性、擴(kuò)展性和前瞻性是數(shù)據(jù)中臺(tái)成功建設(shè)的基礎(chǔ)。

平臺(tái)設(shè)計(jì)階段將以客戶現(xiàn)有數(shù)據(jù)體量及可預(yù)測(cè)的業(yè)務(wù)增長(zhǎng)情況作為考量因素，對(duì)平臺(tái)建設(shè)所需的資源進(jìn)行預(yù)估和規(guī)劃，產(chǎn)出平臺(tái)及數(shù)據(jù)應(yīng)用部署所需的資源清單、部署方案及相關(guān)人員在平臺(tái)上的賬號(hào)和權(quán)限的設(shè)計(jì)等。

7.3開發(fā)實(shí)施開發(fā)實(shí)施階段可分為環(huán)境搭建、數(shù)據(jù)集成、代碼研發(fā)三個(gè)層面。

①環(huán)境搭建平臺(tái)層面的環(huán)境搭建，包括大數(shù)據(jù)集群、數(shù)據(jù)研發(fā)平臺(tái)、智能數(shù)據(jù)應(yīng)用產(chǎn)品等相關(guān)工具的部署。

平臺(tái)的搭建按設(shè)計(jì)階段輸出的資源規(guī)劃和平臺(tái)部署方案實(shí)施即可。在平臺(tái)環(huán)境、工具組件部署后，需要對(duì)平臺(tái)環(huán)境進(jìn)行測(cè)試，同時(shí)在產(chǎn)品工具層面，需要對(duì)企業(yè)進(jìn)行相關(guān)產(chǎn)品的使用培訓(xùn)，并通過(guò)企業(yè)的驗(yàn)收。

②數(shù)據(jù)集成

數(shù)據(jù)集成方案從宏觀上設(shè)計(jì)和規(guī)范了數(shù)據(jù)源級(jí)別的數(shù)據(jù)集成流程和同步策略。在當(dāng)前階段，需要對(duì)各數(shù)據(jù)源制定表級(jí)別的集成策略，形成數(shù)據(jù)同步清單，包括上云數(shù)據(jù)存量、日增量、分區(qū)字段、數(shù)據(jù)更新頻率、存儲(chǔ)周期、上云時(shí)間等相關(guān)信息，供具體實(shí)施時(shí)使用。數(shù)據(jù)集成工作實(shí)施后，還需要逐一對(duì)數(shù)據(jù)源表進(jìn)行數(shù)據(jù)監(jiān)控及驗(yàn)證，以確保集成的數(shù)據(jù)無(wú)問(wèn)題。

③代碼研發(fā)代碼研發(fā)階段包括數(shù)據(jù)研發(fā)與驗(yàn)證、應(yīng)用研發(fā)與測(cè)試、性能測(cè)試三部分。

數(shù)據(jù)研發(fā)與驗(yàn)證主要包括數(shù)據(jù)模型的業(yè)務(wù)代碼開發(fā)、數(shù)據(jù)監(jiān)控代碼開發(fā)、數(shù)據(jù)準(zhǔn)確性驗(yàn)證。

從模型數(shù)據(jù)開發(fā)、數(shù)據(jù)監(jiān)控開發(fā)到數(shù)據(jù)驗(yàn)證，再到模型上線，需要一整套開發(fā)流程來(lái)保障數(shù)據(jù)的產(chǎn)出。應(yīng)用研發(fā)與測(cè)試主要包括數(shù)據(jù)應(yīng)用層面的開發(fā)和測(cè)試工作，如數(shù)據(jù)服務(wù)、數(shù)據(jù)應(yīng)用前端開發(fā)。性能測(cè)試包括數(shù)據(jù)產(chǎn)出時(shí)間、數(shù)據(jù)接口服務(wù)性能、數(shù)據(jù)應(yīng)用訪問(wèn)性能等方面的測(cè)試。

7.4試運(yùn)行數(shù)據(jù)中臺(tái)上線之后，分析專題的指標(biāo)口徑、數(shù)據(jù)應(yīng)用效果等多方面的數(shù)據(jù)準(zhǔn)確性都需要通過(guò)真實(shí)的運(yùn)行數(shù)據(jù)去驗(yàn)證。

①中臺(tái)試運(yùn)行為保障生產(chǎn)環(huán)境數(shù)