數(shù)據(jù)中臺(tái)及數(shù)據(jù)治理服務(wù)及案例分享（PPT）

數(shù)據(jù)中臺(tái)及數(shù)據(jù)治理服務(wù)及案例分享（PPT）整理制作：郎豐利1519制作時(shí)間：2023年睿利而行整理制作：郎豐利1519制作時(shí)間：2023年睿利而行整理制作：郎豐利1519制作時(shí)間：2023年睿利而行知識(shí)星球：優(yōu)享智庫(kù)一、數(shù)據(jù)治理服務(wù)二、案例分享目錄32數(shù)據(jù)需求清單數(shù)據(jù)責(zé)任清單數(shù)據(jù)標(biāo)準(zhǔn)元數(shù)據(jù)......公共數(shù)據(jù)資源附加屬性業(yè)務(wù)屬性數(shù)據(jù)倉(cāng)數(shù)據(jù)湖數(shù)據(jù)服務(wù)化用業(yè)務(wù)活動(dòng)全景圖邏輯實(shí)體屬性業(yè)務(wù)梳理、系統(tǒng)梳理概念模型制定質(zhì)量標(biāo)準(zhǔn)質(zhì)量改進(jìn)分析數(shù)據(jù)流向梳理邏輯模型質(zhì)量評(píng)估六大特性數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)數(shù)據(jù)模型治全域數(shù)據(jù)資產(chǎn)數(shù)據(jù)資產(chǎn)梳理業(yè)務(wù)流程業(yè)務(wù)活動(dòng) 數(shù)據(jù)治理及數(shù)據(jù)集設(shè)計(jì)的整體方法論盤(pán)職責(zé)目錄系統(tǒng)目錄數(shù)據(jù)目錄完整性有效性一致性獲取源系統(tǒng)數(shù)據(jù)字典獲取源系統(tǒng)數(shù)據(jù)資源擴(kuò)展屬性基礎(chǔ)屬性ID數(shù)據(jù)負(fù)面清單系統(tǒng)&數(shù)據(jù)業(yè)務(wù)對(duì)象識(shí)別

業(yè)務(wù)場(chǎng)景管理元數(shù)據(jù)業(yè)務(wù)元數(shù)據(jù)邏輯設(shè)計(jì)系統(tǒng)調(diào)研業(yè)務(wù)調(diào)研業(yè)務(wù)&數(shù)據(jù)集主數(shù)據(jù)擴(kuò)展唯一性準(zhǔn)確性及時(shí)性33...34?提升數(shù)據(jù)準(zhǔn)備度，為業(yè)務(wù)運(yùn)作提供可信的足量的數(shù)據(jù)支撐?實(shí)現(xiàn)業(yè)務(wù)上下游數(shù)據(jù)的快速傳遞共享，提升業(yè)務(wù)運(yùn)作效率?數(shù)據(jù)質(zhì)量的持續(xù)提升減少糾錯(cuò)成本，降低運(yùn)營(yíng)風(fēng)險(xiǎn)，提升業(yè)務(wù)服務(wù)滿(mǎn)意度數(shù)據(jù)集成與共享數(shù)據(jù)分布數(shù)據(jù)資產(chǎn)目錄架構(gòu)模型組織架構(gòu)數(shù)據(jù)模型規(guī)范數(shù)據(jù)模型設(shè)計(jì)實(shí)體、屬性識(shí)別數(shù)據(jù)模型管控?cái)?shù)據(jù)模型數(shù)據(jù)銷(xiāo)毀安全數(shù)據(jù)交換安全數(shù)據(jù)處理安全數(shù)據(jù)存儲(chǔ)安全數(shù)據(jù)傳輸安全數(shù)據(jù)采集安全數(shù)據(jù)安全數(shù)據(jù)落IT系統(tǒng)指標(biāo)數(shù)據(jù)數(shù)據(jù)字典發(fā)布業(yè)務(wù)對(duì)象識(shí)別數(shù)據(jù)標(biāo)準(zhǔn)制定數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量改進(jìn)數(shù)據(jù)質(zhì)量度量數(shù)據(jù)質(zhì)量控制數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量數(shù)據(jù)地圖血緣關(guān)系元數(shù)據(jù)元數(shù)據(jù)規(guī)范元數(shù)據(jù) 數(shù)據(jù)治理框架?有效的數(shù)據(jù)質(zhì)量控制?高效的數(shù)據(jù)共享?一致的數(shù)據(jù)標(biāo)準(zhǔn)?可信數(shù)據(jù)源數(shù)據(jù)治理組織/流程數(shù)據(jù)治理框架價(jià)值體現(xiàn)治理訴求優(yōu)化提升夯實(shí)基礎(chǔ)職責(zé)&業(yè)務(wù)活動(dòng)數(shù)據(jù)導(dǎo)向展開(kāi)(自下而上)組織架構(gòu)&規(guī)章制度標(biāo)準(zhǔn)規(guī)范業(yè)務(wù)系統(tǒng)(OLTP)增量部分落標(biāo)應(yīng)用場(chǎng)景導(dǎo)向展開(kāi)(自上而下)數(shù)據(jù)安全合規(guī)制度規(guī)范數(shù)據(jù)安全(數(shù)據(jù)分類(lèi)分級(jí))數(shù)據(jù)資產(chǎn)目錄&數(shù)據(jù)服務(wù)(數(shù)據(jù)運(yùn)營(yíng))數(shù)據(jù)標(biāo)準(zhǔn)核標(biāo)(管理看板)技術(shù)元數(shù)據(jù)數(shù)據(jù)質(zhì)量檢查(管理看板)業(yè)務(wù)模型數(shù)據(jù)資產(chǎn)盤(pán)點(diǎn)(元數(shù)據(jù)-數(shù)據(jù)標(biāo)準(zhǔn)關(guān)聯(lián))通過(guò)數(shù)據(jù)模型設(shè)計(jì)規(guī)范貫標(biāo)業(yè)務(wù)數(shù)據(jù)基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)模型賦能部門(mén)業(yè)務(wù) 數(shù)據(jù)治理路徑數(shù)據(jù)湖數(shù)據(jù)架構(gòu)(OLAP)主數(shù)據(jù)35 一體化數(shù)據(jù)架構(gòu)這一步是數(shù)據(jù)中臺(tái)核心工作內(nèi)容，其中業(yè)務(wù)模型、數(shù)據(jù)模型也是數(shù)據(jù)中臺(tái)建設(shè)的關(guān)鍵所在。數(shù)據(jù)資產(chǎn)(數(shù)據(jù)湖)數(shù)據(jù)標(biāo)準(zhǔn)業(yè)務(wù)模型 業(yè)務(wù)流程業(yè)務(wù)架構(gòu)數(shù)據(jù)責(zé)任數(shù)據(jù)安全入湖標(biāo)準(zhǔn)元數(shù)據(jù)數(shù)據(jù)模型數(shù)據(jù)資產(chǎn)目錄數(shù)據(jù)資產(chǎn)層標(biāo)準(zhǔn)層架構(gòu)層加工層36模型發(fā)布模型治理運(yùn)營(yíng)無(wú)人DDL腳本模型上線交付核標(biāo)與數(shù)據(jù)質(zhì)量元數(shù)據(jù)融合資產(chǎn)目錄維護(hù)數(shù)據(jù)權(quán)屬認(rèn)責(zé)信息分級(jí)分類(lèi)邏輯數(shù)據(jù)湖數(shù)據(jù)標(biāo)準(zhǔn)落標(biāo)模型設(shè)計(jì)數(shù)據(jù)湖實(shí)時(shí)入湖批量入湖元數(shù)據(jù)管理部門(mén)業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù) TP&AP一體化建模體系技術(shù)元數(shù)據(jù)采集數(shù)據(jù)標(biāo)準(zhǔn)落標(biāo)率模型審計(jì)定時(shí)/自動(dòng)采集應(yīng)用&數(shù)據(jù)交付一體化數(shù)據(jù)資產(chǎn)數(shù)據(jù)湖4、連接&萃取自動(dòng)發(fā)布邏輯實(shí)體、屬性定時(shí)/自動(dòng)采集5、應(yīng)用開(kāi)發(fā)1、部門(mén)數(shù)倉(cāng)3、數(shù)據(jù)建模2、數(shù)據(jù)同步6、數(shù)據(jù)校驗(yàn)數(shù)據(jù)模型管理湖側(cè)元數(shù)據(jù)模型驗(yàn)證自助入湖37需求分析運(yùn)行維護(hù)系統(tǒng)測(cè)試 開(kāi)發(fā)階段的數(shù)據(jù)模型標(biāo)準(zhǔn)化數(shù)據(jù)模型設(shè)計(jì)是開(kāi)發(fā)過(guò)程的重要一環(huán)，影響程序架構(gòu)，內(nèi)外部API，會(huì)影響業(yè)務(wù)邏輯，以至分布式組件架構(gòu)。詳細(xì)設(shè)計(jì)業(yè)務(wù)概念模型邏輯模塊領(lǐng)域類(lèi)圖物理模型實(shí)現(xiàn)類(lèi)圖模型基線數(shù)據(jù)庫(kù)差異數(shù)據(jù)字典物理模型基線封版上線概要設(shè)計(jì)上線交付數(shù)據(jù)庫(kù)具體實(shí)現(xiàn)Hibemate/JPA澄清業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)流程功能模塊設(shè)計(jì)主要數(shù)據(jù)屬性數(shù)據(jù)模型封板交付編碼開(kāi)發(fā)數(shù)據(jù)庫(kù)監(jiān)測(cè) 項(xiàng)目成效由數(shù)據(jù)資產(chǎn)系統(tǒng)建立數(shù)據(jù)模型管理，實(shí)現(xiàn)數(shù)據(jù)模型事前-事中--事后的管理通過(guò)統(tǒng)一模型工具以及在數(shù)據(jù)資產(chǎn)管理平臺(tái)簡(jiǎn)歷數(shù)據(jù)模型管理功能，實(shí)現(xiàn)數(shù)據(jù)模型事前-事中-事后的管理。并且實(shí)現(xiàn)了數(shù)據(jù)資產(chǎn)管理的閉環(huán)。元數(shù)據(jù)完整性檢查其他(模型瀏覽、探索等)數(shù)據(jù)資產(chǎn)的閉環(huán)，通過(guò)模型關(guān)聯(lián)元數(shù)據(jù)和標(biāo)準(zhǔn)，為數(shù)據(jù)標(biāo)準(zhǔn)落地打下基礎(chǔ)設(shè)計(jì)模型模型檢查與監(jiān)控模型審核一致性對(duì)比架構(gòu)師等人員審核模型完整性檢查數(shù)據(jù)模型數(shù)據(jù)標(biāo)準(zhǔn)元數(shù)據(jù)事前事中事后39模型工具自動(dòng)審核提供核準(zhǔn)通過(guò)證書(shū)確定標(biāo)注主題邏輯模型參考模型工具自動(dòng)監(jiān)測(cè)差異發(fā)送差異報(bào)告模型庫(kù)提供模型落標(biāo)報(bào)告審核重點(diǎn)標(biāo)準(zhǔn)使用問(wèn)題通過(guò)模型工具自動(dòng)落標(biāo)初期提供落標(biāo)指導(dǎo)人員設(shè)計(jì)上線維護(hù)開(kāi)發(fā)測(cè)試定位核準(zhǔn)監(jiān)測(cè)落標(biāo)評(píng)審 自動(dòng)化和落標(biāo)流程基礎(chǔ)知識(shí)儲(chǔ)備培訓(xùn)/架構(gòu)/工具自動(dòng)檢測(cè)發(fā)送報(bào)告標(biāo)準(zhǔn)落標(biāo)過(guò)程管理實(shí)時(shí)推薦人工服務(wù)自動(dòng)檢測(cè)智能核準(zhǔn)工具輔助人工審核開(kāi)發(fā)過(guò)程管理數(shù)據(jù)標(biāo)準(zhǔn)管理模型設(shè)計(jì)模型審核元數(shù)據(jù)管理數(shù)據(jù)標(biāo)準(zhǔn)管理員項(xiàng)目組模型設(shè)計(jì)員模型架構(gòu)師元數(shù)據(jù)管理員NYYNNY是否提供模型反饋意見(jiàn)N是否通過(guò)模型評(píng)審N是否與基線模型一致？Y線模型 數(shù)據(jù)模型管控流程修改模型并提交模型評(píng)審引用數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)庫(kù)上線采集元數(shù)據(jù)發(fā)布模型報(bào)告使用建模工具進(jìn)行模型設(shè)計(jì)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)標(biāo)準(zhǔn)審核發(fā)布郵件通知相關(guān)負(fù)責(zé)人自定義數(shù)據(jù)標(biāo)準(zhǔn)是否有可引用的數(shù)據(jù)標(biāo)準(zhǔn)？數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)？發(fā)布基Y?不建議在沒(méi)有業(yè)務(wù)需求時(shí)，強(qiáng)制按標(biāo)準(zhǔn)進(jìn)行系統(tǒng)改造?配合已有的系統(tǒng)改造計(jì)劃，將數(shù)據(jù)標(biāo)準(zhǔn)要求作為需求執(zhí)行?可考慮在不同系統(tǒng)交互時(shí)，完成標(biāo)準(zhǔn)轉(zhuǎn)換?不強(qiáng)制執(zhí)行?可作為外購(gòu)產(chǎn)品的評(píng)估指標(biāo)?可考慮在不同系統(tǒng)交互時(shí)，完成標(biāo)準(zhǔn)轉(zhuǎn)換?在業(yè)務(wù)系統(tǒng)建設(shè)時(shí)，執(zhí)行適用的數(shù)據(jù)標(biāo)準(zhǔn)?新建系統(tǒng)的代碼應(yīng)遵照數(shù)據(jù)標(biāo)準(zhǔn)項(xiàng)的代碼 不同類(lèi)型系統(tǒng)的落標(biāo)策略新建系統(tǒng)現(xiàn)有系統(tǒng)外購(gòu)系統(tǒng)42內(nèi)部數(shù)據(jù)重要數(shù)據(jù)核心數(shù)據(jù)涉密數(shù)據(jù)內(nèi)部公文、業(yè)務(wù)數(shù)據(jù)、組織架構(gòu)等企業(yè)經(jīng)營(yíng)數(shù)據(jù)、個(gè)人信息等極大商業(yè)價(jià)值數(shù)據(jù)、核心商業(yè)、敏感信息等國(guó)際有關(guān)保密規(guī)定、涉及國(guó)家安全秘密、機(jī)密數(shù)據(jù)、特殊用途研發(fā)數(shù)據(jù)等《數(shù)據(jù)安全法》《網(wǎng)絡(luò)安全法》《中央企業(yè)商業(yè)秘密安全保護(hù)技術(shù)指引》《個(gè)人信息保護(hù)(草案)》《個(gè)人信息安全規(guī)范等》基礎(chǔ)風(fēng)險(xiǎn)排查數(shù)據(jù)庫(kù)的漏洞情況，補(bǔ)丁情況，安全配置情況，是否存在諸如弱口令，缺醒口令，高危代碼等認(rèn)為造成的使用缺陷統(tǒng)計(jì)分析，可視化展現(xiàn)賬號(hào)檢查梳理檢查已有的數(shù)據(jù)權(quán)限情況，尤其是高危操作的權(quán)限，特權(quán)賬號(hào)的權(quán)限，運(yùn)維人員的權(quán)限，以及43在用的管控措施結(jié)合法規(guī)要求，優(yōu)化數(shù)據(jù)分類(lèi)分級(jí)標(biāo)準(zhǔn)，聯(lián)合數(shù)據(jù)治理團(tuán)隊(duì)，提供數(shù)據(jù)分類(lèi)分級(jí)方法，識(shí)別最重要的數(shù)據(jù)，形成數(shù)據(jù)分類(lèi)分級(jí)標(biāo)準(zhǔn)參考目錄，同時(shí)識(shí)別重要數(shù)據(jù)資產(chǎn)安全風(fēng)險(xiǎn)隱患公開(kāi)數(shù)據(jù)

公開(kāi)發(fā)布的財(cái)務(wù)報(bào)表、業(yè)務(wù)通告和政策等數(shù)據(jù)資產(chǎn)排查數(shù)據(jù)分級(jí)規(guī)則 數(shù)據(jù)安全分類(lèi)分級(jí)盤(pán)點(diǎn)數(shù)據(jù)資產(chǎn)梳理訪問(wèn)狀況源，不同使用場(chǎng)景等條件進(jìn)行數(shù)據(jù)資產(chǎn)使用情況的形成資產(chǎn)地圖，包括數(shù)據(jù)庫(kù)，表的詳情和數(shù)量按不同時(shí)間段，不同訪問(wèn)盤(pán)點(diǎn)數(shù)據(jù)資產(chǎn)分布情況，依據(jù)參考 數(shù)據(jù)安全架構(gòu)和授權(quán)體系數(shù)據(jù)安全三維框架：人—數(shù)—安全框架數(shù)據(jù)自動(dòng)授權(quán)體系：建自動(dòng)訪問(wèn)體系和白名單相結(jié)合44OLAP數(shù)據(jù)資產(chǎn)和安全管理安全定密盤(pán)點(diǎn)分類(lèi)數(shù)據(jù)標(biāo)準(zhǔn)治理敏感數(shù)據(jù)識(shí)別脫敏數(shù)據(jù)流脫敏函數(shù)脫敏規(guī)則訪問(wèn)策略數(shù)據(jù)安全框架數(shù)據(jù)安全分級(jí)數(shù)據(jù)安全分類(lèi)數(shù)據(jù)安全管理制度組織機(jī)構(gòu)組織人員訪問(wèn)等級(jí)數(shù)據(jù)安全共享制度數(shù)據(jù)安全訪問(wèn)引擎數(shù)據(jù)安全應(yīng)用血緣關(guān)系治理靜態(tài)脫敏工具數(shù)據(jù)治理數(shù)據(jù)服務(wù)API數(shù)據(jù)資產(chǎn)目錄數(shù)據(jù)資產(chǎn)訪問(wèn)控制動(dòng)態(tài)脫敏數(shù)據(jù)庫(kù)即時(shí)查詢(xún)資產(chǎn)盤(pán)點(diǎn)白名單OLTP 數(shù)據(jù)安全網(wǎng)關(guān)數(shù)據(jù)分類(lèi)分級(jí)驅(qū)動(dòng)的數(shù)據(jù)資產(chǎn)安全管控姓名電話地區(qū)張三1512****0325北京李四1432****0452上海王五1222****1325北京姓名電話地區(qū)張三1512****0325北京李四1432****0452上海王五1222****1325北京效能監(jiān)控安全審計(jì)分類(lèi)分級(jí)訪問(wèn)統(tǒng)一數(shù)據(jù)查詢(xún)SQLBI安全訪問(wèn)JDBC風(fēng)險(xiǎn)識(shí)別數(shù)據(jù)資產(chǎn)分類(lèi)登記MYSQLOracelHive業(yè)務(wù)應(yīng)用級(jí)用戶(hù)UserA業(yè)務(wù)應(yīng)用級(jí)用戶(hù)UserB User數(shù)據(jù)安全網(wǎng)關(guān) Data安全防控45一、數(shù)據(jù)治理服務(wù)二、案例分享目錄46數(shù)據(jù)中臺(tái)-->支撐基礎(chǔ)庫(kù)的建設(shè)-->賦能數(shù)字政府轉(zhuǎn)型47業(yè)務(wù)信息數(shù)據(jù)公安口出生、死亡及戶(hù)籍登記基本信息人社口社會(huì)五險(xiǎn)參保等信息稅務(wù)口民政口 地理實(shí)體數(shù)據(jù) 影像數(shù)據(jù) 高程數(shù)據(jù)基礎(chǔ)庫(kù)管理應(yīng)用人口庫(kù)應(yīng)用人口概況、人口查詢(xún)、人口統(tǒng)計(jì)、人口畫(huà)像、周期管理、模板管理、字段映射、執(zhí)行策略、入庫(kù)管理、異常告警、標(biāo)簽管理、標(biāo)簽映射和關(guān)系、圖形化分析……法人庫(kù)應(yīng)用法人概況、法人查詢(xún)、法人統(tǒng)計(jì)、法人畫(huà)像、周期管理、模板管理、字段映射、執(zhí)行策略、入庫(kù)管理、異常告警、標(biāo)簽管理、標(biāo)簽映射和關(guān)系、圖形化分析……空間地理應(yīng)用地圖服務(wù)、影像服務(wù)、地名地址服務(wù)、三維服務(wù)與坐標(biāo)轉(zhuǎn)換等功能服務(wù)……基礎(chǔ)數(shù)據(jù)庫(kù)人口庫(kù)法人庫(kù)空間地理庫(kù)數(shù)據(jù)抽取/數(shù)據(jù)交換 電子地圖數(shù)據(jù) 地名地址數(shù)據(jù) 三維數(shù)據(jù) 基礎(chǔ)庫(kù)建設(shè)民政口婚姻關(guān)系雙方信息衛(wèi)計(jì)口孕產(chǎn)婦及家屬信息建模建模元數(shù)據(jù)管理建模元數(shù)據(jù)管理元數(shù)據(jù)管理空間地理數(shù)據(jù)法人數(shù)據(jù)人口數(shù)據(jù)質(zhì)監(jiān)口工商口48一、數(shù)據(jù)治理服務(wù)二、案例分享三、總結(jié)目錄49遵循“橫向規(guī)劃，縱向切入”建設(shè)模式?全局規(guī)劃、全盤(pán)考慮，打通各部門(mén)所有權(quán)責(zé)覆蓋的業(yè)務(wù)活動(dòng)?數(shù)據(jù)中臺(tái)建設(shè)不可能一蹴而就，需要從應(yīng)用場(chǎng)景出發(fā)梳理數(shù)據(jù)需求堅(jiān)持“應(yīng)用場(chǎng)景需求牽引，咨詢(xún)、軟件、平臺(tái)、服務(wù)四位一體推進(jìn)”原則?按需搭建平臺(tái)?基于平臺(tái)敏捷實(shí)