數(shù)字化轉(zhuǎn)型中的大數(shù)據(jù)治理架構(gòu)

11數(shù)字化時代大數(shù)據(jù)向服務(wù)化發(fā)展22大數(shù)據(jù)治理架構(gòu)與關(guān)鍵技術(shù)分析虛擬時空交易與現(xiàn)實時空交付的數(shù)字化時代突破狹義虧聯(lián)網(wǎng)的限制，訃識虛擬與現(xiàn)實的本質(zhì)：信息虧通手機銀行、移勱支付虛擬時空&現(xiàn)實時空消費金融、工業(yè)4.0人、物、商業(yè)數(shù)字化連接的商業(yè)模式發(fā)展趨勢：未來的企業(yè)必將成為數(shù)字化企業(yè)消費者的生活方式日益數(shù)字化。人們可以在仸何時間、仸何地點利用線上、線下渠道體驗無縫購物，運用社交媒體表達自我，而一旦發(fā)現(xiàn)供應(yīng)商的服務(wù)欠佳，也比以往更迫切地更換服務(wù)商企業(yè)也希望綜合運用多種技術(shù)支持，將已有能力向社會開放，改善客戶聯(lián)系，在創(chuàng)造社會價值的同時實現(xiàn)企業(yè)價值紅領(lǐng)集團通過業(yè)務(wù)創(chuàng)新實現(xiàn)由客戶需求直接驅(qū)勱工廠的運作模式紅領(lǐng)集團通過業(yè)務(wù)創(chuàng)新實現(xiàn)由客戶需求直接驅(qū)勱工廠的運作模式蘇州工業(yè)園區(qū)政務(wù)信息共享蘇州工業(yè)園區(qū)在信息化發(fā)展規(guī)劃中提出了“三庫、三通、九樞紐”的信息化總?cè)ň艠屑~三通九樞紐三庫接入園區(qū)31個部門、涉及85個業(yè)務(wù)領(lǐng)域，335個數(shù)據(jù)分類，先后完成了公安、工商等15家人口、法人信息高關(guān)聯(lián)度局辦…健康樞紐交通樞紐社保樞紐教育樞紐社…健康樞紐交通樞紐社保樞紐教育樞紐社區(qū)樞紐公安樞紐人口基礎(chǔ)庫企業(yè)基礎(chǔ)庫人口基礎(chǔ)庫企業(yè)基礎(chǔ)庫趨勢：CDO辦公室成為數(shù)字化企業(yè)的標準崗位根據(jù)大數(shù)據(jù)咨詢公司NewVantagePartners近期發(fā)布的調(diào)查報告，在接受調(diào)查的企業(yè)中，2012年僅有12%仸命了首席數(shù)據(jù)官，而2016年這一比例上升到54%2008-2009年世界金融危機，第一位CDO誕生趨勢：數(shù)字化企業(yè)的數(shù)據(jù)中心向大數(shù)據(jù)服務(wù)轉(zhuǎn)型對內(nèi)應(yīng)用對內(nèi)應(yīng)用對內(nèi)應(yīng)用對內(nèi)應(yīng)用數(shù)據(jù)中心數(shù)據(jù)采集數(shù)據(jù)中心從成本中心轉(zhuǎn)變?yōu)槔麧欀行模蛲獠刻峁┓?wù)數(shù)據(jù)中心由數(shù)據(jù)管理轉(zhuǎn)變?yōu)閿?shù)據(jù)服務(wù)，為業(yè)務(wù)創(chuàng)新服務(wù)對內(nèi)應(yīng)用對內(nèi)應(yīng)用對內(nèi)應(yīng)用對內(nèi)應(yīng)用數(shù)據(jù)中心數(shù)據(jù)采集對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品對外產(chǎn)品大數(shù)據(jù)服務(wù)大數(shù)據(jù)服務(wù)研發(fā)團隊趨勢：大數(shù)據(jù)平臺由功能化平臺向服務(wù)化平臺轉(zhuǎn)型面向分析業(yè)務(wù)大數(shù)據(jù)經(jīng)營決策風險控制生產(chǎn)預測為全業(yè)務(wù)域業(yè)務(wù)創(chuàng)新需求提供服務(wù)網(wǎng)絡(luò)數(shù)據(jù)通信數(shù)據(jù)信用數(shù)據(jù)客戶數(shù)據(jù)交易服務(wù)交易運營運營生產(chǎn)生產(chǎn)大數(shù)據(jù)交易服務(wù)交易運營運營生產(chǎn)生產(chǎn)數(shù)據(jù)開發(fā)數(shù)據(jù)發(fā)布分析分析分析分析傳感器數(shù)據(jù)社交媒體IT/OT圖像視頻大數(shù)據(jù)治理是大數(shù)據(jù)平臺服務(wù)化的關(guān)鍵交易運營財務(wù)人力 網(wǎng)絡(luò)數(shù)據(jù)通信數(shù)據(jù)信用數(shù)據(jù)客戶數(shù)據(jù)大數(shù)據(jù)數(shù)據(jù)開發(fā)數(shù)據(jù)發(fā)布大數(shù)據(jù)數(shù)據(jù)開發(fā)數(shù)據(jù)發(fā)布傳感器數(shù)據(jù)社交媒體IT/OT圖像視頻交易運營生產(chǎn)分析交易運營生產(chǎn)分析傳統(tǒng)數(shù)據(jù)治理難以解決大數(shù)據(jù)平臺的問題傳統(tǒng)數(shù)據(jù)治理存在組織架構(gòu)復雜、管理范圍狹窄、管理流程復雜、人工錄入多等弊端狹窄的管理范圍龐大的組織架構(gòu)狹窄的管理范圍龐大的組織架構(gòu)復雜的管理流程待修改數(shù)據(jù)標準信息項初審包含標準項主題標準名稱英文名主管業(yè)務(wù)部門述號表單詳見1.12.5.2上傳附件復雜的管理流程待修改數(shù)據(jù)標準信息項初審包含標準項主題標準名稱英文名主管業(yè)務(wù)部門述號表單詳見1.12.5.2上傳附件通過初審退回申請人大量的錄入工作信息項英文名主管業(yè)務(wù)關(guān)聯(lián)代碼項(選擇代標準編號關(guān)聯(lián)系統(tǒng)R讀U更表單詳見下表修改標準代碼用自勱化，自劣化，智能化的大數(shù)據(jù)治理找到數(shù)據(jù)，提供數(shù)據(jù)，使用數(shù)據(jù)，治理數(shù)據(jù)拿11數(shù)字化時代大數(shù)據(jù)向服務(wù)化發(fā)展2大數(shù)據(jù)治理架構(gòu)與關(guān)鍵技術(shù)分析缺乏服務(wù)化缺乏服務(wù)化管理維度業(yè)務(wù)維度數(shù)據(jù)難使用數(shù)據(jù)難使用數(shù)據(jù)難查找數(shù)據(jù)難查找敏感數(shù)據(jù)易泄露敏感數(shù)據(jù)易泄露數(shù)據(jù)質(zhì)量難提升數(shù)據(jù)工具鏈復雜數(shù)據(jù)質(zhì)量難提升數(shù)據(jù)工具鏈復雜技術(shù)維度大數(shù)據(jù)治理管理/業(yè)務(wù)/技術(shù)的大數(shù)據(jù)治理全面提升創(chuàng)新能力大數(shù)據(jù)治理管理提升管理提升業(yè)務(wù)支撐業(yè)務(wù)支撐技術(shù)平臺技術(shù)平臺大數(shù)據(jù)治理：重新定位數(shù)據(jù)管理部門提供數(shù)據(jù)服務(wù)數(shù)據(jù)管理提供數(shù)據(jù)服務(wù)數(shù)據(jù)管理數(shù)據(jù)開發(fā)數(shù)據(jù)應(yīng)用全棧能力團隊大數(shù)據(jù)治理：提供全面的業(yè)務(wù)創(chuàng)新能力創(chuàng)新數(shù)據(jù)管理傳統(tǒng)數(shù)據(jù)管理創(chuàng)新數(shù)據(jù)管理數(shù)據(jù)部門數(shù)據(jù)部門+畫數(shù)據(jù)應(yīng)用能力+畫數(shù)據(jù)應(yīng)用能力數(shù)據(jù)通道分析應(yīng)用1分析應(yīng)用2分析應(yīng)用n大數(shù)據(jù)治理：提供智能化自勱化的技術(shù)平臺大數(shù)據(jù)治理全自劣的數(shù)智能化的數(shù)取大數(shù)據(jù)治理的十二個技術(shù)原則持續(xù)積累檢核規(guī)則17可視化管理企業(yè)資產(chǎn)持續(xù)積累檢核規(guī)則17可視化管理企業(yè)資產(chǎn)自勱化質(zhì)量評分28自勱獲取數(shù)據(jù)信息自勱化質(zhì)量評分28自勱獲取數(shù)據(jù)信息管理核心數(shù)據(jù)定義39大數(shù)據(jù)服務(wù)智能化管理核心數(shù)據(jù)定義39大數(shù)據(jù)服務(wù)智能化為數(shù)據(jù)標準添加技術(shù)屬性4數(shù)據(jù)管理能力服務(wù)化為數(shù)據(jù)標準添加技術(shù)屬性4數(shù)據(jù)管理能力服務(wù)化識別與管理業(yè)務(wù)語義5從需求開始控制數(shù)據(jù)質(zhì)量識別與管理業(yè)務(wù)語義5從需求開始控制數(shù)據(jù)質(zhì)量關(guān)聯(lián)業(yè)務(wù)語義與技術(shù)6在集成點檢查數(shù)據(jù)質(zhì)量關(guān)聯(lián)業(yè)務(wù)語義與技術(shù)6在集成點檢查數(shù)據(jù)質(zhì)量企業(yè)數(shù)據(jù)資產(chǎn)企業(yè)數(shù)據(jù)資產(chǎn)對象、接口業(yè)務(wù)語義、業(yè)務(wù)服務(wù)表、字段Database/SparkDatabase/Spark大數(shù)據(jù)適配器數(shù)據(jù)庫適配器建模工具適配器可視化工具適配器腳本適配器從需求開始控制數(shù)據(jù)質(zhì)量分析集以元數(shù)據(jù)為核心，打通數(shù)據(jù)生命周期，從源頭保證數(shù)據(jù)質(zhì)量。分析集123123規(guī)范定義77客戶需求客戶需求產(chǎn)品需求大數(shù)據(jù)治理常規(guī)數(shù)據(jù)常規(guī)數(shù)據(jù)大數(shù)據(jù)大數(shù)據(jù)數(shù)據(jù)管理能力服務(wù)化提供各種數(shù)據(jù)管理服務(wù)，如質(zhì)量、元數(shù)據(jù)、標準、監(jiān)控、發(fā)布共享的服務(wù)，將治理平臺變?yōu)榉?wù)平臺。標準化服務(wù)幫劣設(shè)計應(yīng)用數(shù)據(jù)模標準化服務(wù)幫劣設(shè)計應(yīng)用數(shù)據(jù)模型質(zhì)量評分服務(wù)評估業(yè)務(wù)服務(wù)質(zhì)量資產(chǎn)地圖服務(wù)提供企業(yè)數(shù)據(jù)資產(chǎn)全景圖資產(chǎn)地圖服務(wù)提供企業(yè)數(shù)據(jù)資產(chǎn)全景圖提供影響/血統(tǒng)分析服務(wù)追溯全企業(yè)信息資產(chǎn)業(yè)務(wù)與技術(shù)關(guān)聯(lián)服務(wù)使業(yè)務(wù)人員自劣設(shè)計報表能力服務(wù)化元數(shù)據(jù)服務(wù)元數(shù)據(jù)服務(wù)數(shù)據(jù)質(zhì)量服務(wù)數(shù)據(jù)質(zhì)量服務(wù)數(shù)據(jù)標準服務(wù)數(shù)據(jù)標準服務(wù)數(shù)據(jù)開發(fā)服務(wù)數(shù)據(jù)開發(fā)服務(wù)數(shù)據(jù)監(jiān)控服務(wù)數(shù)據(jù)監(jiān)控服務(wù)數(shù)據(jù)發(fā)布共享服務(wù)數(shù)據(jù)發(fā)布共享服務(wù)數(shù)據(jù)管理平臺數(shù)據(jù)管理平臺11數(shù)字化時代大數(shù)據(jù)向服務(wù)化發(fā)展22大數(shù)據(jù)治理架構(gòu)與關(guān)鍵技術(shù)分析蘇州工業(yè)園區(qū)“三庫、三通、九樞紐”建設(shè)蘇州工業(yè)園區(qū)在信息化發(fā)展規(guī)劃中提出了“三庫、三通、九樞紐”的信息化總?cè)ň艠屑~三通九樞紐三庫接入園區(qū)31個部門、涉及85個業(yè)務(wù)領(lǐng)域，335個數(shù)據(jù)分類，先后完成了公安、工商等15家人口、法人信息高關(guān)聯(lián)度局辦…健康樞紐交通樞紐社保樞紐教育樞紐社…健康樞紐交通樞紐社保樞紐教育樞紐社區(qū)樞紐公安樞紐人口基礎(chǔ)庫企業(yè)基礎(chǔ)庫人口基礎(chǔ)庫企業(yè)基礎(chǔ)庫蘇州工業(yè)園區(qū)數(shù)據(jù)資源云平臺實現(xiàn)以元數(shù)據(jù)為基礎(chǔ)的政務(wù)于業(yè)務(wù)創(chuàng)新模式（資產(chǎn)、開發(fā)、運營、監(jiān)控）四中心一個技術(shù)支撐平臺，一個融合庫，全面實現(xiàn)蘇州工業(yè)園的數(shù)據(jù)資產(chǎn)資源化以元數(shù)據(jù)為基礎(chǔ)梳理將服務(wù)目錄編目幵與數(shù)據(jù)對接將下屬企/事業(yè)單位的數(shù)據(jù)能力接入政務(wù)浙江電力數(shù)據(jù)自劣化分析平臺普元提供的數(shù)據(jù)自劣分析平臺，讓阿里大數(shù)據(jù)平臺內(nèi)的數(shù)據(jù)業(yè)務(wù)化，成為數(shù)據(jù)存儲平臺與業(yè)務(wù)人員之間溝通的橋梁，讓業(yè)務(wù)人員可直接使用大數(shù)據(jù)平臺內(nèi)的數(shù)據(jù)。據(jù)的統(tǒng)一管理將業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)對應(yīng)劣業(yè)務(wù)用戶自自劣獲取數(shù)據(jù)數(shù)據(jù)自劣分析-提高浙江電力數(shù)據(jù)業(yè)務(wù)分析效力1.實現(xiàn)業(yè)務(wù)人員自劣分析提高效率據(jù)平臺制作報表的比例由原來的15張擴大到110張，2.建立全方位的業(yè)務(wù)應(yīng)用視圖統(tǒng)一標準通過余2000項業(yè)務(wù)數(shù)據(jù)項的梳理，建立數(shù)據(jù)視圖，規(guī)范數(shù)據(jù)資產(chǎn)管理體系。規(guī)范化業(yè)務(wù)數(shù)據(jù)標準，東方航空：業(yè)務(wù)數(shù)據(jù)地圖加速業(yè)務(wù)創(chuàng)新過程計劃、財務(wù)、資產(chǎn)、設(shè)備、維修、運價、銷售、通過對數(shù)據(jù)倉庫貼源層業(yè)務(wù)系統(tǒng)表的核查及分析，給出BPM業(yè)務(wù)活動監(jiān)控BPM業(yè)務(wù)活動監(jiān)控移動BPM通訊使能BPM社交BPMIntegrationAPI網(wǎng)關(guān)作業(yè)調(diào)度DatalhSparkRedis緩存HadoopWeb/MobileReactAPP移動應(yīng)用API應(yīng)用DataLake元數(shù)據(jù)數(shù)據(jù)質(zhì)量數(shù)據(jù)j開發(fā)DevOps產(chǎn)品管理服務(wù)框架服務(wù)配置服務(wù)路由