




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
「讀書筆記」華為公司數(shù)據(jù)治理、數(shù)字化轉(zhuǎn)型方面實(shí)踐經(jīng)驗(yàn)總結(jié)華為數(shù)據(jù)之道P2《華為數(shù)據(jù)之道》-華為數(shù)字化轉(zhuǎn)型藍(lán)圖客戶員工合作伙伴供應(yīng)商消費(fèi)者在線體驗(yàn)聯(lián)合網(wǎng)規(guī)在線交易在線支付開發(fā)者社區(qū)合作伙伴面向市場(chǎng)創(chuàng)新的主業(yè)務(wù)流面向客戶的主業(yè)務(wù)流營銷平臺(tái)銷售平臺(tái)交付平臺(tái)運(yùn)維平臺(tái)渠道平臺(tái)創(chuàng)新與產(chǎn)品開發(fā)平臺(tái)創(chuàng)新管理產(chǎn)品組合管理洞察管理研發(fā)管理產(chǎn)品規(guī)劃產(chǎn)品發(fā)布/上市需求管理開源生態(tài)研發(fā)營銷策略規(guī)劃項(xiàng)目解決方案營銷活動(dòng)管理合同管理客戶關(guān)系管理商法管理營銷項(xiàng)目管理資源管理售后網(wǎng)規(guī)網(wǎng)設(shè)網(wǎng)絡(luò)部署集成合作伙伴管理服務(wù)服務(wù)請(qǐng)求管理備件管理客戶投訴處理運(yùn)維渠道銷售管理伙伴系統(tǒng)管理渠道S-NPI制造計(jì)劃倉促及物流訂單履行管理供應(yīng)運(yùn)作供應(yīng)采購財(cái)經(jīng)人力資源知識(shí)管理、Huawei
Works、資源管理數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)底座產(chǎn)品客戶供應(yīng)資源員工計(jì)算服務(wù)存儲(chǔ)服務(wù)網(wǎng)絡(luò)服務(wù)開發(fā)服務(wù)集成服務(wù)中間件服務(wù)安全服務(wù)IT平臺(tái)數(shù)據(jù)服務(wù)數(shù)字化運(yùn)營B
UM
UF
U分析平臺(tái)數(shù)據(jù)平臺(tái)(EDW)數(shù)據(jù)湖等支持客戶Engage作戰(zhàn)平臺(tái)、支撐團(tuán)隊(duì)作戰(zhàn)各領(lǐng)域開展數(shù)字化轉(zhuǎn)型,提供能力數(shù)字資產(chǎn)管理及數(shù)字化運(yùn)營強(qiáng)大的IT平臺(tái)支撐《華為數(shù)據(jù)之道》-華為數(shù)據(jù)治理愿景和目標(biāo)P3愿景:實(shí)現(xiàn)業(yè)務(wù)感知、互聯(lián)、智能和ROADS體驗(yàn),支撐公司數(shù)字化轉(zhuǎn)型目標(biāo):清潔、透明、智慧數(shù)據(jù),使能卓越運(yùn)營和有效增長業(yè)務(wù)對(duì)象、規(guī)則、過程數(shù)字化數(shù)據(jù)聯(lián)接數(shù)據(jù)實(shí)時(shí)可視數(shù)據(jù)透明數(shù)據(jù)清潔數(shù)據(jù)采集/處理智能化數(shù)據(jù)管理由企業(yè)擴(kuò)展到生態(tài)數(shù)據(jù)敏捷自助數(shù)據(jù)安全(隱私、授權(quán)、權(quán)限等)數(shù)據(jù)合規(guī)算法模型(AI)《華為數(shù)據(jù)之道》-華為數(shù)據(jù)治理體系框架P4主數(shù)據(jù)管理平臺(tái)維度數(shù)據(jù)管理平臺(tái)元數(shù)據(jù)管理平臺(tái)數(shù)據(jù)質(zhì)量管理工具公司數(shù)據(jù)Owner數(shù)據(jù)管理部信息架構(gòu)專家組組織IT管理信息架構(gòu)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)分析流程戰(zhàn)略到執(zhí)行信息價(jià)值鏈數(shù)據(jù)質(zhì)量管理數(shù)據(jù)架構(gòu)標(biāo)準(zhǔn)基于業(yè)務(wù)流的信息價(jià)值鏈綜合治理(數(shù)據(jù)、流程、IT):縱橫打通+數(shù)據(jù)清潔業(yè)務(wù)交易到核算信息價(jià)值鏈產(chǎn)品創(chuàng)意到生命周期管理信息價(jià)值鏈存量管理到問題解決信息價(jià)值鏈主數(shù)據(jù)在線交易打通維度數(shù)據(jù)在報(bào)告打通信息架構(gòu)管理政策數(shù)據(jù)質(zhì)量管理政策數(shù)據(jù)資源管理政策政策指引公司數(shù)據(jù)管理總綱數(shù)據(jù)是企業(yè)的戰(zhàn)略資產(chǎn)《華為數(shù)據(jù)之道》-華為數(shù)據(jù)底座整體架構(gòu)P5結(jié)構(gòu)化非結(jié)構(gòu)化虛擬表物理表多維模型圖模型指標(biāo)標(biāo)簽算法模型元數(shù)據(jù)管理指標(biāo)管理數(shù)據(jù)底座運(yùn)營數(shù)據(jù)服務(wù)治理信息架構(gòu)數(shù)據(jù)管控?cái)?shù)據(jù)質(zhì)量數(shù)據(jù)安全數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)消費(fèi)報(bào)告自助分析實(shí)時(shí)可視智能決策運(yùn)營監(jiān)控Data
Lab......數(shù)據(jù)主題聯(lián)接客戶主題員工主題財(cái)經(jīng)主題產(chǎn)品主題合作伙伴供應(yīng)商主題(數(shù)據(jù)中臺(tái))LTCITRSDSCMHRMFGIPDPRORN跨領(lǐng)域ChannelSales......數(shù)據(jù)湖明確數(shù)據(jù)Owner發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)定義數(shù)據(jù)密級(jí)明確數(shù)據(jù)源數(shù)據(jù)質(zhì)量評(píng)估元數(shù)據(jù)注冊(cè)數(shù)據(jù)入湖標(biāo)準(zhǔn)內(nèi)部數(shù)據(jù)外部數(shù)據(jù)數(shù)據(jù)源物理入湖虛擬入湖數(shù)據(jù)底座數(shù)據(jù)服務(wù)數(shù)據(jù)服務(wù)《華為數(shù)據(jù)之道》-華為數(shù)據(jù)質(zhì)量管理框架P6數(shù)據(jù)清潔數(shù)據(jù)質(zhì)量政策數(shù)據(jù)質(zhì)量管控?cái)?shù)據(jù)質(zhì)量文化領(lǐng)導(dǎo)力業(yè)務(wù)需求結(jié)果滿意數(shù)據(jù)組織數(shù)據(jù)質(zhì)量流程IT平臺(tái)能力保障數(shù)據(jù)質(zhì)量策劃(SP/BP)數(shù)據(jù)質(zhì)量度量數(shù)據(jù)質(zhì)量控制數(shù)據(jù)質(zhì)量改進(jìn)持續(xù)改進(jìn)第一章、數(shù)據(jù)驅(qū)動(dòng)的企業(yè)數(shù)字化轉(zhuǎn)型01P7P8非數(shù)字原生企業(yè)的數(shù)字化轉(zhuǎn)型挑戰(zhàn)P9企業(yè)數(shù)字化轉(zhuǎn)型的最主要驅(qū)動(dòng)力社會(huì)經(jīng)濟(jì)大環(huán)境的變化行業(yè)趨勢(shì)的變化競(jìng)爭(zhēng)對(duì)手的壓力公司的戰(zhàn)略優(yōu)化自身經(jīng)營的改善P10非數(shù)字原生企業(yè)的數(shù)字化轉(zhuǎn)型挑戰(zhàn)P11數(shù)字化轉(zhuǎn)型目標(biāo)智能機(jī)器數(shù)字化平臺(tái)生產(chǎn)突破現(xiàn)有效率瓶頸服務(wù)&運(yùn)營結(jié)構(gòu)化提升效率(研發(fā)|MKT|銷售|售后|財(cái)務(wù)|HR)質(zhì)量更好的產(chǎn)品更優(yōu)質(zhì)的服務(wù)更低的成本P12華為數(shù)字化轉(zhuǎn)整體型目標(biāo)P13華為數(shù)字化轉(zhuǎn)型藍(lán)圖5大舉措P14華為數(shù)字化轉(zhuǎn)型對(duì)數(shù)據(jù)治理的要求P15華為數(shù)據(jù)治理階段決策P16華為數(shù)據(jù)治理階段產(chǎn)品機(jī)會(huì)點(diǎn)線索Proposal客戶框架合同客戶POPAC客戶發(fā)票收入BOQ/
VoucherPU開票計(jì)劃開票觸發(fā)計(jì)劃數(shù)據(jù)產(chǎn)生與打通第一階段數(shù)據(jù)匯聚與聯(lián)接第二階段數(shù)據(jù)分析與決策業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)產(chǎn)品設(shè)計(jì)產(chǎn)品銷售產(chǎn)品發(fā)貨產(chǎn)品交付產(chǎn)品核算客戶需求客戶合同客戶清關(guān)客戶站點(diǎn)客戶回款研發(fā)團(tuán)隊(duì)銷售團(tuán)隊(duì)制造團(tuán)隊(duì)交付團(tuán)隊(duì)PFC數(shù)據(jù)描述:發(fā)生了什么診斷:為什么發(fā)生預(yù)測(cè):什么將發(fā)生指導(dǎo):該做什么人工介入人工介入人工介入行動(dòng)決策支持決策自動(dòng)化數(shù)據(jù)洞察數(shù)據(jù)工作的兩個(gè)階段數(shù)據(jù)價(jià)值管理訴求數(shù)據(jù)分析與洞察業(yè)務(wù)可視、能夠快速、準(zhǔn)確決策通過數(shù)據(jù)匯聚,實(shí)現(xiàn)業(yè)務(wù)狀態(tài)透明可視,提供基于“事實(shí)”的決策支持依據(jù)人工智能,實(shí)現(xiàn)業(yè)務(wù)自動(dòng)化通過業(yè)務(wù)規(guī)則數(shù)字化、算法化,嵌入業(yè)務(wù)流,逐步替代人工判斷數(shù)據(jù)創(chuàng)新,成為差異化競(jìng)爭(zhēng)優(yōu)勢(shì)基于數(shù)據(jù)的用戶洞察,發(fā)現(xiàn)新的市場(chǎng)機(jī)會(huì)點(diǎn)
數(shù)據(jù)清潔與貫通數(shù)據(jù)全流程貫通,提升業(yè)務(wù)運(yùn)作效率通過業(yè)務(wù)數(shù)字化、標(biāo)準(zhǔn)化,借助IT技術(shù),實(shí)現(xiàn)業(yè)務(wù)上下游信息快速傳遞,共享數(shù)據(jù)質(zhì)量持續(xù)提升,減少糾錯(cuò)成本通過數(shù)據(jù)質(zhì)量度量與持續(xù)改進(jìn),確保數(shù)據(jù)真實(shí)反映業(yè)務(wù)(“賬實(shí)”一致),降低運(yùn)營風(fēng)險(xiǎn)
跨領(lǐng)域數(shù)據(jù)匯聚與整合自助式數(shù)據(jù)獲取與分析差異化信息安全保護(hù)一致的信息架構(gòu)與標(biāo)準(zhǔn)唯一可信的數(shù)據(jù)源有效的質(zhì)量度量改進(jìn)機(jī)制P17華為數(shù)據(jù)工作框架P18華為數(shù)據(jù)工作框架-數(shù)據(jù)底座P19華為數(shù)據(jù)工作的愿景與目標(biāo)愿景:實(shí)現(xiàn)業(yè)務(wù)感知、互聯(lián)、智能和ROADS體驗(yàn),支撐公司數(shù)字化轉(zhuǎn)型目標(biāo):清潔、透明、智慧數(shù)據(jù),使能卓越運(yùn)營和有效增長業(yè)務(wù)對(duì)象、規(guī)則、過程數(shù)字化數(shù)據(jù)聯(lián)接數(shù)據(jù)實(shí)時(shí)可視數(shù)據(jù)透明數(shù)據(jù)清潔數(shù)據(jù)采集/處理智能化數(shù)據(jù)管理由企業(yè)擴(kuò)展到生態(tài)數(shù)據(jù)敏捷自助數(shù)據(jù)安全(隱私、授權(quán)、權(quán)限等)數(shù)據(jù)合規(guī)算法模型(AI)P20華為數(shù)據(jù)工作建設(shè)的整體思路和框架數(shù)字世界:數(shù)字孿生/主線分析、聯(lián)接、匯聚描述診斷預(yù)測(cè)指導(dǎo)對(duì)象數(shù)字化過程數(shù)字化規(guī)則數(shù)字化感知采集匯聚現(xiàn)有IT系統(tǒng)業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)結(jié)果現(xiàn)實(shí)世界:業(yè)務(wù)流/角色P21華為數(shù)字化轉(zhuǎn)型藍(lán)圖客戶員工合作伙伴供應(yīng)商消費(fèi)者在線體驗(yàn)聯(lián)合網(wǎng)規(guī)在線交易在線支付開發(fā)者社區(qū)合作伙伴面向市場(chǎng)創(chuàng)新的主業(yè)務(wù)流面向客戶的主業(yè)務(wù)流營銷平臺(tái)銷售平臺(tái)交付平臺(tái)運(yùn)維平臺(tái)渠道平臺(tái)創(chuàng)新與產(chǎn)品開發(fā)平臺(tái)創(chuàng)新管理產(chǎn)品組合管理洞察管理研發(fā)管理產(chǎn)品規(guī)劃產(chǎn)品發(fā)布/上市需求管理開源生態(tài)研發(fā)營銷策略規(guī)劃項(xiàng)目解決方案營銷活動(dòng)管理合同管理客戶關(guān)系管理商法管理營銷項(xiàng)目管理資源管理售后網(wǎng)規(guī)網(wǎng)設(shè)網(wǎng)絡(luò)部署集成合作伙伴管理服務(wù)服務(wù)請(qǐng)求管理備件管理客戶投訴處理運(yùn)維渠道銷售管理伙伴系統(tǒng)管理渠道S-NPI制造計(jì)劃倉促及物流訂單履行管理供應(yīng)運(yùn)作供應(yīng)采購財(cái)經(jīng)人力資源知識(shí)管理、Huawei
Works、資源管理數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)底座產(chǎn)品客戶供應(yīng)資源員工計(jì)算服務(wù)存儲(chǔ)服務(wù)網(wǎng)絡(luò)服務(wù)開發(fā)服務(wù)集成服務(wù)中間件服務(wù)安全服務(wù)IT平臺(tái)數(shù)據(jù)服務(wù)數(shù)字化運(yùn)營B
UM
UF
U分析平臺(tái)數(shù)據(jù)平臺(tái)(EDW)數(shù)據(jù)湖等支持客戶Engage作戰(zhàn)平臺(tái)、支撐團(tuán)隊(duì)作戰(zhàn)各領(lǐng)域開展數(shù)字化轉(zhuǎn)型,提供能力數(shù)字資產(chǎn)管理及數(shù)字化運(yùn)營強(qiáng)大的IT平臺(tái)支撐P22華為數(shù)據(jù)工作建設(shè)整體框架銷售交付供應(yīng)人力...內(nèi)部數(shù)據(jù)外部數(shù)據(jù)明確數(shù)據(jù)Owner發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)認(rèn)證數(shù)據(jù)源定義數(shù)據(jù)密級(jí)制定數(shù)據(jù)質(zhì)量方案注冊(cè)元數(shù)據(jù)物理入湖虛擬入湖兩種入湖方式、六種入湖標(biāo)準(zhǔn)以業(yè)務(wù)流(事件)為中心聯(lián)接以對(duì)象(主體)為中心聯(lián)接智能標(biāo)簽報(bào)告數(shù)據(jù)算法模型五種數(shù)據(jù)中臺(tái)聯(lián)接方式數(shù)據(jù)服務(wù)客戶員工合作伙伴供應(yīng)商消費(fèi)者報(bào)告自助分析實(shí)時(shí)可視風(fēng)控推演智能決策數(shù)據(jù)分析平臺(tái)數(shù)據(jù)服務(wù)主題聯(lián)接數(shù)據(jù)湖數(shù)據(jù)底座數(shù)據(jù)源數(shù)據(jù)消費(fèi)數(shù)據(jù)體系數(shù)據(jù)分類數(shù)據(jù)感知數(shù)據(jù)質(zhì)量數(shù)據(jù)安全與隱私數(shù)據(jù)治理第二章、建立企業(yè)級(jí)數(shù)據(jù)綜合治理體系02P23P24華為數(shù)據(jù)治理體系框架主數(shù)據(jù)管理平臺(tái)維度數(shù)據(jù)管理平臺(tái)元數(shù)據(jù)管理平臺(tái)數(shù)據(jù)質(zhì)量管理工具公司數(shù)據(jù)Owner數(shù)據(jù)管理部信息架構(gòu)專家組組織IT管理信息架構(gòu)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)分析流程戰(zhàn)略到執(zhí)行信息價(jià)值鏈數(shù)據(jù)質(zhì)量管理數(shù)據(jù)架構(gòu)標(biāo)準(zhǔn)基于業(yè)務(wù)流的信息價(jià)值鏈綜合治理(數(shù)據(jù)、流程、IT):縱橫打通+數(shù)據(jù)清潔業(yè)務(wù)交易到核算信息價(jià)值鏈產(chǎn)品創(chuàng)意到生命周期管理信息價(jià)值鏈存量管理到問題解決信息價(jià)值鏈主數(shù)據(jù)在線交易打通維度數(shù)據(jù)在報(bào)告打通信息架構(gòu)管理政策數(shù)據(jù)質(zhì)量管理政策數(shù)據(jù)資源管理政策政策指引公司數(shù)據(jù)管理總綱數(shù)據(jù)是企業(yè)的戰(zhàn)略資產(chǎn)P25華為數(shù)據(jù)治理政策P26華為信息架構(gòu)管理政策P27華為數(shù)據(jù)源管理政策P28華為數(shù)據(jù)質(zhì)量管理政策P29華為數(shù)據(jù)管理流程信息管理架構(gòu)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)分析L3管理數(shù)據(jù)L2MBT&ITL1華為管理數(shù)據(jù)流程為了支撐企業(yè)數(shù)據(jù)資產(chǎn)從架構(gòu)設(shè)計(jì)、質(zhì)量管理到數(shù)據(jù)分析應(yīng)用的全生命周期管理,需要在企業(yè)的流程架構(gòu)中建立一個(gè)管理數(shù)據(jù)流程,明確數(shù)據(jù)管理的關(guān)鍵活動(dòng)、角色,以及與周邊組織的協(xié)作關(guān)系。華為將“管理數(shù)據(jù)”流程定位為“管理MBT&IT”流程下的一個(gè)L2流程,下設(shè)“管理信息架構(gòu)”“管理數(shù)據(jù)質(zhì)量”“管理數(shù)據(jù)分析”3個(gè)子流程,如左圖所示序號(hào)角色名稱
職責(zé)描述1信息架構(gòu)工程師數(shù)據(jù)架構(gòu)設(shè)計(jì)和管控?cái)?shù)據(jù)分類、定義及標(biāo)準(zhǔn)化企業(yè)級(jí)信息架構(gòu)、業(yè)務(wù)側(cè)概念模型開發(fā)和維護(hù)數(shù)據(jù)標(biāo)準(zhǔn)開發(fā)數(shù)據(jù)源認(rèn)證數(shù)據(jù)流、信息鏈開發(fā)2數(shù)據(jù)治理工程師聚焦數(shù)據(jù)資產(chǎn)建設(shè)和治理數(shù)據(jù)治理和數(shù)據(jù)質(zhì)量監(jiān)控識(shí)別和定位數(shù)據(jù)質(zhì)量問題,實(shí)施根因分析組織制定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)和數(shù)據(jù)質(zhì)量監(jiān)控計(jì)劃定義和制定數(shù)據(jù)質(zhì)量評(píng)測(cè)指標(biāo)實(shí)施測(cè)評(píng)和報(bào)告3數(shù)據(jù)平臺(tái)工程師數(shù)據(jù)分析平臺(tái)規(guī)劃和運(yùn)營數(shù)據(jù)采集和預(yù)處理4數(shù)據(jù)分析師聚焦價(jià)值實(shí)現(xiàn)數(shù)據(jù)分析和挖掘業(yè)務(wù)數(shù)據(jù)模型開發(fā)數(shù)據(jù)分析報(bào)告擬定數(shù)據(jù)可視化設(shè)計(jì)5數(shù)據(jù)科學(xué)家聚焦技術(shù)研究和公關(guān)基礎(chǔ)數(shù)據(jù)模型和算法的開發(fā)數(shù)據(jù)產(chǎn)品設(shè)計(jì)數(shù)據(jù)分析問題攻關(guān)P30華為管理數(shù)據(jù)流程關(guān)鍵角色及職責(zé)設(shè)置P31華為管理數(shù)據(jù)流程與管理變革項(xiàng)目、管理質(zhì)量運(yùn)營之間的關(guān)系信息管理架構(gòu)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)分析數(shù)據(jù)解決方案開發(fā)與驗(yàn)證管理數(shù)據(jù)業(yè)務(wù)方案數(shù)據(jù)解決方案業(yè)務(wù)方案數(shù)據(jù)解決方案管理變革項(xiàng)目管理質(zhì)量與運(yùn)營P32華為數(shù)據(jù)決策治理體系變革指導(dǎo)委員會(huì)公司數(shù)據(jù)Owner變革管理辦公室企業(yè)架構(gòu)委員會(huì)各業(yè)務(wù)領(lǐng)域全球流程負(fù)責(zé)人業(yè)務(wù)架構(gòu)專家組信息架構(gòu)專家組應(yīng)用架構(gòu)專家組技術(shù)架構(gòu)專家組業(yè)務(wù)運(yùn)作團(tuán)隊(duì)質(zhì)量運(yùn)營團(tuán)隊(duì)數(shù)據(jù)管家業(yè)務(wù)變革項(xiàng)目業(yè)務(wù)優(yōu)化數(shù)據(jù)攻關(guān)團(tuán)隊(duì)變革管理體系流程運(yùn)營體系在華為的數(shù)據(jù)治理實(shí)踐中,數(shù)據(jù)相關(guān)的重大決議由企業(yè)變革指導(dǎo)委員會(huì)決策,通過變革管理體系和流程運(yùn)營體系實(shí)現(xiàn)落地,如左圖所示P33華為數(shù)據(jù)Owner職責(zé)P34華為數(shù)據(jù)管理組織數(shù)據(jù)管理組織定位體系建設(shè)者能力中心業(yè)務(wù)的數(shù)據(jù)伙伴文化倡導(dǎo)者公司數(shù)據(jù)Owner質(zhì)量與流程IT管理部領(lǐng)域數(shù)據(jù)Owner公司數(shù)據(jù)管理部質(zhì)量運(yùn)營部/xx管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部XX數(shù)據(jù)管理部數(shù)據(jù)質(zhì)量執(zhí)行組信息架構(gòu)建設(shè)組數(shù)據(jù)服務(wù)推進(jìn)組數(shù)據(jù)分析工作組數(shù)據(jù)底座工作組元數(shù)據(jù)工作組跨領(lǐng)域數(shù)據(jù)聯(lián)合作戰(zhàn)團(tuán)隊(duì)P35華為數(shù)據(jù)管理組織職責(zé)和分工P36華為數(shù)據(jù)全生命周期治理規(guī)范與方案信息架構(gòu)《信息架構(gòu)原則》《數(shù)據(jù)分類框架》《數(shù)據(jù)源認(rèn)證規(guī)范》《業(yè)務(wù)對(duì)象識(shí)別原則》《業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn)設(shè)計(jì)規(guī)范》《數(shù)據(jù)資產(chǎn)編碼規(guī)范》《邏輯數(shù)據(jù)實(shí)體設(shè)計(jì)規(guī)范》《數(shù)據(jù)Owner管理規(guī)范》元數(shù)據(jù)管理《元數(shù)據(jù)設(shè)計(jì)規(guī)范》《元數(shù)據(jù)注冊(cè)規(guī)范》《元數(shù)據(jù)注冊(cè)方法操作手冊(cè)》《元數(shù)據(jù)采集操作指導(dǎo)書》《數(shù)據(jù)資產(chǎn)編碼規(guī)范》數(shù)據(jù)底座與共享《數(shù)據(jù)底座整體架構(gòu)》《公司數(shù)據(jù)湖建設(shè)規(guī)范》《公司數(shù)據(jù)湖建設(shè)流程》《數(shù)據(jù)底座運(yùn)營管理機(jī)制》《多維模型設(shè)計(jì)規(guī)范》《數(shù)據(jù)共享與安全管理規(guī)定》《數(shù)據(jù)授權(quán)申請(qǐng)操作指導(dǎo)書》數(shù)據(jù)服務(wù)《數(shù)據(jù)服務(wù)管理流程》《數(shù)據(jù)服務(wù)設(shè)計(jì)規(guī)范》《數(shù)據(jù)服務(wù)運(yùn)營規(guī)范》報(bào)告數(shù)據(jù)《指標(biāo)數(shù)據(jù)管理規(guī)范》《指標(biāo)拆解操作指導(dǎo)》《指標(biāo)數(shù)據(jù)自助實(shí)施操作指導(dǎo)》《報(bào)告數(shù)據(jù)解碼》自助分析《自助分析平臺(tái)整體架構(gòu)》《自助分析用戶行為規(guī)范》《自助分析平臺(tái)租戶管理規(guī)范》《知識(shí)圖譜設(shè)計(jì)規(guī)范》《知識(shí)圖譜建設(shè)指導(dǎo)書》《自助分析工具使用規(guī)范》《數(shù)據(jù)實(shí)驗(yàn)室用戶行為規(guī)范》數(shù)據(jù)產(chǎn)生數(shù)據(jù)整合與數(shù)據(jù)服務(wù)數(shù)據(jù)搜索數(shù)據(jù)消費(fèi)IPDLTCSD購買第三方公開渠道內(nèi)部外部價(jià)值流數(shù)據(jù)湖主題數(shù)據(jù)實(shí)時(shí)數(shù)據(jù)整合數(shù)據(jù)主題數(shù)據(jù)Searching指揮中心平臺(tái)運(yùn)營IT開發(fā)分析建模業(yè)務(wù)感知《數(shù)字孿生(DTO)指導(dǎo)》《業(yè)務(wù)數(shù)字化評(píng)估方案》《數(shù)據(jù)感知方法指導(dǎo)》《規(guī)范數(shù)據(jù)管理規(guī)范》《過程數(shù)據(jù)管理規(guī)范》《外部數(shù)據(jù)管理規(guī)范》《構(gòu)建業(yè)務(wù)感知能力總體方案》《數(shù)據(jù)感知方案包》《數(shù)據(jù)孿生(DTO)方案包》《3類數(shù)字化方案包》《外部數(shù)據(jù)管理方案包》面向自助場(chǎng)景的實(shí)時(shí)數(shù)據(jù)服務(wù)《指標(biāo)數(shù)據(jù)管理規(guī)范》《標(biāo)簽資產(chǎn)注冊(cè)規(guī)范》《圖模型資產(chǎn)注冊(cè)規(guī)范》《算法數(shù)據(jù)資產(chǎn)注冊(cè)規(guī)范》《多維度模型數(shù)據(jù)資產(chǎn)管理規(guī)范》《構(gòu)建面向自助場(chǎng)景的實(shí)時(shí)數(shù)據(jù)服務(wù)能力總體方案》《實(shí)時(shí)服務(wù)數(shù)據(jù)能力建設(shè)方案包》《非結(jié)構(gòu)化數(shù)據(jù)入湖操作指導(dǎo)》《IoT數(shù)據(jù)入湖操作指導(dǎo)》《自助分析平臺(tái)架構(gòu)》《數(shù)據(jù)自助入湖方案》《數(shù)據(jù)服務(wù)設(shè)計(jì)規(guī)范》《自助分析平臺(tái)報(bào)表開發(fā)規(guī)范》數(shù)據(jù)隱私與安全《申請(qǐng)數(shù)據(jù)授權(quán)操作指導(dǎo)書》《數(shù)據(jù)底座高防區(qū)管理規(guī)范》《數(shù)據(jù)底座共享與安全管理規(guī)定》《數(shù)據(jù)底座的隱私保護(hù)規(guī)定》《構(gòu)建數(shù)據(jù)隱私與安全能力總體方案》《高密度敏感資產(chǎn)管理方案包》《底座隱私數(shù)據(jù)識(shí)別、分類方案包》《一站式權(quán)限配置方案包》數(shù)據(jù)服務(wù)第三章、差異化的企業(yè)數(shù)據(jù)分類管理框架03P37P38華為數(shù)據(jù)分類管理框架Unstructureddata(非結(jié)構(gòu)化數(shù)據(jù))文檔、圖譜、視頻等Report
Data(報(bào)告數(shù)據(jù))Transactional
Data(事務(wù)數(shù)據(jù))Mater
Data(主數(shù)據(jù))Reference
Data(基礎(chǔ)數(shù)據(jù))ObservationalData(觀測(cè)數(shù)據(jù))ConditionalData(規(guī)則數(shù)據(jù))Structureddata(結(jié)構(gòu)化數(shù)據(jù))Externaldata(外部數(shù)據(jù))Internaldata(內(nèi)部數(shù)據(jù))Metadata(元數(shù)據(jù))P39華為數(shù)據(jù)分類定義及特征描述分類維度數(shù)據(jù)分類名稱
定義特征舉例按數(shù)據(jù)所屬主權(quán)(內(nèi)/外部)外部數(shù)據(jù)華為通過公共領(lǐng)域獲取的數(shù)據(jù)客觀存在,其產(chǎn)生、修改不受我司影響國家、貨幣、匯率內(nèi)部數(shù)據(jù)企業(yè)內(nèi)經(jīng)營產(chǎn)生的數(shù)據(jù)在企業(yè)的業(yè)務(wù)流程中產(chǎn)生或在業(yè)務(wù)管理規(guī)范中定義,受企業(yè)經(jīng)營影響合同、項(xiàng)目、組織數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)(結(jié)構(gòu)化/非結(jié)構(gòu)化)結(jié)構(gòu)化數(shù)據(jù)可存儲(chǔ)在關(guān)系數(shù)據(jù)庫里,用二維表結(jié)構(gòu)來表達(dá)實(shí)現(xiàn)的數(shù)據(jù)可以用關(guān)系數(shù)據(jù)庫存儲(chǔ)先有數(shù)據(jù)結(jié)構(gòu),后有數(shù)據(jù)國家、貨幣、組織、產(chǎn)品、客戶非結(jié)構(gòu)化數(shù)據(jù)形式相對(duì)不固定,不方便用數(shù)據(jù)庫二維邏輯表來表現(xiàn)的數(shù)據(jù)形式多樣,無法用關(guān)系數(shù)據(jù)庫存儲(chǔ)數(shù)據(jù)量通常較大網(wǎng)頁、圖片、視頻、音頻、XML基礎(chǔ)數(shù)據(jù)用結(jié)構(gòu)化語言描述屬性,用于分類或目錄整編的數(shù)據(jù)(參考數(shù)據(jù))通常有一個(gè)有限/可選值范圍靜態(tài)數(shù)據(jù),非常穩(wěn)定合同類型、職位、國家主數(shù)據(jù)具有高業(yè)務(wù)價(jià)值、可以在企業(yè)內(nèi)跨流程跨系統(tǒng)被重復(fù)使用的數(shù)據(jù),具有唯一、準(zhǔn)確、權(quán)威的數(shù)據(jù)源跨流程、跨系統(tǒng)取值不受限于預(yù)先定義數(shù)據(jù)范圍在業(yè)務(wù)事件發(fā)生之前就客觀存在,比較穩(wěn)定實(shí)體型組織、客戶、人員的基礎(chǔ)配置P40華為數(shù)據(jù)分類定義及特征描述分類維度分類名稱
定義特征舉例從描述數(shù)據(jù)手段上分元數(shù)據(jù)-Meta定義數(shù)據(jù)的數(shù)據(jù),是有關(guān)一個(gè)企業(yè)所使用的物理數(shù)據(jù)、技術(shù)、和業(yè)務(wù)流程、數(shù)據(jù)規(guī)則和約束以及數(shù)據(jù)的物理與邏輯結(jié)構(gòu)的信息是描述性標(biāo)簽,描述了數(shù)據(jù)、相關(guān)概念、以及它們之間的聯(lián)系數(shù)據(jù)標(biāo)準(zhǔn)、業(yè)務(wù)術(shù)語、指標(biāo)定義從數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)(結(jié)構(gòu)化/非結(jié)構(gòu)化)事務(wù)數(shù)據(jù)用于記錄企業(yè)經(jīng)營過程中產(chǎn)生的業(yè)務(wù)事件,其實(shí)質(zhì)是主數(shù)據(jù)之間活動(dòng)產(chǎn)生的數(shù)據(jù)有較強(qiáng)的時(shí)效性,通常是一次性的事務(wù)數(shù)據(jù)無法擺脫主數(shù)據(jù)獨(dú)立存在BOQ、支付指令、主生產(chǎn)計(jì)劃觀測(cè)數(shù)據(jù)觀測(cè)者通過觀測(cè)工具觀測(cè)對(duì)象行為/過程記錄的數(shù)據(jù)通常數(shù)據(jù)量較大數(shù)據(jù)是過程性的,主要用作監(jiān)控分析可以由機(jī)器自動(dòng)采集系統(tǒng)日志、物聯(lián)網(wǎng)數(shù)據(jù)、運(yùn)輸過程中產(chǎn)生的GPS數(shù)據(jù)規(guī)則數(shù)據(jù)結(jié)構(gòu)化描述業(yè)務(wù)規(guī)則變量的數(shù)據(jù),是實(shí)現(xiàn)業(yè)務(wù)規(guī)則的核心數(shù)據(jù)不可實(shí)例化,只以邏輯實(shí)體形式存在規(guī)則數(shù)據(jù)的變更對(duì)業(yè)務(wù)活動(dòng)的影響是大范圍的出差補(bǔ)助規(guī)則報(bào)告數(shù)據(jù)指對(duì)數(shù)據(jù)進(jìn)行處理加工后,用作業(yè)務(wù)決策依據(jù)的數(shù)據(jù)通常需要對(duì)數(shù)據(jù)進(jìn)行加工處理通常需要ETL維度、指標(biāo)值都可以歸入報(bào)告數(shù)據(jù)收入、成本P41華為基礎(chǔ)數(shù)據(jù)治理價(jià)值外部協(xié)同有效性業(yè)務(wù)場(chǎng)景數(shù)字化業(yè)務(wù)規(guī)則自動(dòng)化業(yè)務(wù)分析準(zhǔn)確性使得對(duì)外部世界的描述統(tǒng)一,滿足外部遵從性例如:基礎(chǔ)數(shù)據(jù)“貿(mào)易術(shù)語”在國際貿(mào)易中用于說明買賣雙方在交接貨物方面彼此應(yīng)承擔(dān)的責(zé)任、費(fèi)用和風(fēng)險(xiǎn)的統(tǒng)一術(shù)語結(jié)構(gòu)化分流業(yè)務(wù)場(chǎng)景,提高業(yè)務(wù)敏捷性例如:基礎(chǔ)數(shù)據(jù)“采購業(yè)務(wù)類型”被用于結(jié)構(gòu)化描述采購業(yè)務(wù)場(chǎng)景,以承載不同的業(yè)務(wù)流程及運(yùn)作簡(jiǎn)化業(yè)務(wù)規(guī)則判斷,業(yè)務(wù)規(guī)則可配置例如:基礎(chǔ)數(shù)據(jù)“供應(yīng)商認(rèn)證類型”被用于判斷在履行系統(tǒng)中是否可以對(duì)該供應(yīng)商下發(fā)采購業(yè)務(wù)減少分析前的清洗和轉(zhuǎn)換,支持E2E的業(yè)務(wù)分析決策例如:基礎(chǔ)數(shù)據(jù)“BG”是華為經(jīng)營和運(yùn)營報(bào)告常見的維度之一,在交易鏈條上使用相同的BG簡(jiǎn)碼,才能免去對(duì)數(shù)據(jù)多余的清洗和轉(zhuǎn)換P42華為基礎(chǔ)數(shù)據(jù)管理的收益減少運(yùn)作風(fēng)險(xiǎn)降低IT成本提升報(bào)告質(zhì)量提高遵從度提高業(yè)務(wù)敏捷性使得企業(yè)在經(jīng)營過程中使用一致的方式對(duì)“運(yùn)輸”相關(guān)數(shù)據(jù)進(jìn)行分類或描述減少轉(zhuǎn)換帶來的成本和風(fēng)險(xiǎn)減少M(fèi)apping開發(fā)減少維護(hù)成本減少基礎(chǔ)數(shù)據(jù)“運(yùn)輸方式”分析前的清洗和轉(zhuǎn)換支撐端到端的業(yè)務(wù)分析和決策不需要做Mapping,增加業(yè)務(wù)的確定性結(jié)構(gòu)化支撐多個(gè)業(yè)務(wù)場(chǎng)景,支撐流程拉通使得信息鏈路清晰,簡(jiǎn)化業(yè)務(wù)處理規(guī)則為直接基于數(shù)據(jù)“運(yùn)輸方式”的業(yè)務(wù)規(guī)則自動(dòng)化提供可能統(tǒng)一“運(yùn)輸方式”數(shù)據(jù)標(biāo)準(zhǔn),提高外部協(xié)同的遵從度,提交不合規(guī)的允許值時(shí)無法與海關(guān)連通P43華為基礎(chǔ)數(shù)據(jù)治理框架數(shù)據(jù)Owner數(shù)據(jù)專業(yè)組織數(shù)據(jù)虛擬團(tuán)隊(duì)組織基礎(chǔ)數(shù)據(jù)管理規(guī)范基礎(chǔ)數(shù)據(jù)維護(hù)流程交付件清單、模版流程基礎(chǔ)數(shù)據(jù)管理平臺(tái)平臺(tái)基礎(chǔ)數(shù)據(jù)存儲(chǔ)信息架構(gòu)建設(shè)完善信息架構(gòu)建設(shè)持續(xù)識(shí)別基礎(chǔ)數(shù)據(jù),納入管理數(shù)據(jù)內(nèi)容管理管理基礎(chǔ)數(shù)據(jù)版本管理基礎(chǔ)數(shù)據(jù)關(guān)聯(lián)及映射關(guān)系數(shù)據(jù)內(nèi)容看護(hù)基礎(chǔ)數(shù)據(jù)內(nèi)容變更納入日常管理數(shù)據(jù)使用規(guī)范建設(shè)基礎(chǔ)數(shù)據(jù)服務(wù)提供給各消費(fèi)場(chǎng)景引用(只讀)基礎(chǔ)數(shù)據(jù)管理管理工作內(nèi)容外部協(xié)同有效性使得對(duì)外部世界的描述統(tǒng)一滿足外部遵從性業(yè)務(wù)場(chǎng)景數(shù)字化結(jié)構(gòu)化分流業(yè)務(wù)場(chǎng)景,提高業(yè)務(wù)敏捷性業(yè)務(wù)規(guī)則自動(dòng)化簡(jiǎn)化業(yè)務(wù)規(guī)則判斷業(yè)務(wù)規(guī)則可配置業(yè)務(wù)分析準(zhǔn)確性減少分析前的清洗和轉(zhuǎn)換,支撐E2E的業(yè)務(wù)分析和決策焦點(diǎn)華為建立了一個(gè)完整的基礎(chǔ)數(shù)據(jù)管理框架,通過明確各方的管理責(zé)任、發(fā)布相關(guān)的流程和規(guī)范以及建立基礎(chǔ)數(shù)據(jù)管理平臺(tái)等來確保基礎(chǔ)數(shù)據(jù)的有效管理P44華為主數(shù)據(jù)治理策略唯一性主數(shù)據(jù)應(yīng)該代表企業(yè)中的某個(gè)業(yè)務(wù)對(duì)象的唯一實(shí)例,以對(duì)應(yīng)真實(shí)世界的對(duì)象。重復(fù)創(chuàng)建實(shí)例將導(dǎo)致數(shù)據(jù)的不一致,進(jìn)而給業(yè)務(wù)流程和報(bào)告帶來問題聯(lián)邦管控聯(lián)邦管控模式代表在中央制定政策、標(biāo)準(zhǔn)和模型,在地方由數(shù)據(jù)管家和用戶一起在流程的各個(gè)層級(jí)中來實(shí)施這些政策、標(biāo)準(zhǔn)和模型單一數(shù)據(jù)源為確保數(shù)據(jù)跨系統(tǒng)、跨流程的唯一性和一致性,需要為每個(gè)屬性的創(chuàng)建、更新和讀取確定一個(gè)應(yīng)用系統(tǒng)作為數(shù)據(jù)源數(shù)據(jù)、流程、IT協(xié)同正確的數(shù)據(jù)需要在正確的流程中創(chuàng)建、更新和使用,并在正確的應(yīng)用系統(tǒng)中落地,這種協(xié)同將確保全公司范圍內(nèi)的數(shù)據(jù)質(zhì)量事前的數(shù)據(jù)質(zhì)量策略應(yīng)該在數(shù)據(jù)創(chuàng)建階段就主動(dòng)管理數(shù)據(jù)質(zhì)量,而非在問題出現(xiàn)后被動(dòng)解決P45華為主數(shù)據(jù)治理框架數(shù)據(jù)消費(fèi)層包括所有消費(fèi)數(shù)據(jù)的IT產(chǎn)品團(tuán)隊(duì),負(fù)責(zé)提出數(shù)據(jù)集成需求和集成接口實(shí)施數(shù)據(jù)消費(fèi)層負(fù)責(zé)主數(shù)據(jù)集成解決方案的落地,包括數(shù)據(jù)服務(wù)的IT實(shí)施和數(shù)據(jù)服務(wù)的配置管理主數(shù)據(jù)服務(wù)實(shí)施層為需要集成主數(shù)據(jù)的IT產(chǎn)品團(tuán)隊(duì)提供咨詢和方案服務(wù),負(fù)責(zé)受理主數(shù)據(jù)集成需求,制定主數(shù)據(jù)集成解決方案,維護(hù)主數(shù)據(jù)的通用數(shù)據(jù)模型主數(shù)據(jù)服務(wù)設(shè)計(jì)層管控層由信息架構(gòu)專家組擔(dān)任,負(fù)責(zé)主數(shù)據(jù)規(guī)則的制定與發(fā)布,以及主數(shù)據(jù)集成爭(zhēng)議或例外的決策管控層數(shù)據(jù)消費(fèi)層主數(shù)據(jù)服務(wù)實(shí)施層主數(shù)據(jù)服務(wù)設(shè)計(jì)層管控層P46客戶數(shù)據(jù)問題根源P47華為客戶主數(shù)據(jù)治理框架創(chuàng)建流程變更流程失效流程合并流程管理流程質(zhì)量度量質(zhì)量與度量質(zhì)量考核與問責(zé)質(zhì)量問題管理架構(gòu)遵從管理機(jī)制管控組織數(shù)據(jù)Owner數(shù)據(jù)管家業(yè)務(wù)定義架構(gòu)與標(biāo)準(zhǔn)數(shù)據(jù)模型字典架構(gòu)標(biāo)準(zhǔn)數(shù)據(jù)流/信息鏈企業(yè)數(shù)據(jù)集成服務(wù)IT數(shù)據(jù)訪問控制權(quán)限與安全P48華為客戶主數(shù)據(jù)平臺(tái)架構(gòu)營銷線索機(jī)會(huì)點(diǎn)合同訂單交付/供應(yīng)開票/回款線索機(jī)會(huì)點(diǎn)客戶數(shù)據(jù)維護(hù)組件客戶數(shù)據(jù)查詢組件數(shù)據(jù)集成組件信息共享集成客戶數(shù)據(jù)質(zhì)量管理組件系統(tǒng)管理員組件信息存儲(chǔ)組件通用支撐組件客戶名稱、開票地址、銀行賬號(hào)、稅號(hào)、信用等級(jí)...PCMobile企業(yè)數(shù)據(jù)集成服務(wù)銷售支付供應(yīng)財(cái)經(jīng)...客戶主數(shù)據(jù)管理平臺(tái)P49華為消除數(shù)據(jù)不合理數(shù)據(jù)集成點(diǎn)P50華為服務(wù)化改造業(yè)務(wù)價(jià)值體現(xiàn)P51華為非結(jié)構(gòu)化數(shù)據(jù)管理模型數(shù)據(jù)內(nèi)容元數(shù)據(jù)分析算法描述解析非結(jié)構(gòu)化數(shù)據(jù)補(bǔ)充增強(qiáng)文檔圖片音頻視頻...非結(jié)構(gòu)化數(shù)據(jù)覆蓋范圍明確范圍定義,并通過虛擬連接技術(shù)實(shí)現(xiàn)全企業(yè)非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一入湖基本特征類(客觀)如:標(biāo)題、格式、Owner等元數(shù)據(jù)管理標(biāo)準(zhǔn)內(nèi)容增強(qiáng)類(主觀)如:標(biāo)簽、關(guān)系等依托數(shù)據(jù)地圖實(shí)現(xiàn)全企業(yè)非結(jié)構(gòu)化數(shù)據(jù)的搜索、查詢文檔神經(jīng)網(wǎng)絡(luò)分類回歸分析聚類......分類算法&技術(shù)相較于結(jié)構(gòu)化數(shù)據(jù),非結(jié)構(gòu)化數(shù)據(jù)管理除了需要管理文件對(duì)象的標(biāo)題、格式、Owner等基本特征和定義外,還需對(duì)數(shù)據(jù)內(nèi)容的客觀理解進(jìn)行管理,如標(biāo)簽、相似性檢索、相似性連接等,以便于用戶搜索和消費(fèi)使用。因此,非結(jié)構(gòu)化數(shù)據(jù)的治理核心是對(duì)其基本特征與內(nèi)容進(jìn)行提取,并通過元數(shù)據(jù)落地來開展的。非結(jié)構(gòu)化數(shù)據(jù)的管理模型如右圖所示P52華為非結(jié)構(gòu)化數(shù)據(jù)處理過程CollectInformationExtractionStandardizeConsolidationFilterPrioritizeReportingVisualizationNLPModuleGraphDB(NEO4J)非結(jié)構(gòu)化數(shù)據(jù)分析InformationExtraction元數(shù)據(jù)基礎(chǔ)特征內(nèi)容增強(qiáng)管理元數(shù)據(jù)管理平臺(tái)通過“基本特征類元數(shù)據(jù)流”和“內(nèi)容增強(qiáng)類元數(shù)據(jù)流”兩條線來實(shí)現(xiàn)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的元數(shù)據(jù)管理和消費(fèi)使用內(nèi)容增強(qiáng)優(yōu)化P53華為外部數(shù)據(jù)處理原則P54華為數(shù)據(jù)治理階段P55華為元數(shù)據(jù)管理架構(gòu)元數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)運(yùn)營分析元數(shù)據(jù)API管理元模型管理運(yùn)維元數(shù)據(jù)消費(fèi)元數(shù)據(jù)注冊(cè)元數(shù)據(jù)存量增量業(yè)務(wù)、技術(shù)、操作元數(shù)據(jù)采集元數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)產(chǎn)生元數(shù)據(jù)自研軟件包元數(shù)據(jù)驅(qū)動(dòng)開發(fā)元數(shù)據(jù)查詢搜索元數(shù)據(jù)血緣分析元數(shù)據(jù)影響分析數(shù)據(jù)標(biāo)準(zhǔn)合規(guī)檢查管理流程管理規(guī)范P56華為元數(shù)據(jù)管理架構(gòu)P57華為數(shù)據(jù)資產(chǎn)編碼規(guī)則數(shù)據(jù)資產(chǎn)大類數(shù)據(jù)資產(chǎn)子類
定義/描述業(yè)務(wù)元數(shù)據(jù)主題域分組公司頂層信息分類,通過數(shù)據(jù)視角體現(xiàn)公司最高層面關(guān)注的業(yè)務(wù)領(lǐng)域主題域互不重疊數(shù)據(jù)的高層面的分類,用于管理其下一級(jí)的業(yè)務(wù)對(duì)象業(yè)務(wù)對(duì)象業(yè)務(wù)領(lǐng)域重要的人、事、物,承載了業(yè)務(wù)運(yùn)作和管理涉及的重要信息邏輯實(shí)體描述業(yè)務(wù)對(duì)象的某種業(yè)務(wù)特征屬性的集合屬性描述所屬業(yè)務(wù)對(duì)象的性質(zhì)和特征,反映信息管理最小粒度數(shù)據(jù)標(biāo)準(zhǔn)用于描述公司層面需共同遵守的屬性層數(shù)據(jù)的含義和業(yè)務(wù)規(guī)則技術(shù)元數(shù)據(jù)數(shù)據(jù)庫按照數(shù)據(jù)結(jié)構(gòu)來組織、存儲(chǔ)和管理數(shù)據(jù)的倉庫Schema數(shù)控對(duì)象的集合,一個(gè)用戶一般對(duì)應(yīng)一個(gè)Schema表分物理表和虛擬表,行/列/記錄/字段。虛擬表基于物理表進(jìn)行定義,用于提供數(shù)據(jù)服務(wù),但不實(shí)際存儲(chǔ)數(shù)據(jù),其數(shù)據(jù)使用方式和物理表一致字段表中的列信息P58數(shù)據(jù)資產(chǎn)編碼(DAN)原則
描述統(tǒng)一性原則華為公司內(nèi)部只能使用一套數(shù)據(jù)資產(chǎn)編碼,以方便不同業(yè)務(wù)部門之間的溝通和IT應(yīng)用之間的數(shù)據(jù)交換唯一性原則每一個(gè)數(shù)據(jù)資產(chǎn)只能用唯一的數(shù)據(jù)資產(chǎn)編碼進(jìn)行標(biāo)識(shí),不同數(shù)據(jù)資產(chǎn)的編碼不允許重復(fù),同一個(gè)編碼也只能對(duì)應(yīng)到一個(gè)數(shù)據(jù)資產(chǎn)上可讀性原則數(shù)據(jù)資產(chǎn)編碼作為數(shù)據(jù)資產(chǎn)分類、檢索的關(guān)鍵詞和索引,需要具備一定的可讀性,讓用戶通過編碼就能初步判斷其對(duì)應(yīng)的數(shù)據(jù)資產(chǎn)類型擴(kuò)展性原則數(shù)據(jù)資產(chǎn)的編碼要從數(shù)據(jù)管理角度適當(dāng)考慮未來幾年的業(yè)務(wù)發(fā)展趨勢(shì),其編碼長度要能適當(dāng)擴(kuò)展,同時(shí)不影響整個(gè)編碼體系P59元數(shù)據(jù)來源序號(hào)元數(shù)據(jù)來源類型
元數(shù)據(jù)來源1關(guān)系數(shù)據(jù)庫Oracle、MS
SQLServer、DB2等2建模工具ERWin、PowerDesigner等3數(shù)據(jù)集成工具DataStage、PowerCenter等4BI報(bào)表工具Cognos、SQL
Server
Reporting
Services等5調(diào)度工具Automations6開發(fā)語言及腳步Perl(日志方式)、SP(注釋方式)7其他元數(shù)據(jù)采集虛擬庫等P60注冊(cè)元數(shù)據(jù)大多數(shù)企業(yè)的數(shù)字化建設(shè)都存在增量和存量兩種場(chǎng)景,如何同時(shí)有效地管理這兩種場(chǎng)景下的元數(shù)據(jù)就成了問題的關(guān)鍵。華為通過標(biāo)準(zhǔn)的元數(shù)據(jù)注冊(cè)規(guī)范和統(tǒng)一的元數(shù)據(jù)注冊(cè)方法,實(shí)現(xiàn)了兩種場(chǎng)景下業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)的高效連接,使業(yè)務(wù)人員能看懂?dāng)?shù)據(jù)、理解數(shù)據(jù),并通過數(shù)據(jù)底座實(shí)現(xiàn)數(shù)據(jù)的共享與消費(fèi)數(shù)據(jù)Owner負(fù)責(zé),是誰的數(shù)據(jù)就由誰負(fù)責(zé)業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)連接關(guān)系的建設(shè)和注冊(cè)發(fā)布按需注冊(cè),各領(lǐng)域數(shù)據(jù)管理部根據(jù)數(shù)據(jù)搜索、共享的需求,推進(jìn)元數(shù)據(jù)注冊(cè)注冊(cè)的元數(shù)據(jù)的信息安全密級(jí)為內(nèi)部公開準(zhǔn)備度評(píng)估項(xiàng)包括如下檢查要點(diǎn)IT系統(tǒng)名稱必須是公司標(biāo)準(zhǔn)名稱數(shù)據(jù)資產(chǎn)目錄是否經(jīng)過評(píng)審并正式發(fā)布數(shù)據(jù)Owner是否確定數(shù)據(jù)密級(jí)物理表/虛擬表/視圖名元數(shù)據(jù)連接需遵從以下規(guī)范邏輯實(shí)體和物理表/虛擬表/視圖一對(duì)一連接規(guī)范業(yè)務(wù)屬性與字段一對(duì)一連接規(guī)范元數(shù)據(jù)注冊(cè)原則元數(shù)據(jù)注冊(cè)規(guī)范P61華為元數(shù)據(jù)注冊(cè)方法準(zhǔn)備度評(píng)估元數(shù)據(jù)連接注冊(cè)發(fā)布元數(shù)據(jù)準(zhǔn)備度評(píng)估規(guī)范元數(shù)據(jù)連接建設(shè)規(guī)范元數(shù)據(jù)注冊(cè)發(fā)布規(guī)范規(guī)范元數(shù)據(jù)準(zhǔn)備度評(píng)估方法四大設(shè)計(jì)模式元數(shù)據(jù)注冊(cè)系統(tǒng)操作方法指導(dǎo)業(yè)務(wù)元數(shù)據(jù)準(zhǔn)備度評(píng)估清單技術(shù)元數(shù)據(jù)準(zhǔn)備度評(píng)估清單邏輯實(shí)體和物理連接關(guān)系業(yè)務(wù)屬性和字段元數(shù)據(jù)應(yīng)用元數(shù)據(jù)注冊(cè)范圍輸入輸出輸入輸出件P62華為元數(shù)據(jù)注冊(cè)四大模式第四章、面向“業(yè)務(wù)交易”的信息架構(gòu)建設(shè)04P63P64信息架構(gòu)視圖示例線索到回款客戶合同發(fā)票...項(xiàng)目管理投標(biāo)項(xiàng)目交付項(xiàng)目...交付站點(diǎn)勘測(cè)交付計(jì)劃...供應(yīng)鏈供應(yīng)計(jì)劃物流運(yùn)輸...采購采購合同...事件財(cái)務(wù)應(yīng)收收入成本存貨應(yīng)付費(fèi)用...經(jīng)營報(bào)告層財(cái)務(wù)經(jīng)營報(bào)告考核報(bào)告交易層HR員工HR組織IPD產(chǎn)品MCR客戶PROC供應(yīng)商維度樹主數(shù)據(jù)(原始)資源數(shù)據(jù)分布數(shù)據(jù)在業(yè)務(wù)流程和IT系統(tǒng)上流動(dòng)的全景視圖識(shí)別數(shù)據(jù)的“來龍去脈”,定位問題導(dǎo)航數(shù)據(jù)模型統(tǒng)一E-R建模實(shí)現(xiàn)對(duì)數(shù)據(jù)及其關(guān)系的描述指導(dǎo)IT開發(fā),是應(yīng)用系統(tǒng)實(shí)現(xiàn)的基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)業(yè)務(wù)定義的規(guī)范統(tǒng)一語言消除歧義為數(shù)據(jù)資產(chǎn)梳理提供標(biāo)準(zhǔn)的業(yè)務(wù)含義和規(guī)則P65華為企業(yè)級(jí)信息架構(gòu)的四個(gè)組件數(shù)據(jù)資產(chǎn)目錄通過分層架構(gòu)表達(dá)對(duì)數(shù)據(jù)分類和定義厘清數(shù)據(jù)資產(chǎn)建立數(shù)據(jù)模型輸入信息鏈數(shù)據(jù)流數(shù)據(jù)源表達(dá)數(shù)據(jù)在業(yè)務(wù)流的流轉(zhuǎn)表達(dá)數(shù)據(jù)在IT系統(tǒng)的流轉(zhuǎn)定義數(shù)據(jù)產(chǎn)生的源頭數(shù)據(jù)分布組件客戶線索機(jī)會(huì)點(diǎn)數(shù)據(jù)模型客戶合同主題分組數(shù)據(jù)分層結(jié)構(gòu)主題域業(yè)務(wù)對(duì)象邏輯數(shù)據(jù)實(shí)體屬性L1L2L3L4L5業(yè)務(wù)術(shù)語數(shù)據(jù)標(biāo)準(zhǔn)業(yè)務(wù)對(duì)象在企業(yè)內(nèi)的統(tǒng)一定義企業(yè)內(nèi)需共同遵守的數(shù)據(jù)含義和業(yè)務(wù)規(guī)則數(shù)據(jù)標(biāo)準(zhǔn)組件信息架構(gòu)P66數(shù)據(jù)資產(chǎn)五層結(jié)構(gòu)主題域分組主題域業(yè)務(wù)對(duì)象邏輯數(shù)據(jù)實(shí)體屬性L1L2L3L4L5主題域分組是公司頂層信息分類,通過數(shù)據(jù)視角體現(xiàn)公司最高層面關(guān)注的業(yè)務(wù)領(lǐng)域主題域是互不重疊數(shù)據(jù)的高層面的分類,用于管理其下一級(jí)的業(yè)務(wù)對(duì)象業(yè)務(wù)對(duì)象是業(yè)務(wù)領(lǐng)域重要的人、事、物,承載了業(yè)務(wù)運(yùn)作和管理涉及的重要信息邏輯數(shù)據(jù)實(shí)體是具有一定邏輯關(guān)系的數(shù)據(jù)屬性的集合屬性是描述所屬業(yè)務(wù)對(duì)象的性質(zhì)和特征,反映信息管理最小粒度數(shù)據(jù)分層結(jié)構(gòu)定義舉例線索到回款機(jī)會(huì)點(diǎn)客戶合同機(jī)會(huì)點(diǎn)投標(biāo)書客戶合同基本信息報(bào)價(jià)單報(bào)價(jià)單頭報(bào)價(jià)單行報(bào)價(jià)單號(hào)金額Part編號(hào)數(shù)量P67華為數(shù)據(jù)標(biāo)準(zhǔn)P68華為數(shù)據(jù)同源一致五條架構(gòu)原則信息架構(gòu)原則:建立企業(yè)層面的共同行為準(zhǔn)則P69按業(yè)務(wù)對(duì)象進(jìn)行架構(gòu)設(shè)計(jì)邏輯模型與物理模型一致性主要通過一體化建模管理來實(shí)現(xiàn)P70華為數(shù)據(jù)模型分層架構(gòu)概念
數(shù)據(jù)
模型邏輯數(shù)據(jù)模型物理數(shù)據(jù)模型概念數(shù)據(jù)模型是通過業(yè)務(wù)對(duì)象及業(yè)務(wù)對(duì)象之間的關(guān)系,從宏觀角度分析和設(shè)計(jì)的企業(yè)核心數(shù)據(jù)結(jié)構(gòu)邏輯數(shù)據(jù)模型是利用邏輯數(shù)據(jù)實(shí)體及實(shí)體之間的關(guān)系,準(zhǔn)確描述業(yè)務(wù)規(guī)則的邏輯實(shí)體關(guān)系物理數(shù)據(jù)模型是按照一定規(guī)則和方法,將邏輯數(shù)據(jù)模型中定義的邏輯數(shù)據(jù)實(shí)體、屬性、屬性約束、關(guān)系等內(nèi)容,如實(shí)轉(zhuǎn)換為數(shù)據(jù)庫軟件能識(shí)別的物理數(shù)據(jù)實(shí)體關(guān)系概念模型與邏輯模型一致性主要通過邏輯數(shù)據(jù)實(shí)體的設(shè)計(jì)管理來實(shí)現(xiàn)P71華為設(shè)計(jì)邏輯數(shù)據(jù)實(shí)體主要規(guī)則P72一體化建模架構(gòu)維護(hù)Domain模型設(shè)計(jì)數(shù)據(jù)標(biāo)準(zhǔn)查看模型查看模型發(fā)布模型驗(yàn)證自助入湖模型治理運(yùn)營實(shí)時(shí)入湖批量入湖技術(shù)元數(shù)據(jù)采集交易系統(tǒng)數(shù)據(jù)庫元數(shù)據(jù)采集定時(shí)/自動(dòng)采集數(shù)據(jù)湖數(shù)據(jù)模型管理定時(shí)/自動(dòng)采集資產(chǎn)目錄維護(hù)數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)信息安全定密元數(shù)據(jù)注冊(cè)自動(dòng)注冊(cè)源/湖側(cè)元數(shù)據(jù)自動(dòng)發(fā)布業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn)自動(dòng)發(fā)布邏輯實(shí)體、屬性數(shù)據(jù)資產(chǎn)管理P73傳統(tǒng)信息架構(gòu)向業(yè)務(wù)數(shù)字化擴(kuò)展:對(duì)象、過程、規(guī)則目標(biāo)“信息化”“業(yè)務(wù)上ERP”問題大量業(yè)務(wù)和作業(yè)所產(chǎn)生的數(shù)據(jù)沒有完整地被管理大量業(yè)務(wù)過程沒有形成可視、可管理的數(shù)據(jù)大量業(yè)務(wù)規(guī)則缺乏管理、無法靈活使用方法對(duì)象數(shù)字化過程數(shù)字化規(guī)則數(shù)字化第五章、面向“聯(lián)接共享”的數(shù)據(jù)底座建設(shè)05P74P75通過數(shù)據(jù)底座實(shí)現(xiàn)的目標(biāo)結(jié)構(gòu)化非結(jié)構(gòu)化虛擬表物理表多維模型圖模型指標(biāo)標(biāo)簽算法模型P76華為數(shù)據(jù)底座總體架構(gòu)元數(shù)據(jù)管理指標(biāo)管理數(shù)據(jù)底座運(yùn)營數(shù)據(jù)服務(wù)治理信息架構(gòu)數(shù)據(jù)管控?cái)?shù)據(jù)質(zhì)量數(shù)據(jù)安全數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)消費(fèi)報(bào)告自助分析實(shí)時(shí)可視智能決策運(yùn)營監(jiān)控Data
Lab......數(shù)據(jù)主題聯(lián)接客戶主題員工主題財(cái)經(jīng)主題產(chǎn)品主題合作伙伴供應(yīng)商主題(數(shù)據(jù)中臺(tái))LTCITRSDSCMHRMFGIPDPRORN跨領(lǐng)域ChannelSales......數(shù)據(jù)湖明確數(shù)據(jù)Owner發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)定義數(shù)據(jù)密級(jí)明確數(shù)據(jù)源數(shù)據(jù)質(zhì)量評(píng)估元數(shù)據(jù)注冊(cè)數(shù)據(jù)入湖6標(biāo)準(zhǔn)內(nèi)部數(shù)據(jù)外部數(shù)據(jù)數(shù)據(jù)源物理入湖虛擬入湖數(shù)據(jù)底座數(shù)據(jù)服務(wù)數(shù)據(jù)服務(wù)P77數(shù)據(jù)底座建設(shè)策略原則
描述數(shù)據(jù)安全原則數(shù)據(jù)底座數(shù)據(jù)資產(chǎn)應(yīng)遵循用戶權(quán)限、數(shù)據(jù)密級(jí)、隱私級(jí)別等管理要求,以確保數(shù)據(jù)在存儲(chǔ)、傳輸、消費(fèi)等全過程中的數(shù)據(jù)安全。技術(shù)手段包括但不限于授權(quán)管理、權(quán)限控制、數(shù)據(jù)加密、數(shù)據(jù)脫敏需求、規(guī)劃雙輪驅(qū)動(dòng)原則數(shù)據(jù)底座數(shù)據(jù)資產(chǎn)基于業(yè)務(wù)規(guī)劃和需求觸發(fā)雙驅(qū)動(dòng)的原則進(jìn)行建設(shè),對(duì)核心數(shù)據(jù)資產(chǎn)優(yōu)先建設(shè)數(shù)據(jù)供應(yīng)多場(chǎng)景原則數(shù)據(jù)底座資產(chǎn)供應(yīng)需根據(jù)業(yè)務(wù)需求提供離線/實(shí)時(shí)、物理/虛擬等不同的數(shù)據(jù)供應(yīng)通道滿足不同的數(shù)據(jù)消費(fèi)場(chǎng)景信息架構(gòu)遵從原則數(shù)據(jù)底座數(shù)據(jù)資產(chǎn)應(yīng)遵從公司的信息架構(gòu),必須經(jīng)IA-SAG(信息架構(gòu)專家組)發(fā)布并完成注冊(cè)華為數(shù)據(jù)底座采取“統(tǒng)籌推動(dòng)、以用促建、急用先行”的建設(shè)策略,根據(jù)公司數(shù)字化運(yùn)營的需要,由公司數(shù)據(jù)管理部統(tǒng)一規(guī)劃,各領(lǐng)域分別建設(shè),以滿足本領(lǐng)域和跨領(lǐng)域的數(shù)據(jù)需求P78華為數(shù)據(jù)湖總體視圖結(jié)構(gòu)化非結(jié)構(gòu)化虛擬表物理表LTC
ITRSDSCMHRMFGIPDPROFIN跨領(lǐng)域ChannelSales......離線實(shí)時(shí)物理入湖虛擬入湖入湖方式PULL(拉)+PUSH(推)六項(xiàng)入湖方式1、明確數(shù)據(jù)Owner2、發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)3、認(rèn)證數(shù)據(jù)源4、定義數(shù)據(jù)密級(jí)5、制定數(shù)據(jù)質(zhì)量方案6、注冊(cè)元數(shù)據(jù)內(nèi)部數(shù)據(jù)PDMERPSCMCRMIOCOCC行政區(qū)劃社交網(wǎng)絡(luò)...外部數(shù)據(jù)數(shù)據(jù)源邏輯數(shù)據(jù)湖華為數(shù)據(jù)湖是邏輯上對(duì)內(nèi)外部的結(jié)構(gòu)化、非結(jié)構(gòu)化的原始數(shù)據(jù)的邏輯匯聚。數(shù)據(jù)入湖要遵從6項(xiàng)入湖標(biāo)準(zhǔn),基于6項(xiàng)標(biāo)準(zhǔn)保證入湖的質(zhì)量,同時(shí)面向不同的消費(fèi)場(chǎng)景提供兩種入湖方式,滿足數(shù)據(jù)消費(fèi)的要求。經(jīng)過近兩年的數(shù)據(jù)湖建設(shè),目前已經(jīng)完成1.2萬個(gè)邏輯數(shù)據(jù)實(shí)體、28萬個(gè)業(yè)務(wù)屬性的入湖,同時(shí)數(shù)據(jù)入湖在華為公司也形成了標(biāo)準(zhǔn)的流程規(guī)范,每個(gè)數(shù)據(jù)資產(chǎn)都要入湖成為數(shù)據(jù)工作的重要標(biāo)準(zhǔn)P79華為數(shù)據(jù)湖特點(diǎn)P80華為數(shù)據(jù)入湖六個(gè)標(biāo)準(zhǔn)P81數(shù)據(jù)入湖五種技術(shù)手段P82數(shù)據(jù)入湖方式對(duì)比說明數(shù)據(jù)搬家實(shí)時(shí)性源系統(tǒng)性能要求批量數(shù)據(jù)處理歷史數(shù)據(jù)處理物理入湖批量集成ETL/ELT工具拉需要非實(shí)時(shí)低支持(強(qiáng))支持(強(qiáng))FTP工具推需要非實(shí)時(shí)低不支持不支持?jǐn)?shù)據(jù)復(fù)制同步CDC工具拉需要實(shí)時(shí)中不支持不支持消息集成MQ工具推需要實(shí)時(shí)中不支持不支持流集成Pipeline工具推需要實(shí)時(shí)中不支持不支持虛擬入湖數(shù)據(jù)虛擬化虛擬化工具拉不需要實(shí)時(shí)高支持(弱)支持(弱)P83PULL(拉)&PUSH(推)方式入湖可以通過數(shù)據(jù)湖主動(dòng)從數(shù)據(jù)源PULL(拉)的方式入湖,也可以通過數(shù)據(jù)源主動(dòng)向數(shù)據(jù)湖PUSH(推)的方式入湖。數(shù)據(jù)復(fù)制同步、數(shù)據(jù)虛擬化以及傳統(tǒng)ETL批量集成都屬于數(shù)據(jù)湖主動(dòng)拉的方式;流集成、消息集成屬于數(shù)據(jù)源主動(dòng)推送的方式(如下表)。在特定的批量集成場(chǎng)景下,數(shù)據(jù)會(huì)以CSV、XML等格式,通過FTP推送給數(shù)據(jù)湖入湖方式數(shù)據(jù)源數(shù)據(jù)湖PULL(拉)被動(dòng):當(dāng)被請(qǐng)求時(shí)提供數(shù)據(jù)主動(dòng):決定何時(shí)獲取數(shù)據(jù)PUSH(推)主動(dòng):按自己節(jié)奏提供數(shù)據(jù)被動(dòng):響應(yīng)接受數(shù)據(jù)P84結(jié)構(gòu)化數(shù)據(jù)入湖P85非結(jié)構(gòu)化數(shù)據(jù)入湖P86華為數(shù)據(jù)主題連接五類應(yīng)用場(chǎng)景P87多維模型設(shè)計(jì)多維模型是依據(jù)明確的業(yè)務(wù)關(guān)系,建立基于維度、事實(shí)表以及相互間連接關(guān)系的模型,實(shí)現(xiàn)多角度、多層次的數(shù)據(jù)查詢和分析。如何設(shè)計(jì)出穩(wěn)定、易擴(kuò)展、高可用的數(shù)據(jù)模型來支持用戶消費(fèi)對(duì)數(shù)據(jù)主題聯(lián)接至關(guān)重要P88企業(yè)圖模型構(gòu)建步驟業(yè)務(wù)場(chǎng)景定義信息收集實(shí)體/概念標(biāo)注實(shí)體/概念擴(kuò)展屬性/關(guān)系標(biāo)注屬性/關(guān)系擴(kuò)展融合計(jì)算推理建模及模式圖擴(kuò)展存儲(chǔ)P89企業(yè)圖模型構(gòu)建步驟P90圖挖掘計(jì)算分類P91三種類型的標(biāo)簽事實(shí)標(biāo)簽規(guī)則標(biāo)簽?zāi)P蜆?biāo)簽描述了實(shí)體的客觀事實(shí)。關(guān)注實(shí)體的屬性特征屬性&度量的統(tǒng)計(jì)結(jié)果。對(duì)數(shù)據(jù)加工處理后的標(biāo)簽對(duì)于實(shí)體的評(píng)估與預(yù)測(cè)。洞察業(yè)務(wù)價(jià)值導(dǎo)向的不同特征采購件標(biāo)簽:采購件/非采購件資產(chǎn)標(biāo)簽:沃爾沃S90、中海華庭...重量&體積標(biāo)簽
超重貨物、大體積...日銷售標(biāo)簽:Top10推薦產(chǎn)品配置:強(qiáng)烈/中等/低換機(jī)消費(fèi)潛力:旺盛/普通/低客觀靜態(tài)主觀動(dòng)態(tài)場(chǎng)景驅(qū)動(dòng)、因時(shí)、因地、因人P92指標(biāo)拆解過程指標(biāo)拆解需求澄清指標(biāo)拆解設(shè)計(jì)指標(biāo)與數(shù)據(jù)資產(chǎn)匹配Step1:解讀指標(biāo)定義,
識(shí)別指標(biāo)Step4:數(shù)據(jù)落地匹配Step2:基于指標(biāo)疊加公式拆解指標(biāo)Step3:基于指標(biāo)拆解結(jié)果,識(shí)別指標(biāo)數(shù)據(jù)解讀指標(biāo)定義,識(shí)別指標(biāo):通過與指標(biāo)定義的業(yè)務(wù)管理部門溝通(通常為指標(biāo)解釋部門的業(yè)務(wù)人員),從業(yè)務(wù)角度了解指標(biāo)基本信息、所需統(tǒng)計(jì)維度、指標(biāo)度量場(chǎng)景以及各場(chǎng)景下的計(jì)算邏輯和口徑(包括剔除規(guī)則)、指標(biāo)發(fā)布信息等?;谥笜?biāo)疊加公式拆解指標(biāo):根據(jù)指標(biāo)計(jì)算邏輯識(shí)別原子指標(biāo),明確原子指標(biāo)中需要的口徑/修飾詞、維度信息,以及原子指標(biāo)與復(fù)合指標(biāo)間的支撐關(guān)系?;谥笜?biāo)拆解結(jié)果,識(shí)別指標(biāo)數(shù)據(jù):識(shí)別原子指標(biāo)的度量屬性和支撐屬性,并根據(jù)原子指標(biāo)中的維度、口徑修飾詞匹配已發(fā)布業(yè)務(wù)對(duì)象的屬性,形成指標(biāo)數(shù)據(jù)。數(shù)據(jù)匹配落地:補(bǔ)充指標(biāo)、指標(biāo)數(shù)據(jù)中的標(biāo)準(zhǔn)屬性名稱以及對(duì)應(yīng)的落地物理表,支持用戶自助實(shí)現(xiàn)指標(biāo)計(jì)算,拉通指標(biāo)設(shè)計(jì)和落地。第六章、面向“自助消費(fèi)”的數(shù)據(jù)服務(wù)建設(shè)06P93P94數(shù)據(jù)共享模式的發(fā)展趨勢(shì)現(xiàn)在的共享模式共享模式的發(fā)展趨勢(shì)NeedtoKnow有權(quán)確定是否有必要共享數(shù)據(jù)給值得信賴的、需要的人Agency-Centric以組織為中心,旨在支持特定組織對(duì)特定任務(wù)的需求Static基于特定政策和規(guī)則的數(shù)據(jù)供應(yīng),幾乎沒有變化或靈活性Network-Centric圍繞每一個(gè)業(yè)務(wù)網(wǎng)絡(luò)設(shè)計(jì)安全方案Compartment-Based主要基于安全訪問控制規(guī)則劃定的范圍Data
Owner以前的觀念是提供數(shù)據(jù)的組織擁有數(shù)據(jù),并對(duì)數(shù)據(jù)的訪問、分發(fā)、共享進(jìn)行嚴(yán)格管控ResponsibilitytoProvide有責(zé)任提供數(shù)據(jù),同時(shí)要做好安全保護(hù)Enterprise-Centric以企業(yè)為中心,旨在跨組織邊界的協(xié)同Mission-Centric
&
SelfGenerating快速適應(yīng)協(xié)同任務(wù)的需求變化以及新的合作伙伴Information-Centric安全內(nèi)置于數(shù)據(jù)中Attribute-Based基于屬性的安全分類Data
Stewardship觀念轉(zhuǎn)變?yōu)樗薪M織都只是數(shù)據(jù)管家,以促進(jìn)數(shù)據(jù)的再利用,并使用適當(dāng)?shù)陌踩瓌t信息共享愿景目標(biāo)范圍協(xié)同方式安全策略訪問模式使用數(shù)據(jù)戰(zhàn)略驅(qū)動(dòng)數(shù)據(jù)和安全驅(qū)動(dòng)P95數(shù)據(jù)服務(wù)給企業(yè)帶來的價(jià)值P96數(shù)據(jù)服務(wù)化的價(jià)值打通業(yè)務(wù)間的數(shù)據(jù)壁壘提升數(shù)據(jù)的一致性滿足靈活多樣的服務(wù)需求提升數(shù)據(jù)需求的敏捷響應(yīng)能力安全效率數(shù)據(jù)消費(fèi)數(shù)據(jù)服務(wù)化的價(jià)值支撐P97數(shù)據(jù)服務(wù)建設(shè)策略明確數(shù)據(jù)服務(wù)全生命周期,識(shí)別全生命周期各環(huán)節(jié)的管理關(guān)鍵點(diǎn),推動(dòng)各領(lǐng)域加速實(shí)現(xiàn)數(shù)據(jù)服務(wù)化,解決數(shù)據(jù)“搬家”與一致性問題制定數(shù)據(jù)服務(wù)設(shè)計(jì)規(guī)范與數(shù)據(jù)服務(wù)運(yùn)營規(guī)范,優(yōu)化數(shù)據(jù)服務(wù)流程,保障數(shù)據(jù)服務(wù)化工作有序、高效開展,解決數(shù)據(jù)服務(wù)重復(fù)建設(shè)、不可管理與復(fù)用度不高等問題通過數(shù)據(jù)服務(wù)中心落實(shí)服務(wù)規(guī)范與流程,提供一站式數(shù)據(jù)服務(wù)開發(fā)、測(cè)試、部署能力,實(shí)現(xiàn)數(shù)據(jù)服務(wù)敏捷響應(yīng)123明確數(shù)據(jù)服務(wù)化方法制定數(shù)據(jù)服務(wù)管理規(guī)范與流程構(gòu)建數(shù)據(jù)服務(wù)中心P98數(shù)據(jù)服務(wù)建設(shè)要求P99數(shù)據(jù)服務(wù)建設(shè)標(biāo)準(zhǔn)P100數(shù)據(jù)服務(wù)生命周期管理P101數(shù)據(jù)服務(wù)識(shí)別與定義的關(guān)鍵要素?cái)?shù)據(jù)服務(wù)設(shè)計(jì)數(shù)據(jù)服務(wù)
識(shí)別與定義分析數(shù)據(jù)服務(wù)需求1234制定迭代計(jì)劃判斷準(zhǔn)入條件識(shí)別可重用性服務(wù)識(shí)別與定義框架(Service
IdentificationFramework)針對(duì)數(shù)據(jù)需求,規(guī)范數(shù)據(jù)服務(wù)識(shí)別過程,列出數(shù)據(jù)服務(wù)識(shí)別過程需要了解的關(guān)鍵內(nèi)容,明確數(shù)據(jù)服務(wù)的實(shí)現(xiàn)方式和準(zhǔn)入條件,提高數(shù)據(jù)服務(wù)的可復(fù)用性,減少重復(fù)建設(shè)。如左圖所示P102數(shù)據(jù)服務(wù)識(shí)別與定義P103數(shù)據(jù)可服務(wù)性判斷因素P104數(shù)據(jù)服務(wù)設(shè)計(jì)的關(guān)鍵要素服務(wù)契約所屬資產(chǎn)目錄服務(wù)責(zé)任主體服務(wù)處理邏輯數(shù)據(jù)契約技術(shù)元數(shù)據(jù)業(yè)務(wù)元數(shù)據(jù)服務(wù)SLA服務(wù)設(shè)計(jì)服務(wù)共享范圍消息交換模式安全策略服務(wù)SLA要求邊界分析服務(wù)契約:包括服務(wù)的基本信息(數(shù)據(jù)服務(wù)提供方、數(shù)據(jù)服務(wù)的類型)、能力要求(服務(wù)的時(shí)效性、服務(wù)的處理邏輯、服務(wù)的安全策略、服務(wù)的SLA要求)等
數(shù)據(jù)契約:包括數(shù)據(jù)契約描述、輸入和輸出參數(shù)、業(yè)務(wù)數(shù)據(jù)資產(chǎn)編碼、物理落地資產(chǎn)編碼等
P105數(shù)據(jù)服務(wù)顆粒度原則發(fā)布部署監(jiān)控P106數(shù)據(jù)服務(wù)開發(fā)及部署過程數(shù)據(jù)服務(wù)需求實(shí)現(xiàn)迭代計(jì)劃交付&反饋開發(fā)
測(cè)試優(yōu)化設(shè)計(jì)開發(fā)測(cè)試部署與運(yùn)營持續(xù)敏捷交付P107數(shù)據(jù)供應(yīng)“三個(gè)1”整體目標(biāo)P108實(shí)現(xiàn)數(shù)據(jù)服務(wù)供應(yīng)SLA的關(guān)鍵要素運(yùn)營目標(biāo)滿足“3個(gè)1”支撐敏捷自助流程規(guī)范在數(shù)據(jù)管理與IT實(shí)施的過程中
需要遵循的流程和規(guī)范組織職責(zé)數(shù)據(jù)底座開展日常運(yùn)營
時(shí)所需的組織職責(zé)IT平臺(tái)支撐組織職責(zé)、流程規(guī)范、數(shù)據(jù)
供應(yīng)鏈落地的平臺(tái)工具度量指標(biāo)度量數(shù)據(jù)底座運(yùn)營的
效率和效益的具體指標(biāo)數(shù)據(jù)需求數(shù)據(jù)消費(fèi)組織職責(zé)的明確構(gòu)建專業(yè)的評(píng)審及仲裁組織。承接各細(xì)分工作內(nèi)容的角色職責(zé)流程規(guī)范的制定與落實(shí)
統(tǒng)一的工作細(xì)分流程。配合工作流程制定相應(yīng)的管理規(guī)范,以指導(dǎo)開展工作。配合IT平臺(tái)制定相應(yīng)的管理規(guī)范,以指導(dǎo)開展工作IT平臺(tái)的建設(shè)
度量、評(píng)價(jià)數(shù)據(jù)底座運(yùn)營的效率和效益的具體指標(biāo)。支撐組織職責(zé)、流程規(guī)范、度量指標(biāo)落地的IT工具面向需求方的效率承諾度量
對(duì)所有供應(yīng)團(tuán)隊(duì)形成明確、清晰的工作要求P109數(shù)據(jù)地圖的核心價(jià)值P110數(shù)據(jù)地圖整體框架同音詞糾錯(cuò)拼音聯(lián)想搜索屬性名稱搜索字段名稱搜索標(biāo)簽搜索數(shù)據(jù)搜索推薦、排序算法推薦排序樣例數(shù)據(jù)秒級(jí)響應(yīng)隱私數(shù)據(jù)配置機(jī)密數(shù)據(jù)脫敏樣例數(shù)據(jù)資產(chǎn)畫像用戶畫像資產(chǎn)/用戶畫像數(shù)據(jù)地圖功能設(shè)計(jì)數(shù)據(jù)搜索業(yè)務(wù)運(yùn)營可視化分析分析、建模、架構(gòu)設(shè)計(jì)業(yè)務(wù)分析師數(shù)據(jù)科學(xué)家數(shù)據(jù)管家IT開發(fā)人員4類角色P111數(shù)據(jù)地圖的四類關(guān)鍵用戶群體業(yè)務(wù)分析師業(yè)務(wù)分析師是企業(yè)最大的數(shù)據(jù)消費(fèi)群體,具有良好的業(yè)務(wù)背景,了解業(yè)務(wù)需求實(shí)質(zhì),理解業(yè)務(wù)含義,與利益相關(guān)者有良好的溝通。通過對(duì)數(shù)據(jù)的識(shí)別,借助數(shù)據(jù)分析工具,生成可供閱讀的圖表或者儀表盤,使用分析結(jié)果識(shí)別問題,支撐決策。對(duì)數(shù)據(jù)可信度、業(yè)務(wù)含義、數(shù)據(jù)定位有強(qiáng)烈訴求數(shù)據(jù)科學(xué)家數(shù)據(jù)科學(xué)家是指能采用科學(xué)方法、運(yùn)用數(shù)據(jù)挖掘工具對(duì)復(fù)雜異構(gòu)的數(shù)字、符號(hào)、文字、網(wǎng)址、音頻或視頻等信息進(jìn)行數(shù)字化重現(xiàn)與認(rèn)識(shí),并能進(jìn)行新的數(shù)據(jù)洞察的工程師或?qū)<?。?duì)業(yè)務(wù)含義、數(shù)據(jù)關(guān)系有強(qiáng)烈訴求數(shù)據(jù)管家公司數(shù)據(jù)管理體系的專業(yè)人員,負(fù)責(zé)協(xié)助數(shù)據(jù)Owner對(duì)數(shù)據(jù)信息架構(gòu)進(jìn)行管理,包括定義信息架構(gòu)中的責(zé)任主體、密級(jí)/分類,為數(shù)據(jù)安全管理提供重要輸入。通過信息架構(gòu)設(shè)計(jì),統(tǒng)一業(yè)務(wù)語言,明確管理責(zé)任,設(shè)定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn),拉通跨領(lǐng)域信息流,支撐運(yùn)營和決策。對(duì)數(shù)據(jù)質(zhì)量、信息架構(gòu)、數(shù)據(jù)關(guān)系有強(qiáng)烈訴求IT開發(fā)人員主要為企業(yè)的數(shù)據(jù)倉庫開發(fā)人員,通過對(duì)物理表進(jìn)行定位、識(shí)別和ETL,創(chuàng)建滿足業(yè)務(wù)分析師或者應(yīng)用平臺(tái)所需要的模型或維表。對(duì)數(shù)據(jù)定位、數(shù)據(jù)關(guān)系有強(qiáng)烈訴求P112資產(chǎn)/用戶畫像框架文本預(yù)處理文本解析文本輸入意圖識(shí)別相關(guān)性檢索資產(chǎn)檢索初步排序精準(zhǔn)排序推薦策略資產(chǎn)畫像數(shù)據(jù)分類數(shù)據(jù)資產(chǎn)集成方式數(shù)據(jù)密級(jí)數(shù)據(jù)基礎(chǔ)標(biāo)簽...資產(chǎn)熱度關(guān)聯(lián)資產(chǎn)數(shù)據(jù)量級(jí)訪問次數(shù)業(yè)務(wù)標(biāo)簽...資產(chǎn)畫像基礎(chǔ)數(shù)據(jù)用戶偏好...用戶畫像知識(shí)詞庫業(yè)務(wù)策略...經(jīng)驗(yàn)?zāi)P蛶煨Чu(píng)估標(biāo)簽管理...業(yè)務(wù)運(yùn)營Badcase分析行為分析歷史經(jīng)驗(yàn)反饋分析與學(xué)習(xí)交互數(shù)據(jù)支撐P113服務(wù)+自助模式ISalesCCMDTSPDMERPCPPSCMIPD數(shù)據(jù)湖中心倉到站點(diǎn)周期服務(wù)數(shù)據(jù)服務(wù)(數(shù)據(jù)共享)DU履行端到端主題主題聯(lián)接(數(shù)據(jù)聯(lián)接)DU數(shù)據(jù)湖(匯聚&整理)交付配置DN完工驗(yàn)收...數(shù)據(jù)底座分散建設(shè)統(tǒng)一底座統(tǒng)一運(yùn)營數(shù)據(jù)共享數(shù)據(jù)需求數(shù)據(jù)需求數(shù)據(jù)需求數(shù)據(jù)需求IOC1IOC2IOC3IOC4P114打造業(yè)務(wù)自助分析的關(guān)鍵能力P115面向三類角色的分析能力架構(gòu)作戰(zhàn)角色業(yè)務(wù)分析師數(shù)據(jù)科學(xué)家/數(shù)據(jù)分析師IT開發(fā)人員個(gè)性租戶首頁租戶資源搜索資產(chǎn)訪問訂閱租戶消費(fèi)入口租戶申請(qǐng)租戶App市場(chǎng)知識(shí)庫租戶作業(yè)入口自助可視分析即席查詢卡片服務(wù)自助數(shù)據(jù)服務(wù)圖像分析數(shù)據(jù)地圖權(quán)限管理TableauPowerBI工具集數(shù)據(jù)可視數(shù)據(jù)分析數(shù)據(jù)交換數(shù)據(jù)發(fā)現(xiàn)租戶A沙盤存儲(chǔ)空間調(diào)度AI基礎(chǔ)平臺(tái)能力數(shù)據(jù)可視數(shù)據(jù)分析數(shù)據(jù)交換數(shù)據(jù)發(fā)現(xiàn)租戶B沙盤存儲(chǔ)空間調(diào)度租戶申請(qǐng)資源分配數(shù)據(jù)發(fā)現(xiàn)/同步/分析模型評(píng)估/發(fā)布數(shù)據(jù)沙盤解決方案數(shù)據(jù)地圖權(quán)限管理數(shù)據(jù)應(yīng)用數(shù)據(jù)服務(wù)數(shù)據(jù)門戶資源申請(qǐng)數(shù)據(jù)探索數(shù)據(jù)導(dǎo)入數(shù)據(jù)挖掘報(bào)告開發(fā)數(shù)據(jù)建模數(shù)據(jù)分享數(shù)據(jù)地圖數(shù)據(jù)開發(fā)報(bào)告開發(fā)數(shù)據(jù)管理公共能力大數(shù)據(jù)平臺(tái)數(shù)據(jù)開發(fā)工具技術(shù)規(guī)范建設(shè)數(shù)據(jù)分層規(guī)范數(shù)據(jù)資產(chǎn)服務(wù)自助分析平臺(tái)數(shù)據(jù)沙盤(Data
Lab)應(yīng)用開發(fā)平臺(tái)平臺(tái)解決方案統(tǒng)一基礎(chǔ)平臺(tái)用戶、元數(shù)據(jù)服務(wù)、平臺(tái)權(quán)限服務(wù)、調(diào)度服務(wù)、UX等等Xdata服務(wù)EMR服務(wù)Mdata服務(wù)Vdata服務(wù)RDS服務(wù)HANA/IQLTS調(diào)度服務(wù)流計(jì)算服務(wù)HIC基礎(chǔ)服務(wù)P116數(shù)據(jù)加工關(guān)鍵能力模型配置關(guān)聯(lián)條件字段選擇計(jì)算關(guān)系函數(shù)過濾SQL配置腳本編譯腳本驗(yàn)證數(shù)據(jù)加工關(guān)鍵能力用戶可將多個(gè)數(shù)據(jù)進(jìn)行關(guān)聯(lián),構(gòu)建自己的寬表,可對(duì)寬表進(jìn)行數(shù)據(jù)過濾,選擇合適的字段以及增加計(jì)算字段,如左圖所示P117企業(yè)業(yè)務(wù)數(shù)字化運(yùn)營模式DataDriven利用數(shù)據(jù)進(jìn)行量化運(yùn)營決策利用技術(shù)手段管理和分析數(shù)據(jù)DigitalizationIT系統(tǒng)移動(dòng)互聯(lián)網(wǎng)IOT大數(shù)據(jù)云計(jì)算互聯(lián)網(wǎng)洞察R&D供應(yīng)鏈營銷銷售服務(wù)業(yè)務(wù)運(yùn)營數(shù)字化業(yè)務(wù)運(yùn)營的本質(zhì)是圍繞業(yè)務(wù)戰(zhàn)略“RUN”流程。運(yùn)營過程中業(yè)務(wù)沿著流程周而復(fù)始地運(yùn)轉(zhuǎn),在作業(yè)過程中識(shí)別并解決問題,應(yīng)基于PDCA循環(huán)(戴明環(huán))進(jìn)行有質(zhì)量的運(yùn)營。而數(shù)字化運(yùn)營旨在利用數(shù)字化技術(shù)獲取、管理和分析數(shù)據(jù),從而為企業(yè)的戰(zhàn)略決策與業(yè)務(wù)運(yùn)營提供可量化的、科學(xué)的支撐。數(shù)字化運(yùn)營歸根結(jié)底是運(yùn)營,旨在推動(dòng)運(yùn)營效率與能力的提升,所以它體現(xiàn)在具體的業(yè)務(wù)中,而不是一塊新的業(yè)務(wù),更多是在現(xiàn)有標(biāo)準(zhǔn)流程的基礎(chǔ)上改進(jìn)和完善。數(shù)字化運(yùn)營的核心是數(shù)據(jù),以及基于數(shù)據(jù)的精細(xì)化管理和科學(xué)決策分析。企業(yè)業(yè)務(wù)數(shù)字化運(yùn)營模式如下圖所示:P118從需求提出到消費(fèi)的過程業(yè)務(wù)需求提出數(shù)據(jù)需求解析數(shù)據(jù)搜索和獲取數(shù)據(jù)服務(wù)提供報(bào)告設(shè)計(jì)和展示需求描述:明確業(yè)務(wù)需求的痛點(diǎn)、目標(biāo)和收益需求范圍明確:報(bào)告的使用場(chǎng)景、角色、崗位,業(yè)務(wù)定義及規(guī)則的明確,業(yè)務(wù)活動(dòng)的起點(diǎn)和終點(diǎn)報(bào)告數(shù)據(jù)識(shí)別:列舉所需數(shù)據(jù)、明確分析維度分析報(bào)告模型設(shè)計(jì):從可行性出發(fā),識(shí)別分析視角的最小顆粒度數(shù)據(jù)搜索:數(shù)據(jù)已入湖可申請(qǐng)使用,數(shù)據(jù)未入湖則推動(dòng)數(shù)據(jù)Owner履行入湖作業(yè)數(shù)據(jù)獲?。焊鶕?jù)數(shù)據(jù)的密度/隱私標(biāo)簽等要素,通過相應(yīng)的審批后方可獲取所需數(shù)據(jù)數(shù)據(jù)入湖數(shù)據(jù)主題聯(lián)接資產(chǎn)設(shè)計(jì)數(shù)據(jù)服務(wù)開發(fā)落地測(cè)試驗(yàn)證數(shù)據(jù)資產(chǎn)注冊(cè)數(shù)據(jù)授權(quán)報(bào)告展示設(shè)計(jì):將已有數(shù)據(jù)結(jié)合報(bào)告展示需求,進(jìn)行報(bào)告界面設(shè)計(jì)與功能的開發(fā)P119傳統(tǒng)經(jīng)營管理過程示意SP年度商業(yè)計(jì)劃制定經(jīng)營目標(biāo)/KPI各代表處/行業(yè)實(shí)施經(jīng)營活動(dòng)經(jīng)營分析,編制報(bào)告經(jīng)營分析會(huì)ST區(qū)域工作會(huì)議下任務(wù)令會(huì)議關(guān)注點(diǎn)地區(qū)部經(jīng)營情況代表處經(jīng)營情況訂發(fā)回收經(jīng)營管理評(píng)價(jià)經(jīng)營短板和改進(jìn)措施、進(jìn)展P120傳統(tǒng)風(fēng)險(xiǎn)管理方式事后查約人談抓改進(jìn)定原因查數(shù)據(jù)定責(zé)任查落實(shí)找系統(tǒng)出報(bào)告遵從性評(píng)估流程控制評(píng)估主動(dòng)性審視稽查審計(jì)通過數(shù)字化運(yùn)營,可以實(shí)現(xiàn)業(yè)務(wù)實(shí)時(shí)自檢,風(fēng)險(xiǎn)實(shí)時(shí)在線審視和預(yù)警,風(fēng)險(xiǎn)任務(wù)快速關(guān)閉,不需要完全依賴事后核查,而是業(yè)務(wù)人員主動(dòng)遵從。用數(shù)據(jù)規(guī)則替代人工的分析、檢查和回溯,大大提高了風(fēng)險(xiǎn)管理的實(shí)時(shí)性,從事后管理變?yōu)槭轮泄芾恚糠謽I(yè)務(wù)部門的量化風(fēng)險(xiǎn)降低超過50%P121華為數(shù)字化運(yùn)營關(guān)鍵特性監(jiān)控預(yù)測(cè)預(yù)警協(xié)調(diào)調(diào)度決策指揮平時(shí)值班戰(zhàn)時(shí)指揮察打一體實(shí)時(shí)感知經(jīng)營運(yùn)營數(shù)據(jù)項(xiàng)目狀態(tài)資源狀態(tài)及時(shí)預(yù)警KPI風(fēng)險(xiǎn)指標(biāo)報(bào)警延標(biāo)風(fēng)險(xiǎn)實(shí)時(shí)預(yù)警業(yè)務(wù)健康實(shí)時(shí)預(yù)警智能分析問題及原因分析趨勢(shì)預(yù)測(cè)方案推薦降成本措施運(yùn)營資產(chǎn)提升措施收入達(dá)成關(guān)鍵措施快速部署任務(wù)自動(dòng)執(zhí)行閉環(huán)自動(dòng)判斷差距分析與總結(jié)全連接知識(shí),經(jīng)驗(yàn)電話、郵件、屏幕業(yè)務(wù)作業(yè)平臺(tái)P122企業(yè)開展數(shù)字化運(yùn)營的關(guān)鍵要素IT平臺(tái)自助分析場(chǎng)景市場(chǎng)性能改進(jìn)數(shù)據(jù)服務(wù)“3個(gè)1”SLA數(shù)據(jù)服務(wù)地圖授權(quán)與權(quán)限管理面向場(chǎng)景運(yùn)營發(fā)育激勵(lì)分享賦能訓(xùn)戰(zhàn),支撐代表處從0到1建設(shè)鼓勵(lì)原創(chuàng),大眾評(píng)選典型場(chǎng)景從1到N快速分享第七章、打造“數(shù)字孿生”的數(shù)據(jù)全量感知能力07P123P124業(yè)務(wù)數(shù)字化整體方案數(shù)據(jù)感知能力建模能力連接能力監(jiān)視能力分析能力控制能力數(shù)字孿生能力框架數(shù)字世界:數(shù)字孿生產(chǎn)品站點(diǎn)合同員工客戶消費(fèi)拉動(dòng):通過用戶需求滿足度來評(píng)估供應(yīng)驅(qū)動(dòng):通過資產(chǎn)絕對(duì)值來評(píng)估對(duì)象數(shù)字化規(guī)則數(shù)字化過程數(shù)字化過程數(shù)據(jù)管理規(guī)則數(shù)據(jù)管理感知接入存儲(chǔ)裝備能力數(shù)據(jù)采集企業(yè)內(nèi)部企業(yè)外部合同簽訂客戶登記訂單生成物料發(fā)貨員工差旅收入確認(rèn)價(jià)值鏈上合作集成第三方購買公共下載/爬蟲內(nèi)部數(shù)據(jù)外部數(shù)據(jù)現(xiàn)實(shí)世界P125數(shù)據(jù)感知推薦存儲(chǔ)介質(zhì)RDBMS:SQL
Server,DB2,Oracle,MySQLDocument
DB:MongoDB,ArangoDB,Hbase,HDFS,OrientDB,Elastic,gunDBObject
DB:Versant,db4o,Objectivity,JADE,NDatabaseGraph
DB:Neo4j,Infinite,Graph,Sparksee,AllegroGraph,WhiteDB數(shù)據(jù)存儲(chǔ)接入方式數(shù)據(jù)接入批次接入按需接入實(shí)時(shí)接入接入工具CLIETLData
ReplicationData
DiscoveryMessage
QueueSteam
Processing結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)軟感知硬感知埋點(diǎn)爬蟲系統(tǒng)日志條形碼/二維碼磁卡RFIDOCR/ICR圖像語音視頻傳感器工業(yè)設(shè)備數(shù)據(jù)感知圖片視頻文檔音頻數(shù)據(jù)流......P126感知分類因素軟感知硬感知感知方式使用軟件或者各種程序進(jìn)行數(shù)據(jù)采集,收集的對(duì)象存在于數(shù)字世界,通常不依賴物理設(shè)備進(jìn)行收集利用設(shè)備或裝置進(jìn)行數(shù)據(jù)的收集,收集對(duì)象為物理世界中的物理實(shí)體,或者是以物理實(shí)體為載體的信息、事件、流程、狀態(tài)等感知過程數(shù)據(jù)感知的過程發(fā)生在數(shù)字世界,通常是自動(dòng)運(yùn)行的程序或腳本數(shù)字的感知過程是數(shù)據(jù)從物理世界向數(shù)字世界的轉(zhuǎn)化過程,有些數(shù)據(jù)感知需要人的操作典型應(yīng)用埋點(diǎn)、System
Log、網(wǎng)絡(luò)爬蟲語音、視頻、OCR、RFID、條形碼/二維碼、傳感器、工控設(shè)備......P1279類“感知”RFID條形碼OCR二維碼埋點(diǎn)傳感器ICR圖像工業(yè)設(shè)備音頻視頻網(wǎng)絡(luò)爬蟲日志數(shù)據(jù)P128條形碼與二維碼P129磁卡與RFID/NFCP130OCR和ICRP131圖像、音頻和視頻數(shù)據(jù)采集P132圖像采集步驟采集圖像獲取識(shí)別預(yù)處理特征提取模板創(chuàng)建數(shù)據(jù)庫匹配結(jié)果用戶界面采集模塊識(shí)別模塊應(yīng)用模塊識(shí)別采集對(duì)象描述指紋通過取像設(shè)備讀取指紋圖像,然后用計(jì)算機(jī)識(shí)別軟件分析指紋的全局特征和指紋的局部特征虹膜虹膜識(shí)別技術(shù)是利用虹膜終身不變和差異性的特點(diǎn)來識(shí)別身份的視網(wǎng)膜人體的血管紋路也是具有獨(dú)特性的,人的視網(wǎng)膜上面血管的圖樣可以利用光學(xué)方法透過人眼晶體來測(cè)定面部面部識(shí)別技術(shù)通過對(duì)面部特征和它們之間的關(guān)系來進(jìn)行識(shí)別,通過標(biāo)準(zhǔn)視頻和熱成像技術(shù)來捕捉面部圖像掌紋掌紋也具有穩(wěn)定性和唯一性人耳通過人耳圖像采集、圖像預(yù)處理、人耳圖像邊緣檢測(cè)與分割、特征提取,進(jìn)行人耳圖像的識(shí)別P133傳感器采集和工業(yè)設(shè)備數(shù)據(jù)采集P134門店數(shù)字化企業(yè)內(nèi)部觸點(diǎn)采集的數(shù)據(jù)環(huán)境數(shù)據(jù):溫度亮度濕度消費(fèi)者行為:樣機(jī)體驗(yàn)數(shù)據(jù)產(chǎn)品體驗(yàn)偏好設(shè)備狀態(tài):是否開機(jī)是否在原位置消費(fèi)者行為:產(chǎn)品點(diǎn)擊率產(chǎn)品停留時(shí)長使用率與購買轉(zhuǎn)化連帶銷售體驗(yàn)顧問服務(wù):購物方式偏好產(chǎn)品偏好連帶銷售服務(wù)滿意度庫存:庫存數(shù)量消耗速度實(shí)物數(shù)量服務(wù):排隊(duì)時(shí)長服務(wù)時(shí)長服務(wù)滿意度采集工具圖像采集傳感器埋點(diǎn)樣機(jī)埋點(diǎn)自助設(shè)備條形碼磁卡RFID埋點(diǎn)官網(wǎng)、App或微信等社交媒體......探索到店到訪門店體驗(yàn)識(shí)別客戶自助體驗(yàn)產(chǎn)品/服務(wù)導(dǎo)購介紹產(chǎn)品/服務(wù)購買選購產(chǎn)品/配件購買&支付獲取提貨配套服務(wù)快遞配送服務(wù)分享售后服務(wù)P135軟感知能力P136數(shù)據(jù)管理平臺(tái)用戶標(biāo)簽原始數(shù)據(jù)數(shù)據(jù)底座數(shù)據(jù)標(biāo)簽數(shù)據(jù)用戶畫像訪問IP操作頁面訪問頻率跳出頁面用戶信息訪問時(shí)間段停留時(shí)間操作流程搜索結(jié)果瀏覽習(xí)慣......用戶信息用戶行為平臺(tái)信息部門崗位地域訪問入口瀏覽次數(shù)...頁面加載時(shí)間功能響應(yīng)時(shí)間...網(wǎng)絡(luò)行為數(shù)據(jù)瀏覽動(dòng)態(tài)搜索結(jié)果偏好數(shù)據(jù)終止瀏覽頁面用戶行為標(biāo)簽高頻訪問消費(fèi)數(shù)據(jù)領(lǐng)域消費(fèi)數(shù)據(jù)類型收藏/獲取記錄數(shù)據(jù)消費(fèi)標(biāo)簽P137數(shù)據(jù)感知到分析消費(fèi)數(shù)據(jù)采集數(shù)據(jù)采集(預(yù)處理/解析)本地存儲(chǔ)入湖聯(lián)接服務(wù)分析元數(shù)據(jù)管理數(shù)據(jù)的誕生過程數(shù)據(jù)的預(yù)處理和特征提取數(shù)據(jù)在入湖之前的存儲(chǔ)和管理數(shù)據(jù)接入(預(yù)處理/解析)華為數(shù)據(jù)治理下的感知能力對(duì)接了數(shù)據(jù)供應(yīng)鏈(DataSupplyChain),數(shù)據(jù)從感知采集到最終的分析消費(fèi),都納入公司級(jí)的信息架構(gòu),作為數(shù)據(jù)資產(chǎn)來進(jìn)行管理P138在確定數(shù)據(jù)接入之前需要考慮的問題P139感知數(shù)據(jù)接入方式及工具接入方式觸達(dá)方式頻率數(shù)據(jù)源數(shù)據(jù)量數(shù)據(jù)類型工具類型批次接入BatchData固定時(shí)間間隔觸發(fā)接入頻率較低,數(shù)據(jù)接入完成時(shí)間通常是小時(shí)級(jí)RDBMS,F(xiàn)lat
File,ERP,Cloud,DWH等支持大批量接入和小批量接入結(jié)構(gòu)化或者非結(jié)構(gòu)化數(shù)據(jù)CLIETL按需接入Ad-Hoc按需要觸發(fā)接入頻率較高,數(shù)據(jù)接入完成時(shí)間通常是分鐘或者秒級(jí)通常是數(shù)據(jù)文件,spread
sheet、RDMBS等通常比較小結(jié)構(gòu)化或者非結(jié)構(gòu)化數(shù)據(jù)CLIETLData發(fā)現(xiàn)與預(yù)處理工具實(shí)時(shí)接入Real
Time數(shù)據(jù)源產(chǎn)生新數(shù)據(jù)時(shí)觸發(fā)接入數(shù)據(jù)接入完成時(shí)間頻率時(shí)毫秒級(jí)傳感器,機(jī)器,網(wǎng)絡(luò)路由器等數(shù)據(jù)量比較大,但單條數(shù)據(jù)記錄通常比較小結(jié)構(gòu)化數(shù)據(jù)MessageQueueStream處理工具P140感知數(shù)據(jù)推薦存儲(chǔ)介質(zhì)序號(hào)采集方式數(shù)據(jù)類型接入方式推薦存儲(chǔ)介質(zhì)典型數(shù)據(jù)庫1埋點(diǎn)結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)RDBMSRDBMS:SQL
Server、DB2、Oracle、MySQL基于文件存儲(chǔ)的數(shù)據(jù)庫:MongoDB、ArangoDB、Hbase、HDFS、OrientDB、Elastic、gunDB基于對(duì)象存儲(chǔ)的數(shù)據(jù)庫:Versnat、db4o、JADE圖數(shù)據(jù)庫:Neo4j、Infinite
Graph、Sparksee、AllegroGraph、WhtieDB非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)DocumentDB、Flat
File2日志收集結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)RDBMS非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)DocumentDB、Flat
File3爬蟲結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)、半實(shí)時(shí)RDBMS非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)DocumentDB、Flat
File、Graph
DB4條形碼結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)、半實(shí)時(shí)RDBMS5磁卡結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)、半實(shí)時(shí)RDBMS6RFID結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)、半實(shí)時(shí)RDBMS7OCR/ICR非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)Flat
File8圖像非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)Graph
DB9音頻非結(jié)構(gòu)化數(shù)據(jù)批次、點(diǎn)對(duì)點(diǎn)Object
DB10視頻非結(jié)構(gòu)化數(shù)據(jù)批次Object
DB11傳感器結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)RDBMS12設(shè)備結(jié)構(gòu)化數(shù)據(jù)實(shí)時(shí)RDBMSP141數(shù)字孿生成熟階段傳統(tǒng)的模式,存儲(chǔ)一些物體實(shí)體相關(guān)靜態(tài)的數(shù)據(jù)通常是通過激光掃描儀或攝影測(cè)量技術(shù)獲取的一個(gè)點(diǎn)的數(shù)據(jù)可以作為更復(fù)雜數(shù)字孿生的基礎(chǔ)提供了實(shí)體在某個(gè)時(shí)間點(diǎn)的虛擬呈現(xiàn)存在3D模型、設(shè)計(jì)圖紙或數(shù)字化呈現(xiàn)無法保證數(shù)字模型的數(shù)據(jù)是最新的,所以無法建立物理實(shí)體和數(shù)字模型的相關(guān)性使用掃描文件捕獲物理實(shí)體的變化,將這些變化反映到數(shù)字孿生3D數(shù)字模型和物理實(shí)體之間存在映射關(guān)系數(shù)字模型實(shí)時(shí)呈現(xiàn)物理實(shí)體的關(guān)系來自傳感器/IoT的實(shí)時(shí)數(shù)據(jù)提供了物理實(shí)體的狀態(tài),但信息流是單向的物理實(shí)體和數(shù)字模型實(shí)現(xiàn)的信息的雙向流通,通過數(shù)字孿生可以控制或改變物理實(shí)體由設(shè)計(jì)工程師使用計(jì)算機(jī)輔助工程工具生產(chǎn)實(shí)體的3D模型,模型更加智能化,模型可以自動(dòng)解析構(gòu)成要素(BOM,模塊)并進(jìn)行流程拆解等數(shù)字模型等數(shù)據(jù)和物理世界的數(shù)據(jù)保持實(shí)時(shí)同步,數(shù)字模型可以進(jìn)行和物理實(shí)體相同的方法和行為可以在虛擬空間運(yùn)行數(shù)字模型,通過假設(shè)分析來執(zhí)行物理實(shí)體的“假設(shè)方案”,進(jìn)行預(yù)測(cè)物理實(shí)體的未來基礎(chǔ)數(shù)字孿生被動(dòng)數(shù)字孿生動(dòng)態(tài)數(shù)字孿生半智能數(shù)字孿生智能數(shù)字孿生第八章、打造“清潔數(shù)據(jù)”的質(zhì)量綜合管理能力08P142P143數(shù)據(jù)質(zhì)量P144數(shù)據(jù)質(zhì)量管理框架數(shù)據(jù)清潔數(shù)據(jù)質(zhì)量政策數(shù)據(jù)質(zhì)量管控?cái)?shù)據(jù)質(zhì)量文化領(lǐng)導(dǎo)力業(yè)務(wù)需求結(jié)果滿意數(shù)據(jù)組織數(shù)據(jù)質(zhì)量流程IT平臺(tái)能力保障數(shù)據(jù)質(zhì)量策劃(SP/BP)數(shù)據(jù)質(zhì)量度量數(shù)據(jù)質(zhì)量控制數(shù)據(jù)質(zhì)量改進(jìn)持續(xù)改進(jìn)P145數(shù)據(jù)質(zhì)量分類框架P146數(shù)據(jù)質(zhì)量規(guī)則不可為空類語法約束類格式規(guī)范類長度約束類值域約束類事實(shí)參照標(biāo)準(zhǔn)類應(yīng)為空值類入庫及時(shí)類單表等值一致約束類單表邏輯一致約束類記錄唯一類層級(jí)結(jié)構(gòu)一致約束外關(guān)聯(lián)約束類跨表等值一致約束類跨表邏輯一致約束類單列跨列跨行跨表質(zhì)量規(guī)則類型完整性及時(shí)性有效性一致性準(zhǔn)確性唯一性數(shù)據(jù)質(zhì)量特性P147規(guī)則分類內(nèi)容及示例業(yè)務(wù)對(duì)象落地質(zhì)量特性規(guī)則類型類型描述示例單列完整性不可為空類屬性不允許或在滿足某種條件下不允許出現(xiàn)空值員工工號(hào)不可為空有效性語法約束類屬性值滿足語法規(guī)則取值約束郵箱地址需滿足有效郵箱格式有效性格式規(guī)范類屬性值必須滿足展現(xiàn)格式約束日期有多重格式,對(duì)于同一屬性指向同一類格式有效性長度約束類屬性值滿足約定的長度范圍密碼的長度至少8位,不超過16位有效性值域約束類屬性值必須滿足已定義的枚舉值列的約束合同的合同主類型及子類型必須是合同類型基礎(chǔ)數(shù)據(jù)中定義的枚舉值準(zhǔn)確性事實(shí)參照標(biāo)準(zhǔn)類存在事實(shí)數(shù)據(jù)或者事實(shí)參考標(biāo)準(zhǔn)數(shù)據(jù),與該事實(shí)或事實(shí)參照標(biāo)準(zhǔn)對(duì)比一致的約束中國電信通信有限公司的信息必須與國家法人數(shù)據(jù)庫中的信息保持一致跨列完整性應(yīng)為空值類屬性滿足某種條件下不能維護(hù)值敏感站點(diǎn)不允許維護(hù)經(jīng)緯度信息一致性單表等值一致約束類某一屬性值與本實(shí)體其他屬性計(jì)算值相等的約束合同的RMB簽約金額必須等于USD簽約金額與匯率的乘積P148規(guī)則分類內(nèi)容及示例業(yè)務(wù)對(duì)象落地質(zhì)量特性規(guī)則類型類型描述示例跨列一致性單表邏輯一致約束類某一屬性值與本實(shí)體其他屬性滿足邏輯關(guān)系約束合同的關(guān)閉日期不能早于注冊(cè)日期及時(shí)性入庫及時(shí)類數(shù)據(jù)進(jìn)入系統(tǒng)的及時(shí)性約束通過入職日期和系統(tǒng)創(chuàng)建日期,判斷員工入職信息維護(hù)及時(shí)性跨表一致性外關(guān)聯(lián)約束類引用其他業(yè)務(wù)對(duì)象屬性時(shí),所維護(hù)的屬性值必須在其他業(yè)務(wù)對(duì)象中存在的約束合同的簽約客戶必須為客戶主數(shù)據(jù)中定義的法人客戶一致性跨表等值一致約束類某一屬性值與其他實(shí)體的一個(gè)或多個(gè)屬性值的函數(shù)計(jì)算結(jié)果相等的約束合同的金額與合同按產(chǎn)品拆分后的金額之和一致一致性跨表邏輯一致約束類某一屬性值滿足其他實(shí)體的一個(gè)或多個(gè)屬性值的函數(shù)關(guān)系的約束員工的任免日期早于員工的到崗日期跨行唯一性記錄唯一類記錄不重復(fù)法人客戶只能存在唯一一個(gè)一致性層級(jí)結(jié)構(gòu)一致約束類存在層級(jí)結(jié)構(gòu)的屬性,同層級(jí)屬性結(jié)構(gòu)一致所有子網(wǎng)類型的客戶,滿足總部-分部-子網(wǎng)的三層結(jié)構(gòu)P149數(shù)據(jù)質(zhì)量度量模型識(shí)別度量對(duì)象確定度量指標(biāo)實(shí)施質(zhì)量度量改進(jìn)質(zhì)量問題設(shè)計(jì)質(zhì)量占40%對(duì)領(lǐng)域所有業(yè)務(wù)對(duì)象的數(shù)據(jù)架構(gòu)建設(shè)情況進(jìn)行評(píng)估執(zhí)行質(zhì)量占60%聚焦影響
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 三農(nóng)環(huán)境整治工作實(shí)施方案
- 三農(nóng)產(chǎn)品電子商務(wù)培育農(nóng)業(yè)新動(dòng)力方案
- 2024年春八年級(jí)生物下冊(cè) 8.1.1 傳染病及其預(yù)防教學(xué)實(shí)錄 (新版)新人教版
- 2024年秋一年級(jí)道德與法治下冊(cè) 第四單元 我們?cè)谝黄?15 分享真快樂教學(xué)實(shí)錄 新人教版
- 《背影》教學(xué)設(shè)計(jì)及反思
- 護(hù)理在小兒肺炎支原體感染治療中的效果分析
- 蒙脫石散聯(lián)用復(fù)合乳酸菌膠囊對(duì)腹瀉患兒的影響
- 制造業(yè)綠色制造技術(shù)培訓(xùn)手冊(cè)
- 2024-2025學(xué)年新教材高中生物 第3章 生態(tài)系統(tǒng)及其穩(wěn)定性 4 生態(tài)系統(tǒng)的信息傳遞教學(xué)實(shí)錄 新人教版選擇性必修2
- 股份制企業(yè)合同審查及管理辦法
- 古往今來數(shù)學(xué)家的奇聞?shì)W事
- 藝術(shù)創(chuàng)新的思維技巧
- 部隊(duì)保密安全課件
- 陜西省西安市鐵一中2025屆高三下學(xué)期聯(lián)合考試數(shù)學(xué)試題含解析
- 教師資格考試高級(jí)中學(xué)信息技術(shù)學(xué)科知識(shí)與教學(xué)能力試題及解答參考(2024年)
- 腹膜透析操作流程及評(píng)分標(biāo)準(zhǔn)
- 清風(fēng)電子相冊(cè)的設(shè)計(jì)與實(shí)現(xiàn)
- 開封市第一屆職業(yè)技能大賽美容項(xiàng)目技術(shù)文件(世賽項(xiàng)目)
- 醫(yī)院窗簾、隔簾采購 投標(biāo)方案(技術(shù)方案)
- 國家開放大學(xué)《Photoshop圖像處理》章節(jié)測(cè)試題參考答案
- 紅木文化智慧樹知到答案2024年廣西大學(xué)
評(píng)論
0/150
提交評(píng)論