2022銀行數(shù)據(jù)治理體系

PAGEPAGE10銀行數(shù)據(jù)治理體系Governance）體系的構(gòu)建就變得尤為重要和迫切。一．?dāng)?shù)據(jù)治理體系簡介管理數(shù)據(jù)安全管理和主數(shù)據(jù)管理，現(xiàn)對上述功能域說明如下。題，提升數(shù)據(jù)的完整性、及時性、準確性及一致性，提升業(yè)務(wù)價值。技術(shù)人員之間，以及雙方的溝通平臺。一致和準確。數(shù)據(jù)標準可分為技術(shù)標準和業(yè)務(wù)標準。主數(shù)據(jù)管理：主數(shù)據(jù)（MasterData）一系列規(guī)則、技術(shù)、應(yīng)用、策略和程序。二．?dāng)?shù)據(jù)質(zhì)量管理簡介提供相應(yīng)的方法和手段。(一)數(shù)據(jù)質(zhì)量管理基礎(chǔ)和問題分類下列要素是進行數(shù)據(jù)質(zhì)量管理的基礎(chǔ)：數(shù)據(jù)質(zhì)量的好壞是由用戶以及數(shù)據(jù)使用價值所決定的。數(shù)據(jù)使用過程中被應(yīng)用或者有價值的程度。（系統(tǒng)或用戶研討才有意義。7配較為隨意，允許一個組織機構(gòu)號下存在多個客戶號。多余字符、亂碼等。(1)致的問題。(2)系統(tǒng)之間數(shù)據(jù)同步時效性造成的不一致。典型案例如下：由于某T+1TT+1就導(dǎo)致了系統(tǒng)之間數(shù)據(jù)不一致。(1)A合同表中無法找到相關(guān)記錄；(2)數(shù)據(jù)含義沖突，如某些賬戶，從賬戶屬性、存期等字段看，應(yīng)是通知存款產(chǎn)品，但從科目看，又是普通定期產(chǎn)品。都有若干日期字段記錄其生命周期，這些日期字段包括創(chuàng)建/開戶日期、關(guān)閉/命周期的常見做法，就是直接在物理上刪除記錄。代碼問題。包括三個與代碼相關(guān)的問題：(1用之間相同用途代碼的編碼不一致；(2)未代碼化問題，即常見情況使用文字存(3)意外代碼，即實際數(shù)據(jù)中出現(xiàn)了未定義的代碼值。(二)數(shù)據(jù)質(zhì)量管理方法論圖1描述了權(quán)威人士普遍認可的數(shù)據(jù)質(zhì)量管理方法論，共分六步。圖1數(shù)據(jù)質(zhì)量提升步驟圖第一步：定義及驗證首先，從技術(shù)和業(yè)務(wù)兩個層面對數(shù)據(jù)應(yīng)當(dāng)滿足的質(zhì)量目標進行定義。表1X2%。其次，對于派生數(shù)據(jù)，其源數(shù)據(jù)和轉(zhuǎn)換的規(guī)還將指導(dǎo)初始的數(shù)據(jù)度量，通常也成為數(shù)據(jù)剖析。表1 數(shù)據(jù)質(zhì)量度量準Accuracy正確性Completeness完整性Consistency一致性Continuity連續(xù)性Precedence先后順序Precision精確度Granularity數(shù)據(jù)粒度Currency當(dāng)前性Duration數(shù)據(jù)時間跨度Retention數(shù)據(jù)保存周期Identity唯一性Reference參照完整性Cardinality數(shù)據(jù)對應(yīng)關(guān)系Inheritance繼承關(guān)系ValueSet數(shù)值集合Relationship依賴關(guān)系第二步：影響分析與共性分析性與優(yōu)先級別。到某類共同原因。這個分析將為下一步追蹤根本原因做好準備。第三步：追蹤根本原因2第四步：預(yù)防/修復(fù)數(shù)據(jù)質(zhì)量問題3有相關(guān)的優(yōu)點和弱點。導(dǎo)致數(shù)據(jù)質(zhì)量問題的根本原因，最常見的有人員、流程、業(yè)務(wù)系統(tǒng)前端、3對于后三項(業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫，抽取、加載)，則通常通過修復(fù)的手段來解決。每類數(shù)據(jù)質(zhì)量問題的預(yù)防/修復(fù)都有有利和不利的一面，比如，由于人員定的數(shù)據(jù)質(zhì)量問題。圖2數(shù)據(jù)質(zhì)量根本原因圖圖3預(yù)防/修復(fù)數(shù)據(jù)質(zhì)量問題圖第五步：趨勢監(jiān)控一個已知的數(shù)據(jù)質(zhì)量問題被修復(fù)后并不意味著這個特定問題就被永遠解決4圖4數(shù)據(jù)質(zhì)量趨勢監(jiān)控圖第六步：識別和研究偏差流程將需要從該分支返回到第三步再一次識別根本原因。圖5識別和研究偏差圖(三)數(shù)據(jù)質(zhì)量問題特征分析業(yè)務(wù)系統(tǒng)對數(shù)據(jù)的使用目的主要是為了保證業(yè)務(wù)流程的正常運轉(zhuǎn)和滿足一些簡單的統(tǒng)計功能，因此只要業(yè)務(wù)流程和統(tǒng)計正常，就可以認為數(shù)據(jù)質(zhì)量滿足要求；特性作如下分析：6（環(huán)節(jié)。少量的增值數(shù)據(jù)(Value-addeddata)產(chǎn)生于分析型系統(tǒng)。(ODS/成來自不同源系統(tǒng)的數(shù)據(jù)，并按照數(shù)據(jù)模型整合。數(shù)據(jù)挖掘等信息訪問手段。6改，因此基本上不產(chǎn)生數(shù)據(jù)質(zhì)量問題。圖6數(shù)據(jù)質(zhì)量問題分析圖所以很多質(zhì)量問題都是在使用時被首次發(fā)現(xiàn)。理的最佳實踐，建議在不同流轉(zhuǎn)環(huán)節(jié)側(cè)重完成的功能點實現(xiàn)應(yīng)如下：數(shù)據(jù)產(chǎn)生環(huán)節(jié)。原則。據(jù)質(zhì)量問題。數(shù)據(jù)結(jié)構(gòu)來進行定義。數(shù)據(jù)集成環(huán)節(jié)。據(jù)質(zhì)量問題檢查的效用最高。組、業(yè)務(wù)部門、數(shù)據(jù)倉庫或應(yīng)用項目組等。跟蹤——由于來自業(yè)務(wù)源系統(tǒng)的數(shù)據(jù)每天都會加載到基礎(chǔ)數(shù)據(jù)平臺類系統(tǒng)并將跟蹤結(jié)果作為提升數(shù)據(jù)質(zhì)量問題治理成效的一個依據(jù)。數(shù)據(jù)使用環(huán)節(jié)。滿足的質(zhì)量標準，并作為日后上下游系統(tǒng)之間服務(wù)水平協(xié)議(ServiceLevelAgreement,SLA)的輸入接口。行評估，并作為下一階段設(shè)定數(shù)據(jù)質(zhì)量管理目標的依據(jù)之一。(四)數(shù)據(jù)質(zhì)量管理流程的關(guān)鍵點管理流程建設(shè)。題的專業(yè)工具。三．?dāng)?shù)據(jù)質(zhì)量管理與數(shù)據(jù)