數據治理總體解決方案_第1頁
數據治理總體解決方案_第2頁
數據治理總體解決方案_第3頁
數據治理總體解決方案_第4頁
數據治理總體解決方案_第5頁
已閱讀5頁,還剩73頁未讀 繼續(xù)免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

數據治理總體解決方案

照據治理總體

數據治理總、體解決方案

目錄

—數據管理的現狀.....................................................1

二數據治理的概述.....................................................2

(-)數據治理概念............................................................2

(二)數據治理目標............................................................3

三數據治理體系.......................................................3

四數據治理核心領域...................................................4

(-)數據模型................................................................4

(二)數據生命周期............................................................5

(三)數據標準................................................................6

(四)主數據..................................................................8

(五)數據質量................................................................9

(六)數據服務...............................................................11

(十)

數據安全.....................................................12

五數據治理保障機制..................................................13

(一)制度章程...............................................................13

(1)規(guī)章制度...............................................................13

@)管控辦法...............................................................13

(3)考核機制..........................................................-13

(二)數據治理組織...........................................................15

數據治理總、體解決方案

(1)組織架構...............................................................15

(2)組織層次...............................................................16

(3)組織職責...............................................................17

(三)流程管理...............................................................19

(四)IT技術應用............................................................20

(1)支撐平臺...............................................................20

(2)技術規(guī)范...............................................................22

附件A數據管理規(guī)范.................................................24

附件B數據質量評估辦法..............................................42

附件C數據質量管理流程..............................................46

數據治理總體解決方案

關于數據治理的理解

■數據管理的現狀

根據行業(yè)信息化發(fā)展的現狀,結合當今行業(yè)數據治理的要求,大

型集團或政務管理部門現階段數據管理方面存在以下不足:

(1)數據多頭管理,缺少專門對數據管理進行監(jiān)督和控制組

織。信息系統(tǒng)建設和管理職能分散在各部門,致使數據管理的職責

分散,權責不明確。組織機構各部門關注數據的角度不一樣,缺少

一個組織從全局的視角對數據進行管理,導致無法建立統(tǒng)一的數據

管理規(guī)程、標準等,相應的數據管理監(jiān)督措施無法得到落實。組織

機構的數據考核體系也尚未建立,無法保障數據管理標準和規(guī)程的有

效執(zhí)行。

(2)多系統(tǒng)分散建設,沒有規(guī)范統(tǒng)一的省級數據標準和數據

模型。組織機構為應對迅速變化的市場和社會需求,逐步建立了各

自的信息系統(tǒng),各部門站在各自的立場生產、使用和管理數據,使

得數據分散在不同的部門和信息系統(tǒng)中,缺乏統(tǒng)一的數據規(guī)劃、可

信的數據來源和數據標準,導致數據不規(guī)范、不一致、冗余、無法

共享等問題出現,組織機構各部門對數據的理解難以應用一致的語言

來描述,導致理解不一致。.

第1頁

數據治理總體解決方案__________________________________________

(3)缺少統(tǒng)一的主數據,組織機構核心系統(tǒng)間的人員等主要

第1頁

數據治理總體解決方案

信息并不是存儲在一個獨立的系統(tǒng)中,或者不是通過統(tǒng)一的業(yè)務管

理流程在系統(tǒng)間維護。缺乏對集團公司或政務單位主數據的管理,

就無法保障主數據在整個業(yè)務范圍內保持一致、完整和可控,導致業(yè)

務數據正確性無法得到保障。

(4)缺乏統(tǒng)一的集團型數據質量管理流程體系。當前現狀中

數據質量管理主要由各組織部門分頭進行;跨局跨部門的數據質量

溝通機制不完善;缺乏清晰的跨局跨部門的數據質量管控規(guī)范與標準,

數據分析隨機性強,存在業(yè)務需求不清的現象,影響數據質量;數據

的自動采集尚未全面實現,處理過程存在人為干預問題,很多部門存在數

據質量管理人員不足、知識與經驗不夠、監(jiān)管方式不全面等問題;

缺乏完善的數據質量管控流程和系統(tǒng)支撐能力。

(5)數據全生命周期管理不完整。目前,大型集團或政務單

位,數據的產生、使用、維護、備份到過時被銷毀的數據生命周期

管理規(guī)范和流程還不完善,不能確定過期和無效數據的識別條件,

且非結構化數據未納入數據生命周期的管理范疇;無信息化工具支撐

數據生命周期狀態(tài)的查詢,未有效利用元數據管理。

2.1數據治理概念

數據治理是指將數據作為組織資產而展開的一系列的具體化工

作,是對數據的全生命周期管理。?xV?

第2頁

數據治理總體解決方案

數據治理的概述

2.1數據治理概念

數據治理是指將數據作為組織資產而展開的一系列的具體化工

作,是對數據的全生命周期管理。?

第2頁

數據治理總體解決方案

數據治理體系是指從組織架構、管理制度、操作規(guī)范IT應用技

術、績效考核支持等多個維度對組織的數據模型、數據架構、數據

質量、數據安全、數據生命周期等各方面進行全面的梳理、建設以及

持續(xù)改進的體系。

22數據治理目標

數據治理的目標是提高數據的質量準確性和完整性)保證數據

的安全隹(保密性、完整性及可用性)實現數據資源在各組織機構部

門的共享;推進信息資源的整合、對接和共享,從而提升集團公司或

政務單位信息化水平,充分發(fā)揮信息化作用。

■數據治理體系

數據治理體系包含兩個方面,一是數據質量核心領域,二是數據

質量保障機制。

具體兩者內容及相互關系可以參見下圖:

第3頁

數據治理總體解決方案

制度章程組織

?規(guī)章制度?組織架構

?管控辦法?組織層次

?考核機制?組織職責

主數

數據

■攵據治理核心領域

為了有效管理信息資源,必須構集團級數據治理體系。數據治

理體系包含數據治理組織、數據構架管理、主數據管理、數據質量

管理、數據服務管理及數據安全管理內容,這些內容既有機結合,又

相互支撐。

4.1數據模型

數據模型是數據構架中重要一部分,包括概念數據模型和邏輯

數據模型,是數據治理的關鍵、重點。理想的數據模型應該具有非

冗余、穩(wěn)定、一致、易用等特征。邏輯數據模型能涵蓋整個集團的

業(yè)務范圍,以一種清晰的表達方式記錄跟蹤集團單位的重要數據元

第4頁

數據治理總體解決方案

素及其變動,并利用它們之間各種可能的限制條件和關系來表達重

要的業(yè)務規(guī)則。數據模型必須在設計過程中保持統(tǒng)一的業(yè)務定義。

為了滿足將來不同的應用分析需要,邏輯數據模型的設計應該能夠

支持最小粒度的詳細數據的存儲,以支持各種可能的分析查詢。同

時保障邏輯數據模型能夠最大程度上減少冗余,并保障結構具有足夠

的靈活性和擴展性

4.2數據生命周期

一般包括數據生成及傳輸、數據存儲、數據處理及應用、數據銷

毀四個方面。

(1)數據生成及傳輸

數據應該能夠按照數據質量標準和發(fā)展需要產生,應采取措施

保證數據的準確性和完整性,業(yè)務系統(tǒng)上線前應該進行必要的安全

測試,以保證上述措施的有效性。對于手工流程中產生的數據在相

關制度中明確要求,并通過事中復核、事后檢查等手段保證其準確

性和完整性。數據傳輸過程中需要考慮保密性和完整性的問題,對

不同種類的數據分別采取不同的措施防止數據泄漏或數據被篡改。

(2)數據存儲

這個階段除了關注保密性、完整性之外,更要關心數據的可用

性,對于大部分數據應采取分級存儲的方式,不僅存儲在本地磁盤

第5頁

數據治理總體解決方案

上,還應該在磁帶上,甚至遠程復制到磁盤陣列中,或者采用光盤

第6頁

數據治理總體解決方案

庫進行存儲。對于存儲備份的數據要定期進行測試,確保其可訪問

其數據完整。數據的備份恢復策略應該由數據的責任部門或責任人

負責制定,信息化管理部門可以給予相應的支持。同時還需要注意

因為部門需要或故障處理的需要,可能對數據進行修改,必須在數

據管理辦法中明確數據修改的申請審批流程,審慎對待后臺數據修改。

(3)數據處理和應用

信息化相關部門需要對數據進行分析處理,以挖掘出對于管理

及業(yè)務開展有價值的信息,為保證過程中數據的安全性,一般應采

用聯機處理,系統(tǒng)只輸出分析處理的結果。但是實際中,因為相關

數據分析系統(tǒng)建設不到位,需要從數據庫中提取數據后再對數據進

行必要的分析處理,在這個過程中就需要關注數據提取操作是否可

能對數據庫造成破壞、提取出的數據在交付給分析處理人員的過程中

其安全性是否會降低、數據分析處理的環(huán)境安全性等等。

(4)數據銷毀

這個階段主要涉及數據的保密性。應明確數據銷毀的流程,采

用必要的工具,數據的銷毀應該有完整的記錄。尤其是對于需要送出

外部修理的存儲設備,送修之前應該對數據進行可靠的銷毀。

4.3數據標準

數據標準是集團單位建立的一套符合自身實際,涵蓋定義、操

第7頁

數據治理總體解決方案

作、應用多層次數據的標準化體系。

數據標準的建立是集團單位信息化、數字化建設的一項重要工

作,行業(yè)的各類數據必須遵循一個統(tǒng)一的標準進行組織,才能構成一

個可流通、可共享的信息平臺。

數據治理對標準的需求可以劃分為兩類,即基礎性標準和應用

性標準。前者主要用于在不同系統(tǒng)間,形成信息的一致理解和統(tǒng)一

的坐標參照系統(tǒng),是信息匯集、交換以及應用的基礎,包括數據分

類與編碼、數據字典、數字地圖標準;后者是為平臺功能發(fā)揮所涉

及的各個環(huán)節(jié),提供一定的標準規(guī)范,以保證信息的高效匯集和交

換,包括元數據標準、數據交換技術規(guī)范、數據傳輸協(xié)議、數據質量

標準等。

(1)數據分類與編碼

數據分類與編碼標準是信息化建設中標準化的一項基礎工作,

該類標準規(guī)定平臺匯集、交換相關信息統(tǒng)一的分類系統(tǒng)和排列順序

以及編碼規(guī)則,目的是在不同系統(tǒng)和用戶之間建立交通數據的一致

參照,對提高數據采集、處理和數據交換效率具有重要作用。數據

分類與編碼標準的制定將有力推進平臺標準化及交通信息化建設標準

化的進程。

(2)數據字典

第8頁

數據治理總體解;夬方案__________________________________________

針對實際需求,定義數據集,建立各個領域的數據字典,規(guī)范

第9頁

數據治理總體解決方案

數據概念和數據定義。在此基礎上,形成完備的集團單位數據集和數

據字典。

(3)元數據標準

元數據標準是描述數據資源的具體對象時所有規(guī)則的集合,它

包括了完整描述一個具體數據對象時所需要的數據項集合。針對各

種信息資源分別制定適當的元數據標準,可為信息的管理、發(fā)現和獲

取提供一種實際而簡便的方法,從而提高數據交換效率。

(4)數據交換標準

為了保證數據共享和交換的順利實現,必須明確定義和規(guī)范數

據交換的相關標準。數據交換的標準規(guī)范是集團單位綜合信息平臺

的核心標準。其中應當包括數據交換內容、數據交換格式、數據傳輸

方式、各類中心間數據接口的標準化等方面。

(5)數據質量標準

由于數據采集任務通常由其他二級平臺完成,數據治理平臺的

標準方法主要集中在數據的加工和管理上。應該重點開發(fā)的一個領

域是數據質量控制方法。應當從三個方面對數據質量方法進行研究:

“壞數據”或“不可靠數據”的識別,錯誤數據的編輯方法,以及缺

少值的處理。

4.4主數據

第10

數據治理總體解;夬方案__________________________________________

主數據管理要做的就是從各部門的多個業(yè)務系統(tǒng)中整合最核心

第11

數據治理總體解決方案

的、最需要共享的數據(主數據),集中進行數據的清洗和豐富,并且以

月除妨身既也詢準播1楠減蛾麒傳送給集團單位范圍內需要使

用這些數據的操作型應用系統(tǒng)和分析型應用系統(tǒng)。

主數據管理的信息流應為:

1)某個業(yè)務系統(tǒng)觸發(fā)對主數據的改動;

2)主數據管理系統(tǒng)將整合之后完整準、確的主數據傳送給所有有

關的應用系統(tǒng)

3)主數據管理系統(tǒng)為決策支持和數據倉庫系統(tǒng)提供準確的數

據源。

因此對于主數據管理要考慮運用主數據管理系統(tǒng)實現,主數據

管理系統(tǒng)的建設,要從建設初期就考慮整體的平臺框架和技術實現。

4.5數據質量

數據質量不高將影響數據倉庫應用程度不高。低下的數據質量

往往造成開發(fā)出來的系統(tǒng)與用戶的預期大相徑庭,數據質量關系建

設有關分析型信息系統(tǒng)成敗同,時數據資源是集團單位的戰(zhàn)略資源,合

理有效的使用正確的數據能指導集團單位做出正確的決策,提高省

綜合競爭力。不合理的使用不正確的數據(即差的數據質量)可導致

決策的失敗,正可謂差之毫厘、謬以千里。

數據質量管理包含對數據的絕對質量管理、過程質量管理。絕

第12

數據治理總體解決方案

對質量即數據的真實性、完備性、自治性是數據本身應具有的屬性。過

程質量即使用質量、存儲質量和傳輸質量,數據的使用質量是指數據被

正確的使用。再正確的數據,如果被錯誤的使用,就不可能得出正

確的結論。數據的存貯質量指數據被安全的存貯在適當的介質上。

所謂存貯在適當的介質上是指當需要數據的時候能及時方便的取出。

數據的傳輸質量是指數據在傳輸過程中的效率和正確性。

高質量的交通運輸行業(yè)數據至少有如下幾項要求:

一是正確性,在轉換、分析、存儲、傳輸、應用流程中不存在錯

誤;

二是完整性,數據庫應用或要求的所有記錄、字段都存在;

三是一致性,體現在整個數據庫的定義和維護方面,確保數據

在使用的整個過程中是一致的;

四是時效性,衡量指標是在指定的數據與真實的業(yè)務情況同步

的時間容忍度內,即指定的更新頻度內,及時被刷新的數據的百分比;

五是可靠性,提供數據的數據源必須能夠可靠穩(wěn)定地提供數據。數

據質量管理的規(guī)劃和實施包括以下內容:

一是數據質量管控體系的建立,包括數據質量的評估體系,定期

評估數據質量狀況;

二是在部門各個應用系統(tǒng)中的落實,包括每個應用系統(tǒng)中的數

第13頁

數據治理總體解決方案

據質量檢查等;

三是在最開始建立數據質量管理系統(tǒng)的時候,借助數據治理平

臺上,通過建立數據質量管理的規(guī)則來集中化地建立數據質量管理系

統(tǒng),發(fā)現問題并持續(xù)改進;

四是數據質量管理與業(yè)務稽核的結合,通過業(yè)務規(guī)則的稽核來

發(fā)現數據質量深層次的問題,將數據質量與業(yè)務一線結合起來,使業(yè)

務人員對數據質量問題有更加清晰和明確的認識。

完善的數據質量管理是保障各項數據治理工作能夠得到有效落

實,達到數據準確、完整的目標,并能夠提供有效的增值服務的重要

基礎。

4.6數據服務

數據整理最終目的就是要服務于各部門單位、人員等,能更準確

更快更方便的服務是數據服務管理的目標。

數據服務管理是指針對內部積累多年的數據,研究如何能夠充

分利用這些數據,分析行業(yè)業(yè)務流程優(yōu)化業(yè)務流程。數據使用的方

式通常包括對數據的深度加工和分析,包括通過各種報表、工具來

分析運營層面的問題,還包括通過數據挖掘等工具對數據進行深度

加工,從而更好的管理者服務。通過建立統(tǒng)一的數據服務平臺來滿

足針對跨部門、跨系統(tǒng)的數據應用。通過統(tǒng)一的數據服務平臺來統(tǒng)

第14頁

數據治理總體解決方案

一數據源,變多源為單源,加快數據流轉速度,提升數據服務的效

第15頁

數據治理總體解決方案

率。

4.7數據安全

由于集團單位的重要且敏感信息大部分集中在應用系統(tǒng)中,數

據安全更是至關重要。如何保障數據不被泄露和非法訪問,是非常

關鍵的問題。數據安全管理主要解決的就是數據在保存、使用和交換

過程中的安全問題。

數據安全管理主要體現在以下六個方面:

一是數據使用的安全性,包括基礎數據的保存、訪問和權限管理;

二是數據隱私問題,系統(tǒng)中采集的證件號碼、銀行賬號等信息

在下游分析系統(tǒng)和內部管理系統(tǒng)中,是否要進行加密,以避免數據被

非法訪問;

三是訪問權限統(tǒng)一管理,包括單點登錄問題及用戶名、數據和應

用的訪問授權統(tǒng)一管理;

四是數據安全審計,為數據修改、使用等環(huán)節(jié)設置審計方法,事

后進行審計和責任追究;

五是制度及流程建立,逐步建立數據安全性的管理辦法、系統(tǒng)

開發(fā)規(guī)范、數據隱私管理辦法及相應的應用系統(tǒng)規(guī)范、在管理決策和

分析類系統(tǒng)中的審計管理辦法等;

六是應用系統(tǒng)權限的訪問控制,建立集團級權限管理系統(tǒng),增

第16頁

數據治理總體解決方案

加數字水印等技術在應用系統(tǒng)中的使用

■攵據治理保障機制

5.1制度章程

5.1.1規(guī)章制度

數據治理章程類似于企業(yè)的公司條例。該章程闡明數據治理的主

要目標、相關工作人員、職責、決策權利和度量標準。

具體可參見附件數據管理規(guī)范

5.1.2管控辦法

管控辦法是基于規(guī)章制度與工具的結合可,落地的操作的辦法。具

體可參見附件數據質量評估辦法

5.1.3考核機制

考核是是保障制度落實的根本,建立明確考核制度,實際操作

中可根據集團單位情況,建立相應針對數據治理方面的考核辦法,

并與個人績效相關聯??蓞⒖脊芾韺W中相關考核、績效管理相關部分。

對于數據治理的考核,可見下圖進行理解:

第17頁

數據治理總體解決方案

執(zhí)行是管控體系落地的關鍵

業(yè)務梳理

以韁效的手段促進數據戰(zhàn)■

管理,將數據生產者、使用者、管

理者及擁有者關聯起來,形成T

可雕砌班伊系,觸

持續(xù)的高數據質量

0慌理核心業(yè)務源.依理流

0制定數據譽褂§際(CK同標準)

0以標準對行質量踩直.sua.

分析

0黜行級耐

集成離質金數據,形成朗@中

0心,實現共享、分亥、挖漏

0以績效手段促避.保SB數更管

喇ffem有蛇行

考接對象數據負責人

叨質量問題

數兆質量問施g考旗標準:

的處理個數和月35加分項

3tm1.在地定時間內處理完成fWS8?t問

題,加1分;否則不力吩;

第18頁

數據治理總體解決方案

號像時象效18管理員

承婀準:

問88預駕.分

發(fā)L在發(fā)現敏據質量問題時,在規(guī)定時i

內,及時預警用1知相關人員處理,不

敵I,扣3封;

5.2數據治理組織

5.2.1組織架構

有效的組織機構是項目成功的有力保證,為了達到項目預期目

標,在項目開始之前對于組織機構及其責任分工做出規(guī)劃是非常必要

的,數據治理項目管理組織建議宜采用如圖所示的組織結構:

第19頁

數據治理總體解決方案

數據治理委員會由集團公司的高層領導者組成。委員會定義數

據治理愿景和目標;組織內跨業(yè)務部門和IT部門進行協(xié)調;設置

數據治理計劃的總體方向;在發(fā)生策略分歧時進行協(xié)調。此委員會也

將包含來自部門或子公司的領導代表,以及來自各單位視數據為機

構資產的信息科技部門的代表。這些高層管理人員是數據治理計劃的

所有擁護者,確保在整個組織內獲得支持。*

第20頁

數據治理總體解決方案__________________________________________

數據治理工作組是組織內委員會下面的下一個級別。工作組執(zhí)

第21頁

數據治理總體解決方案

行數據治理計劃。工作組負責監(jiān)督數據管理員工作。數據治理工作組

由數據治理委員會中各局領導主持。

每各業(yè)務部門有至少一位業(yè)務分析員,信息科技部門設置數據

質量分析員、數據管理員、集成開發(fā)人員。各工作人員負責本部門數

據的質量,履行職責,解決具體的問題。

5.2.3組織職責

根據數據管理工作的實際需要,在業(yè)務管理部門、技術管理部門

和業(yè)務應用部門確定各工作人員的職責。

數據治理委員會的職責范圍:

1)從戰(zhàn)略角度來統(tǒng)籌和規(guī)劃,對數據資產和系統(tǒng)進行清理,球

數據治理的范圍;明確數據源的出處、使用和管理的流程及職責;

2)明確數據治理的組織、功能、角色和職責;

3)負責各工作組成員的培訓工作;

4)負責審查各工作小組的目標、原則,批準數據管理的相關

制度、標準及流程;

5)負責確定數據治理的工具、技術和平臺;

6)負責制定數據治理的評估指標、方法。

數據治理工作小組,其主要工作職責是:

負責數據治理的牽頭,組織、指導和協(xié)調本單位的數據治理工

第22頁

數據治理總體解決方案

作;

第23頁

數據治理總體解決方案

綜合數據治理管控辦法、數據治理考核機制等有關規(guī)章制度的牽

頭制定、修改等;

負責數據的分析整理并出具數據指標報告;

負責數據的監(jiān)測預測工作;

建立數據沖突的處理流程和數據變更控制流程。

負責對基礎數據質量的檢測、發(fā)布、考核和清理完善工作。

工作組成員:業(yè)務分析員、數據質量分析員、數據管理員、集

成開發(fā)員

這些不同的角色在數據治理過程中承擔著彼此不同,而又相輔

相成的職責。其中集成開發(fā)人員在數據治理流程中需要肩負起數據訪

問、驗證數據結構、驗證數據、交付數據以及數據庫/知識庫的構建等

角色,因此他們的工作包括

>訪問及交付相應數據給業(yè)務用戶

>提高生產力和性能

>最大化減少異常/出錯的影響

>開發(fā)和完善技術最佳實踐

數據質量分析員在數據治理流程中負責數據的剖析、清洗匹配合

并等。工作包括:

>為開發(fā)人員定義數據規(guī)格及標準

第24頁

數據治理總體解決方案

>為機構有效的追蹤數據質量問題

第25頁

數據治理總體解決方案

>實施被業(yè)務人員和數據管理員定義正確的數據質量規(guī)則

>不間斷的監(jiān)控數據質量水平及問題

業(yè)務分析人員在數據治理流程中負責定義數據的轉換規(guī)則,工作

包括:

>與需求開發(fā)人員協(xié)作,正確捕獲和解析業(yè)務需求

>與開發(fā)人員和數據管理員協(xié)作,為業(yè)務用戶縮短數據產生價值

的時間

數據管理員需要定義引證數據,并管理元數據,工作包括:

>保證數據的質量、正確、完整、一致、審計及安全性

>定義引證/參考數據

>為組織機構數據實體給出正確業(yè)務定義

>為組織機構解決混淆和有爭論的數據定義

5.3流程管理

流程管理包括流程目標、流程任務、流程分級,根據數據治理

的內容,建立相應流程,且遵循本單位數據治理的規(guī)則制度。實際

操作中可結合所使用的數據治理工具,與數據治理工具供應商進行協(xié)

商,建立符合集團公司的流程管理。

第26頁

數據治理總體解決方案

5.4IT技術應用

5.4.1支撐平臺

現市場上關于數據治理平臺存在不同的成熟產品,但在功能實現

上大致相同,具體可參加下圖了解。

第27頁

數據治理總體解決方案

對數據平臺業(yè)務的支持一元數據

敷州平化

數枇源第績

無數據管

理員

?臺南我你產價相關無數

4th?費第堂更卷幅分析

陶州開發(fā)才為開發(fā)點用出供叁考元數據子系&

M.?敷恭問西正球分析

?敏燃變!H或喇評估申請

數耨陽務

對數據平臺業(yè)務的支持一數據質量

?,

*短出憲尊堂議

應刖開發(fā)有

?定義檢核而求與紀則

?分析數岷*價敢弱斷呈

?發(fā)現、及布敷但檢情向器

孵小機構特定最

業(yè)務部門?r

統(tǒng)敝據隨量

?共出業(yè)務依期質量敷*質量理員

心樓需求槍住

第28頁

數據治理總體解決方案

對數據平臺業(yè)務的支持-數據服務

立?的好干件服務即需

腳用師費青

?愛供激州甲價康務

?1"F

業(yè)務?門?9救捌平介有效的堰致據魔務中管

理員

數據治理相關系統(tǒng)關系

數綱泊罐ff

數據服務干

_t免或認證

.3日染)

系憒

中-點登錄與效掘陵量管班

你色管理千手歧

處供檢愫系依據平付

姨一"iff統(tǒng)元數期

“網廣管

卷慢缺金

用戶4機構提供片衣船

元敷州子

何息制第構元敷燃

率娩

A

統(tǒng)一用戶

管理系統(tǒng)

提供標術相

題防標津美元繳抗

f系統(tǒng)

5.4.2技術規(guī)范

技術規(guī)范是保障數據治理平臺可持續(xù)管理的基礎,隨著數據量的

第29頁

數據治理總體解決方案

增長、技術水平的發(fā)展,為更好、可持續(xù)的實現數據資產的管理、

第30頁

數據治理總體解決方案

應用,需建立明確的技術規(guī)范。

第31頁

數據治理總體解決方案

附件A數據管理規(guī)范

為逐步提高數據資源利用效果推,動信息化建設管理向標準化、信

息化和數字化方向發(fā)展,數據管理應遵循以下原則:

。統(tǒng)一規(guī)范。數據標準要嚴格執(zhí)行省交通運輸廳的統(tǒng)一標準。

a分級管理。實行分層級的數據管理模式,明確職責分工,

層層落實責任。

a過程控制。建立數據從采集、報送、審核到應用、維護全過

程的控制規(guī)范,保證數據質量,提高應用效果。

4保障安全。建立數據訪問的身份驗證、權限管理及定期備

份等安全制度,規(guī)范操作,做好病毒預防、入侵檢測和數據保密工作。

S數據共享。整合應用系統(tǒng),做到入口唯一,實現數據一次

采集,集中存儲,共享使用。

數據管理的規(guī)范工作包括:數據標準、數據采集、數據審核、

數據維護、數據分析、數據應用、數據發(fā)布、數據傳輸、數據存儲

(備份、恢復)數據安全管理、數據質量監(jiān)控、數據管理考核等。

(一)數據標準

第一條安徽省交通運輸行業(yè)數據必須按國家交通部制定的數據

標準和代碼規(guī)范執(zhí)行。國家交通部標準中未包括的內容執(zhí)行安徽

第32頁

數據治理總體解決方案

省交通運輸廳的統(tǒng)一規(guī)范。

第二條在數據采集工作中,各級應嚴格依據省局制定的標準進

行數據的采集錄入、審核修正、數據質量監(jiān)控和管理考核,確保數據質

*0

第三條數據指標的設定和修改必須嚴格執(zhí)行軟件的管理規(guī)定和

程序。凡使用省局統(tǒng)一軟件的,市局對有關數據指標無權制定和修改,

必須執(zhí)行全省統(tǒng)一規(guī)范。使用非省局統(tǒng)一軟件的,市局業(yè)務管理部門

應根據工作需要和所管軟件的需求變化及,時提出設定(修改)數據

指標的具體內容、質量標準和時間要求,并明確數據錄入部門、錄

入崗位和錄入時限,報分管領導批準后提交安徽省交通運輸聯網運

行管理中心。安徽省交通運輸聯網運行管理中心應根據業(yè)務管理部

門的需求,及時制定(修改)數據采集的技術規(guī)范,包括數據采集

格式、權限設定和方法步驟等,并按時向業(yè)務管理部門通報所采集

數據的指標內容變化情況,以便業(yè)務部門根據采集到的指標提出數

據加工需求。

第四條數據指標的確定應以有效實用和優(yōu)化服務為目標不蹴

高數據集中度和信息共享度,科學歸并各項業(yè)務的同類、同屬性指標,

避免業(yè)務部門重復上報數據。

(二)數據采集

第33頁

數據治理總體解決方案__________________________________________

第一條數據采集重點是原始數據的采集原,始數據主要包括業(yè)

第34頁

數據治理總體解決方案

務部門通過紙質資料報送的數據,通過電子傳輸報送的數據(含電磁

介質報送的數據和網絡傳輸報送的數據不同);相關部門通過紙質、

電子傳輸提供的數據;管理業(yè)務處理結果(檢查、調查、核實、認定、

審批等)產生的數據。

第二條數據采集主要依靠應用系統(tǒng)進行錄入(導入)現用應用

系統(tǒng)不能滿足數據采集需要的,通過相關系統(tǒng)的補錄模塊進行數據錄

入(導入I

第三條數據采集方式分為手工采集、數據電文導入和光學字符

識別(OCR)、圖形掃描等其他方式。

為保障數據采集的質量,提高數據采集的效率,應充分應用信息

化技術,最大限度地減少手工錄入。

第四條為提高數據錄入質量,各市交通部門有關單位要認真執(zhí)

行資料數據的核對制度,嚴格以原始資料為依據,確保錄入數據的一致

性和準確性。數據采集錄入前,操作人員應先將準備錄入的原始資

料或有關表證單書進行完整性、邏輯性、真實性審核,發(fā)現漏填、

錯填和邏輯關系不符的,應于做出修正或補正;

第五條對通過電子傳輸方式報送數據的數,據必須通過接收軟

件相應設置的完整性、邏輯性審核。

第六條各級各單位應建立紙質數據和電子數據的核對制度明,

第35頁

數據治理總體解決方案

確職責分工和工作程序,落實崗位責任,發(fā)現問題及時處理。

第36頁

數據治理總體解決方案

第七條對于交通部、省廳沒有規(guī)定的數據采集標準規(guī)范,領市

交通部門及信息化責任部門應根據不同的數據采集崗位和軟件覆蓋

面,細化工作職責,量化作業(yè)標準,結合業(yè)務操作規(guī)程,建立統(tǒng)一的

數據采集錄入操作規(guī)范和管理制度。數據采集規(guī)范應包括數據來源、

采集時間、操作崗位、操作步驟、操作內容和采集內容的邏輯校驗等

要素。

第八條各級數據采集人員應強化數據質量意識,熟練掌握正

確的采集和審核方法,按照部門職責分工,嚴格按照相關操作規(guī)范采集各

類數據。

第九條任何人不準擅自委托他人以本人用戶名錄入數據。確

因工作需要委托他人以自己名義錄入的,必須報經主管領導批準,并

及時更改口令。

第十條安徽省交通運輸聯網運行管理中心應簡化、歸并各級

地單位報送的報表,統(tǒng)一采集,集中處理,自動生成,分別使用,提

高工作效率和質量,減輕各級單位的工作量。

(三)數據審核

第一條數據審核是確保數據質量的重要環(huán)節(jié)審。核的重點是

數據的及時性、完整性、真實性、準確性和規(guī)范性。

(1)及時性是指數據要在規(guī)定的時間內采集,確保應用系統(tǒng)

第37頁

數據治理總體解決方案

數據與實際交通信息業(yè)務同步;

第38頁

數據治理總體解決方案

(2)完整性是指數據采集應按照有關規(guī)定及相應表證、、單、

書采集的要求進行,不得缺表或漏項,杜絕數據的機外操作和循環(huán);

(3)真實性是指數據采集要如實反映交通行業(yè)管理實際,以

合法、真實的原始資料為依據,不得隨意捏造

(4)準確性是指數據采集應準確反映交通行業(yè)管理實際,與

紙質資料數據一致,數據之間邏輯相符,不得出現運算錯誤或邏輯錯

誤;

(5)規(guī)范性是指數據采集應按照統(tǒng)一的業(yè)務標準及技術規(guī)范

進行。

第二條各市交通部門及相關崗位人員按照自身工作職責范圍,

負責相關數據的日常審核。

第三條為加強數據質量管理,省廳建立數據審核制度,數據管理

員定期或不定期對已采集數據進行審核。對審核中發(fā)現的數據質量問

題應及時反饋至具體的原始數據采集崗,限期補錄修正。

第四條各級可采取人工抽樣、數據軟件檢測等方式進行數據審

核。對檢索出不符合標準的數據,反饋至原數據采集崗進行補錄修正。

在數據應用環(huán)節(jié)發(fā)現的數據采集差錯,應通過相關業(yè)務管理部門的

數據管理員進行審核確認,然后反饋至原數據采集崗進行變更修正。

第五條審核中發(fā)現的差錯應及時通知相關部門。

第39頁

數據治理總體解決方案

第六條數據審核崗人員與數據采集崗人員對數據問題有異議

的,由上級業(yè)務主管部門負責對爭議事項做出裁定。

第七條對各級數據審核發(fā)現問題數據基層分局已無權限修正

的,嚴格按照數據維護規(guī)定程序開展修正工作,任何人不得擅自修改。

(四)數據維護

第一條數據維護包括對數據中錯誤數據的修正不、完整數據的

補充、垃圾數據的清理及歷史數據的遷移等。

第二條各市交通業(yè)務管理部門應結合各應用系統(tǒng)制定詳細的數

據維護工作制度,明確數據維護的權限、職責,嚴格按照工作制度進

行數據維護。已經進入應用系統(tǒng)的數據,不得擅自修改、刪除。

第三條對錯誤數據的修正和不完整數據的補充省,廳統(tǒng)一按以

下程序處理:

(D對尚未錄入應用系統(tǒng)或已錄入尚保留修改權限的數據需

修改的,可由前臺原數據采集崗根據審核意見糾正后重新錄入(或直

接糾正);

⑵對已錄入應用系統(tǒng)的數據,經審核發(fā)現錯誤,前臺原數據采

集崗已無權限修改的,應根據具體業(yè)務工作流程和要求實行層級審批修正。

第四條對已錄入應用系統(tǒng)需層級審批修正的數據市級信息

第40頁

數據治理總體解決方案

部門有權限處理的,應由數據修正申請單位及時提出數據修正申請,報

數據所屬系統(tǒng)的責任業(yè)務管理科室審核審批。市信息管理部門同意

修正或在接到同意修正的審批后辦理。

對經確認不能予以修正的,有權修正單位應及時向申請單位或相

關人員說明原因。

第五條對需由省數據中心辦理的數據修正事項,應由申請單

位及時提出數據修正申請,分別報經區(qū)市信息管理部門及責任業(yè)務管

理科室審批。省級數據中心在接到同意修正的申批后辦理。

對經確認不能予以修正的,有關單位應及時向數據修正申請單位

及有關人員說明原因。

第六條對不按規(guī)定程序上報審批的數據修正申請,各級數據

管理的技術管理部門不予以修改。

第七條對經查實,屬有關單位弄虛作假、人為調整指標等主

觀因素造成其無法自行恢復的數據錯誤,各級數據管理的技術管理部

門有權不予修正,并向省交通運輸單位報告。

第八條各級數據管理的技術管理部門應按照系統(tǒng)初始維護設

置和上級部門分配的權限實施數據修正業(yè)務。執(zhí)行過程中如遇權限

調整,各級數據管理的技術管理部門應在權限變動后十五日內向轄區(qū)

內本級和下一級業(yè)務部門公告通知。

第41頁

數據治理總體解決方案__________________________________________

第九條數據維護前應做好相應備份工作數。據維護工作應嚴格

第42頁

數據治理總體解決方案

備案,對每項數據維護的內容、時間、維護原因、責任人等進行詳細

記錄,涉及的書面材料必須登記存檔。

第十條應用系統(tǒng)因數據平臺轉換、系統(tǒng)升級等原因需對歷史數據

轉儲、遷移的,由信息技術部門會同業(yè)務管理部門確定歷史數據的處理方

法,保證新舊數據的銜接和系統(tǒng)的平穩(wěn)過渡。

第十一條各級信息技術部門應加強對數據的監(jiān)控定,期檢測數據

的存儲,分析數據的構成,提出數據清理優(yōu)化的方案,經

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論