




版權(quán)說(shuō)明:本文檔由用戶(hù)提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1T/ZXCHXXXX-2022產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)規(guī)范本文件規(guī)定了產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)的指標(biāo)和實(shí)施規(guī)范。本文件適用于指導(dǎo)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)的質(zhì)量評(píng)價(jià)工作。2規(guī)范性引用文件下列文件中的內(nèi)容通過(guò)文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中,注日期的引用文件,僅該日期對(duì)應(yīng)的版本適用于本文件;不注日期的引用文件,其最新版本(包括所有的修改單)適用于本文件。GB32100-2015法人和其他組織統(tǒng)一社會(huì)信用代碼編碼規(guī)則GB/T25000.12-2017系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)(SQuaRE)第12部分:數(shù)據(jù)質(zhì)量模型GB/T25000.24-2017系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)(SQuaRE)第24部分:數(shù)據(jù)質(zhì)量測(cè)量GB/T35295-2017信息技術(shù)大數(shù)據(jù)術(shù)語(yǔ)GB/T36344-2018信息技術(shù)數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)3術(shù)語(yǔ)和定義下列術(shù)語(yǔ)和定義適用于本文件。3.1數(shù)據(jù)data信息的可再解釋的形式化表示,能夠被計(jì)算機(jī)識(shí)別、存儲(chǔ)和加工處理。[來(lái)源:GB/T35295-2017,定義2.2.1,有修改]3.2產(chǎn)業(yè)數(shù)據(jù)industrydata產(chǎn)業(yè)數(shù)據(jù),是指有效開(kāi)展各種經(jīng)濟(jì)活動(dòng)的實(shí)體,在組織生產(chǎn)、經(jīng)營(yíng)或業(yè)務(wù)活動(dòng)過(guò)程中依法收集、產(chǎn)生的數(shù)據(jù)。。3.3產(chǎn)業(yè)數(shù)據(jù)倉(cāng)Industrydatawarehouse是有效開(kāi)展各種經(jīng)濟(jì)活動(dòng)的實(shí)體,在組織生產(chǎn)、經(jīng)營(yíng)或業(yè)務(wù)活動(dòng)的過(guò)程中依法收集、產(chǎn)生的數(shù)據(jù)匯集、融合形成的數(shù)據(jù)資源池。2T/ZXCHXXXX-20223.4數(shù)據(jù)質(zhì)量dataquality在指定條件下使用時(shí),數(shù)據(jù)的特性滿(mǎn)足明確的和隱含的要求的程度。[來(lái)源:GB/T36344,2.3]3.5數(shù)據(jù)集dataset具有一定主題,可以標(biāo)識(shí)并可以被計(jì)算機(jī)化處理的數(shù)據(jù)集合。[來(lái)源:GB∕T36344-2018]3.6數(shù)據(jù)生命周期datalifecycle數(shù)據(jù)從數(shù)據(jù)的收集、存儲(chǔ)、使用、加工、傳輸、提供、公開(kāi)、刪除等各種生存形態(tài)的演變過(guò)程。4數(shù)據(jù)指標(biāo)框架4.1評(píng)價(jià)指標(biāo)框架產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)體系如圖1所示,具體內(nèi)容簡(jiǎn)要說(shuō)明如下:——數(shù)據(jù)規(guī)范性:數(shù)據(jù)符合數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)模型、業(yè)務(wù)規(guī)則、元數(shù)據(jù)或者權(quán)威參考數(shù)據(jù)的程度?!獢?shù)據(jù)完整性:按照數(shù)據(jù)規(guī)則要求,數(shù)據(jù)元素被賦予數(shù)據(jù)值的程度和數(shù)據(jù)記錄的完整性等。——數(shù)據(jù)準(zhǔn)確性:表示數(shù)據(jù)所描述的實(shí)體真實(shí)值的程度,如數(shù)據(jù)內(nèi)容正確性、格式規(guī)范性等?!獢?shù)據(jù)一致性:數(shù)據(jù)與其他特定上下文中使用的數(shù)據(jù)無(wú)矛盾的程度,如表內(nèi)跨列邏輯一致性、跨表邏輯一致性等。——數(shù)據(jù)時(shí)效性:數(shù)據(jù)在時(shí)間變化中的正確程度,包括數(shù)據(jù)及時(shí)性、數(shù)據(jù)時(shí)序性等。——數(shù)據(jù)唯一性:數(shù)據(jù)中有唯一性要求的數(shù)據(jù)元素內(nèi)容不能重復(fù),如單獨(dú)唯一性和條件唯一性。3T/ZXCHXXXX-20224.2評(píng)價(jià)指標(biāo)表頭指標(biāo)詳情說(shuō)明中表頭信息詳情說(shuō)明如下:a)指標(biāo)編號(hào)及編碼規(guī)則:指標(biāo)編號(hào)是評(píng)價(jià)指標(biāo)的唯一性編號(hào),由一級(jí)指標(biāo)和二級(jí)指標(biāo)共4位數(shù)字組成。編碼規(guī)則見(jiàn)圖2.圖2指標(biāo)編碼規(guī)則1)一級(jí)指標(biāo):由2位數(shù)字組成,詳情見(jiàn)表1。表1一級(jí)指標(biāo)編碼及含義數(shù)據(jù)唯一性2)二級(jí)指標(biāo):由2位數(shù)字組成的順序碼,范圍01~99a)指標(biāo)名稱(chēng):評(píng)價(jià)指標(biāo)的名稱(chēng)。b)指標(biāo)釋義:評(píng)價(jià)指標(biāo)的解釋。c)實(shí)現(xiàn)方式:評(píng)價(jià)指標(biāo)如何度量的方式。d)計(jì)算方法:評(píng)價(jià)指標(biāo)的計(jì)算方法。e)指標(biāo)樣例:對(duì)評(píng)價(jià)指標(biāo)進(jìn)一步說(shuō)明的樣例。4.3指標(biāo)詳細(xì)說(shuō)明4.3.1數(shù)據(jù)規(guī)范性數(shù)據(jù)的規(guī)范性,從三個(gè)方面來(lái)評(píng)價(jià),分別是業(yè)務(wù)規(guī)范、技術(shù)規(guī)范和安全與隱私規(guī)范。a)業(yè)務(wù)規(guī)范的要求:一是數(shù)據(jù)符合標(biāo)準(zhǔn)化要求的程度,標(biāo)準(zhǔn)化要求包括國(guó)際標(biāo)準(zhǔn)、國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)和地方標(biāo)準(zhǔn)等;二是數(shù)據(jù)符合權(quán)威參考要求的程度,權(quán)威參考主要指國(guó)家、行業(yè)或地方上權(quán)威機(jī)4T/ZXCHXXXX-2022構(gòu)發(fā)布的正式文件;三是數(shù)據(jù)符合組織業(yè)務(wù)規(guī)則要求的程度,比如委辦局根據(jù)業(yè)務(wù)需要制定的數(shù)據(jù)規(guī)范要求。b)技術(shù)規(guī)范包含數(shù)據(jù)模型和元數(shù)據(jù),評(píng)價(jià)數(shù)據(jù)的組織形式、定義符合數(shù)據(jù)模型的度量和元數(shù)據(jù)的定義。c)安全和隱私保護(hù)規(guī)范是指數(shù)據(jù)符合安全要求和隱私保護(hù)的程度。數(shù)據(jù)規(guī)范性評(píng)價(jià)指標(biāo)詳情見(jiàn)表2。表2數(shù)據(jù)規(guī)范性評(píng)價(jià)指標(biāo)式中:元素的個(gè)數(shù);量明式中:元素的個(gè)數(shù);式中:的個(gè)數(shù);度式中:元素的個(gè)數(shù);理供5T/ZXCHXXXX-20224.3.2數(shù)據(jù)完整性數(shù)據(jù)完整性,指是否存在構(gòu)成信息的所有必要的數(shù)據(jù),不具備完整性的數(shù)據(jù)通常被看作已損壞或者數(shù)據(jù)丟失。數(shù)據(jù)完整性通常包括列完整性和數(shù)據(jù)集完整性,其中列完整性是指表中的一列沒(méi)有缺失的程度,包括與業(yè)務(wù)信息相關(guān)的數(shù)據(jù)實(shí)體及實(shí)體屬性沒(méi)有缺失的程度;數(shù)據(jù)集完整性是指數(shù)據(jù)集中應(yīng)出現(xiàn)的數(shù)據(jù)記錄沒(méi)有出現(xiàn)的程度。注:數(shù)據(jù)記錄的參照完整性,建議放在數(shù)據(jù)一致性或準(zhǔn)確性維度中,為避免重復(fù),本節(jié)不再出現(xiàn)。數(shù)據(jù)完整性評(píng)價(jià)指標(biāo)詳情見(jiàn)表3。表3數(shù)據(jù)完整性評(píng)價(jià)指標(biāo)4.3.3數(shù)據(jù)準(zhǔn)確性準(zhǔn)確性指標(biāo)主要用于評(píng)價(jià)數(shù)據(jù)準(zhǔn)確表示其所描述的真實(shí)實(shí)體(實(shí)際對(duì)象)真實(shí)值的程度,如數(shù)據(jù)內(nèi)容正確性、數(shù)據(jù)格式準(zhǔn)確性、數(shù)據(jù)重復(fù)率等。數(shù)據(jù)準(zhǔn)確性評(píng)價(jià)指標(biāo)詳情見(jiàn)表4。表4數(shù)據(jù)準(zhǔn)確性評(píng)價(jià)指標(biāo)期6T/ZXCHXXXX-2022率況4.3.4數(shù)據(jù)一致性一致性指標(biāo)主要用于評(píng)價(jià)表內(nèi)或跨表數(shù)據(jù)的一致程度,包括表內(nèi)跨列等值一致性、表內(nèi)跨列邏輯一致性、跨表等值一致性、跨表邏輯一致性、跨表數(shù)據(jù)源唯一等。數(shù)據(jù)一致性評(píng)價(jià)指標(biāo)詳情見(jiàn)表5。表5數(shù)據(jù)一致性評(píng)價(jià)指標(biāo)持一致計(jì)值一致否保持一致輯關(guān)系一致內(nèi)容一致值4.3.5數(shù)據(jù)時(shí)效性時(shí)效性指標(biāo)主要體現(xiàn)在數(shù)據(jù)更新及時(shí)和在時(shí)效范圍內(nèi)有效,數(shù)據(jù)及時(shí)性應(yīng)盡可能貼合業(yè)務(wù)實(shí)際發(fā)生的時(shí)間點(diǎn),包括時(shí)間正確性、數(shù)據(jù)及時(shí)性、跨表等值一致性、數(shù)據(jù)時(shí)序性、數(shù)據(jù)授權(quán)使用時(shí)效性等。數(shù)據(jù)時(shí)效性評(píng)價(jià)指標(biāo)詳情見(jiàn)表6。7T/ZXCHXXXX-2022表6數(shù)據(jù)時(shí)效性評(píng)價(jià)指標(biāo)性性性\性\4.3.6數(shù)據(jù)唯一性唯一性指標(biāo)主要體現(xiàn)在有唯一性要求的數(shù)據(jù)元素內(nèi)容不能重復(fù),包括單獨(dú)唯一性和條件唯一性。數(shù)據(jù)唯一性評(píng)價(jià)指標(biāo)詳情見(jiàn)表7。表7數(shù)據(jù)唯一性評(píng)價(jià)指標(biāo)單獨(dú)唯一性量復(fù)條件唯一性值必須唯一5評(píng)價(jià)流程5.1評(píng)價(jià)規(guī)劃8T/ZXCHXXXX-2022執(zhí)行產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)任務(wù)之前,應(yīng)根據(jù)業(yè)務(wù)特征、數(shù)據(jù)需求、數(shù)據(jù)質(zhì)量嚴(yán)重程度、整改難度等,制定相應(yīng)的評(píng)價(jià)方案,評(píng)價(jià)方案應(yīng)至少包含評(píng)價(jià)目的、評(píng)價(jià)范圍、評(píng)價(jià)內(nèi)容、評(píng)價(jià)方式、評(píng)價(jià)結(jié)果等。規(guī)劃評(píng)價(jià)方案時(shí)宜確保適用該方案的各個(gè)評(píng)價(jià)對(duì)象的評(píng)價(jià)一致性和可重復(fù)性。5.2職責(zé)分工評(píng)價(jià)方工作職責(zé):——制定產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)方案;——根據(jù)評(píng)價(jià)方案,組織實(shí)施產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)活動(dòng);——對(duì)評(píng)價(jià)過(guò)程中發(fā)現(xiàn)的質(zhì)量問(wèn)題進(jìn)行持續(xù)跟蹤監(jiān)督;——建立產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)報(bào)送機(jī)制,定期進(jìn)行通報(bào)。被評(píng)價(jià)方工作職責(zé):——配合省級(jí)部門(mén)對(duì)本地市產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)工作,提供參評(píng)所需資料及數(shù)據(jù)信息;——對(duì)發(fā)現(xiàn)的質(zhì)量問(wèn)題進(jìn)行持續(xù)改進(jìn)并將改進(jìn)后得質(zhì)量評(píng)價(jià)結(jié)果報(bào)送至省級(jí)部門(mén)。5.3確定指標(biāo)結(jié)合評(píng)價(jià)對(duì)象業(yè)務(wù)特征、數(shù)據(jù)質(zhì)量需求,選擇符合評(píng)價(jià)對(duì)象產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量實(shí)際的指標(biāo),并設(shè)定指標(biāo)權(quán)重,形成與之對(duì)應(yīng)的評(píng)價(jià)體系。所采用的評(píng)價(jià)指標(biāo)應(yīng)參考第四章節(jié)中得評(píng)價(jià)指標(biāo),保證評(píng)價(jià)結(jié)果的科學(xué)性、客觀(guān)性和全面性。指標(biāo)選取應(yīng)考慮但不限于以下方面:——評(píng)價(jià)對(duì)象業(yè)務(wù)特征、產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量需求、特殊業(yè)務(wù)需求等;——已建立的數(shù)據(jù)模型;——指標(biāo)數(shù)據(jù)可獲得;——指標(biāo)之間宜避免高度線(xiàn)性相關(guān);——指標(biāo)應(yīng)能保證評(píng)價(jià)結(jié)果的科學(xué)性、客觀(guān)性和全面性。5.4評(píng)價(jià)實(shí)施5.4.1評(píng)價(jià)實(shí)施方法數(shù)據(jù)質(zhì)量評(píng)價(jià)實(shí)施包括人工分析評(píng)價(jià)和產(chǎn)品自動(dòng)化評(píng)價(jià)兩種方式,人工分析評(píng)價(jià)指的是通過(guò)人工手動(dòng)的方式,根據(jù)數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)質(zhì)量規(guī)則,對(duì)數(shù)據(jù)資源進(jìn)行質(zhì)量評(píng)估,如數(shù)據(jù)對(duì)組織內(nèi)業(yè)務(wù)規(guī)則類(lèi)規(guī)范的滿(mǎn)足度評(píng)價(jià),產(chǎn)品自動(dòng)化評(píng)價(jià)指的是通過(guò)軟件工具,批量配置數(shù)據(jù)資源的質(zhì)量規(guī)則,從而實(shí)現(xiàn)對(duì)數(shù)據(jù)資源的評(píng)價(jià),并輸出相應(yīng)的質(zhì)量評(píng)價(jià)報(bào)告,如數(shù)據(jù)的唯一性、空值率質(zhì)量評(píng)價(jià)。5.4.2評(píng)價(jià)對(duì)象范圍產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià)的評(píng)價(jià)對(duì)象范圍應(yīng)覆蓋各級(jí)單位在采集、歸集、治理與共享過(guò)程中的各類(lèi)數(shù)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)資源,包括基礎(chǔ)數(shù)據(jù)、主題數(shù)據(jù)、專(zhuān)題數(shù)據(jù)等。9T/ZXCHXXXX-20225.4.3選取評(píng)價(jià)指標(biāo)針對(duì)不同類(lèi)別數(shù)據(jù)資源,以及數(shù)據(jù)資源在整個(gè)數(shù)據(jù)生命周期的不同環(huán)節(jié),應(yīng)合理選取適應(yīng)的評(píng)價(jià)指標(biāo)對(duì)數(shù)據(jù)質(zhì)量進(jìn)行評(píng)價(jià),例如在數(shù)據(jù)采集環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的準(zhǔn)確性與時(shí)效性,在數(shù)據(jù)歸集環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的完整性與時(shí)效性,在數(shù)據(jù)融合環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的準(zhǔn)確性、唯一性。5.4.4數(shù)據(jù)質(zhì)量核驗(yàn)數(shù)據(jù)質(zhì)量核驗(yàn)是發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問(wèn)題的主要過(guò)程,應(yīng)根據(jù)評(píng)價(jià)對(duì)象、評(píng)價(jià)指標(biāo)通過(guò)數(shù)據(jù)進(jìn)行探查與檢測(cè),發(fā)現(xiàn)并記錄數(shù)據(jù)質(zhì)量問(wèn)題。數(shù)據(jù)質(zhì)量的核驗(yàn)應(yīng)采用全量核驗(yàn)、增量核驗(yàn)以及抽樣核驗(yàn)相結(jié)合的方式,制定合理的核驗(yàn)策略。數(shù)據(jù)質(zhì)量核驗(yàn)應(yīng)支持不定期核驗(yàn)、周期性核驗(yàn)等多種任務(wù)執(zhí)行方式。核驗(yàn)任務(wù)的執(zhí)行后應(yīng)生成數(shù)據(jù)質(zhì)量核驗(yàn)記錄。數(shù)據(jù)質(zhì)量檢測(cè)主要過(guò)程如下:a)配置數(shù)據(jù)質(zhì)量規(guī)則根據(jù)數(shù)據(jù)質(zhì)量管理目標(biāo)的需要和數(shù)據(jù)質(zhì)量指標(biāo)體系,使用數(shù)據(jù)治理檢測(cè)工具,在待檢測(cè)對(duì)象(表或字段)上設(shè)置預(yù)制的規(guī)則和算法,包括數(shù)據(jù)表與數(shù)據(jù)字段的質(zhì)量評(píng)價(jià)規(guī)則,運(yùn)行系統(tǒng)程序進(jìn)行規(guī)則核驗(yàn)。質(zhì)量評(píng)價(jià)規(guī)則是依據(jù)各類(lèi)數(shù)據(jù)規(guī)范標(biāo)準(zhǔn)和業(yè)務(wù)對(duì)數(shù)據(jù)的要求,遵循數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、時(shí)效性和唯一性六大類(lèi)數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo),針對(duì)數(shù)據(jù)質(zhì)量計(jì)算規(guī)則,一個(gè)數(shù)據(jù)表或者數(shù)據(jù)字段可根據(jù)數(shù)據(jù)質(zhì)量核驗(yàn)的要求,配置多個(gè)不同的數(shù)據(jù)質(zhì)量核驗(yàn)規(guī)則。b)運(yùn)行質(zhì)量核驗(yàn)任務(wù)根據(jù)配置的數(shù)據(jù)質(zhì)量規(guī)則,創(chuàng)建數(shù)據(jù)質(zhì)量核驗(yàn)任務(wù),周期性或一次性運(yùn)行質(zhì)量任務(wù),并輸出相應(yīng)的數(shù)據(jù)質(zhì)量報(bào)告。c)數(shù)據(jù)質(zhì)量情況分析根據(jù)計(jì)劃對(duì)系統(tǒng)中的數(shù)據(jù)進(jìn)行剖析,查看數(shù)據(jù)的值域分析、空值率、規(guī)范性、唯一性等,切實(shí)掌握數(shù)據(jù)的實(shí)際明細(xì)信息。5.5評(píng)價(jià)結(jié)果5.5.1數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)權(quán)重評(píng)價(jià)規(guī)則基于權(quán)重,通過(guò)加權(quán)平均算法計(jì)算得出,權(quán)重默認(rèn)最高為100,最小為1。進(jìn)行評(píng)價(jià)時(shí),根據(jù)設(shè)置的權(quán)重的比例,計(jì)算出權(quán)重比,然后據(jù)此進(jìn)行評(píng)分計(jì)算。評(píng)價(jià)規(guī)則權(quán)重設(shè)置包括指標(biāo)維度權(quán)重和表字段規(guī)則權(quán)重,隨著數(shù)倉(cāng)建設(shè)的發(fā)展,指標(biāo)維度權(quán)重應(yīng)進(jìn)行相應(yīng)的調(diào)整,可根據(jù)數(shù)倉(cāng)對(duì)指標(biāo)維度的側(cè)重程度進(jìn)行配置,表8提供了一種數(shù)倉(cāng)指標(biāo)維度權(quán)重配置;表字段規(guī)則權(quán)重的配置,可實(shí)際業(yè)務(wù)場(chǎng)景中表和字段的情況進(jìn)行動(dòng)態(tài)配置。表8指標(biāo)維度權(quán)重完整性規(guī)范性準(zhǔn)確性T/ZXCHXXXX-2022唯一性一致性時(shí)效性5.5.2數(shù)據(jù)質(zhì)量評(píng)分計(jì)算規(guī)則數(shù)據(jù)資源表的質(zhì)量評(píng)分規(guī)則包括單一規(guī)則評(píng)價(jià)分計(jì)算、六大維度評(píng)價(jià)分計(jì)算和數(shù)據(jù)表評(píng)價(jià)分計(jì)算,其中單一規(guī)則評(píng)價(jià)分計(jì)算是根據(jù)4.3指標(biāo)詳情說(shuō)明給數(shù)據(jù)表各個(gè)字段配置的質(zhì)量評(píng)價(jià)規(guī)則,計(jì)算該字段某一規(guī)則下的規(guī)則評(píng)估分;六大維度評(píng)價(jià)分計(jì)算是根據(jù)表各個(gè)字段配置的質(zhì)量評(píng)價(jià)規(guī)則及其權(quán)重,計(jì)算某類(lèi)指標(biāo)維度的維度評(píng)估分;數(shù)據(jù)表評(píng)價(jià)分計(jì)算是根據(jù)六大維度評(píng)價(jià)分計(jì)算結(jié)果和5.5.1數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)權(quán)重計(jì)算得到數(shù)據(jù)表評(píng)估分。5.5.2.1單一規(guī)則評(píng)價(jià)分計(jì)算數(shù)據(jù)資源表字段的單一規(guī)則的評(píng)價(jià)分計(jì)算公式為:數(shù)據(jù)資源表字段的單一規(guī)則的評(píng)價(jià)分計(jì)算公式為:Q——問(wèn)題行數(shù)S——表總行數(shù)G——規(guī)則評(píng)估分5.5.2.2六大維度評(píng)價(jià)分計(jì)算六大指標(biāo)維度遵循指標(biāo)體系的定義,包括數(shù)據(jù)完整性、規(guī)范性、準(zhǔn)確性、唯一性、一致性、時(shí)效性,六大指標(biāo)維度評(píng)價(jià)分的計(jì)算公式為:式中:G——規(guī)則評(píng)估分W——權(quán)重比D——維度評(píng)估分5.5.2.3數(shù)據(jù)表評(píng)價(jià)分計(jì)算數(shù)據(jù)表質(zhì)量評(píng)價(jià)分是根據(jù)六大維度的評(píng)價(jià)分?jǐn)?shù)加權(quán)計(jì)算得到總分?jǐn)?shù),權(quán)重參考5.5.1數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)權(quán)重,其計(jì)算公式為:式中:ComD——完整性評(píng)估分EvaD——規(guī)范性評(píng)估分AccD——準(zhǔn)確性評(píng)估分UniD——唯一性評(píng)估分T/ZXCHXXXX-2022ConD——一致性評(píng)估分TimD——時(shí)效性評(píng)估分W——權(quán)重比TabD——數(shù)據(jù)表評(píng)估分5.5.3數(shù)據(jù)質(zhì)量評(píng)分等級(jí)依據(jù)本文件進(jìn)行產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)價(jià),對(duì)各項(xiàng)指標(biāo)采取評(píng)分的方式予以打分評(píng)價(jià),根據(jù)評(píng)分值評(píng)定產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)資源質(zhì)量水平,并以不同級(jí)別區(qū)分優(yōu)質(zhì)程度。按照從強(qiáng)到弱的要求分為不合格、合格、良好和優(yōu)秀。數(shù)據(jù)質(zhì)量評(píng)估級(jí)別及對(duì)應(yīng)分值見(jiàn)表10。表10產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量評(píng)估級(jí)別評(píng)價(jià)級(jí)別評(píng)價(jià)得分優(yōu)秀90分以上(含90分)75-90分以上(含75分)合格60-75分以上(含60分)60分以下(不含60分)5.5.4數(shù)據(jù)質(zhì)量報(bào)告質(zhì)量報(bào)告通常是依據(jù)統(tǒng)一的數(shù)據(jù)質(zhì)量報(bào)告模板,對(duì)一段時(shí)期內(nèi)運(yùn)行的質(zhì)量檢查結(jié)果,進(jìn)行匯總、梳理、統(tǒng)計(jì)和分析。為了推動(dòng)數(shù)據(jù)質(zhì)量管理運(yùn)行維護(hù)工作的日?;鸵?guī)范化管理,建立定期報(bào)告制度,對(duì)報(bào)告周期內(nèi)的數(shù)據(jù)質(zhì)量運(yùn)行維護(hù)工作情況進(jìn)行總結(jié)評(píng)價(jià),及時(shí)發(fā)現(xiàn)問(wèn)題并采取適當(dāng)措施。數(shù)據(jù)質(zhì)量報(bào)告分為三類(lèi):第一類(lèi):?jiǎn)伪頂?shù)據(jù)質(zhì)量評(píng)價(jià)報(bào)告單表數(shù)據(jù)質(zhì)量報(bào)告是針對(duì)單張表進(jìn)行的質(zhì)量檢查統(tǒng)計(jì),質(zhì)量工具從質(zhì)量評(píng)價(jià)的完整性、準(zhǔn)確性、規(guī)范性、編碼標(biāo)準(zhǔn)是否缺失給出檢查的數(shù)據(jù)。單表質(zhì)量報(bào)告內(nèi)容包括數(shù)據(jù)表數(shù)據(jù)治理整體概況、配置規(guī)則、問(wèn)題數(shù)、問(wèn)題比率、問(wèn)題描述等內(nèi)容。第二類(lèi):每月/季度數(shù)據(jù)質(zhì)量評(píng)價(jià)報(bào)告每月的數(shù)據(jù)質(zhì)量評(píng)價(jià)報(bào)告是在每月月末或者下月月初時(shí)編制的月度執(zhí)行報(bào)告,評(píng)價(jià)報(bào)告內(nèi)容包括數(shù)據(jù)歸屬方、不同等級(jí)質(zhì)量報(bào)警次數(shù),比上月比較的改進(jìn)情況、質(zhì)量問(wèn)題修復(fù)平均時(shí)間,比上月比較的改進(jìn)情況、不同質(zhì)量維度檢測(cè)的總體情況,與上月比較的改進(jìn)情況、質(zhì)量疑難問(wèn)題的解決進(jìn)度。第三類(lèi):數(shù)據(jù)質(zhì)量問(wèn)題處理率報(bào)告分析數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則運(yùn)行產(chǎn)生的質(zhì)量告警的處理率、處理時(shí)長(zhǎng)效率,以及未處理完成的告警。問(wèn)題處理率報(bào)告內(nèi)容包括問(wèn)題處理的時(shí)長(zhǎng)、問(wèn)題處理的數(shù)量、問(wèn)題歸屬的部門(mén)等信息。5.6跟蹤復(fù)評(píng)評(píng)價(jià)工作應(yīng)實(shí)施動(dòng)態(tài)管理,定期對(duì)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)質(zhì)量進(jìn)行動(dòng)態(tài)評(píng)價(jià),根據(jù)評(píng)價(jià)流程要求,對(duì)數(shù)據(jù)重新進(jìn)行評(píng)價(jià),及時(shí)發(fā)現(xiàn)數(shù)據(jù)治理問(wèn)題,達(dá)到保持和改進(jìn)的目的。T/ZXCHXXXX-2022(資料性)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)數(shù)據(jù)字段質(zhì)量評(píng)價(jià)示例在法人基本信息中統(tǒng)一社會(huì)信用代碼唯一股權(quán)轉(zhuǎn)讓類(lèi)型代碼與名稱(chēng)一致T/ZXCHXXXX-2022(資料性)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)與數(shù)據(jù)質(zhì)量評(píng)價(jià)關(guān)系圖3產(chǎn)業(yè)數(shù)據(jù)倉(cāng)與數(shù)據(jù)質(zhì)量評(píng)價(jià)關(guān)系圖產(chǎn)業(yè)數(shù)據(jù)倉(cāng)根據(jù)數(shù)據(jù)來(lái)源、加工處理過(guò)程等步驟,分成基礎(chǔ)數(shù)據(jù),主題庫(kù)數(shù)據(jù)、專(zhuān)題庫(kù)數(shù)據(jù)等。評(píng)價(jià)主體制定數(shù)據(jù)質(zhì)量評(píng)價(jià)規(guī)則,提取評(píng)價(jià)對(duì)象建設(shè)產(chǎn)業(yè)數(shù)據(jù)倉(cāng)的基礎(chǔ)數(shù)據(jù)、主題庫(kù)數(shù)據(jù)、專(zhuān)題庫(kù)數(shù)據(jù)進(jìn)行評(píng)價(jià)。經(jīng)過(guò)數(shù)據(jù)質(zhì)量監(jiān)測(cè)、核驗(yàn)、分析等多個(gè)步驟,生成評(píng)價(jià)對(duì)象各項(xiàng)數(shù)據(jù)的質(zhì)量評(píng)估分,形成評(píng)價(jià)對(duì)象的數(shù)據(jù)質(zhì)量評(píng)估報(bào)告。評(píng)價(jià)對(duì)象根據(jù)數(shù)據(jù)質(zhì)量評(píng)估報(bào)告進(jìn)行處理。T/ZXCHXXXX-2022(資料性)數(shù)據(jù)表數(shù)據(jù)質(zhì)量評(píng)價(jià)示例數(shù)據(jù)資源表的的評(píng)價(jià)分計(jì)算流程包括配置表字段評(píng)價(jià)規(guī)則及權(quán)重、計(jì)算表字段單一規(guī)則得分、計(jì)算數(shù)據(jù)表六大指標(biāo)維度評(píng)價(jià)分、計(jì)算數(shù)據(jù)表質(zhì)量評(píng)價(jià)分,流程如圖4所示:圖4數(shù)據(jù)表數(shù)據(jù)質(zhì)量評(píng)分計(jì)算流程C.1數(shù)據(jù)表描述數(shù)據(jù)表名稱(chēng):汽車(chē)行業(yè)—企業(yè)經(jīng)銷(xiāo)商數(shù)據(jù)數(shù)據(jù)字段名稱(chēng):經(jīng)銷(xiāo)商ID、經(jīng)銷(xiāo)商名稱(chēng)、加盟日期、是否是正式經(jīng)銷(xiāo)商、經(jīng)銷(xiāo)商組織機(jī)構(gòu)總編制人數(shù)、目前經(jīng)營(yíng)汽車(chē)品牌、企業(yè)性質(zhì)、法人代表、法人代表證件類(lèi)型、法人代表證件號(hào)、移動(dòng)電話(huà)、郵編、省編號(hào)、省、市編號(hào)、市。C.2數(shù)據(jù)表數(shù)據(jù)質(zhì)量評(píng)價(jià)流程步驟1:配置評(píng)價(jià)規(guī)則及權(quán)限配置數(shù)據(jù)表各字段的評(píng)價(jià)規(guī)則及規(guī)則權(quán)重。設(shè)“汽車(chē)行業(yè)—企業(yè)經(jīng)銷(xiāo)商數(shù)據(jù)信息表”為table_a,該表有1000行數(shù)據(jù),當(dāng)前其中16個(gè)字段配置有31個(gè)規(guī)則,分別屬于5個(gè)指標(biāo)維度。步驟2:計(jì)算單一規(guī)則評(píng)價(jià)分計(jì)算數(shù)據(jù)表所有字段的各項(xiàng)規(guī)則的質(zhì)量評(píng)價(jià)分。則以table_a的field_1字段的規(guī)則1為例,根據(jù)5.5.2.1單一規(guī)則評(píng)價(jià)分計(jì)算的公式,計(jì)算評(píng)價(jià)分為:1tt-x1tt=1tt同理,計(jì)算table_a所有字段的規(guī)則評(píng)價(jià)分,假設(shè)各規(guī)則評(píng)價(jià)分如表11所示:表11規(guī)則評(píng)價(jià)分T/ZXCHXXXX-2022數(shù)據(jù)字段名稱(chēng)配置規(guī)則評(píng)價(jià)指標(biāo)數(shù)單一規(guī)則評(píng)價(jià)分權(quán)重單一規(guī)則維度評(píng)價(jià)分經(jīng)銷(xiāo)商ID規(guī)則1完整性00.1規(guī)則2一致性00.220規(guī)則3唯一性00.550經(jīng)銷(xiāo)商名稱(chēng)規(guī)則4完整性00.1規(guī)則5一致性00.220規(guī)則6唯一性00.550加盟日期規(guī)則7完整性00.088規(guī)則8規(guī)范性00.220是否是正式經(jīng)銷(xiāo)商規(guī)則9完整性98.30.065.898準(zhǔn)確性00.8經(jīng)銷(xiāo)商組織機(jī)構(gòu)總編制人數(shù)完整性990.065.94目前經(jīng)營(yíng)汽車(chē)品牌完整性00.066企業(yè)性質(zhì)規(guī)范性00.220完整性98.70.065.922法人代表完整性3796.30.065.778一致性00.220法人代表證件類(lèi)型完整性3796.30.065.778法人代表證件號(hào)規(guī)范性00.220一致性00.220移動(dòng)電話(huà)規(guī)則20完整性2697.40.065.844規(guī)則21完整性3396.70.065.802規(guī)則22規(guī)范性799.30.2規(guī)則23準(zhǔn)確性98.90.2省編號(hào)規(guī)則24完整性00.066規(guī)則25規(guī)范性00.1省規(guī)則26完整性00.066規(guī)則27一致性00.1市編號(hào)規(guī)則28完整性4395.70.065.742規(guī)則29規(guī)范性00.1市規(guī)則30完整性4395.70.065.742規(guī)則31一致性00.1步驟3:計(jì)算五大維度評(píng)價(jià)分計(jì)算數(shù)據(jù)表六大指標(biāo)維度的評(píng)價(jià)分,根據(jù)5.5.2.2六大維度評(píng)價(jià)分計(jì)算的公式,按照步驟2中,表9所示的規(guī)則評(píng)價(jià)分,計(jì)算六大指標(biāo)維度的評(píng)價(jià)分分別為:a)完整性:規(guī)則1和規(guī)則4權(quán)重比分別為0.1,規(guī)則7權(quán)重比0.08,規(guī)則9、規(guī)則11、規(guī)則12、T/ZXCHXXXX-2022則完整性評(píng)價(jià)分計(jì)算方法為:100×0.1+100×0.1+100
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶(hù)所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶(hù)上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶(hù)上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶(hù)因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 強(qiáng)電保護(hù)施工方案
- 高考60個(gè)高頻實(shí)詞回扣教材強(qiáng)化訓(xùn)練一(含答案)
- 三門(mén)峽箱型橋梁施工方案
- 園藝師創(chuàng)作能力測(cè)試試題及答案
- 紡織工程插本試題及答案
- 河道勞務(wù)合同協(xié)議
- 抽屜合同協(xié)議
- 空心板橋合同協(xié)議
- 餐飲入股合伙協(xié)議合同
- 掛量協(xié)議合同
- GB∕T 40741-2021 焊后熱處理質(zhì)量要求
- Model5000功率計(jì)(介紹及操作)
- 超導(dǎo)材料應(yīng)用舉例PPT課件
- 現(xiàn)場(chǎng)總線(xiàn)技術(shù)03 PROFIBUS總線(xiàn)
- 2020年超星爾雅重說(shuō)中國(guó)近代史通識(shí)課期末考試答案
- 急性肺動(dòng)脈栓塞診斷及介入治療經(jīng)驗(yàn)分享PPT課件
- 輪胎式裝載機(jī)檢測(cè)報(bào)告(共5頁(yè))
- 電動(dòng)機(jī)可逆運(yùn)行控制電路
- 抗菌藥物分級(jí)管理目錄(完整資料).doc
- 基于語(yǔ)音信號(hào)去噪處理的FIR濾波器設(shè)計(jì)
- 會(huì)見(jiàn)筆錄(故意傷害審查起訴階段)
評(píng)論
0/150
提交評(píng)論