DB11∕T2317-2024政務(wù)數(shù)據(jù)質(zhì)量評(píng)估規(guī)范

DR1/T2317—2024Specificatianforgovermment2024-09-23發(fā)布2025-01-01實(shí)施北京市市場(chǎng)監(jiān)督管理局發(fā)布I前言 12規(guī)范性引用文件 3術(shù)語(yǔ)和定義 15數(shù)據(jù)質(zhì)量六性評(píng)估 26數(shù)據(jù)質(zhì)量五級(jí)評(píng)級(jí) 57數(shù)據(jù)質(zhì)量評(píng)估程序 7參考文獻(xiàn) 9本文件按照GB/T1.1-2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起草。本文件由北京市經(jīng)濟(jì)和信息化局提出。本文件由北京市政務(wù)服務(wù)和數(shù)據(jù)管理局歸口并組織實(shí)施。本文件起草單位：北京市大數(shù)據(jù)中心、北京市政務(wù)服務(wù)和數(shù)據(jù)管理局、清華大學(xué)、北京大學(xué)、上海交通大學(xué)、北京交通大學(xué)、中國(guó)人民大學(xué)、北京郵電大學(xué)、北京工業(yè)大學(xué)、公安部第三研究所、中國(guó)工業(yè)互聯(lián)網(wǎng)研究院、太極計(jì)算機(jī)股份有限公司、中電數(shù)據(jù)服務(wù)有限公司、華為技術(shù)有限公司。本文件主要起草人：王睿宇、王宇航、駱亦飛、張琳、徐海琛、賈曉豐、張晰、高嵩、高文飛、張健楓、江茜、章敏、苗婕、馬征、李凝云、崔鵬、徐葳、張久珍、吳帆、鄭臻哲、李浥東、范舉、高志鵬、林紹福、劉旭、趙琰昉、聶志鋒、趙章界、趙瑩、肖益、李寶東、穆顯顯、趙敏、楊燕、李世鋒、盛小寶、田野、屈克。1政務(wù)數(shù)據(jù)質(zhì)量評(píng)估規(guī)范本文件規(guī)定了政務(wù)數(shù)據(jù)質(zhì)量“五級(jí)六性”評(píng)估模型、評(píng)估指標(biāo)、評(píng)級(jí)方法、評(píng)估程序等內(nèi)容。本文件適用于政務(wù)數(shù)據(jù)匯聚、治理、共享過(guò)程中對(duì)數(shù)據(jù)質(zhì)量的評(píng)估管理。2規(guī)范性引用文件本文件沒(méi)有規(guī)范性引用文件。3術(shù)語(yǔ)和定義下列術(shù)語(yǔ)和定義適用于本文件。政務(wù)數(shù)據(jù)govermmantdata數(shù)據(jù)各級(jí)政務(wù)部門(mén)及其支撐單位在履行職責(zé)過(guò)程中依法采集、生成、存儲(chǔ)、管理的各類(lèi)數(shù)據(jù)資源。[來(lái)源：GB/T38664.1—2020,3.1,有修改]數(shù)據(jù)質(zhì)量dataqrlity基于對(duì)數(shù)據(jù)使用的預(yù)期，在指定條件下使用時(shí)，數(shù)據(jù)的特性滿(mǎn)足明確的和隱含的要求的程度。通過(guò)數(shù)據(jù)質(zhì)量稽核后存儲(chǔ)的數(shù)據(jù)庫(kù)表，表中有數(shù)據(jù)質(zhì)量稽核的結(jié)果。4數(shù)據(jù)質(zhì)量六性評(píng)估模型數(shù)據(jù)質(zhì)量六性評(píng)估模型主要從數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、及時(shí)性和可用性6個(gè)維度進(jìn)行了定義，評(píng)估模型見(jiàn)圖1。2數(shù)據(jù)可用性數(shù)據(jù)可用性數(shù)據(jù)及時(shí)性數(shù)據(jù)一致性數(shù)據(jù)準(zhǔn)確性數(shù)據(jù)完整性數(shù)據(jù)規(guī)范性圖1數(shù)據(jù)質(zhì)量六性評(píng)估模型數(shù)據(jù)質(zhì)量評(píng)估管理，包括數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、及時(shí)性和可用性6個(gè)維度。a)數(shù)據(jù)規(guī)范性：描述數(shù)據(jù)內(nèi)容、值域、格式等符合標(biāo)準(zhǔn)數(shù)據(jù)元的情況，衡量數(shù)據(jù)標(biāo)準(zhǔn)、規(guī)范程b)數(shù)據(jù)完整性：描述數(shù)據(jù)的描述性要素、要素屬性及要素關(guān)系的完整情況，衡量數(shù)據(jù)在存儲(chǔ)、傳輸和處理過(guò)程中的完整程度。c)數(shù)據(jù)準(zhǔn)確性：描述數(shù)據(jù)與其對(duì)應(yīng)的客觀實(shí)體的特征相一致的情況，衡量數(shù)據(jù)符合實(shí)際情況的d)數(shù)據(jù)一致性：描述數(shù)據(jù)類(lèi)型、數(shù)據(jù)含義和數(shù)據(jù)內(nèi)容的一致情況，衡量數(shù)據(jù)的一致程度。e)數(shù)據(jù)及時(shí)性：描述數(shù)據(jù)獲取和更新的情況，衡量數(shù)據(jù)的更新及時(shí)程度。f)數(shù)據(jù)可用性：描述數(shù)據(jù)能夠被訪問(wèn)、檢索、使用和操作的水平，衡量數(shù)據(jù)的可用程度。5數(shù)據(jù)質(zhì)量六性評(píng)估5.1指標(biāo)編碼規(guī)則指標(biāo)編碼是政務(wù)數(shù)據(jù)質(zhì)量評(píng)估的唯一性編碼，由一級(jí)指標(biāo)、二級(jí)指標(biāo)共4位數(shù)字組成，編碼規(guī)則見(jiàn)二級(jí)指標(biāo)2位數(shù)字一級(jí)指標(biāo)2位數(shù)字圖2數(shù)據(jù)質(zhì)量六性評(píng)估指標(biāo)編碼規(guī)則一級(jí)指標(biāo)由2位數(shù)字組成，01代表數(shù)據(jù)規(guī)范性指標(biāo)、02代表數(shù)據(jù)完整性指標(biāo)、03代表數(shù)據(jù)準(zhǔn)確性指標(biāo)、04代表數(shù)據(jù)一致性指標(biāo)、05代表數(shù)據(jù)及時(shí)性指標(biāo)、06代表數(shù)據(jù)可用性指標(biāo)。二級(jí)指標(biāo)由2位數(shù)字組成順序碼，范圍為01-99。5.2數(shù)據(jù)規(guī)范性數(shù)據(jù)規(guī)范性指標(biāo)定義及評(píng)分方式見(jiàn)表1。3示例或數(shù)據(jù)字典中定義的展現(xiàn)格式約束示例：日期字段定義為日期定量評(píng)分稽核表指定稽核列在限定范圍內(nèi)驗(yàn)-單項(xiàng)照數(shù)據(jù)進(jìn)行比指定稽核列中不符合參照列內(nèi)數(shù)據(jù)的情況中，稽核數(shù)據(jù)是人口登記性表，性別為：未知的性別0、男性1、女性2、未說(shuō)明的性別9,參照性校驗(yàn)，即0、1、2、9,不應(yīng)出現(xiàn)其他代碼。定量評(píng)分稽核表指定稽核列在限定范圍內(nèi)驗(yàn)-雙向照數(shù)據(jù)進(jìn)行比指定稽核列中不符合參照列內(nèi)數(shù)據(jù)的情況中，稽核數(shù)據(jù)是人口登記性表，性別為：未知的性別0、男性1、女性2、未說(shuō)明的性別9,要求人口登記數(shù)據(jù)的性別既有男性又有女是錯(cuò)誤的。定性評(píng)分1、結(jié)果正確，則該資源得分業(yè)務(wù)規(guī)則業(yè)務(wù)規(guī)則的程度定量評(píng)分稽核表指定稽核列在限定范圍內(nèi)的不符合業(yè)務(wù)規(guī)則的數(shù)據(jù)質(zhì)量為示例描述實(shí)際匯聚數(shù)據(jù)資源的字段是否與資源目錄注冊(cè)的字段數(shù)量、描述保持一致。1、若保持一致，則該資源得分空值校驗(yàn)等必填項(xiàng)的數(shù)據(jù)值不示例：涉人數(shù)據(jù)資源的姓名、身份證號(hào)等重要字段數(shù)據(jù)值不能為空?；吮碇付ɑ肆性谙薅ǚ秶鷥?nèi)的空值數(shù)量為B,該稽核表限定范圍內(nèi)總條數(shù)為A,則該資源4示例先設(shè)定規(guī)則，包括時(shí)間維度和空間維度。實(shí)際業(yè)務(wù)產(chǎn)生時(shí)間定性評(píng)分1、若滿(mǎn)足，則該資源得分2、若不滿(mǎn)足，則該數(shù)據(jù)資源得示例：涉人數(shù)據(jù)中據(jù)中統(tǒng)一社會(huì)信用段數(shù)據(jù)內(nèi)容應(yīng)完整。定量評(píng)分圍內(nèi)核心字段內(nèi)容缺失的數(shù)據(jù)數(shù)量為B,稽核表限定范圍內(nèi)總示例檢查單列或者多列數(shù)據(jù)組合是否存在重復(fù)記錄。號(hào)碼只能對(duì)應(yīng)唯一的一個(gè)自然人。定量評(píng)分?jǐn)?shù)量為B,稽核表限定范圍內(nèi)總條數(shù)為描述數(shù)據(jù)是否與定量評(píng)分合值域范圍數(shù)量為B,稽核表限定范圍內(nèi)總條數(shù)為A,則該資源得分X=(1-可靠性校驗(yàn)否真實(shí)可靠，是否為無(wú)效的數(shù)示例：企業(yè)注冊(cè)資金為-100萬(wàn)，因注冊(cè)資金不能為負(fù)無(wú)效。定量評(píng)分圍內(nèi)總條數(shù)為A,則該資源得分X=(1-示例檢驗(yàn)稽核表中或邏輯關(guān)系。定量評(píng)分關(guān)系的數(shù)量為B,稽核表限定范圍內(nèi)總條數(shù)為A,則該資源得分驗(yàn)據(jù)是否相等。號(hào)碼的7—14位要與出生日身份證號(hào)碼在多個(gè)表中對(duì)應(yīng)的姓名要一致。定量評(píng)分定范圍內(nèi)總條數(shù)為A,則該資源55.6數(shù)據(jù)及時(shí)性數(shù)據(jù)及時(shí)性指標(biāo)定義及評(píng)分方式見(jiàn)表5。表5數(shù)據(jù)質(zhì)量六性評(píng)估數(shù)據(jù)及時(shí)性指標(biāo)示例更新周期況。規(guī)范政務(wù)部門(mén)置在合理的范圍。為1天。年為1年。否合理。率描述數(shù)據(jù)資源是否際產(chǎn)生的更新周期行數(shù)據(jù)的更新。部門(mén)設(shè)置資為1月，則需要每月更根據(jù)數(shù)據(jù)是否及時(shí)按照更新周期合理，來(lái)判斷數(shù)據(jù)是否及時(shí)更新。5.7數(shù)據(jù)可用性數(shù)據(jù)可用性指標(biāo)定義及評(píng)分方式見(jiàn)表6。表6數(shù)據(jù)質(zhì)量六性評(píng)估數(shù)據(jù)可用性指標(biāo)示例可直接利描述數(shù)據(jù)資源的直接通過(guò)數(shù)據(jù)庫(kù)增強(qiáng)數(shù)據(jù)的可用庫(kù)表對(duì)接實(shí)現(xiàn)。定性評(píng)分據(jù)描述文指數(shù)據(jù)庫(kù)表中的字段應(yīng)有對(duì)應(yīng)的確，便于更好的段CSRQ與“出生日期”相對(duì)應(yīng)。定量評(píng)分6數(shù)據(jù)質(zhì)量五級(jí)評(píng)級(jí)6.1數(shù)據(jù)質(zhì)量評(píng)分權(quán)重6.1.1政務(wù)數(shù)據(jù)質(zhì)量評(píng)分，主要采用權(quán)重法計(jì)算質(zhì)量評(píng)分。對(duì)數(shù)據(jù)質(zhì)量評(píng)估的六性分配權(quán)重，通過(guò)加權(quán)求和的方式得到最終評(píng)分。6.1.2數(shù)據(jù)質(zhì)量評(píng)估六性一級(jí)指標(biāo)權(quán)重賦值占比參考，具體如下：a)數(shù)據(jù)規(guī)范性權(quán)重：15%b)數(shù)據(jù)完整性權(quán)重：20%;c)數(shù)據(jù)準(zhǔn)確性權(quán)重：20%;63)參照性校驗(yàn)-雙向校驗(yàn)：20%2)值域校驗(yàn)：30%;3)數(shù)據(jù)內(nèi)容可靠性校驗(yàn)：30%2)一致性校驗(yàn)：50%2)數(shù)據(jù)可理解性(數(shù)據(jù)描述文檔):50%6.1.4一級(jí)指標(biāo)、二級(jí)指標(biāo)權(quán)重總和均應(yīng)是100%各部門(mén)可根據(jù)實(shí)際情況對(duì)二級(jí)指標(biāo)進(jìn)行變更或擴(kuò)6.2數(shù)據(jù)質(zhì)量六性評(píng)分計(jì)算6.2.2對(duì)數(shù)據(jù)質(zhì)量進(jìn)行整體評(píng)分定級(jí)時(shí)，需根據(jù)數(shù)據(jù)實(shí)際應(yīng)用情況對(duì)數(shù)據(jù)質(zhì)量評(píng)估的六性評(píng)分設(shè)置不同的權(quán)重。數(shù)據(jù)是否準(zhǔn)確、完整，能否被有效使用，是數(shù)據(jù)應(yīng)用的基礎(chǔ)，因此，數(shù)據(jù)的準(zhǔn)確7DH1/T2317—2024完整性評(píng)分需配置較高的權(quán)重。如若在某些特定場(chǎng)景需求下對(duì)數(shù)據(jù)時(shí)效性要求高，則應(yīng)當(dāng)將數(shù)據(jù)及時(shí)性評(píng)分配置較高的權(quán)重。6.2.3根據(jù)數(shù)據(jù)六性質(zhì)量評(píng)分和配置的權(quán)重，最終得到數(shù)據(jù)質(zhì)量評(píng)分：X?—數(shù)據(jù)規(guī)范性得分；X?——數(shù)據(jù)完整性得分；X?——數(shù)據(jù)準(zhǔn)確性得分；X?——數(shù)據(jù)一致性得分；X?——數(shù)據(jù)及時(shí)性得分；X?——數(shù)據(jù)可用性得分；W——數(shù)據(jù)規(guī)范性權(quán)重；W——數(shù)據(jù)完整性權(quán)重；W——數(shù)據(jù)準(zhǔn)確性權(quán)重；W——數(shù)據(jù)一致性權(quán)重；W——數(shù)據(jù)及時(shí)性權(quán)重；W——數(shù)據(jù)可用性權(quán)重。6.3數(shù)據(jù)質(zhì)量等級(jí)判定6.3.1數(shù)據(jù)質(zhì)量評(píng)估等級(jí)，分為A、B、C、D、E五個(gè)級(jí)別，用于評(píng)價(jià)數(shù)據(jù)的質(zhì)量情況，具體如下：a)A級(jí)：數(shù)據(jù)質(zhì)量高。b)B級(jí)：數(shù)據(jù)質(zhì)量較高。c)C級(jí)：數(shù)據(jù)質(zhì)量存在輕微問(wèn)題。d)D級(jí)：數(shù)據(jù)質(zhì)量存在一般問(wèn)題。e)E級(jí)：數(shù)據(jù)質(zhì)量存在重大問(wèn)題。6.3.2每個(gè)等級(jí)的描述及分值范圍見(jiàn)表7。表7數(shù)據(jù)質(zhì)量五級(jí)評(píng)級(jí)等級(jí)描述及可應(yīng)用情況分值參考范圍AB數(shù)據(jù)質(zhì)量較高，經(jīng)過(guò)基礎(chǔ)處理后可使用C數(shù)據(jù)質(zhì)量存在輕微問(wèn)題，經(jīng)過(guò)數(shù)據(jù)共性清洗后可使用數(shù)據(jù)質(zhì)量存在一般問(wèn)題，進(jìn)行針對(duì)性的數(shù)據(jù)清洗后可使用E7數(shù)據(jù)質(zhì)量評(píng)估程序數(shù)據(jù)質(zhì)量評(píng)估程序詳見(jiàn)圖3,包括：構(gòu)建質(zhì)量評(píng)估組織、確定質(zhì)量評(píng)估對(duì)象、確定評(píng)估指標(biāo)、配置指標(biāo)權(quán)重、實(shí)施質(zhì)量評(píng)估使用五階段。具體如下：a)構(gòu)建質(zhì)量評(píng)估組織：構(gòu)建質(zhì)量評(píng)估組織，明確每個(gè)部門(mén)及個(gè)人在組織中的質(zhì)量評(píng)估職責(zé)。b)確定質(zhì)量評(píng)估對(duì)象：根據(jù)政務(wù)部門(mén)的具體業(yè)務(wù)需求，確定開(kāi)展數(shù)據(jù)質(zhì)量評(píng)估的數(shù)據(jù)資源(數(shù)據(jù)表級(jí))。c)確定評(píng)估指標(biāo)：根據(jù)明確的質(zhì)量評(píng)估對(duì)象，按照第5章規(guī)定選擇對(duì)應(yīng)的評(píng)估指標(biāo)。8DR1/T2317—2024d)配置指標(biāo)權(quán)重：根據(jù)選定的