DB11T 2317-2024政務(wù)數(shù)據(jù)質(zhì)量評(píng)估規(guī)范

DB11北京市市場(chǎng)監(jiān)督管理局發(fā)布 本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第本文件起草單位：北京市大數(shù)據(jù)中心、北京市政上海交通大學(xué)、北京交通大學(xué)、中國(guó)人民大學(xué)、北京郵電大學(xué)、北京工業(yè)大學(xué)、公安部第三研究所、中國(guó)工業(yè)互聯(lián)網(wǎng)研究院、太極計(jì)算機(jī)股份有限公本文件主要起草人：王睿宇、王宇航、駱亦飛、張琳、徐海琛、賈曉豐、張晰、高嵩、高文飛、張健楓、江茜、章敏、苗婕、馬征、李凝云、崔鵬、徐葳、張久珍、吳帆、鄭臻哲、李浥東、范舉、高志鵬、林紹福、劉旭、趙琰昉、聶志鋒、趙章界、趙瑩、肖益、李寶東、穆顯顯、趙敏、楊燕、政務(wù)數(shù)據(jù)質(zhì)量評(píng)估規(guī)范通過(guò)數(shù)據(jù)質(zhì)量稽核后存儲(chǔ)的數(shù)據(jù)庫(kù)表，表中有數(shù)據(jù)質(zhì)量稽核數(shù)據(jù)質(zhì)量六性評(píng)估模型主要從數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、及時(shí)性和可用性6個(gè)維度進(jìn)數(shù)據(jù)質(zhì)量評(píng)估管理，包括數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、及時(shí)性和可a)數(shù)據(jù)規(guī)范性：描述數(shù)據(jù)內(nèi)容、值域、格式等符合標(biāo)準(zhǔn)數(shù)據(jù)元的情況，衡量數(shù)據(jù)標(biāo)準(zhǔn)、規(guī)范程b)數(shù)據(jù)完整性：描述數(shù)據(jù)的描述性要素、要素屬性及要素關(guān)系的完整情況，衡量數(shù)據(jù)在存儲(chǔ)、c)數(shù)據(jù)準(zhǔn)確性：描述數(shù)據(jù)與其對(duì)應(yīng)的客觀實(shí)體的特征相一致的情況，衡量數(shù)據(jù)符合實(shí)際情況的d)數(shù)據(jù)一致性：描述數(shù)據(jù)類型、數(shù)據(jù)含義和數(shù)據(jù)內(nèi)容的一致情況，衡量數(shù)據(jù)的一致程度。e)數(shù)據(jù)及時(shí)性：描述數(shù)據(jù)獲取和更新的情況，衡量數(shù)據(jù)的更新及時(shí)程度。f)數(shù)據(jù)可用性：描述數(shù)據(jù)能夠被訪問(wèn)、檢索、使用和操作的水平，衡量數(shù)據(jù)的可用程度。指標(biāo)編碼是政務(wù)數(shù)據(jù)質(zhì)量評(píng)估的唯一性編碼，由一級(jí)指標(biāo)、二級(jí)指標(biāo)共4位數(shù)字組成，編碼規(guī)則見一級(jí)指標(biāo)由2位數(shù)字組成，01代表數(shù)據(jù)規(guī)范性指標(biāo)、02代表數(shù)據(jù)完整標(biāo)、04代表數(shù)據(jù)一致性指標(biāo)、05代表數(shù)據(jù)及時(shí)性指標(biāo)、06代表數(shù)據(jù)可用性指標(biāo)數(shù)據(jù)屬性值應(yīng)滿足數(shù)據(jù)標(biāo)準(zhǔn)或數(shù)據(jù)字典中定義的展現(xiàn)格稽核表指定稽核列在限定范圍內(nèi)的不符合格式的數(shù)據(jù)數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，參照性?；藬?shù)據(jù)與參照數(shù)據(jù)進(jìn)行比較校驗(yàn)，判斷指定稽核列中不符合參照列示例：在人口登記信息表中，稽核數(shù)據(jù)是人口登記性別數(shù)據(jù)，參照數(shù)據(jù)是性別碼表，性別為：未知的性別0、男性1、女性2、未說(shuō)明的性別9，參照性校驗(yàn)，即人口登記數(shù)據(jù)的性別必須為0、1、2、9，不應(yīng)出現(xiàn)其他稽核表指定稽核列在限定范圍內(nèi)的不符合參照數(shù)據(jù)的數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，參照性?；藬?shù)據(jù)與參照數(shù)據(jù)進(jìn)行比較校驗(yàn)，判斷指定稽核列中不符合參照列示例：在人口登記信息表中，稽核數(shù)據(jù)是人口登記性別數(shù)據(jù)，參照數(shù)據(jù)是性別碼表，性別為：未知的性別0、男性1、女性2、未說(shuō)明的性別9，要求人口登記數(shù)據(jù)的性別既有男性又有女性，若性別中只有1或只有22、結(jié)果錯(cuò)誤，則該數(shù)據(jù)資源得業(yè)務(wù)規(guī)則稽核數(shù)據(jù)符合業(yè)務(wù)規(guī)則的程度示例：身份證號(hào)字段要符合稽核表指定稽核列在限定范圍內(nèi)的不符合業(yè)務(wù)規(guī)則的數(shù)據(jù)質(zhì)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，則該資源得分X=（1-B/A）×描述實(shí)際匯聚數(shù)據(jù)資源的字段是否與資源目錄注冊(cè)的字段數(shù)業(yè)務(wù)主鍵或重要字段等必填項(xiàng)的數(shù)據(jù)值不示例：涉人數(shù)據(jù)資源的姓名、身份證號(hào)等重要字段數(shù)據(jù)稽核表指定稽核列在限定范圍內(nèi)的空值數(shù)量為B，該稽核表限定范圍內(nèi)總條數(shù)為A，則該資源數(shù)據(jù)記錄完按照業(yè)務(wù)規(guī)則要求，驗(yàn)證當(dāng)前稽核表中滿足過(guò)濾條件的數(shù)據(jù)記錄數(shù)范圍是否滿足預(yù)先設(shè)定規(guī)則，包括時(shí)示例：某數(shù)據(jù)資源實(shí)際業(yè)務(wù)產(chǎn)生時(shí)間為1966年，而實(shí)際匯聚數(shù)據(jù)只有2000年后的數(shù)據(jù)，那此數(shù)據(jù)資源不滿足數(shù)核心字段完數(shù)據(jù)的核心關(guān)鍵字段示例：涉人數(shù)據(jù)中證件號(hào)碼、涉企數(shù)據(jù)中統(tǒng)一社會(huì)信用代碼等唯一標(biāo)識(shí)字段數(shù)據(jù)內(nèi)容應(yīng)完稽核表中指定稽核列在限定范圍內(nèi)核心字段內(nèi)容缺失的數(shù)據(jù)數(shù)量為B，稽核表限定范圍內(nèi)總檢查單列或者多列數(shù)據(jù)組合是否示例：一個(gè)身份證號(hào)碼只能對(duì)應(yīng)唯一稽核表指定稽核列在限定范圍內(nèi)的重復(fù)數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為描述數(shù)據(jù)是否與其對(duì)應(yīng)的客觀實(shí)示例：年齡的取值范圍應(yīng)該在0-200稽核表指定稽核列在限定范圍內(nèi)的不符合值域范圍數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，則該資源得分X=（1-數(shù)據(jù)內(nèi)容可靠性校驗(yàn)描述數(shù)據(jù)內(nèi)容是否真實(shí)可靠，是示例：企業(yè)注冊(cè)資金為-100萬(wàn)，因注值，此項(xiàng)數(shù)據(jù)內(nèi)容稽核表指定稽核列在限定范圍內(nèi)的數(shù)據(jù)內(nèi)容為無(wú)效的數(shù)量為B，稽核表限定范檢驗(yàn)稽核表中數(shù)據(jù)的邏輯性示例：入學(xué)時(shí)間應(yīng)當(dāng)早于畢稽核表指定稽核列中不符合邏輯關(guān)系的數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，則該資源得分一致性校驗(yàn)據(jù)，或表間數(shù)示例1：?jiǎn)伪韱涡?，身份證號(hào)碼的7—14位要與出生日示例2：雙表單行，同一個(gè)身份證號(hào)碼在多個(gè)表中對(duì)應(yīng)稽核表指定稽核列中不符合一致性約束記錄數(shù)量為B，稽核表限定范圍內(nèi)總條數(shù)為A，則該資源更新周期描述數(shù)據(jù)資源的更新周期是否符合數(shù)據(jù)實(shí)際產(chǎn)生周期情況。規(guī)范政務(wù)部門把數(shù)據(jù)更新周期設(shè)示例：門診就診記錄數(shù)據(jù)更新周期為1天。年報(bào)類數(shù)據(jù)的更新周期應(yīng)根據(jù)數(shù)據(jù)的業(yè)務(wù)屬性來(lái)判定數(shù)據(jù)更新周期是1、若數(shù)據(jù)更新周期合理，該數(shù)據(jù)資源得分2、若數(shù)據(jù)更新周期不合理，該數(shù)據(jù)資源得更新及時(shí)率描述數(shù)據(jù)資源是否按照業(yè)務(wù)上數(shù)據(jù)實(shí)際產(chǎn)生的更新周期進(jìn)行更新。規(guī)范政務(wù)部門能夠按時(shí)進(jìn)示例：政務(wù)部門設(shè)置資源數(shù)據(jù)更新為1月，則需要每月更根據(jù)數(shù)據(jù)是否及時(shí)按照更新周期合理，來(lái)判1、若數(shù)據(jù)是按時(shí)更新或未到更新時(shí)間，該2、若數(shù)據(jù)未按時(shí)更新或無(wú)法判斷是否更可直接利描述數(shù)據(jù)資源的度。如果源端是數(shù)據(jù)庫(kù)類型，可直接通過(guò)數(shù)據(jù)庫(kù)表的方式共享，增強(qiáng)數(shù)據(jù)的可用示例：源端是數(shù)據(jù)庫(kù)表直接通過(guò)數(shù)據(jù)1、若原始數(shù)據(jù)為庫(kù)表格式的結(jié)構(gòu)化數(shù)數(shù)據(jù)可理解性（數(shù)據(jù)描述文指數(shù)據(jù)庫(kù)表中的字段應(yīng)有對(duì)應(yīng)的描述文檔（如數(shù)等），描述需準(zhǔn)確，便于更好的示例：通過(guò)數(shù)據(jù)碼表，將數(shù)據(jù)庫(kù)表字段CSRQ與“出生日數(shù)據(jù)庫(kù)表中字段對(duì)應(yīng)的描述不準(zhǔn)確或缺失的數(shù)量為B，數(shù)據(jù)庫(kù)表中字段總數(shù)為6.1.1政務(wù)數(shù)據(jù)質(zhì)量評(píng)分，主要采用權(quán)重法計(jì)算質(zhì)量評(píng)分。對(duì)數(shù)據(jù)）：X——數(shù)據(jù)一級(jí)指標(biāo)得分；xi——數(shù)據(jù)二級(jí)指標(biāo)得分；"i——數(shù)據(jù)二級(jí)指標(biāo)權(quán)重。注1：不同數(shù)據(jù)資源適用評(píng)估指標(biāo)不同，各部門根據(jù)業(yè)務(wù)數(shù)據(jù)實(shí)6.2.2對(duì)數(shù)據(jù)質(zhì)量進(jìn)行整體評(píng)分定級(jí)時(shí)，需根據(jù)數(shù)據(jù)實(shí)際應(yīng)用情況同的權(quán)重。數(shù)據(jù)是否準(zhǔn)確、完整，能否被有效使完整性評(píng)分需配置較高的權(quán)重。如若在某些特定場(chǎng)景需求下對(duì)數(shù)據(jù)時(shí)效性要求高，則應(yīng)當(dāng)將數(shù)據(jù)質(zhì)量評(píng)估程序詳見圖3，包括：構(gòu)建質(zhì)量評(píng)估組織、確定質(zhì)量評(píng)估對(duì)象、確定評(píng)估指標(biāo)、配置a)構(gòu)建質(zhì)量評(píng)估組織：構(gòu)建質(zhì)量評(píng)估組織，明確每個(gè)部門及個(gè)人在組織中的質(zhì)量評(píng)估職責(zé)。b)確定質(zhì)量評(píng)估對(duì)象：根據(jù)政務(wù)部門的具體業(yè)務(wù)需求，確定開展數(shù)據(jù)質(zhì)量評(píng)估的數(shù)據(jù)資源（數(shù)c)確定評(píng)估指標(biāo)：根據(jù)明確的質(zhì)量評(píng)估對(duì)象，d