![產(chǎn)業(yè)數(shù)據(jù)倉 數(shù)據(jù)質(zhì)量評價(jià)規(guī)范_第1頁](http://file4.renrendoc.com/view10/M03/2C/29/wKhkGWWPZq2ANLBWAAE7oIflK20554.jpg)
![產(chǎn)業(yè)數(shù)據(jù)倉 數(shù)據(jù)質(zhì)量評價(jià)規(guī)范_第2頁](http://file4.renrendoc.com/view10/M03/2C/29/wKhkGWWPZq2ANLBWAAE7oIflK205542.jpg)
![產(chǎn)業(yè)數(shù)據(jù)倉 數(shù)據(jù)質(zhì)量評價(jià)規(guī)范_第3頁](http://file4.renrendoc.com/view10/M03/2C/29/wKhkGWWPZq2ANLBWAAE7oIflK205543.jpg)
![產(chǎn)業(yè)數(shù)據(jù)倉 數(shù)據(jù)質(zhì)量評價(jià)規(guī)范_第4頁](http://file4.renrendoc.com/view10/M03/2C/29/wKhkGWWPZq2ANLBWAAE7oIflK205544.jpg)
![產(chǎn)業(yè)數(shù)據(jù)倉 數(shù)據(jù)質(zhì)量評價(jià)規(guī)范_第5頁](http://file4.renrendoc.com/view10/M03/2C/29/wKhkGWWPZq2ANLBWAAE7oIflK205545.jpg)
版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
1T/ZXCHXXXX-2022產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)規(guī)范本文件規(guī)定了產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)的指標(biāo)和實(shí)施規(guī)范。本文件適用于指導(dǎo)產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)的質(zhì)量評價(jià)工作。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中,注日期的引用文件,僅該日期對應(yīng)的版本適用于本文件;不注日期的引用文件,其最新版本(包括所有的修改單)適用于本文件。GB32100-2015法人和其他組織統(tǒng)一社會(huì)信用代碼編碼規(guī)則GB/T25000.12-2017系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評價(jià)(SQuaRE)第12部分:數(shù)據(jù)質(zhì)量模型GB/T25000.24-2017系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評價(jià)(SQuaRE)第24部分:數(shù)據(jù)質(zhì)量測量GB/T35295-2017信息技術(shù)大數(shù)據(jù)術(shù)語GB/T36344-2018信息技術(shù)數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)3術(shù)語和定義下列術(shù)語和定義適用于本文件。3.1數(shù)據(jù)data信息的可再解釋的形式化表示,能夠被計(jì)算機(jī)識(shí)別、存儲(chǔ)和加工處理。[來源:GB/T35295-2017,定義2.2.1,有修改]3.2產(chǎn)業(yè)數(shù)據(jù)industrydata產(chǎn)業(yè)數(shù)據(jù),是指有效開展各種經(jīng)濟(jì)活動(dòng)的實(shí)體,在組織生產(chǎn)、經(jīng)營或業(yè)務(wù)活動(dòng)過程中依法收集、產(chǎn)生的數(shù)據(jù)。。3.3產(chǎn)業(yè)數(shù)據(jù)倉Industrydatawarehouse是有效開展各種經(jīng)濟(jì)活動(dòng)的實(shí)體,在組織生產(chǎn)、經(jīng)營或業(yè)務(wù)活動(dòng)的過程中依法收集、產(chǎn)生的數(shù)據(jù)匯集、融合形成的數(shù)據(jù)資源池。2T/ZXCHXXXX-20223.4數(shù)據(jù)質(zhì)量dataquality在指定條件下使用時(shí),數(shù)據(jù)的特性滿足明確的和隱含的要求的程度。[來源:GB/T36344,2.3]3.5數(shù)據(jù)集dataset具有一定主題,可以標(biāo)識(shí)并可以被計(jì)算機(jī)化處理的數(shù)據(jù)集合。[來源:GB∕T36344-2018]3.6數(shù)據(jù)生命周期datalifecycle數(shù)據(jù)從數(shù)據(jù)的收集、存儲(chǔ)、使用、加工、傳輸、提供、公開、刪除等各種生存形態(tài)的演變過程。4數(shù)據(jù)指標(biāo)框架4.1評價(jià)指標(biāo)框架產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)體系如圖1所示,具體內(nèi)容簡要說明如下:——數(shù)據(jù)規(guī)范性:數(shù)據(jù)符合數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)模型、業(yè)務(wù)規(guī)則、元數(shù)據(jù)或者權(quán)威參考數(shù)據(jù)的程度?!獢?shù)據(jù)完整性:按照數(shù)據(jù)規(guī)則要求,數(shù)據(jù)元素被賦予數(shù)據(jù)值的程度和數(shù)據(jù)記錄的完整性等?!獢?shù)據(jù)準(zhǔn)確性:表示數(shù)據(jù)所描述的實(shí)體真實(shí)值的程度,如數(shù)據(jù)內(nèi)容正確性、格式規(guī)范性等?!獢?shù)據(jù)一致性:數(shù)據(jù)與其他特定上下文中使用的數(shù)據(jù)無矛盾的程度,如表內(nèi)跨列邏輯一致性、跨表邏輯一致性等?!獢?shù)據(jù)時(shí)效性:數(shù)據(jù)在時(shí)間變化中的正確程度,包括數(shù)據(jù)及時(shí)性、數(shù)據(jù)時(shí)序性等?!獢?shù)據(jù)唯一性:數(shù)據(jù)中有唯一性要求的數(shù)據(jù)元素內(nèi)容不能重復(fù),如單獨(dú)唯一性和條件唯一性。3T/ZXCHXXXX-20224.2評價(jià)指標(biāo)表頭指標(biāo)詳情說明中表頭信息詳情說明如下:a)指標(biāo)編號及編碼規(guī)則:指標(biāo)編號是評價(jià)指標(biāo)的唯一性編號,由一級指標(biāo)和二級指標(biāo)共4位數(shù)字組成。編碼規(guī)則見圖2.圖2指標(biāo)編碼規(guī)則1)一級指標(biāo):由2位數(shù)字組成,詳情見表1。表1一級指標(biāo)編碼及含義數(shù)據(jù)唯一性2)二級指標(biāo):由2位數(shù)字組成的順序碼,范圍01~99a)指標(biāo)名稱:評價(jià)指標(biāo)的名稱。b)指標(biāo)釋義:評價(jià)指標(biāo)的解釋。c)實(shí)現(xiàn)方式:評價(jià)指標(biāo)如何度量的方式。d)計(jì)算方法:評價(jià)指標(biāo)的計(jì)算方法。e)指標(biāo)樣例:對評價(jià)指標(biāo)進(jìn)一步說明的樣例。4.3指標(biāo)詳細(xì)說明4.3.1數(shù)據(jù)規(guī)范性數(shù)據(jù)的規(guī)范性,從三個(gè)方面來評價(jià),分別是業(yè)務(wù)規(guī)范、技術(shù)規(guī)范和安全與隱私規(guī)范。a)業(yè)務(wù)規(guī)范的要求:一是數(shù)據(jù)符合標(biāo)準(zhǔn)化要求的程度,標(biāo)準(zhǔn)化要求包括國際標(biāo)準(zhǔn)、國家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)和地方標(biāo)準(zhǔn)等;二是數(shù)據(jù)符合權(quán)威參考要求的程度,權(quán)威參考主要指國家、行業(yè)或地方上權(quán)威機(jī)4T/ZXCHXXXX-2022構(gòu)發(fā)布的正式文件;三是數(shù)據(jù)符合組織業(yè)務(wù)規(guī)則要求的程度,比如委辦局根據(jù)業(yè)務(wù)需要制定的數(shù)據(jù)規(guī)范要求。b)技術(shù)規(guī)范包含數(shù)據(jù)模型和元數(shù)據(jù),評價(jià)數(shù)據(jù)的組織形式、定義符合數(shù)據(jù)模型的度量和元數(shù)據(jù)的定義。c)安全和隱私保護(hù)規(guī)范是指數(shù)據(jù)符合安全要求和隱私保護(hù)的程度。數(shù)據(jù)規(guī)范性評價(jià)指標(biāo)詳情見表2。表2數(shù)據(jù)規(guī)范性評價(jià)指標(biāo)式中:元素的個(gè)數(shù);量明式中:元素的個(gè)數(shù);式中:的個(gè)數(shù);度式中:元素的個(gè)數(shù);理供5T/ZXCHXXXX-20224.3.2數(shù)據(jù)完整性數(shù)據(jù)完整性,指是否存在構(gòu)成信息的所有必要的數(shù)據(jù),不具備完整性的數(shù)據(jù)通常被看作已損壞或者數(shù)據(jù)丟失。數(shù)據(jù)完整性通常包括列完整性和數(shù)據(jù)集完整性,其中列完整性是指表中的一列沒有缺失的程度,包括與業(yè)務(wù)信息相關(guān)的數(shù)據(jù)實(shí)體及實(shí)體屬性沒有缺失的程度;數(shù)據(jù)集完整性是指數(shù)據(jù)集中應(yīng)出現(xiàn)的數(shù)據(jù)記錄沒有出現(xiàn)的程度。注:數(shù)據(jù)記錄的參照完整性,建議放在數(shù)據(jù)一致性或準(zhǔn)確性維度中,為避免重復(fù),本節(jié)不再出現(xiàn)。數(shù)據(jù)完整性評價(jià)指標(biāo)詳情見表3。表3數(shù)據(jù)完整性評價(jià)指標(biāo)4.3.3數(shù)據(jù)準(zhǔn)確性準(zhǔn)確性指標(biāo)主要用于評價(jià)數(shù)據(jù)準(zhǔn)確表示其所描述的真實(shí)實(shí)體(實(shí)際對象)真實(shí)值的程度,如數(shù)據(jù)內(nèi)容正確性、數(shù)據(jù)格式準(zhǔn)確性、數(shù)據(jù)重復(fù)率等。數(shù)據(jù)準(zhǔn)確性評價(jià)指標(biāo)詳情見表4。表4數(shù)據(jù)準(zhǔn)確性評價(jià)指標(biāo)期6T/ZXCHXXXX-2022率況4.3.4數(shù)據(jù)一致性一致性指標(biāo)主要用于評價(jià)表內(nèi)或跨表數(shù)據(jù)的一致程度,包括表內(nèi)跨列等值一致性、表內(nèi)跨列邏輯一致性、跨表等值一致性、跨表邏輯一致性、跨表數(shù)據(jù)源唯一等。數(shù)據(jù)一致性評價(jià)指標(biāo)詳情見表5。表5數(shù)據(jù)一致性評價(jià)指標(biāo)持一致計(jì)值一致否保持一致輯關(guān)系一致內(nèi)容一致值4.3.5數(shù)據(jù)時(shí)效性時(shí)效性指標(biāo)主要體現(xiàn)在數(shù)據(jù)更新及時(shí)和在時(shí)效范圍內(nèi)有效,數(shù)據(jù)及時(shí)性應(yīng)盡可能貼合業(yè)務(wù)實(shí)際發(fā)生的時(shí)間點(diǎn),包括時(shí)間正確性、數(shù)據(jù)及時(shí)性、跨表等值一致性、數(shù)據(jù)時(shí)序性、數(shù)據(jù)授權(quán)使用時(shí)效性等。數(shù)據(jù)時(shí)效性評價(jià)指標(biāo)詳情見表6。7T/ZXCHXXXX-2022表6數(shù)據(jù)時(shí)效性評價(jià)指標(biāo)性性性\性\4.3.6數(shù)據(jù)唯一性唯一性指標(biāo)主要體現(xiàn)在有唯一性要求的數(shù)據(jù)元素內(nèi)容不能重復(fù),包括單獨(dú)唯一性和條件唯一性。數(shù)據(jù)唯一性評價(jià)指標(biāo)詳情見表7。表7數(shù)據(jù)唯一性評價(jià)指標(biāo)單獨(dú)唯一性量復(fù)條件唯一性值必須唯一5評價(jià)流程5.1評價(jià)規(guī)劃8T/ZXCHXXXX-2022執(zhí)行產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)任務(wù)之前,應(yīng)根據(jù)業(yè)務(wù)特征、數(shù)據(jù)需求、數(shù)據(jù)質(zhì)量嚴(yán)重程度、整改難度等,制定相應(yīng)的評價(jià)方案,評價(jià)方案應(yīng)至少包含評價(jià)目的、評價(jià)范圍、評價(jià)內(nèi)容、評價(jià)方式、評價(jià)結(jié)果等。規(guī)劃評價(jià)方案時(shí)宜確保適用該方案的各個(gè)評價(jià)對象的評價(jià)一致性和可重復(fù)性。5.2職責(zé)分工評價(jià)方工作職責(zé):——制定產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)方案;——根據(jù)評價(jià)方案,組織實(shí)施產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)活動(dòng);——對評價(jià)過程中發(fā)現(xiàn)的質(zhì)量問題進(jìn)行持續(xù)跟蹤監(jiān)督;——建立產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)報(bào)送機(jī)制,定期進(jìn)行通報(bào)。被評價(jià)方工作職責(zé):——配合省級部門對本地市產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)工作,提供參評所需資料及數(shù)據(jù)信息;——對發(fā)現(xiàn)的質(zhì)量問題進(jìn)行持續(xù)改進(jìn)并將改進(jìn)后得質(zhì)量評價(jià)結(jié)果報(bào)送至省級部門。5.3確定指標(biāo)結(jié)合評價(jià)對象業(yè)務(wù)特征、數(shù)據(jù)質(zhì)量需求,選擇符合評價(jià)對象產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量實(shí)際的指標(biāo),并設(shè)定指標(biāo)權(quán)重,形成與之對應(yīng)的評價(jià)體系。所采用的評價(jià)指標(biāo)應(yīng)參考第四章節(jié)中得評價(jià)指標(biāo),保證評價(jià)結(jié)果的科學(xué)性、客觀性和全面性。指標(biāo)選取應(yīng)考慮但不限于以下方面:——評價(jià)對象業(yè)務(wù)特征、產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量需求、特殊業(yè)務(wù)需求等;——已建立的數(shù)據(jù)模型;——指標(biāo)數(shù)據(jù)可獲得;——指標(biāo)之間宜避免高度線性相關(guān);——指標(biāo)應(yīng)能保證評價(jià)結(jié)果的科學(xué)性、客觀性和全面性。5.4評價(jià)實(shí)施5.4.1評價(jià)實(shí)施方法數(shù)據(jù)質(zhì)量評價(jià)實(shí)施包括人工分析評價(jià)和產(chǎn)品自動(dòng)化評價(jià)兩種方式,人工分析評價(jià)指的是通過人工手動(dòng)的方式,根據(jù)數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)質(zhì)量規(guī)則,對數(shù)據(jù)資源進(jìn)行質(zhì)量評估,如數(shù)據(jù)對組織內(nèi)業(yè)務(wù)規(guī)則類規(guī)范的滿足度評價(jià),產(chǎn)品自動(dòng)化評價(jià)指的是通過軟件工具,批量配置數(shù)據(jù)資源的質(zhì)量規(guī)則,從而實(shí)現(xiàn)對數(shù)據(jù)資源的評價(jià),并輸出相應(yīng)的質(zhì)量評價(jià)報(bào)告,如數(shù)據(jù)的唯一性、空值率質(zhì)量評價(jià)。5.4.2評價(jià)對象范圍產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià)的評價(jià)對象范圍應(yīng)覆蓋各級單位在采集、歸集、治理與共享過程中的各類數(shù)產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)資源,包括基礎(chǔ)數(shù)據(jù)、主題數(shù)據(jù)、專題數(shù)據(jù)等。9T/ZXCHXXXX-20225.4.3選取評價(jià)指標(biāo)針對不同類別數(shù)據(jù)資源,以及數(shù)據(jù)資源在整個(gè)數(shù)據(jù)生命周期的不同環(huán)節(jié),應(yīng)合理選取適應(yīng)的評價(jià)指標(biāo)對數(shù)據(jù)質(zhì)量進(jìn)行評價(jià),例如在數(shù)據(jù)采集環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的準(zhǔn)確性與時(shí)效性,在數(shù)據(jù)歸集環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的完整性與時(shí)效性,在數(shù)據(jù)融合環(huán)節(jié)應(yīng)側(cè)重?cái)?shù)據(jù)的準(zhǔn)確性、唯一性。5.4.4數(shù)據(jù)質(zhì)量核驗(yàn)數(shù)據(jù)質(zhì)量核驗(yàn)是發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題的主要過程,應(yīng)根據(jù)評價(jià)對象、評價(jià)指標(biāo)通過數(shù)據(jù)進(jìn)行探查與檢測,發(fā)現(xiàn)并記錄數(shù)據(jù)質(zhì)量問題。數(shù)據(jù)質(zhì)量的核驗(yàn)應(yīng)采用全量核驗(yàn)、增量核驗(yàn)以及抽樣核驗(yàn)相結(jié)合的方式,制定合理的核驗(yàn)策略。數(shù)據(jù)質(zhì)量核驗(yàn)應(yīng)支持不定期核驗(yàn)、周期性核驗(yàn)等多種任務(wù)執(zhí)行方式。核驗(yàn)任務(wù)的執(zhí)行后應(yīng)生成數(shù)據(jù)質(zhì)量核驗(yàn)記錄。數(shù)據(jù)質(zhì)量檢測主要過程如下:a)配置數(shù)據(jù)質(zhì)量規(guī)則根據(jù)數(shù)據(jù)質(zhì)量管理目標(biāo)的需要和數(shù)據(jù)質(zhì)量指標(biāo)體系,使用數(shù)據(jù)治理檢測工具,在待檢測對象(表或字段)上設(shè)置預(yù)制的規(guī)則和算法,包括數(shù)據(jù)表與數(shù)據(jù)字段的質(zhì)量評價(jià)規(guī)則,運(yùn)行系統(tǒng)程序進(jìn)行規(guī)則核驗(yàn)。質(zhì)量評價(jià)規(guī)則是依據(jù)各類數(shù)據(jù)規(guī)范標(biāo)準(zhǔn)和業(yè)務(wù)對數(shù)據(jù)的要求,遵循數(shù)據(jù)規(guī)范性、完整性、準(zhǔn)確性、一致性、時(shí)效性和唯一性六大類數(shù)據(jù)質(zhì)量評價(jià)指標(biāo),針對數(shù)據(jù)質(zhì)量計(jì)算規(guī)則,一個(gè)數(shù)據(jù)表或者數(shù)據(jù)字段可根據(jù)數(shù)據(jù)質(zhì)量核驗(yàn)的要求,配置多個(gè)不同的數(shù)據(jù)質(zhì)量核驗(yàn)規(guī)則。b)運(yùn)行質(zhì)量核驗(yàn)任務(wù)根據(jù)配置的數(shù)據(jù)質(zhì)量規(guī)則,創(chuàng)建數(shù)據(jù)質(zhì)量核驗(yàn)任務(wù),周期性或一次性運(yùn)行質(zhì)量任務(wù),并輸出相應(yīng)的數(shù)據(jù)質(zhì)量報(bào)告。c)數(shù)據(jù)質(zhì)量情況分析根據(jù)計(jì)劃對系統(tǒng)中的數(shù)據(jù)進(jìn)行剖析,查看數(shù)據(jù)的值域分析、空值率、規(guī)范性、唯一性等,切實(shí)掌握數(shù)據(jù)的實(shí)際明細(xì)信息。5.5評價(jià)結(jié)果5.5.1數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)權(quán)重評價(jià)規(guī)則基于權(quán)重,通過加權(quán)平均算法計(jì)算得出,權(quán)重默認(rèn)最高為100,最小為1。進(jìn)行評價(jià)時(shí),根據(jù)設(shè)置的權(quán)重的比例,計(jì)算出權(quán)重比,然后據(jù)此進(jìn)行評分計(jì)算。評價(jià)規(guī)則權(quán)重設(shè)置包括指標(biāo)維度權(quán)重和表字段規(guī)則權(quán)重,隨著數(shù)倉建設(shè)的發(fā)展,指標(biāo)維度權(quán)重應(yīng)進(jìn)行相應(yīng)的調(diào)整,可根據(jù)數(shù)倉對指標(biāo)維度的側(cè)重程度進(jìn)行配置,表8提供了一種數(shù)倉指標(biāo)維度權(quán)重配置;表字段規(guī)則權(quán)重的配置,可實(shí)際業(yè)務(wù)場景中表和字段的情況進(jìn)行動(dòng)態(tài)配置。表8指標(biāo)維度權(quán)重完整性規(guī)范性準(zhǔn)確性T/ZXCHXXXX-2022唯一性一致性時(shí)效性5.5.2數(shù)據(jù)質(zhì)量評分計(jì)算規(guī)則數(shù)據(jù)資源表的質(zhì)量評分規(guī)則包括單一規(guī)則評價(jià)分計(jì)算、六大維度評價(jià)分計(jì)算和數(shù)據(jù)表評價(jià)分計(jì)算,其中單一規(guī)則評價(jià)分計(jì)算是根據(jù)4.3指標(biāo)詳情說明給數(shù)據(jù)表各個(gè)字段配置的質(zhì)量評價(jià)規(guī)則,計(jì)算該字段某一規(guī)則下的規(guī)則評估分;六大維度評價(jià)分計(jì)算是根據(jù)表各個(gè)字段配置的質(zhì)量評價(jià)規(guī)則及其權(quán)重,計(jì)算某類指標(biāo)維度的維度評估分;數(shù)據(jù)表評價(jià)分計(jì)算是根據(jù)六大維度評價(jià)分計(jì)算結(jié)果和5.5.1數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)權(quán)重計(jì)算得到數(shù)據(jù)表評估分。5.5.2.1單一規(guī)則評價(jià)分計(jì)算數(shù)據(jù)資源表字段的單一規(guī)則的評價(jià)分計(jì)算公式為:數(shù)據(jù)資源表字段的單一規(guī)則的評價(jià)分計(jì)算公式為:Q——問題行數(shù)S——表總行數(shù)G——規(guī)則評估分5.5.2.2六大維度評價(jià)分計(jì)算六大指標(biāo)維度遵循指標(biāo)體系的定義,包括數(shù)據(jù)完整性、規(guī)范性、準(zhǔn)確性、唯一性、一致性、時(shí)效性,六大指標(biāo)維度評價(jià)分的計(jì)算公式為:式中:G——規(guī)則評估分W——權(quán)重比D——維度評估分5.5.2.3數(shù)據(jù)表評價(jià)分計(jì)算數(shù)據(jù)表質(zhì)量評價(jià)分是根據(jù)六大維度的評價(jià)分?jǐn)?shù)加權(quán)計(jì)算得到總分?jǐn)?shù),權(quán)重參考5.5.1數(shù)據(jù)質(zhì)量評價(jià)指標(biāo)權(quán)重,其計(jì)算公式為:式中:ComD——完整性評估分EvaD——規(guī)范性評估分AccD——準(zhǔn)確性評估分UniD——唯一性評估分T/ZXCHXXXX-2022ConD——一致性評估分TimD——時(shí)效性評估分W——權(quán)重比TabD——數(shù)據(jù)表評估分5.5.3數(shù)據(jù)質(zhì)量評分等級依據(jù)本文件進(jìn)行產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評價(jià),對各項(xiàng)指標(biāo)采取評分的方式予以打分評價(jià),根據(jù)評分值評定產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)資源質(zhì)量水平,并以不同級別區(qū)分優(yōu)質(zhì)程度。按照從強(qiáng)到弱的要求分為不合格、合格、良好和優(yōu)秀。數(shù)據(jù)質(zhì)量評估級別及對應(yīng)分值見表10。表10產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量評估級別評價(jià)級別評價(jià)得分優(yōu)秀90分以上(含90分)75-90分以上(含75分)合格60-75分以上(含60分)60分以下(不含60分)5.5.4數(shù)據(jù)質(zhì)量報(bào)告質(zhì)量報(bào)告通常是依據(jù)統(tǒng)一的數(shù)據(jù)質(zhì)量報(bào)告模板,對一段時(shí)期內(nèi)運(yùn)行的質(zhì)量檢查結(jié)果,進(jìn)行匯總、梳理、統(tǒng)計(jì)和分析。為了推動(dòng)數(shù)據(jù)質(zhì)量管理運(yùn)行維護(hù)工作的日?;鸵?guī)范化管理,建立定期報(bào)告制度,對報(bào)告周期內(nèi)的數(shù)據(jù)質(zhì)量運(yùn)行維護(hù)工作情況進(jìn)行總結(jié)評價(jià),及時(shí)發(fā)現(xiàn)問題并采取適當(dāng)措施。數(shù)據(jù)質(zhì)量報(bào)告分為三類:第一類:單表數(shù)據(jù)質(zhì)量評價(jià)報(bào)告單表數(shù)據(jù)質(zhì)量報(bào)告是針對單張表進(jìn)行的質(zhì)量檢查統(tǒng)計(jì),質(zhì)量工具從質(zhì)量評價(jià)的完整性、準(zhǔn)確性、規(guī)范性、編碼標(biāo)準(zhǔn)是否缺失給出檢查的數(shù)據(jù)。單表質(zhì)量報(bào)告內(nèi)容包括數(shù)據(jù)表數(shù)據(jù)治理整體概況、配置規(guī)則、問題數(shù)、問題比率、問題描述等內(nèi)容。第二類:每月/季度數(shù)據(jù)質(zhì)量評價(jià)報(bào)告每月的數(shù)據(jù)質(zhì)量評價(jià)報(bào)告是在每月月末或者下月月初時(shí)編制的月度執(zhí)行報(bào)告,評價(jià)報(bào)告內(nèi)容包括數(shù)據(jù)歸屬方、不同等級質(zhì)量報(bào)警次數(shù),比上月比較的改進(jìn)情況、質(zhì)量問題修復(fù)平均時(shí)間,比上月比較的改進(jìn)情況、不同質(zhì)量維度檢測的總體情況,與上月比較的改進(jìn)情況、質(zhì)量疑難問題的解決進(jìn)度。第三類:數(shù)據(jù)質(zhì)量問題處理率報(bào)告分析數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則運(yùn)行產(chǎn)生的質(zhì)量告警的處理率、處理時(shí)長效率,以及未處理完成的告警。問題處理率報(bào)告內(nèi)容包括問題處理的時(shí)長、問題處理的數(shù)量、問題歸屬的部門等信息。5.6跟蹤復(fù)評評價(jià)工作應(yīng)實(shí)施動(dòng)態(tài)管理,定期對產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)質(zhì)量進(jìn)行動(dòng)態(tài)評價(jià),根據(jù)評價(jià)流程要求,對數(shù)據(jù)重新進(jìn)行評價(jià),及時(shí)發(fā)現(xiàn)數(shù)據(jù)治理問題,達(dá)到保持和改進(jìn)的目的。T/ZXCHXXXX-2022(資料性)產(chǎn)業(yè)數(shù)據(jù)倉數(shù)據(jù)字段質(zhì)量評價(jià)示例在法人基本信息中統(tǒng)一社會(huì)信用代碼唯一股權(quán)轉(zhuǎn)讓類型代碼與名稱一致T/ZXCHXXXX-2022(資料性)產(chǎn)業(yè)數(shù)據(jù)倉與數(shù)據(jù)質(zhì)量評價(jià)關(guān)系圖3產(chǎn)業(yè)數(shù)據(jù)倉與數(shù)據(jù)質(zhì)量評價(jià)關(guān)系圖產(chǎn)業(yè)數(shù)據(jù)倉根據(jù)數(shù)據(jù)來源、加工處理過程等步驟,分成基礎(chǔ)數(shù)據(jù),主題庫數(shù)據(jù)、專題庫數(shù)據(jù)等。評價(jià)主體制定數(shù)據(jù)質(zhì)量評價(jià)規(guī)則,提取評價(jià)對象建設(shè)產(chǎn)業(yè)數(shù)據(jù)倉的基礎(chǔ)數(shù)據(jù)、主題庫數(shù)據(jù)、專題庫數(shù)據(jù)進(jìn)行評價(jià)。經(jīng)過數(shù)據(jù)質(zhì)量監(jiān)測、核驗(yàn)、分析等多個(gè)步驟,生成評價(jià)對象各項(xiàng)數(shù)據(jù)的質(zhì)量評估分,形成評價(jià)對象的數(shù)據(jù)質(zhì)量評估報(bào)告。評價(jià)對象根據(jù)數(shù)據(jù)質(zhì)量評估報(bào)告進(jìn)行處理。T/ZXCHXXXX-2022(資料性)數(shù)據(jù)表數(shù)據(jù)質(zhì)量評價(jià)示例數(shù)據(jù)資源表的的評價(jià)分計(jì)算流程包括配置表字段評價(jià)規(guī)則及權(quán)重、計(jì)算表字段單一規(guī)則得分、計(jì)算數(shù)據(jù)表六大指標(biāo)維度評價(jià)分、計(jì)算數(shù)據(jù)表質(zhì)量評價(jià)分,流程如圖4所示:圖4數(shù)據(jù)表數(shù)據(jù)質(zhì)量評分計(jì)算流程C.1數(shù)據(jù)表描述數(shù)據(jù)表名稱:汽車行業(yè)—企業(yè)經(jīng)銷商數(shù)據(jù)數(shù)據(jù)字段名稱:經(jīng)銷商ID、經(jīng)銷商名稱、加盟日期、是否是正式經(jīng)銷商、經(jīng)銷商組織機(jī)構(gòu)總編制人數(shù)、目前經(jīng)營汽車品牌、企業(yè)性質(zhì)、法人代表、法人代表證件類型、法人代表證件號、移動(dòng)電話、郵編、省編號、省、市編號、市。C.2數(shù)據(jù)表數(shù)據(jù)質(zhì)量評價(jià)流程步驟1:配置評價(jià)規(guī)則及權(quán)限配置數(shù)據(jù)表各字段的評價(jià)規(guī)則及規(guī)則權(quán)重。設(shè)“汽車行業(yè)—企業(yè)經(jīng)銷商數(shù)據(jù)信息表”為table_a,該表有1000行數(shù)據(jù),當(dāng)前其中16個(gè)字段配置有31個(gè)規(guī)則,分別屬于5個(gè)指標(biāo)維度。步驟2:計(jì)算單一規(guī)則評價(jià)分計(jì)算數(shù)據(jù)表所有字段的各項(xiàng)規(guī)則的質(zhì)量評價(jià)分。則以table_a的field_1字段的規(guī)則1為例,根據(jù)5.5.2.1單一規(guī)則評價(jià)分計(jì)算的公式,計(jì)算評價(jià)分為:1tt-x1tt=1tt同理,計(jì)算table_a所有字段的規(guī)則評價(jià)分,假設(shè)各規(guī)則評價(jià)分如表11所示:表11規(guī)則評價(jià)分T/ZXCHXXXX-2022數(shù)據(jù)字段名稱配置規(guī)則評價(jià)指標(biāo)數(shù)單一規(guī)則評價(jià)分權(quán)重單一規(guī)則維度評價(jià)分經(jīng)銷商ID規(guī)則1完整性00.1規(guī)則2一致性00.220規(guī)則3唯一性00.550經(jīng)銷商名稱規(guī)則4完整性00.1規(guī)則5一致性00.220規(guī)則6唯一性00.550加盟日期規(guī)則7完整性00.088規(guī)則8規(guī)范性00.220是否是正式經(jīng)銷商規(guī)則9完整性98.30.065.898準(zhǔn)確性00.8經(jīng)銷商組織機(jī)構(gòu)總編制人數(shù)完整性990.065.94目前經(jīng)營汽車品牌完整性00.066企業(yè)性質(zhì)規(guī)范性00.220完整性98.70.065.922法人代表完整性3796.30.065.778一致性00.220法人代表證件類型完整性3796.30.065.778法人代表證件號規(guī)范性00.220一致性00.220移動(dòng)電話規(guī)則20完整性2697.40.065.844規(guī)則21完整性3396.70.065.802規(guī)則22規(guī)范性799.30.2規(guī)則23準(zhǔn)確性98.90.2省編號規(guī)則24完整性00.066規(guī)則25規(guī)范性00.1省規(guī)則26完整性00.066規(guī)則27一致性00.1市編號規(guī)則28完整性4395.70.065.742規(guī)則29規(guī)范性00.1市規(guī)則30完整性4395.70.065.742規(guī)則31一致性00.1步驟3:計(jì)算五大維度評價(jià)分計(jì)算數(shù)據(jù)表六大指標(biāo)維度的評價(jià)分,根據(jù)5.5.2.2六大維度評價(jià)分計(jì)算的公式,按照步驟2中,表9所示的規(guī)則評價(jià)分,計(jì)算六大指標(biāo)維度的評價(jià)分分別為:a)完整性:規(guī)則1和規(guī)則4權(quán)重比分別為0.1,規(guī)則7權(quán)重比0.08,規(guī)則9、規(guī)則11、規(guī)則12、T/ZXCHXXXX-2022則完整性評價(jià)分計(jì)算方法為:100×0.1+100×0.1+100
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 服飾代理銷售合同(2篇)
- 簡單食堂聘用協(xié)議書(2篇)
- 醫(yī)學(xué)-人體解剖學(xué)考試題庫附答案(977題)
- 湖南省2024-2025學(xué)年高二上學(xué)期11月期中聯(lián)考物理試卷(解析版)
- 現(xiàn)代物流企業(yè)的數(shù)字化轉(zhuǎn)型之路
- Module4練習(xí)(單元測試)英語四年級下冊-外研版(一起)(含答案)
- PEP版小學(xué)四年級英語下冊第二單元隨堂練習(xí)
- 北師大版一年級語文1冊第4單元家教案
- 移戶口申請書
- 知識(shí)產(chǎn)權(quán)法律在醫(yī)療技術(shù)領(lǐng)域的作用
- 《愿望的實(shí)現(xiàn)》全文
- 病毒性腦炎教學(xué)查房及疑難病例討論
- Word操作練習(xí)題(解析和答案)
- 糖尿病足的多學(xué)科聯(lián)合治療
- 小龍蝦啤酒音樂節(jié)活動(dòng)策劃方案課件
- 中藥貼敷課件
- 塔吊租賃(大型機(jī)械)-招標(biāo)文件模板(完整版)2021.5.13
- 客戶服務(wù)中心操作手冊
- 《戰(zhàn)國策》教學(xué)講解課件
- 北師大版七年級數(shù)學(xué)下冊全冊課件【完整版】
- 小動(dòng)物樂陶陶(課件)(共9張PPT)-人教版勞動(dòng)二年級下冊
評論
0/150
提交評論