2022銀行數(shù)據(jù)治理體系

PAGEPAGE10銀行數(shù)據(jù)治理體系Governance）體系的構(gòu)建就變得尤為重要和迫切。一．?dāng)?shù)據(jù)治理體系簡(jiǎn)介管理數(shù)據(jù)安全管理和主數(shù)據(jù)管理，現(xiàn)對(duì)上述功能域說明如下。題，提升數(shù)據(jù)的完整性、及時(shí)性、準(zhǔn)確性及一致性，提升業(yè)務(wù)價(jià)值。技術(shù)人員之間，以及雙方的溝通平臺(tái)。一致和準(zhǔn)確。數(shù)據(jù)標(biāo)準(zhǔn)可分為技術(shù)標(biāo)準(zhǔn)和業(yè)務(wù)標(biāo)準(zhǔn)。主數(shù)據(jù)管理：主數(shù)據(jù)（MasterData）一系列規(guī)則、技術(shù)、應(yīng)用、策略和程序。二．?dāng)?shù)據(jù)質(zhì)量管理簡(jiǎn)介提供相應(yīng)的方法和手段。(一)數(shù)據(jù)質(zhì)量管理基礎(chǔ)和問題分類下列要素是進(jìn)行數(shù)據(jù)質(zhì)量管理的基礎(chǔ)：數(shù)據(jù)質(zhì)量的好壞是由用戶以及數(shù)據(jù)使用價(jià)值所決定的。數(shù)據(jù)使用過程中被應(yīng)用或者有價(jià)值的程度。（系統(tǒng)或用戶研討才有意義。7配較為隨意，允許一個(gè)組織機(jī)構(gòu)號(hào)下存在多個(gè)客戶號(hào)。多余字符、亂碼等。(1)致的問題。(2)系統(tǒng)之間數(shù)據(jù)同步時(shí)效性造成的不一致。典型案例如下：由于某T+1TT+1就導(dǎo)致了系統(tǒng)之間數(shù)據(jù)不一致。(1)A合同表中無法找到相關(guān)記錄；(2)數(shù)據(jù)含義沖突，如某些賬戶，從賬戶屬性、存期等字段看，應(yīng)是通知存款產(chǎn)品，但從科目看，又是普通定期產(chǎn)品。都有若干日期字段記錄其生命周期，這些日期字段包括創(chuàng)建/開戶日期、關(guān)閉/命周期的常見做法，就是直接在物理上刪除記錄。代碼問題。包括三個(gè)與代碼相關(guān)的問題：(1用之間相同用途代碼的編碼不一致；(2)未代碼化問題，即常見情況使用文字存(3)意外代碼，即實(shí)際數(shù)據(jù)中出現(xiàn)了未定義的代碼值。(二)數(shù)據(jù)質(zhì)量管理方法論圖1描述了權(quán)威人士普遍認(rèn)可的數(shù)據(jù)質(zhì)量管理方法論，共分六步。圖1數(shù)據(jù)質(zhì)量提升步驟圖第一步：定義及驗(yàn)證首先，從技術(shù)和業(yè)務(wù)兩個(gè)層面對(duì)數(shù)據(jù)應(yīng)當(dāng)滿足的質(zhì)量目標(biāo)進(jìn)行定義。表1X2%。其次，對(duì)于派生數(shù)據(jù)，其源數(shù)據(jù)和轉(zhuǎn)換的規(guī)還將指導(dǎo)初始的數(shù)據(jù)度量，通常也成為數(shù)據(jù)剖析。表1 數(shù)據(jù)質(zhì)量度量準(zhǔn)Accuracy正確性Completeness完整性Consistency一致性Continuity連續(xù)性Precedence先后順序Precision精確度Granularity數(shù)據(jù)粒度Currency當(dāng)前性Duration數(shù)據(jù)時(shí)間跨度Retention數(shù)據(jù)保存周期Identity唯一性Reference參照完整性Cardinality數(shù)據(jù)對(duì)應(yīng)關(guān)系Inheritance繼承關(guān)系ValueSet數(shù)值集合Relationship依賴關(guān)系第二步：影響分析與共性分析性與優(yōu)先級(jí)別。到某類共同原因。這個(gè)分析將為下一步追蹤根本原因做好準(zhǔn)備。第三步：追蹤根本原因2第四步：預(yù)防/修復(fù)數(shù)據(jù)質(zhì)量問題3有相關(guān)的優(yōu)點(diǎn)和弱點(diǎn)。導(dǎo)致數(shù)據(jù)質(zhì)量問題的根本原因，最常見的有人員、流程、業(yè)務(wù)系統(tǒng)前端、3對(duì)于后三項(xiàng)(業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫，抽取、加載)，則通常通過修復(fù)的手段來解決。每類數(shù)據(jù)質(zhì)量問題的預(yù)防/修復(fù)都有有利和不利的一面，比如，由于人員定的數(shù)據(jù)質(zhì)量問題。圖2數(shù)據(jù)質(zhì)量根本原因圖圖3預(yù)防/修復(fù)數(shù)據(jù)質(zhì)量問題圖第五步：趨勢(shì)監(jiān)控一個(gè)已知的數(shù)據(jù)質(zhì)量問題被修復(fù)后并不意味著這個(gè)特定問題就被永遠(yuǎn)解決4圖4數(shù)據(jù)質(zhì)量趨勢(shì)監(jiān)控圖第六步：識(shí)別和研究偏差流程將需要從該分支返回到第三步再一次識(shí)別根本原因。圖5識(shí)別和研究偏差圖(三)數(shù)據(jù)質(zhì)量問題特征分析業(yè)務(wù)系統(tǒng)對(duì)數(shù)據(jù)的使用目的主要是為了保證業(yè)務(wù)流程的正常運(yùn)轉(zhuǎn)和滿足一些簡(jiǎn)單的統(tǒng)計(jì)功能，因此只要業(yè)務(wù)流程和統(tǒng)計(jì)正常，就可以認(rèn)為數(shù)據(jù)質(zhì)量滿足要求；特性作如下分析：6（環(huán)節(jié)。少量的增值數(shù)據(jù)(Value-addeddata)產(chǎn)生于分析型系統(tǒng)。(ODS/成來自不同源系統(tǒng)的數(shù)據(jù)，并按照數(shù)據(jù)模型整合。數(shù)據(jù)挖掘等信息訪問手段。6改，因此基本上不產(chǎn)生數(shù)據(jù)質(zhì)量問題。圖6數(shù)據(jù)質(zhì)量問題分析圖所以很多質(zhì)量問題都是在使用時(shí)被首次發(fā)現(xiàn)。理的最佳實(shí)踐，建議在不同流轉(zhuǎn)環(huán)節(jié)側(cè)重完成的功能點(diǎn)實(shí)現(xiàn)應(yīng)如下：數(shù)據(jù)產(chǎn)生環(huán)節(jié)。原則。據(jù)質(zhì)量問題。數(shù)據(jù)結(jié)構(gòu)來進(jìn)行定義。數(shù)據(jù)集成環(huán)節(jié)。據(jù)質(zhì)量問題檢查的效用最高。組、業(yè)務(wù)部門、數(shù)據(jù)倉庫或應(yīng)用項(xiàng)目組等。跟蹤——由于來自業(yè)務(wù)源系統(tǒng)的數(shù)據(jù)每天都會(huì)加載到基礎(chǔ)數(shù)據(jù)平臺(tái)類系統(tǒng)并將跟蹤結(jié)果作為提升數(shù)據(jù)質(zhì)量問題治理成效的一個(gè)依據(jù)。數(shù)據(jù)使用環(huán)節(jié)。滿足的質(zhì)量標(biāo)準(zhǔn)，并作為日后上下游系統(tǒng)之間服務(wù)水平協(xié)議(ServiceLevelAgreement,SLA)的輸入接口。行評(píng)估，并作為下一階段設(shè)定數(shù)據(jù)質(zhì)量管理目標(biāo)的依據(jù)之一。(四)數(shù)據(jù)質(zhì)量管理流程的關(guān)鍵點(diǎn)管理流程建設(shè)。題的專業(yè)工具。三．?dāng)?shù)據(jù)質(zhì)量管理與數(shù)據(jù)