大數(shù)據(jù)平臺(tái)下的數(shù)據(jù)治理

1、大數(shù)據(jù)平臺(tái)下的數(shù)據(jù)治理解決 方案目錄一數(shù)據(jù)管理的現(xiàn)狀1二數(shù)據(jù)治理的概述2（1） 數(shù)據(jù)治理概念 2（2） 數(shù)據(jù)治理目標(biāo) 3三數(shù)據(jù)治理體系3四數(shù)據(jù)治理核心領(lǐng)域4（1） 數(shù)據(jù)模型 4（2） 數(shù)據(jù)生命周期 5（3） 數(shù)據(jù)標(biāo)準(zhǔn) 6（4） 主數(shù)據(jù) 8（5） 數(shù)據(jù)質(zhì)量 9（6） 數(shù)據(jù)服務(wù) 1 1（7） 數(shù)據(jù)安全 1 2五數(shù)據(jù)治理保障機(jī)制13（1） 制度章程 13（1） 規(guī)章制度 13（2） 管控辦法 13（3） 考核機(jī)制 13（2） 數(shù)據(jù)治理組織 15(1) 組織架構(gòu) 1 5(2) 組織層次 16(3) 組織職責(zé) 1 7（3） 流程管理 1 9（4） IT技術(shù)應(yīng)用 20(1) 支撐平臺(tái) 20(2) 技術(shù)規(guī)范

2、 22附件A數(shù)據(jù)管理規(guī)范23附件B數(shù)據(jù)質(zhì)量評(píng)估辦法41附件C數(shù)據(jù)質(zhì)量管理流程45關(guān)于數(shù)據(jù)治理的理解數(shù)據(jù)管理的現(xiàn)狀根據(jù)行業(yè)信息化發(fā)展的現(xiàn)狀，結(jié)合當(dāng)今行業(yè)數(shù)據(jù)治理的要求， 大型集團(tuán)或政務(wù)管理部門現(xiàn)階段數(shù)據(jù)管理方面存在以下的不足：(1)數(shù)據(jù)多頭管理，缺少專門對(duì)數(shù)據(jù)管理進(jìn)行監(jiān)督和控制的 組織。信息系統(tǒng)的建設(shè)和管理職能分散在各部門，致使數(shù)據(jù)管理的 職責(zé)分散，權(quán)責(zé)不明確。組織機(jī)構(gòu)各部門關(guān)注數(shù)據(jù)的角度不一樣， 缺少一個(gè)組織從全局的視角對(duì)數(shù)據(jù)進(jìn)行管理，導(dǎo)致無(wú)法建立統(tǒng)一的 數(shù)據(jù)管理規(guī)程、標(biāo)準(zhǔn)等，相應(yīng)的數(shù)據(jù)管理監(jiān)督措施無(wú)法得到落實(shí)。 組織機(jī)構(gòu)的數(shù)據(jù)考核體系也尚未建立，無(wú)法保障數(shù)據(jù)管理標(biāo)準(zhǔn)和規(guī) 程的有效執(zhí)行。(2)

3、多系統(tǒng)分散建設(shè)，沒有規(guī)范統(tǒng)一的省級(jí)數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù) 模型。組織機(jī)構(gòu)為應(yīng)對(duì)迅速變化的市場(chǎng)和社會(huì)需求，逐步建立了各 自的信息系統(tǒng)，各部門站在各自的立場(chǎng)生產(chǎn)、使用和管理數(shù)據(jù)，使 得數(shù)據(jù)分散在不同的部門和信息系統(tǒng)中，缺乏統(tǒng)一的數(shù)據(jù)規(guī)劃、可 信的數(shù)據(jù)來(lái)源和數(shù)據(jù)標(biāo)準(zhǔn)，導(dǎo)致數(shù)據(jù)不規(guī)范、不一致、冗余、無(wú)法 共享等問題由現(xiàn)，組織機(jī)構(gòu)各部門對(duì)數(shù)據(jù)的理解難以應(yīng)用一致的語(yǔ) 言來(lái)描述，導(dǎo)致理解不一致。(3)缺少統(tǒng)一的主數(shù)據(jù)，組織機(jī)構(gòu)核心系統(tǒng)間的人員等主要 信息并不是存儲(chǔ)在一個(gè)獨(dú)立的系統(tǒng)中，或者不是通過統(tǒng)一的業(yè)務(wù)管 理流程在系統(tǒng)間維護(hù)。缺乏對(duì)集團(tuán)公司或政務(wù)單位主數(shù)據(jù)的管理， 就無(wú)法保障主數(shù)據(jù)在整個(gè)業(yè)務(wù)范圍內(nèi)保持一致、完整和

4、可控，導(dǎo)致 業(yè)務(wù)數(shù)據(jù)正確性無(wú)法得到保障。(4)缺乏統(tǒng)一的集團(tuán)型數(shù)據(jù)質(zhì)量管理流程體系。當(dāng)前現(xiàn)狀中 數(shù)據(jù)質(zhì)量管理主要由各組織部門分頭進(jìn)行；跨局跨部門的數(shù)據(jù)質(zhì)量 溝通機(jī)制不完善；缺乏清晰的跨局跨部門的數(shù)據(jù)質(zhì)量管控規(guī)范與標(biāo) 準(zhǔn)，數(shù)據(jù)分析隨機(jī)性強(qiáng)，存在業(yè)務(wù)需求不清的現(xiàn)象，影響數(shù)據(jù)質(zhì)量; 數(shù)據(jù)的自動(dòng)采集尚未全面實(shí)現(xiàn)，處理過程存在人為干預(yù)問題，很多 部門存在數(shù)據(jù)質(zhì)量管理人員不足、知識(shí)與經(jīng)驗(yàn)不夠、監(jiān)管方式不全 面等問題；缺乏完善的數(shù)據(jù)質(zhì)量管控流程和系統(tǒng)支撐能力。(5)數(shù)據(jù)全生命周期管理不完整。目前，大型集團(tuán)或政務(wù)單 位，數(shù)據(jù)的產(chǎn)生、使用、維護(hù)、備份到過時(shí)被銷毀的數(shù)據(jù)生命周期 管理規(guī)范和流程還不完善，不能確定過

5、期和無(wú)效數(shù)據(jù)的識(shí)別條件， 且非結(jié)構(gòu)化數(shù)據(jù)未納入數(shù)據(jù)生命周期的管理范疇；無(wú)信息化工具支 撐數(shù)據(jù)生命周期狀態(tài)的查詢，未有效利用元數(shù)據(jù)管理。數(shù)據(jù)治理的概述2.1 數(shù)據(jù)治理概念數(shù)據(jù)治理是指將數(shù)據(jù)作為組織資產(chǎn)而展開的一系列的具體化工作，是對(duì)數(shù)據(jù)的全生命周期管理數(shù)據(jù)治理體系是指從組織架構(gòu)、管理制度、操作規(guī)范、IT應(yīng)用 技術(shù)、績(jī)效考核支持等多個(gè)維度對(duì)組織的數(shù)據(jù)模型、數(shù)據(jù)架構(gòu)、數(shù) 據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生命周期等各方面進(jìn)行全面的梳理、建設(shè) 以及持續(xù)改進(jìn)的體系。2.2 數(shù)據(jù)治理目標(biāo)數(shù)據(jù)治理的目標(biāo)是提高數(shù)據(jù)的質(zhì)量（準(zhǔn)確性和完整性），保證數(shù) 據(jù)的安全性（保密性、完整性及可用性），實(shí)現(xiàn)數(shù)據(jù)資源在各組織機(jī) 構(gòu)部門的共享

6、；推進(jìn)信息資源的整合、對(duì)接和共享，從而提升集團(tuán) 公司或政務(wù)單位信息化水平，充分發(fā)揮信息化作用。I數(shù)據(jù)治理體系數(shù)據(jù)治理體系包含兩個(gè)方面，一是數(shù)據(jù)質(zhì)量核心領(lǐng)域，二是數(shù) 據(jù)質(zhì)量保障機(jī)制。具體兩者內(nèi)容及相互關(guān)系可以參見下圖：核心領(lǐng)域保障機(jī)制數(shù)據(jù)服務(wù)數(shù)據(jù)質(zhì)量制度章程規(guī)章制度管控辦法考核機(jī)制組織組織架構(gòu)*組織層次組織職責(zé)數(shù)據(jù)安仝數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)全生命周期流程流程目標(biāo)流程任務(wù)流程分級(jí)IT技術(shù)應(yīng)用技術(shù)規(guī)范實(shí)施辦法支撐平臺(tái)數(shù)據(jù)模型數(shù)據(jù)治理核心領(lǐng)域?yàn)榱擞行Ч芾硇畔①Y源，必須構(gòu)集團(tuán)級(jí)數(shù)據(jù)治理體系。數(shù)據(jù)治 理體系包含數(shù)據(jù)治理組織、數(shù)據(jù)構(gòu)架管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量 管理、數(shù)據(jù)服務(wù)管理及數(shù)據(jù)安全管理內(nèi)容，這些內(nèi)容既有機(jī)結(jié)合

7、， 又相互支撐。4.1 數(shù)據(jù)模型數(shù)據(jù)模型是數(shù)據(jù)構(gòu)架中重要一部分，包括概念數(shù)據(jù)模型和邏輯 數(shù)據(jù)模型，是數(shù)據(jù)治理的關(guān)鍵、重點(diǎn)。理想的數(shù)據(jù)模型應(yīng)該具有非 冗余、穩(wěn)定、一致、易用等特征。邏輯數(shù)據(jù)模型能涵蓋整個(gè)集團(tuán)的 業(yè)務(wù)范圍，以一種清晰的表達(dá)方式記錄跟蹤集團(tuán)單位的重要數(shù)據(jù)元素及其變動(dòng)，并利用它們之間各種可能的限制條件和關(guān)系來(lái)表達(dá)重 要的業(yè)務(wù)規(guī)則。數(shù)據(jù)模型必須在設(shè)計(jì)過程中保持統(tǒng)一的業(yè)務(wù)定義。 為了滿足將來(lái)不同的應(yīng)用分析需要，邏輯數(shù)據(jù)模型的設(shè)計(jì)應(yīng)該能夠 支持最小粒度的詳細(xì)數(shù)據(jù)的存儲(chǔ)，以支持各種可能的分析查詢。同 時(shí)保障邏輯數(shù)據(jù)模型能夠最大程度上減少冗余，并保障結(jié)構(gòu)具有足 夠的靈活性和擴(kuò)展性4.2 數(shù)據(jù)生命

8、周期一般包括數(shù)據(jù)生成及傳輸、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理及應(yīng)用、數(shù)據(jù) 銷毀四個(gè)方面。(1)數(shù)據(jù)生成及傳輸數(shù)據(jù)應(yīng)該能夠按照數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)和發(fā)展需要產(chǎn)生，應(yīng)采取措施 保證數(shù)據(jù)的準(zhǔn)確性和完整性，業(yè)務(wù)系統(tǒng)上線前應(yīng)該進(jìn)行必要的安全 測(cè)試，以保證上述措施的有效性。對(duì)于手工流程中產(chǎn)生的數(shù)據(jù)在相 關(guān)制度中明確要求，并通過事中復(fù)核、事后檢查等手段保證其準(zhǔn)確 性和完整性。數(shù)據(jù)傳輸過程中需要考慮保密性和完整性的問題，對(duì) 不同種類的數(shù)據(jù)分別采取不同的措施防止數(shù)據(jù)泄漏或數(shù)據(jù)被篡改。(2)數(shù)據(jù)存儲(chǔ)這個(gè)階段除了關(guān)注保密性、完整性之外，更要關(guān)心數(shù)據(jù)的可用 性，對(duì)于大部分?jǐn)?shù)據(jù)應(yīng)采取分級(jí)存儲(chǔ)的方式，不僅存儲(chǔ)在本地磁盤 上，還應(yīng)該在磁帶上，甚

9、至遠(yuǎn)程復(fù)制到磁盤陣列中，或者采用光盤 第5頁(yè)庫(kù)進(jìn)行存儲(chǔ)。對(duì)于存儲(chǔ)備份的數(shù)據(jù)要定期進(jìn)行測(cè)試，確保其可訪問 其數(shù)據(jù)完整。數(shù)據(jù)的備份恢復(fù)策略應(yīng)該由數(shù)據(jù)的責(zé)任部門或責(zé)任人 負(fù)責(zé)制定，信息化管理部門可以給予相應(yīng)的支持。同時(shí)還需要注意 因?yàn)椴块T需要或故障處理的需要，可能對(duì)數(shù)據(jù)進(jìn)行修改，必須在數(shù) 據(jù)管理辦法中明確數(shù)據(jù)修改的申請(qǐng)審批流程，審慎對(duì)待后臺(tái)數(shù)據(jù)修 改。(3)數(shù)據(jù)處理和應(yīng)用信息化相關(guān)部門需要對(duì)數(shù)據(jù)進(jìn)行分析處理，以挖掘由對(duì)于管理 及業(yè)務(wù)開展有價(jià)值的信息，為保證過程中數(shù)據(jù)的安全性，一般應(yīng)采 用聯(lián)機(jī)處理，系統(tǒng)只輸由分析處理的結(jié)果。但是實(shí)際中，因?yàn)橄嚓P(guān) 數(shù)據(jù)分析系統(tǒng)建設(shè)不到位，需要從數(shù)據(jù)庫(kù)中提取數(shù)據(jù)后再對(duì)數(shù)據(jù)

10、進(jìn) 行必要的分析處理，在這個(gè)過程中就需要關(guān)注數(shù)據(jù)提取操作是否可 能對(duì)數(shù)據(jù)庫(kù)造成破壞、提取由的數(shù)據(jù)在交付給分析處理人員的過程 中共安全性是否會(huì)降低、數(shù)據(jù)分析處理的環(huán)境安全性等等。(4)數(shù)據(jù)銷毀這個(gè)階段主要涉及數(shù)據(jù)的保密性。應(yīng)明確數(shù)據(jù)銷毀的流程，采 用必要的工具，數(shù)據(jù)的銷毀應(yīng)該有完整的記錄。尤其是對(duì)于需要送 由外部修理的存儲(chǔ)設(shè)備，送修之前應(yīng)該對(duì)數(shù)據(jù)進(jìn)行可靠的銷毀。4.3 數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)是集團(tuán)單位建立的一套符合自身實(shí)際，涵蓋定義、操 作、應(yīng)用多層次數(shù)據(jù)的標(biāo)準(zhǔn)化體系。數(shù)據(jù)標(biāo)準(zhǔn)的建立是集團(tuán)單位信息化、數(shù)字化建設(shè)的一項(xiàng)重要工 作，行業(yè)的各類數(shù)據(jù)必須遵循一個(gè)統(tǒng)一的標(biāo)準(zhǔn)進(jìn)行組織，才能構(gòu)成 一個(gè)可流通、可共享

11、的信息平臺(tái)。數(shù)據(jù)治理對(duì)標(biāo)準(zhǔn)的需求可以劃分為兩類，即基礎(chǔ)性標(biāo)準(zhǔn)和應(yīng)用 性標(biāo)準(zhǔn)。前者主要用于在不同系統(tǒng)間，形成信息的一致理解和統(tǒng)一 的坐標(biāo)參照系統(tǒng)，是信息匯集、交換以及應(yīng)用的基礎(chǔ)，包括數(shù)據(jù)分 類與編碼、數(shù)據(jù)字典、數(shù)字地圖標(biāo)準(zhǔn)；后者是為平臺(tái)功能發(fā)揮所涉 及的各個(gè)環(huán)節(jié)，提供一定的標(biāo)準(zhǔn)規(guī)范，以保證信息的高效匯集和交 換，包括元數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)交換技術(shù)規(guī)范、數(shù)據(jù)傳輸協(xié)議、數(shù)據(jù)質(zhì) 量標(biāo)準(zhǔn)等。(1)數(shù)據(jù)分類與編碼數(shù)據(jù)分類與編碼標(biāo)準(zhǔn)是信息化建設(shè)中標(biāo)準(zhǔn)化的一項(xiàng)基礎(chǔ)工作， 該類標(biāo)準(zhǔn)規(guī)定平臺(tái)匯集、交換相關(guān)信息統(tǒng)一的分類系統(tǒng)和排列順序 以及編碼規(guī)則，目的是在不同系統(tǒng)和用戶之間建立交通數(shù)據(jù)的一致 參照，對(duì)提高數(shù)據(jù)采集、處理

12、和數(shù)據(jù)交換效率具有重要作用。數(shù)據(jù) 分類與編碼標(biāo)準(zhǔn)的制定將有力推進(jìn)平臺(tái)標(biāo)準(zhǔn)化及交通信息化建設(shè)標(biāo) 準(zhǔn)化的進(jìn)程。(2)數(shù)據(jù)字典針對(duì)實(shí)際需求，定義數(shù)據(jù)集，建立各個(gè)領(lǐng)域的數(shù)據(jù)字典，規(guī)范數(shù)據(jù)概念和數(shù)據(jù)定義。在此基礎(chǔ)上，形成完備的集團(tuán)單位數(shù)據(jù)集和 數(shù)據(jù)字典。(3)元數(shù)據(jù)標(biāo)準(zhǔn)元數(shù)據(jù)標(biāo)準(zhǔn)是描述數(shù)據(jù)資源的具體對(duì)象時(shí)所有規(guī)則的集合，它 包括了完整描述一個(gè)具體數(shù)據(jù)對(duì)象時(shí)所需要的數(shù)據(jù)項(xiàng)集合。針對(duì)各 種信息資源分別制定適當(dāng)?shù)脑獢?shù)據(jù)標(biāo)準(zhǔn)，可為信息的管理、發(fā)現(xiàn)和 獲取提供一種實(shí)際而簡(jiǎn)便的方法，從而提高數(shù)據(jù)交換效率。(4)數(shù)據(jù)交換標(biāo)準(zhǔn)為了保證數(shù)據(jù)共享和交換的順利實(shí)現(xiàn)，必須明確定義和規(guī)范數(shù) 據(jù)交換的相關(guān)標(biāo)準(zhǔn)。數(shù)據(jù)交換的標(biāo)準(zhǔn)規(guī)范是

13、集團(tuán)單位綜合信息平臺(tái) 的核心標(biāo)準(zhǔn)。其中應(yīng)當(dāng)包括數(shù)據(jù)交換內(nèi)容、數(shù)據(jù)交換格式、數(shù)據(jù)傳 輸方式、各類中心間數(shù)據(jù)接口的標(biāo)準(zhǔn)化等方面。(5)數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)由于數(shù)據(jù)采集任務(wù)通常由其他二級(jí)平臺(tái)完成，數(shù)據(jù)治理平臺(tái)的 標(biāo)準(zhǔn)方法主要集中在數(shù)據(jù)的加工和管理上。應(yīng)該重點(diǎn)開發(fā)的一個(gè)領(lǐng) 域是數(shù)據(jù)質(zhì)量控制方法。應(yīng)當(dāng)從三個(gè)方面對(duì)數(shù)據(jù)質(zhì)量方法進(jìn)行研究：“壞數(shù)據(jù)”或“不可靠數(shù)據(jù)”的識(shí)別，錯(cuò)誤數(shù)據(jù)的編輯方法，以及 缺少值的處理。4.4 主數(shù)據(jù)主數(shù)據(jù)管理要做的就是從各部門的多個(gè)業(yè)務(wù)系統(tǒng)中整合最核心的、最需要共享的數(shù)據(jù)（主數(shù)據(jù)），集中進(jìn)行數(shù)據(jù)的清洗和豐富，并 且以服務(wù)的方式把統(tǒng)一的、完整的、準(zhǔn)確的、具有權(quán)威性的主數(shù)據(jù) 傳送給集團(tuán)單位范圍

14、內(nèi)需要使用這些數(shù)據(jù)的操作型應(yīng)用系統(tǒng)和分析 型應(yīng)用系統(tǒng)。主數(shù)據(jù)管理的信息流應(yīng)為：1）莫個(gè)業(yè)務(wù)系統(tǒng)觸發(fā)對(duì)主數(shù)據(jù)的改動(dòng)；2）主數(shù)據(jù)管理系統(tǒng)將整合之后完整、準(zhǔn)確的主數(shù)據(jù)傳送給所有 有關(guān)的應(yīng)用系統(tǒng)3）主數(shù)據(jù)管理系統(tǒng)為決策支持和數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)提供準(zhǔn)確的數(shù) 據(jù)源。因此對(duì)于主數(shù)據(jù)管理要考慮運(yùn)用主數(shù)據(jù)管理系統(tǒng)實(shí)現(xiàn)，主數(shù)據(jù) 管理系統(tǒng)的建設(shè)，要從建設(shè)初期就考慮整體的平臺(tái)框架和技術(shù)實(shí)現(xiàn)。4.5 數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量不高將影響數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用程度不高。低下的數(shù)據(jù)質(zhì)量 往往造成開發(fā)由來(lái)的系統(tǒng)與用戶的預(yù)期大相徑庭，數(shù)據(jù)質(zhì)量關(guān)系建 設(shè)有關(guān)分析型信息系統(tǒng)成敗，同時(shí)數(shù)據(jù)資源是集團(tuán)單位的戰(zhàn)略資源， 合理有效的使用正確的數(shù)據(jù)能指導(dǎo)集團(tuán)單位做由

15、正確的決策，提高 省綜合競(jìng)爭(zhēng)力。不合理的使用不正確的數(shù)據(jù)（即差的數(shù)據(jù)質(zhì)量）可 導(dǎo)致決策的失敗，正可謂差之毫厘、謬以千里。數(shù)據(jù)質(zhì)量管理包含對(duì)數(shù)據(jù)的絕對(duì)質(zhì)量管理、過程質(zhì)量管理。絕對(duì)質(zhì)量即數(shù)據(jù)的真實(shí)性、完備性、自治性是數(shù)據(jù)本身應(yīng)具有的屬性。 過程質(zhì)量即使用質(zhì)量、存儲(chǔ)質(zhì)量和傳輸質(zhì)量，數(shù)據(jù)的使用質(zhì)量是指 數(shù)據(jù)被正確的使用。再正確的數(shù)據(jù)，如果被錯(cuò)誤的使用，就不可能 得由正確的結(jié)論。數(shù)據(jù)的存貯質(zhì)量指數(shù)據(jù)被安全的存貯在適當(dāng)?shù)慕?質(zhì)上。所謂存貯在適當(dāng)?shù)慕橘|(zhì)上是指當(dāng)需要數(shù)據(jù)的時(shí)候能及時(shí)方便 的取由O數(shù)據(jù)的傳輸質(zhì)量是指數(shù)據(jù)在傳輸過程中的效率和正確性。高質(zhì)量的交通運(yùn)輸行業(yè)數(shù)據(jù)至少有如下幾項(xiàng)要求：一是正確性，在轉(zhuǎn)換、分

16、析、存儲(chǔ)、傳輸、應(yīng)用流程中不存在 錯(cuò)誤；二是完整性，數(shù)據(jù)庫(kù)應(yīng)用或要求的所有記錄、字段都存在；三是一致性，體現(xiàn)在整個(gè)數(shù)據(jù)庫(kù)的定義和維護(hù)方面，確保數(shù)據(jù) 在使用的整個(gè)過程中是一致的；四是時(shí)效性，衡量指標(biāo)是在指定的數(shù)據(jù)與真實(shí)的業(yè)務(wù)情況同步 的時(shí)間容忍度內(nèi)，即指定的更新頻度內(nèi)，及時(shí)被刷新的數(shù)據(jù)的百分 比；五是可靠性，提供數(shù)據(jù)的數(shù)據(jù)源必須能夠可靠穩(wěn)定地提供數(shù)據(jù)。數(shù)據(jù)質(zhì)量管理的規(guī)劃和實(shí)施包括以下內(nèi)容：一是數(shù)據(jù)質(zhì)量管控體系的建立，包括數(shù)據(jù)質(zhì)量的評(píng)估體系，定 期評(píng)估數(shù)據(jù)質(zhì)量狀況；二是在部門各個(gè)應(yīng)用系統(tǒng)中的落實(shí)，包括每個(gè)應(yīng)用系統(tǒng)中的數(shù)據(jù)質(zhì)量檢查等；三是在最開始建立數(shù)據(jù)質(zhì)量管理系統(tǒng)的時(shí)候，借助數(shù)據(jù)治理平 臺(tái)上，通過

17、建立數(shù)據(jù)質(zhì)量管理的規(guī)則來(lái)集中化地建立數(shù)據(jù)質(zhì)量管理 系統(tǒng)，發(fā)現(xiàn)問題并持續(xù)改進(jìn)；四是數(shù)據(jù)質(zhì)量管理與業(yè)務(wù)稽核的結(jié)合，通過業(yè)務(wù)規(guī)則的稽核來(lái) 發(fā)現(xiàn)數(shù)據(jù)質(zhì)量深層次的問題，將數(shù)據(jù)質(zhì)量與業(yè)務(wù)一線結(jié)合起來(lái)，使 業(yè)務(wù)人員對(duì)數(shù)據(jù)質(zhì)量問題有更加清晰和明確的認(rèn)識(shí)。完善的數(shù)據(jù)質(zhì)量管理是保障各項(xiàng)數(shù)據(jù)治理工作能夠得到有效落 實(shí)，達(dá)到數(shù)據(jù)準(zhǔn)確、完整的目標(biāo)，并能夠提供有效的增值服務(wù)的重 要基礎(chǔ)。4.6 數(shù)據(jù)服務(wù)數(shù)據(jù)整理最終目的就是要服務(wù)于各部門單位、人員等，能更準(zhǔn) 確更快更方便的服務(wù)是數(shù)據(jù)服務(wù)管理的目標(biāo)。數(shù)據(jù)服務(wù)管理是指針對(duì)內(nèi)部積累多年的數(shù)據(jù)，研究如何能夠充 分利用這些數(shù)據(jù)，分析行業(yè)業(yè)務(wù)流程優(yōu)化業(yè)務(wù)流程。數(shù)據(jù)使用的方 式通常包括

18、對(duì)數(shù)據(jù)的深度加工和分析，包括通過各種報(bào)表、工具來(lái) 分析運(yùn)營(yíng)層面的問題，還包括通過數(shù)據(jù)挖掘等工具對(duì)數(shù)據(jù)進(jìn)行深度 加工，從而更好的管理者服務(wù)。通過建立統(tǒng)一的數(shù)據(jù)服務(wù)平臺(tái)來(lái)滿 足針對(duì)跨部門、跨系統(tǒng)的數(shù)據(jù)應(yīng)用。通過統(tǒng)一的數(shù)據(jù)服務(wù)平臺(tái)來(lái)統(tǒng) 一數(shù)據(jù)源，變多源為單源，加快數(shù)據(jù)流轉(zhuǎn)速度，提升數(shù)據(jù)服務(wù)的效 率。4.7 數(shù)據(jù)安全由于集團(tuán)單位的重要且敏感信息大部分集中在應(yīng)用系統(tǒng)中，數(shù) 據(jù)安全更是至關(guān)重要。如何保障數(shù)據(jù)不被泄露和非法訪問，是非常 關(guān)鍵的問題。數(shù)據(jù)安全管理主要解決的就是數(shù)據(jù)在保存、使用和交 換過程中的安全問題。數(shù)據(jù)安全管理主要體現(xiàn)在以下六個(gè)方面：一是數(shù)據(jù)使用的安全性，包括基礎(chǔ)數(shù)據(jù)的保存、訪問和權(quán)限管 理

19、；二是數(shù)據(jù)隱私問題，系統(tǒng)中采集的證件號(hào)碼、銀行賬號(hào)等信息 在下游分析系統(tǒng)和內(nèi)部管理系統(tǒng)中，是否要進(jìn)行加密，以避免數(shù)據(jù) 被非法訪問；三是訪問權(quán)限統(tǒng)一管理，包括單點(diǎn)登錄問題及用戶名、數(shù)據(jù)和 應(yīng)用的訪問授權(quán)統(tǒng)一管理；四是數(shù)據(jù)安全審計(jì)，為數(shù)據(jù)修改、使用等環(huán)節(jié)設(shè)珞審計(jì)方法， 事后進(jìn)行審計(jì)和責(zé)任追究；五是制度及流程建立，逐步建立數(shù)據(jù)安全性的管理辦法、系統(tǒng) 開發(fā)規(guī)范、數(shù)據(jù)隱私管理辦法及相應(yīng)的應(yīng)用系統(tǒng)規(guī)范、在管理決策 和分析類系統(tǒng)中的審計(jì)管理辦法等；六是應(yīng)用系統(tǒng)權(quán)限的訪問控制，建立集團(tuán)級(jí)權(quán)限管理系統(tǒng)，增加數(shù)字水印等技術(shù)在應(yīng)用系統(tǒng)中的使用。數(shù)據(jù)治理保障機(jī)制5.1 制度章程5.1.1 規(guī)章制度數(shù)據(jù)治理章程類似于企

20、業(yè)的公司條例。該章程闡明數(shù)據(jù)治理的 主要目標(biāo)、相關(guān)工作人員、職責(zé)、決策權(quán)利和度量標(biāo)準(zhǔn)。具體可參見附件數(shù)據(jù)管理規(guī)范5.1.2 管控辦法管控辦法是基于規(guī)章制度與工具的結(jié)合，可落地的操作的辦法 具體可參見附件數(shù)據(jù)質(zhì)量評(píng)估辦法5.1.3 考核機(jī)制考核是是保障制度落實(shí)的根本，建立明確的考核制度，實(shí)際操 作中可根據(jù)集團(tuán)單位情況，建立相應(yīng)的針對(duì)數(shù)據(jù)治理方面的考核辦 法，并與個(gè)人績(jī)效相關(guān)聯(lián)?？蓞⒖脊芾韺W(xué)中相關(guān)考核、績(jī)效管理相 關(guān)部分。對(duì)于數(shù)據(jù)治理的考核，可見下圖進(jìn)行理解：執(zhí)彳亍是管控體系落地的關(guān)鍵以績(jī)效的手段促進(jìn)數(shù)據(jù)質(zhì)重 管理.將數(shù)據(jù)生產(chǎn)善使用者、富 理者及擁有者關(guān)聯(lián)起來(lái),形成T 可W廂蜘行的執(zhí)行體系，保障

21、持續(xù)的高數(shù)據(jù)質(zhì):根理核心業(yè)轉(zhuǎn)泥.故增減o ME蜘屠管的崎（數(shù)卻讖）以桓凝對(duì)數(shù)據(jù)迸行質(zhì)盤探過、處理、以殖效手修1L預(yù)警集成VW形中心，實(shí)現(xiàn)共事、分發(fā)控機(jī)制持須百效選行L?？偯庸芊啪蛄晔蠁栴}的處理個(gè)敷和533 - Y ：數(shù)搪負(fù)責(zé)人考核標(biāo)準(zhǔn)：1,陽(yáng)天定時(shí)冏內(nèi)處理完fiETJ數(shù)據(jù)質(zhì)量問tt ,加1分;否則不班；3S國(guó)分項(xiàng)同班代警.分管理員7n考承對(duì)象：考黑3,準(zhǔn)內(nèi)，匠麗邦即相關(guān)人員處理,不扣分； 都叱扣3分；5.2 數(shù)據(jù)治理組織5.2.1 組織架構(gòu)有效的組織機(jī)構(gòu)是項(xiàng)目成功的有力保證，為了達(dá)到項(xiàng)目預(yù)期目 標(biāo)，在項(xiàng)目開始之前對(duì)于組織機(jī)構(gòu)及其責(zé)任分工做由規(guī)劃是非常必 要的，數(shù)據(jù)治理項(xiàng)目管理組織建議宜采用如圖

22、所示的組織結(jié)構(gòu)：5.2.2組織層次數(shù)據(jù)治理委員會(huì)由集團(tuán)公司的高層領(lǐng)導(dǎo)者組成。委員會(huì)定義數(shù) 據(jù)治理愿景和目標(biāo)；組織內(nèi)跨業(yè)務(wù)部門和 IT部門進(jìn)行協(xié)調(diào)；設(shè)珞 數(shù)據(jù)治理計(jì)劃的總體方向；在發(fā)生策略分歧時(shí)進(jìn)行協(xié)調(diào)。此委員會(huì) 也將包含來(lái)自部門或子公司的領(lǐng)導(dǎo)代表，以及來(lái)自各單位視數(shù)據(jù)為 機(jī)構(gòu)資產(chǎn)的信息科技部門的代表。這些高層管理人員是數(shù)據(jù)治理計(jì) 劃的所有擁護(hù)者，確保在整個(gè)組織內(nèi)獲得支持。數(shù)據(jù)治理工作組是組織內(nèi)委員會(huì)下面的下一個(gè)級(jí)別。工作組執(zhí)行數(shù)據(jù)治理計(jì)劃。工作組負(fù)責(zé)監(jiān)督數(shù)據(jù)管理員工作。數(shù)據(jù)治理工作 組由數(shù)據(jù)治理委員會(huì)中各局領(lǐng)導(dǎo)主持。每各業(yè)務(wù)部門有至少一位業(yè)務(wù)分析員，信息科技部門設(shè)珞數(shù)據(jù) 質(zhì)量分析員、數(shù)據(jù)管理員

23、、集成開發(fā)人員。各工作人員負(fù)責(zé)本部門 數(shù)據(jù)的質(zhì)量，履行職責(zé)，解決具體的問題。5.2.3 組織職責(zé)根據(jù)數(shù)據(jù)管理工作的實(shí)際需要，在業(yè)務(wù)管理部門、技術(shù)管理部 門和業(yè)務(wù)應(yīng)用部門確定各工作人員的職責(zé)。數(shù)據(jù)治理委員會(huì)的職責(zé)范圍：1）從戰(zhàn)略角度來(lái)統(tǒng)籌和規(guī)劃，對(duì)數(shù)據(jù)資產(chǎn)和系統(tǒng)進(jìn)行清理，確 定數(shù)據(jù)治理的范圍；明確數(shù)據(jù)源的由處、使用和管理的流程及職責(zé)；2）明確數(shù)據(jù)治理的組織、功能、角色和職責(zé)；3）負(fù)責(zé)各工作組成員的培訓(xùn)工作；4）負(fù)責(zé)審查各工作小組的目標(biāo)、原則，批準(zhǔn)數(shù)據(jù)管理的相關(guān)制 度、標(biāo)準(zhǔn)及流程；5）負(fù)責(zé)確定數(shù)據(jù)治理的工具、技術(shù)和平臺(tái)；6）負(fù)責(zé)制定數(shù)據(jù)治理的評(píng)估指標(biāo)、方法。數(shù)據(jù)治理工作小組，其主要工作職責(zé)是：負(fù)責(zé)

24、數(shù)據(jù)治理的牽頭，組織、指導(dǎo)和協(xié)調(diào)本單位的數(shù)據(jù)治理工 作;綜合數(shù)據(jù)治理管控辦法、數(shù)據(jù)治理考核機(jī)制等有關(guān)規(guī)章制度的牽頭制定、修改等；負(fù)責(zé)數(shù)據(jù)的分析整理并由具數(shù)據(jù)指標(biāo)報(bào)告；負(fù)責(zé)數(shù)據(jù)的監(jiān)測(cè)預(yù)測(cè)工作；建立數(shù)據(jù)沖突的處理流程和數(shù)據(jù)變更控制流程。負(fù)責(zé)對(duì)基礎(chǔ)數(shù)據(jù)質(zhì)量的檢測(cè)、發(fā)布、考核和清理完善工作。工作組成員：業(yè)務(wù)分析員、數(shù)據(jù)質(zhì)量分析員、數(shù)據(jù)管理員、集成開發(fā)員這些不同的角色在數(shù)據(jù)治理過程中承擔(dān)著彼此不同，而又相輔 相成的職責(zé)。其中集成開發(fā)人員在數(shù)據(jù)治理流程中需要肩負(fù)起數(shù)據(jù) 訪問、驗(yàn)證數(shù)據(jù)結(jié)構(gòu)、驗(yàn)證數(shù)據(jù)、交付數(shù)據(jù)以及數(shù)據(jù)庫(kù)/知識(shí)庫(kù)的構(gòu) 建等角色，因此他們的工作包括：訪問及交付相應(yīng)數(shù)據(jù)給業(yè)務(wù)用戶提高生產(chǎn)力和性能最大化減少異常/由錯(cuò)的影響開發(fā)和完善技術(shù)最佳實(shí)踐數(shù)據(jù)質(zhì)量分析員在數(shù)據(jù)治理流