關于數據治理

1、.關于數據治理目錄一數據管理的現狀3二數據治理的概述3一數據治理概念3二數據治理目標3三數據治理體系3四數據治理核心領域3一數據模型3二數據生命周期3三數據標準3四主數據3五數據質量3六數據效勞3七數據平安3五數據治理保障機制3一制度章程3(1)規(guī)章制度3(2)管控方法3(3)考核機制3二數據治理組織3(1)組織架構3(2)組織層次3(3)組織職責3三流程管理3四IT技術應用3(1)支撐平臺3(2)技術規(guī)X3A 數據管理規(guī)X3B 數據質量評估方法3C 數據質量管理流程3關于數據治理的理解1. 數據管理的現狀根據行業(yè)信息化開展的現狀，結合當今行業(yè)數據治理的要求，大型集團或政務管理部門現階段數據管

2、理方面存在以下的缺乏：1數據多頭管理，缺少專門對數據管理進展監(jiān)視和控制的組織。信息系統(tǒng)的建立和管理職能分散在各部門，致使數據管理的職責分散，權責不明確。組織機構各部門關注數據的角度不一樣，缺少一個組織從全局的視角對數據進展管理，導致無法建立統(tǒng)一的數據管理規(guī)程、標準等，相應的數據管理監(jiān)視措施無法得到落實。組織機構的數據考核體系也尚未建立，無法保障數據管理標準和規(guī)程的有效執(zhí)行。2多系統(tǒng)分散建立，沒有規(guī)X統(tǒng)一的省級數據標準和數據模型。組織機構為應對迅速變化的市場和社會需求，逐步建立了各自的信息系統(tǒng)，各部門站在各自的立場生產、使用和管理數據，使得數據分散在不同的部門和信息系統(tǒng)中，缺乏統(tǒng)一的數據規(guī)劃、可

3、信的數據來源和數據標準，導致數據不規(guī)X、不一致、冗余、無法共享等問題出現，組織機構各部門對數據的理解難以應用一致的語言來描述，導致理解不一致。3缺少統(tǒng)一的主數據，組織機構核心系統(tǒng)間的人員等主要信息并不是存儲在一個獨立的系統(tǒng)中，或者不是通過統(tǒng)一的業(yè)務管理流程在系統(tǒng)間維護。缺乏對集團公司或政務單位主數據的管理，就無法保障主數據在整個業(yè)務X圍內保持一致、完整和可控，導致業(yè)務數據正確性無法得到保障。4缺乏統(tǒng)一的集團型數據質量管理流程體系。當前現狀中數據質量管理主要由各組織部門分頭進展；跨局跨部門的數據質量溝通機制不完善；缺乏清晰的跨局跨部門的數據質量管控規(guī)X與標準，數據分析隨機性強，存在業(yè)務需求不清的

4、現象，影響數據質量；數據的自動采集尚未全面實現，處理過程存在人為干預問題，很多部門存在數據質量管理人員缺乏、知識與經歷不夠、監(jiān)管方式不全面等問題；缺乏完善的數據質量管控流程和系統(tǒng)支撐能力。5數據全生命周期管理不完整。目前，大型集團或政務單位，數據的產生、使用、維護、備份到過時被銷毀的數據生命周期管理規(guī)X和流程還不完善，不能確定過期和無效數據的識別條件，且非構造化數據未納入數據生命周期的管理X疇；無信息化工具支撐數據生命周期狀態(tài)的查詢，未有效利用元數據管理。2. 數據治理的概述2.1 數據治理概念數據治理是指將數據作為組織資產而展開的一系列的具體化工作,是對數據的全生命周期管理。數據治理體系是指

5、從組織架構、管理制度、操作規(guī)X、IT應用技術、績效考核支持等多個維度對組織的數據模型、數據架構、數據質量、數據平安、數據生命周期等各方面進展全面的梳理、建立以及持續(xù)改良的體系。2.2 數據治理目標數據治理的目標是提高數據的質量準確性和完整性，保證數據的平安性XX性、完整性及可用性，實現數據資源在各組織機構部門的共享；推進信息資源的整合、對接和共享，從而提升集團公司或政務單位信息化水平，充分發(fā)揮信息化作用。3. 數據治理體系數據治理體系包含兩個方面，一是數據質量核心領域，二是數據質量保障機制。具體兩者內容及相互關系可以參見下列圖：4. 數據治理核心領域為了有效管理信息資源，必須構集團級數據治理體

6、系。數據治理體系包含數據治理組織、數據構架管理、主數據管理、數據質量管理、數據效勞管理及數據平安管理內容，這些內容既有機結合，又相互支撐。4.1 數據模型數據模型是數據構架中重要一局部，包括概念數據模型和邏輯數據模型，是數據治理的關鍵、重點。理想的數據模型應該具有非冗余、穩(wěn)定、一致、易用等特征。邏輯數據模型能涵蓋整個集團的業(yè)務X圍，以一種清晰的表達方式記錄跟蹤集團單位的重要數據元素及其變動，并利用它們之間各種可能的限制條件和關系來表達重要的業(yè)務規(guī)那么。數據模型必須在設計過程中保持統(tǒng)一的業(yè)務定義。為了滿足將來不同的應用分析需要，邏輯數據模型的設計應該能夠支持最小粒度的詳細數據的存儲，以支持各種可

7、能的分析查詢。同時保障邏輯數據模型能夠最大程度上減少冗余，并保障構造具有足夠的靈活性和擴展性4.2 數據生命周期一般包括數據生成及傳輸、數據存儲、數據處理及應用、數據銷毀四個方面。1數據生成及傳輸數據應該能夠按照數據質量標準和開展需要產生，應采取措施保證數據的準確性和完整性，業(yè)務系統(tǒng)上線前應該進展必要的平安測試，以保證上述措施的有效性。對于手工流程中產生的數據在相關制度中明確要求，并通過事中復核、事后檢查等手段保證其準確性和完整性。數據傳輸過程中需要考慮XX性和完整性的問題，對不同種類的數據分別采取不同的措施防止數據泄漏或數據被篡改。2數據存儲這個階段除了關注XX性、完整性之外，更要關心數據的

8、可用性，對于大局部數據應采取分級存儲的方式，不僅存儲在本地磁盤上，還應該在磁帶上，甚至遠程復制到磁盤陣列中，或者采用光盤庫進展存儲。對于存儲藏份的數據要定期進展測試，確保其可訪問其數據完整。數據的備份恢復策略應該由數據的責任部門或責任人負責制定，信息化管理部門可以給予相應的支持。同時還需要注意因為部門需要或故障處理的需要，可能對數據進展修改，必須在數據管理方法中明確數據修改的申請審批流程，審慎對待后臺數據修改。3數據處理和應用信息化相關部門需要對數據進展分析處理，以挖掘出對于管理及業(yè)務開展有價值的信息，為保證過程中數據的平安性，一般應采用聯(lián)機處理，系統(tǒng)只輸出分析處理的結果。但是實際中，因為相關

9、數據分析系統(tǒng)建立不到位，需要從數據庫中提取數據后再對數據進展必要的分析處理，在這個過程中就需要關注數據提取操作是否可能對數據庫造成破壞、提取出的數據在交付給分析處理人員的過程中其平安性是否會降低、數據分析處理的環(huán)境平安性等等。4數據銷毀這個階段主要涉及數據的XX性。應明確數據銷毀的流程，采用必要的工具，數據的銷毀應該有完整的記錄。尤其是對于需要送出外部修理的存儲設備，送修之前應該對數據進展可靠的銷毀。4.3 數據標準數據標準是集團單位建立的一套符合自身實際，涵蓋定義、操作、應用多層次數據的標準化體系。數據標準的建立是集團單位信息化、數字化建立的一項重要工作，行業(yè)的各類數據必須遵循一個統(tǒng)一的標準

10、進展組織，才能構成一個可流通、可共享的信息平臺。數據治理對標準的需求可以劃分為兩類，即根底性標準和應用性標準。前者主要用于在不同系統(tǒng)間，形成信息的一致理解和統(tǒng)一的坐標參照系統(tǒng)，是信息聚集、交換以及應用的根底，包括數據分類與編碼、數據字典、數字地圖標準；后者是為平臺功能發(fā)揮所涉及的各個環(huán)節(jié)，提供一定的標準規(guī)X，以保證信息的高效聚集和交換，包括元數據標準、數據交換技術規(guī)X、數據傳輸協(xié)議、數據質量標準等。1數據分類與編碼數據分類與編碼標準是信息化建立中標準化的一項根底工作，該類標準規(guī)定平臺聚集、交換相關信息統(tǒng)一的分類系統(tǒng)和排列順序以及編碼規(guī)那么，目的是在不同系統(tǒng)和用戶之間建立交通數據的一致參照，對提

11、高數據采集、處理和數據交換效率具有重要作用。數據分類與編碼標準的制定將有力推進平臺標準化及交通信息化建立標準化的進程。2數據字典針對實際需求，定義數據集，建立各個領域的數據字典，規(guī)X數據概念和數據定義。在此根底上，形成完備的集團單位數據集和數據字典。3元數據標準元數據標準是描述數據資源的具體對象時所有規(guī)那么的集合，它包括了完整描述一個具體數據對象時所需要的數據項集合。針對各種信息資源分別制定適當的元數據標準，可為信息的管理、發(fā)現和獲取提供一種實際而簡便的方法，從而提高數據交換效率。4數據交換標準為了保證數據共享和交換的順利實現，必須明確定義和規(guī)X數據交換的相關標準。數據交換的標準規(guī)X是集團單位

12、綜合信息平臺的核心標準。其中應當包括數據交換內容、數據交換格式、數據傳輸方式、各類中心間數據接口的標準化等方面。5數據質量標準由于數據采集任務通常由其他二級平臺完成，數據治理平臺的標準方法主要集中在數據的加工和管理上。應該重點開發(fā)的一個領域是數據質量控制方法。應當從三個方面對數據質量方法進展研究：“壞數據或“不可靠數據的識別，錯誤數據的編輯方法，以及缺少值的處理。4.4 主數據主數據管理要做的就是從各部門的多個業(yè)務系統(tǒng)中整合最核心的、最需要共享的數據主數據，集中進展數據的清洗和豐富，并且以效勞的方式把統(tǒng)一的、完整的、準確的、具有權威性的主數據傳送給集團單位X圍內需要使用這些數據的操作型應用系統(tǒng)

13、和分析型應用系統(tǒng)。主數據管理的信息流應為：1) 某個業(yè)務系統(tǒng)觸發(fā)對主數據的改動；2) 主數據管理系統(tǒng)將整合之后完整、準確的主數據傳送給所有有關的應用系統(tǒng)3) 主數據管理系統(tǒng)為決策支持和數據倉庫系統(tǒng)提供準確的數據源。因此對于主數據管理要考慮運用主數據管理系統(tǒng)實現，主數據管理系統(tǒng)的建立，要從建立初期就考慮整體的平臺框架和技術實現。4.5 數據質量數據質量不高將影響數據倉庫應用程度不高。低下的數據質量往往造成開發(fā)出來的系統(tǒng)與用戶的預期大相徑庭，數據質量關系建立有關分析型信息系統(tǒng)成敗，同時數據資源是集團單位的戰(zhàn)略資源，合理有效的使用正確的數據能指導集團單位做出正確的決策，提高省綜合競爭力。不合理的使用

14、不正確的數據即差的數據質量可導致決策的失敗，正可謂差之毫厘、謬以千里。數據質量管理包含對數據的絕對質量管理、過程質量管理。絕對質量即數據的真實性、完備性、自治性是數據本身應具有的屬性。過程質量即使用質量、存儲質量和傳輸質量，數據的使用質量是指數據被正確的使用。再正確的數據，如果被錯誤的使用，就不可能得出正確的結論。數據的存貯質量指數據被平安的存貯在適當的介質上。所謂存貯在適當的介質上是指當需要數據的時候能及時方便的取出。數據的傳輸質量是指數據在傳輸過程中的效率和正確性。高質量的交通運輸行業(yè)數據至少有如下幾項要求：一是正確性，在轉換、分析、存儲、傳輸、應用流程中不存在錯誤；二是完整性，數據庫應用

15、或要求的所有記錄、字段都存在；三是一致性，表達在整個數據庫的定義和維護方面，確保數據在使用的整個過程中是一致的；四是時效性，衡量指標是在指定的數據與真實的業(yè)務情況同步的時間容忍度內，即指定的更新頻度內，及時被刷新的數據的百分比；五是可靠性，提供數據的數據源必須能夠可靠穩(wěn)定地提供數據。數據質量管理的規(guī)劃和實施包括以下內容：一是數據質量管控體系的建立，包括數據質量的評估體系，定期評估數據質量狀況；二是在部門各個應用系統(tǒng)中的落實，包括每個應用系統(tǒng)中的數據質量檢查等；三是在最開場建立數據質量管理系統(tǒng)的時候，借助數據治理平臺上，通過建立數據質量管理的規(guī)那么來集中化地建立數據質量管理系統(tǒng)，發(fā)現問題并持續(xù)改

16、良；四是數據質量管理與業(yè)務稽核的結合，通過業(yè)務規(guī)那么的稽核來發(fā)現數據質量深層次的問題，將數據質量與業(yè)務一線結合起來，使業(yè)務人員對數據質量問題有更加清晰和明確的認識。完善的數據質量管理是保障各項數據治理工作能夠得到有效落實，到達數據準確、完整的目標，并能夠提供有效的增值效勞的重要根底。4.6 數據效勞數據整理最終目的就是要效勞于各部門單位、人員等，能更準確更快更方便的效勞是數據效勞管理的目標。數據效勞管理是指針對內部積累多年的數據，研究如何能夠充分利用這些數據，分析行業(yè)業(yè)務流程優(yōu)化業(yè)務流程。數據使用的方式通常包括對數據的深度加工和分析，包括通過各種報表、工具來分析運營層面的問題，還包括通過數據挖

17、掘等工具對數據進展深度加工，從而更好的管理者效勞。通過建立統(tǒng)一的數據效勞平臺來滿足針對跨部門、跨系統(tǒng)的數據應用。通過統(tǒng)一的數據效勞平臺來統(tǒng)一數據源，變多源為單源，加快數據流轉速度，提升數據效勞的效率。4.7 數據平安由于集團單位的重要且敏感信息大局部集中在應用系統(tǒng)中，數據平安更是至關重要。如何保障數據不被泄露和非法訪問，是非常關鍵的問題。數據平安管理主要解決的就是數據在保存、使用和交換過程中的平安問題。數據平安管理主要表達在以下六個方面：一是數據使用的平安性，包括根底數據的保存、訪問和權限管理；二是數據隱私問題，系統(tǒng)中采集的證件、銀行賬號等信息在下游分析系統(tǒng)和內部管理系統(tǒng)中，是否要進展加密，以

18、防止數據被非法訪問；三是訪問權限統(tǒng)一管理，包括單點登錄問題及用戶名、數據和應用的訪問授權統(tǒng)一管理；四是數據平安審計，為數據修改、使用等環(huán)節(jié)設置審計方法，事后進展審計和責任追究；五是制度及流程建立，逐步建立數據平安性的管理方法、系統(tǒng)開發(fā)規(guī)X、數據隱私管理方法及相應的應用系統(tǒng)規(guī)X、在管理決策和分析類系統(tǒng)中的審計管理方法等；六是應用系統(tǒng)權限的訪問控制，建立集團級權限管理系統(tǒng)，增加數字水印等技術在應用系統(tǒng)中的使用。5. 數據治理保障機制5.1 制度章程5.1.1 規(guī)章制度數據治理章程類似于企業(yè)的公司條例。該章程說明數據治理的主要目標、相關工作人員、職責、決策權利和度量標準。具體可參見數據管理規(guī)X5.1

19、.2 管控方法管控方法是基于規(guī)章制度與工具的結合，可落地的操作的方法。具體可參見數據質量評估方法5.1.3 考核機制考核是是保障制度落實的根本，建立明確的考核制度，實際操作中可根據集團單位情況，建立相應的針對數據治理方面的考核方法，并與個人績效相關聯(lián)?？蓞⒖脊芾韺W中相關考核、績效管理相關局部。對于數據治理的考核，可見下列圖進展理解：5.2 數據治理組織5.2.1 組織架構有效的組織機構是工程成功的有力保證，為了到達工程預期目標，在工程開場之前對于組織機構及其責任分工做出規(guī)劃是非常必要的，數據治理工程管理組織建議宜采用如下圖的組織構造：5.2.2 組織層次數據治理委員會由集團公司的高層領導者組成

20、。委員會定義數據治理愿景和目標；組織內跨業(yè)務部門和 IT部門進展協(xié)調；設置數據治理方案的總體方向；在發(fā)生策略分歧時進展協(xié)調。此委員會也將包含來自部門或子公司的領導代表，以及來自各單位視數據為機構資產的信息科技部門的代表。這些高層管理人員是數據治理方案的所有擁護者，確保在整個組織內獲得支持。數據治理工作組是組織內委員會下面的下一個級別。工作組執(zhí)行數據治理方案。工作組負責監(jiān)視數據管理員工作。數據治理工作組由數據治理委員會中各局領導主持。每各業(yè)務部門有至少一位業(yè)務分析員，信息科技部門設置數據質量分析員、數據管理員、集成開發(fā)人員。各工作人員負責本部門數據的質量，履行職責，解決具體的問題。5.2.3 組

21、織職責根據數據管理工作的實際需要，在業(yè)務管理部門、技術管理部門和業(yè)務應用部門確定各工作人員的職責。數據治理委員會的職責X圍：1從戰(zhàn)略角度來統(tǒng)籌和規(guī)劃，對數據資產和系統(tǒng)進展清理，確定數據治理的X圍；明確數據源的出處、使用和管理的流程及職責；2明確數據治理的組織、功能、角色和職責；3負責各工作組成員的培訓工作；4負責審查各工作小組的目標、原那么，批準數據管理的相關制度、標準及流程；5負責確定數據治理的工具、技術和平臺；6負責制定數據治理的評估指標、方法。數據治理工作小組，其主要工作職責是：負責數據治理的牽頭，組織、指導和協(xié)調本單位的數據治理工作；綜合數據治理管控方法、數據治理考核機制等有關規(guī)章制度

22、的牽頭制定、修改等；負責數據的分析整理并出具數據指標報告；負責數據的監(jiān)測預測工作；建立數據沖突的處理流程和數據變更控制流程。負責對根底數據質量的檢測、發(fā)布、考核和清理完善工作。工作組成員：業(yè)務分析員、數據質量分析員、數據管理員、集成開發(fā)員這些不同的角色在數據治理過程中承當著彼此不同，而又相輔相成的職責。其中集成開發(fā)人員在數據治理流程中需要肩負起數據訪問、驗證數據構造、驗證數據、交付數據以及數據庫/知識庫的構建等角色，因此他們的工作包括： 訪問及交付相應數據給業(yè)務用戶 提高生產力和性能 最大化減少異常/出錯的影響 開發(fā)和完善技術最正確實踐數據質量分析員在數據治理流程中負責數據的剖析、清洗匹配合并

23、等。工作包括： 為開發(fā)人員定義數據規(guī)格及標準 為機構有效的追蹤數據質量問題 實施被業(yè)務人員和數據管理員定義正確的數據質量規(guī)那么 不連續(xù)的監(jiān)控數據質量水平及問題業(yè)務分析人員在數據治理流程中負責定義數據的轉換規(guī)那么，工作包括： 與需求開發(fā)人員協(xié)作，正確捕獲和解析業(yè)務需求 與開發(fā)人員和數據管理員協(xié)作，為業(yè)務用戶縮短數據產生價值的時間數據管理員需要定義引證數據，并管理元數據，工作包括： 保證數據的質量、正確、完整、一致、審計及平安性 定義引證/參考數據 為組織機構數據實體給出正確業(yè)務定義 為組織機構解決混淆和有爭論的數據定義5.3 流程管理流程管理包括流程目標、流程任務、流程分級，根據數據治理的內容，

24、建立相應流程，且遵循本單位數據治理的規(guī)那么制度。實際操作中可結合所使用的數據治理工具，與數據治理工具供給商進展協(xié)商，建立符合集團公司的流程管理。5.4 IT技術應用5.4.1 支撐平臺現市場上關于數據治理平臺存在不同的成熟產品，但在功能實現上大致一樣，具體可參加下列圖了解。5.4.2 技術規(guī)X技術規(guī)X是保障數據治理平臺可持續(xù)管理的根底，隨著數據量的增長、技術水平的開展，為更好、可持續(xù)的實現數據資產的管理、應用，需建立明確的技術規(guī)X。A 數據管理規(guī)X為逐步提高數據資源利用效果，推動信息化建立管理向標準化、信息化和數字化方向開展，數據管理應遵循以下原那么：1統(tǒng)一規(guī)X。數據標準要嚴格執(zhí)行省交通運輸廳

25、的統(tǒng)一標準。2分級管理。實行分層級的數據管理模式，明確職責分工，層層落實責任。3過程控制。建立數據從采集、報送、審核到應用、維護全過程的控制規(guī)X，保證數據質量，提高應用效果。4保障平安。建立數據訪問的身份驗證、權限管理及定期備份等平安制度，規(guī)X操作，做好病毒預防、入侵檢測和數據XX工作。5數據共享。整合應用系統(tǒng)，做到入口唯一，實現數據一次采集，集中存儲，共享使用。數據管理的規(guī)X工作包括：數據標準、數據采集、數據審核、數據維護、數據分析、數據應用、數據發(fā)布、數據傳輸、數據存儲備份、恢復、數據平安管理、數據質量監(jiān)控、數據管理考核等。一數據標準第一條XX省交通運輸行業(yè)數據必須按國家交通部制定的數據標

26、準和代碼規(guī)X執(zhí)行。國家交通部標準中未包括的內容執(zhí)行XX省交通運輸廳的統(tǒng)一規(guī)X。第二條在數據采集工作中，各級應嚴格依據省局制定的標準進展數據的采集錄入、審核修正、數據質量監(jiān)控和管理考核，確保數據質量。第三條數據指標的設定和修改必須嚴格執(zhí)行軟件的管理規(guī)定和程序。凡使用省局統(tǒng)一軟件的，市局對有關數據指標無權制定和修改，必須執(zhí)行全省統(tǒng)一規(guī)X。使用非省局統(tǒng)一軟件的，市局業(yè)務管理部門應根據工作需要和所管軟件的需求變化，及時提出設定修改數據指標的具體內容、質量標準和時間要求，并明確數據錄入部門、錄入崗位和錄入時限，報分管領導批準后提交XX省交通運輸聯(lián)網運行管理中心。XX省交通運輸聯(lián)網運行管理中心應根據業(yè)務管

27、理部門的需求，及時制定修改數據采集的技術規(guī)X，包括數據采集格式、權限設定和方法步驟等，并按時向業(yè)務管理部門通報所采集數據的指標內容變化情況，以便業(yè)務部門根據采集到的指標提出數據加工需求。第四條數據指標確實定應以有效實用和優(yōu)化效勞為目標，不斷提高數據集中度和信息共享度，科學歸并各項業(yè)務的同類、同屬性指標，防止業(yè)務部門重復上報數據。二數據采集第一條數據采集重點是原始數據的采集，原始數據主要包括業(yè)務部門通過紙質資料報送的數據，通過電子傳輸報送的數據含電磁介質報送的數據和網絡傳輸報送的數據，下同；相關部門通過紙質、電子傳輸提供的數據；管理業(yè)務處理結果檢查、調查、核實、認定、審批等產生的數據。第二條數據

28、采集主要依靠應用系統(tǒng)進展錄入導入，現用應用系統(tǒng)不能滿足數據采集需要的，通過相關系統(tǒng)的補錄模塊進展數據錄入導入。第三條數據采集方式分為手工采集、數據電文導入和光學字符識別OCR、圖形掃描等其他方式。為保障數據采集的質量，提高數據采集的效率，應充分應用信息化技術，最大限度地減少手工錄入。第四條為提高數據錄入質量，各市交通部門有關單位要認真執(zhí)行資料數據的核對制度，嚴格以原始資料為依據，確保錄入數據的一致性和準確性。數據采集錄入前，操作人員應先將準備錄入的原始資料或有關表證單書進展完整性、邏輯性、真實性審核，發(fā)現漏填、錯填和邏輯關系不符的，應于做出修正或補正；第五條對通過電子傳輸方式報送數據的，數據必

29、須通過接收軟件相應設置的完整性、邏輯性審核。第六條各級各單位應建立紙質數據和電子數據的核對制度，明確職責分工和工作程序，落實崗位責任，發(fā)現問題及時處理。第七條對于交通部、省廳沒有規(guī)定的數據采集標準規(guī)X，各局市交通部門及信息化責任部門應根據不同的數據采集崗位和軟件覆蓋面，細化工作職責，量化作業(yè)標準，結合業(yè)務操作規(guī)程，建立統(tǒng)一的數據采集錄入操作規(guī)X和管理制度。數據采集規(guī)X應包括數據來源、采集時間、操作崗位、操作步驟、操作內容和采集內容的邏輯校驗等要素。第八條各級數據采集人員應強化數據質量意識, 熟練掌握正確的采集和審核方法，按照部門職責分工，嚴格按照相關操作規(guī)X采集各類數據。第九條任何人不準擅自委

30、托他人以本人用戶名錄入數據。確因工作需要委托他人以自己名義錄入的，必須報經主管領導批準，并及時更改口令。第十條XX省交通運輸聯(lián)網運行管理中心應簡化、歸并各級地單位報送的報表，統(tǒng)一采集，集中處理，自動生成，分別使用，提高工作效率和質量，減輕各級單位的工作量。三數據審核第一條數據審核是確保數據質量的重要環(huán)節(jié)。審核的重點是數據的及時性、完整性、真實性、準確性和規(guī)X性。1及時性是指數據要在規(guī)定的時間內采集，確保應用系統(tǒng)數據與實際交通信息業(yè)務同步；2完整性是指數據采集應按照有關規(guī)定及相應表、證、單、書采集的要求進展，不得缺表或漏項，杜絕數據的機外操作和循環(huán)；3真實性是指數據采集要如實反映交通行業(yè)管理實際

31、，以合法、真實的原始資料為依據，不得隨意捏造;4準確性是指數據采集應準確反映交通行業(yè)管理實際，與紙質資料數據一致，數據之間邏輯相符，不得出現運算錯誤或邏輯錯誤；5規(guī)X性是指數據采集應按照統(tǒng)一的業(yè)務標準及技術規(guī)X進展。第二條各市交通部門及相關崗位人員按照自身工作職責X圍，負責相關數據的日常審核。第三條為加強數據質量管理，省廳建立數據審核制度，數據管理員定期或不定期對已采集數據進展審核。對審核中發(fā)現的數據質量問題應及時反應至具體的原始數據采集崗，限期補錄修正。第四條各級可采取人工抽樣、數據軟件檢測等方式進展數據審核。對檢索出不符合標準的數據，反應至原數據采集崗進展補錄修正。在數據應用環(huán)節(jié)發(fā)現的數據

32、采集過失，應通過相關業(yè)務管理部門的數據管理員進展審核確認，然后反應至原數據采集崗進展變更修正。第五條審核中發(fā)現的過失應及時通知相關部門。第六條數據審核崗人員與數據采集崗人員對數據問題有異議的，由上級業(yè)務主管部門負責對爭議事項做出裁定。第七條對各級數據審核發(fā)現的問題數據基層分局已無權限修正的，嚴格按照數據維護規(guī)定的程序開展修正工作，任何人不得擅自修改。四數據維護第一條數據維護包括對數據中錯誤數據的修正、不完整數據的補充、垃圾數據的清理及歷史數據的遷移等。第二條各市交通業(yè)務管理部門應結合各應用系統(tǒng)制定詳細的數據維護工作制度，明確數據維護的權限、職責，嚴格按照工作制度進展數據維護。已經進入應用系統(tǒng)的

33、數據，不得擅自修改、刪除。第三條對錯誤數據的修正和不完整數據的補充，省廳統(tǒng)一按以下程序處理：1對尚未錄入應用系統(tǒng)或已錄入尚保存修改權限的數據，需修改的，可由前臺原數據采集崗根據審核意見糾正后重新錄入或直接糾正；2對已錄入應用系統(tǒng)的數據，經審核發(fā)現錯誤，前臺原數據采集崗已無權限修改的，應根據具體業(yè)務工作流程和要XX行層級審批修正。第四條對已錄入應用系統(tǒng)需層級審批修正的數據，市級信息部門有權限處理的，應由數據修正申請單位及時提出數據修正申請，報數據所屬系統(tǒng)的責任業(yè)務管理科室審核審批。市信息管理部門同意修正或在接到同意修正的審批后辦理。對經確認不能予以修正的，有權修正單位應及時向申請單位或相關人員說

34、明原因。第五條對需由省數據中心辦理的數據修正事項，應由申請單位及時提出數據修正申請，分別報經區(qū)市信息管理部門及責任業(yè)務管理科室審批。省級數據中心在接到同意修正的申批后辦理。對經確認不能予以修正的，有關單位應及時向數據修正申請單位及有關人員說明原因。第六條對不按規(guī)定程序上報審批的數據修正申請，各級數據管理的技術管理部門不予以修改。第七條對經查實，屬有關單位弄虛作假、人為調整指標等主觀因素造成其無法自行恢復的數據錯誤，各級數據管理的技術管理部門有權不予修正，并向省交通運輸單位報告。第八條各級數據管理的技術管理部門應按照系統(tǒng)初始維護設置和上級部門分配的權限實施數據修正業(yè)務。執(zhí)行過程中如遇權限調整，各

35、級數據管理的技術管理部門應在權限變動后十五日內向轄區(qū)內本級和下一級業(yè)務部門公告通知。第九條數據維護前應做好相應備份工作。數據維護工作應嚴格備案，對每項數據維護的內容、時間、維護原因、責任人等進展詳細記錄，涉及的書面材料必須登記存檔。第十條應用系統(tǒng)因數據平臺轉換、系統(tǒng)升級等原因需對歷史數據轉儲、遷移的，由信息技術部門會同業(yè)務管理部門確定歷史數據的處理方法，保證新舊數據的銜接和系統(tǒng)的平穩(wěn)過渡。第十一條各級信息技術部門應加強對數據的監(jiān)控，定期檢測數據的存儲，分析數據的構成，提出數據清理優(yōu)化的方案，經業(yè)務管理部門確認后，定期進展垃圾數據的清理。垃圾數據主要指過期的、重復的、沒有使用價值的數據，不包括按

36、規(guī)定應保存的歷史數據。五數據分析第一條數據分析是采取科學合理的方法，利用現代信息技術手段，對計算機應用系統(tǒng)生成的數據進展分析，充分開掘數據中蘊涵的信息，形成有用指標數據值的過程。第二條數據分析一般按照選題分析應用反應再選題的方式進展，積極研究、探索科學實用的分析方法，為交通運輸工作效勞。同時依據數據應用過程中暴露出的問題，改良數據管理方法和手段，促進數據管理質量不斷提高。第三條數據分析分為固定分析和專項分析兩種。固定分析指標在一定時期內相對固定，通過編制應用軟件自動生成。專項分析的選題指標根據交通運輸管理工作的新形勢和新問題需要專門設計，臨時從前臺或后臺抽取相關數據進展分析處理。第四條各級各單

37、位應充分利用數據資源，規(guī)X數據分析程序，積極探索數據獲取、加工、計算、展現等過程的規(guī)律，不斷探索和創(chuàng)新數據分析方法，提高數據分析質量。六數據應用第一條數據應用分為直接使用和加工后使用。數據加工是指根據工作需要，用數理統(tǒng)計、多維分析等科學方法對數據進展抽取、聚集、歸類、挖掘、比對，并以報表、圖形、文字等形式展現數據處理結果。第二條各級各單位應充分利用數據資源，深化數據應用，用數據描述現狀，預測趨勢，規(guī)X執(zhí)法，加強管理，優(yōu)化效勞，提供決策支持。數據應用的任務一般包括：1整合應用系統(tǒng)的數據，建立數據關聯(lián)關系，滿足各級、各部門、各崗位業(yè)務管理的需要。2分析行業(yè)管理現狀，研究存在問題，提出改良措施，提高

38、管理水平，躲避管理風險。3監(jiān)控執(zhí)法過程，跟蹤執(zhí)法結果，檢查執(zhí)法質量。4建立合理的指標體系，全面考核和監(jiān)控交通各部門管理的工作質量和效率。5統(tǒng)籌規(guī)劃、合理分布數據，實現各類數據的全面共享，簡化交通運輸行業(yè)審批程序，優(yōu)化交通效勞。第三條省數據加工統(tǒng)一由各級數據管理中心承當，信息部門提供技術支持。業(yè)務管理部門有特殊需求時，報分管局長批準后及時向同級數據管理中心提出，各級數據管理中心應及時提供已加工數據列表和數據使用授權，以保證各級、各部門業(yè)務管理需要。第四條數據加工分兩個層次，一個層次是為滿足日常業(yè)務需要，利用數據加工工具進展數據加工，供各部門日常管理使用，可直接展示數據處理結果；另一層次是滿足評估

39、分析和輔助決策等數據應用系統(tǒng)的需要，利用數據加工工具或專用軟件對數據加工或進展系統(tǒng)間的數據銜接。第五條全省各級數據中心負責數據加工軟件的日常管理工作。第六條數據使用單位和人員必須嚴格按照授權使用數據，負責管理本單位、本人口令，不得越權使用數據；不得采取任何方法破壞數據；對所使用的涉密數據負有XX責任。七數據發(fā)布第一條數據發(fā)布是數據管理的重要內容。各級各單位必須建立數據發(fā)布制度，明確數據發(fā)布職責，依法發(fā)布數據：1可向交通運輸從業(yè)人員本人提供的信息主要包括：除稽查在查案件以及其他涉密信息之外的交通運輸從業(yè)人員本人的信息；2可向社會公眾發(fā)布的信息主要包括：非正常戶、XX違章信息, 停業(yè)、企業(yè)質量信譽

40、等級、政務公開信息等信息,駕駛證、從業(yè)XX、經營許可證信息及真?zhèn)涡畔⒌龋?可在交通管理部門之間傳遞、共享的信息主要包括：企業(yè)登記信息、核定認定信息、申報信息、審批信息、行政許可信息、委托機構信息、XX違章信息、稽查信息、救濟信息等。4其他單位或個人要求交通部門提供相關信息的，符合法律法規(guī)規(guī)定的，交通部門應當提供。第二條各級各單位對外公布數據必須報領導或分管領導批準后對外公布，否那么不得擅自對外公布和分布數據。八數據傳輸第一條各級各單位應針對各項數據傳輸工作，設置專門崗位，明確職責分工，制定相應考核制度。第二條數據傳輸工作嚴格遵照相應的操作規(guī)程和時間要求，不得延誤。由于特殊原因，數據發(fā)送方不能按

41、時完成數據傳輸任務時，應及時通知數據接收方，雙方應積極采取措施，恢復正常傳輸。數據傳輸完成，雙方應及時進展數據對賬。第三條數據傳輸應當使用交通運輸機構內部計算機網絡完成，未經批準不得借助其它公共計算機網絡平臺進展數據傳輸。使用可移動載體進展數據傳輸的，傳輸完畢后，必須從載體上完全去除數據。第四條全省各級交通部門內部信息的傳遞，如任務下達、信息交換、調查統(tǒng)計、報表報送、成果報告、情況通報等，應采取電子數據傳輸方式。能夠通過應用系統(tǒng)查詢得到的信息或生成的報表，上級交通部門不得要求下級機關報送。第五條各級信息技術部門要定期檢測網絡運行狀況，及時發(fā)現解決網絡傳輸中的問題，確保數據傳輸網絡暢通。九數據存

42、儲、備份和恢復第一條各級信息技術部門應加強對各類數據存儲和備份的管理，以保障應用系統(tǒng)的正常運行，保存完整的歷史數據。第二條各級信息技術部門應定期對存儲和備份的數據進展整理優(yōu)化，以提高系統(tǒng)運行和數據處理的效率。第三條各類數據由信息技術部門統(tǒng)一集中存儲和備份。第四條各級信息技術部門應根據不同類型數據的更新頻率、數據量、重要程度、保存期限，制定相應備份、恢復策略和操作規(guī)X。第五條已做備份的數據任何部門不得擅自更改。第六條數據備份文件必須存儲在非本機磁盤的其它介質中，建立登記制度，由專人保管，備份介質必須保存在符合條件的環(huán)境中，對應用系統(tǒng)中存儲時間長、使用頻度低的歷史數據，可按有關規(guī)定予以結轉、存儲，

43、長期妥善保管，并隨時可供調取應用。重要數據應異地存放。第七條數據備份文件應定期進展恢復測試，以確保所備份的數據能夠及時、準確、完整地恢復。十數據平安管理第一條省各級信息管理中心應建立健全數據平安管理制度和方法。數據平安管理的內容包括：數據訪問的身份驗證、權限管理及數據的加密、XX、日志管理、網絡平安等。第二條為統(tǒng)一規(guī)X操作權限，省交通行業(yè)各級各單位操作人員的錄入權限、訪問權限、維護權限應先由各業(yè)務管理部門按照部門、崗位的職責分工，提出權限設定規(guī)那么，報數據管理領導小組批準后由信息技術部門予以維護，任何人不得擅自設立、變更和注銷。第三條各類應用系統(tǒng)的使用必須實行用戶身份驗證。應用系統(tǒng)應按規(guī)定設置

44、相應的用戶名、密碼，并按不同權限級別，對用戶口令加密保護。操作人員應注意自己用戶名和口令的XX，并定期或不定期修改口令。第四條數據平安實行專人負責制。信息技術部門要指定專人負責系統(tǒng)數據及磁介質資料的平安管理工作。對數據庫的管理實行數據庫管理員制度，制定和明確管理員用戶和數據查詢用戶的操作權限及規(guī)程，關鍵數據庫管理崗位應設兩人或兩人以上。第五條對涉密數據的傳輸、存儲，應嚴格按照相關規(guī)定進展加密處理。第六條對各類數據應嚴格執(zhí)行XX制度，不得泄漏。對涉及從業(yè)人員隱私而未征得本人同意或按有關XX規(guī)定不能公開的數據，不得對外公開，也不得用于業(yè)務以外的其它目的。第七條對數據的各項操作應實行日志管理，嚴格監(jiān)

45、控操作過程，對發(fā)現的數據平安問題，要及時處理和上報。第八條各級各單位要加強網絡平安管理，采取嚴格措施,做好計算機病毒的預防、檢測、去除工作，防止各類針對網絡的攻擊，保證數據傳輸和存儲平安。管理員用戶應掌握和運用數據庫訪問跟蹤布控技術，加強對數據庫的核查與監(jiān)控。第九條對需要長期保存的數據磁帶、磁盤，應在質量保證期內一般為一年進展轉儲，以防止數據失效造成損失。第十條系統(tǒng)維護和數據管理責任單位應當采取以下措施，保證信息系統(tǒng)應用數據的平安：1明確崗位職責，嚴格操作規(guī)X，完善內部控制；2加強應用系統(tǒng)的運行維護，定期進展數據備份；3實時監(jiān)控數據庫的訪問情況，定期審核和更新數據庫的口令等十一數據質量監(jiān)控第一

46、條數據質量監(jiān)控是全省各級數據管理中心以交通行業(yè)業(yè)務規(guī)程為根底，通過建立數據質量指標體系和設置過錯類別，運用一定的手段和方法，對一定時期的數據質量進展檢查、認證、鑒定與評價等一系列管理活動。第二條數據質量監(jiān)控應按照分途采集、集中比對、管住增量、強化責任的原那么，對數據采集和處理的真實性、準確性、完整性、合法性、邏輯性、及時性進展監(jiān)控。第三條全省交通系統(tǒng)建立省、市、縣三級數據質量監(jiān)控聯(lián)動機制，實行省局數據管理中心、市級數據管理中心、基層分局數據管理員三級監(jiān)控聯(lián)動。1省局數據管理中心負責全省X圍內的數據質量監(jiān)控，定期或不定期發(fā)布全省數據質量監(jiān)控檢測結果。2市級數據管理中心負責全市、區(qū)X圍內的數據質量

47、監(jiān)控，定期或不定期發(fā)布全市、區(qū)數據質量監(jiān)控檢測結果，指導基層分局落實縣級數據質量監(jiān)控檢測結果。3基層分局數據管理員負責督導落實轄區(qū)X圍內的數據質量監(jiān)控檢測結果。第四條各級數據管理中心應建立相應的數據質量監(jiān)控機制，采用人機結合等方式，以一定形式對本地區(qū)數據質量實施監(jiān)控審核，并及時發(fā)布監(jiān)控結果。第五條各級數據管理中心應于年度開場10日內制定年度數據質量監(jiān)控檢測方案，經分管局長批準后有方案開展全年數據質量監(jiān)控檢測工作，并報上級數據管理中心備案。第六條各級數據管理中心負責對數據質量監(jiān)控發(fā)現的問題數據限期督導基層分局完成修正，一般最長要求5日內完成，并將修正結果上報發(fā)現問題的數據管理中心審核。第七條對數

48、據質量監(jiān)控發(fā)現的問題數據嚴格按照本方法數據維護規(guī)定的程序開展修正工作，任何人不得擅自修改。十二數據管理考核第一條數據管理是交通行業(yè)信息化建立的重要內容，數據質量直接關系到交通行業(yè)信息化的應用效果。各級各單位應根據本方法所涉及的內容制定具體的數據管理考核方法，建立切實有效的數據管理考核獎懲機制。第二條數據管理考核應遵循客觀公正、公開透明的原那么。各級可采取日常考核和定期考核相結合、人工抽檢考核和機器全面檢測相結合的方法，強化數據管理考核。省廳將通過數據檢測軟件等定期或不定期考核通報各市區(qū)開發(fā)區(qū)交通局數據采集質量情況，并對各縣市區(qū)開發(fā)區(qū)交通局數據管理工作實施百分制考核，主要考核工程包括：1組織機構

49、是否健全，崗位職責是否明確；2數據錄入是否及時，數據采集是否完整；3數據內容是否準確，抽取展示是否按時；4審核過失是否修正，數據維護是否及時；5管理機制是否建立，平安措施是否到位。第三條市交通局數據管理中心根據上級要求，針對各應用系統(tǒng)和業(yè)務管理的實際，制定全市數據管理考核方法并于年度完畢20日內完成對各縣市區(qū)開發(fā)區(qū)交通局的數據管理考核工作。第四條數據管理考核方法應突出數據錄入、審核、維護、備份、平安等重點環(huán)節(jié)，進展指標量化。依據標準，對必錄項的考核指標，在采集錄入環(huán)節(jié)，其及時率、準確率、完整率必須到達95以上；經過審核、修正后，其“三率的考核指標應到達99以上。數據管理考核結果納入全市目標管理

50、考核內容。第五條交通部門和部門人員發(fā)生下述行為之一的，上級機關可根據其危害程度、過錯大小、情節(jié)輕重等，依據執(zhí)法責任制和目標管理責任制追究相應責任：1數據錄入不及時，造成下一環(huán)節(jié)工作延誤的；2數據錄入不規(guī)X、過失率連續(xù)居高的；3未認真履行數據審核職責，造成大量數據過失不能及時糾正的；4未及時進展數據維護，造成應用環(huán)節(jié)數據嚴重失真的；5未按規(guī)定存儲和備份數據，造成數據喪失的；6未按規(guī)定進展系統(tǒng)維護，或因過失引發(fā)信息系統(tǒng)運行障礙造成數據喪失的；7未按規(guī)定實施平安管理防X措施，造成計算機系統(tǒng)癱瘓或病毒侵害嚴重，嚴重影響數據傳輸和存儲的；8未按規(guī)定執(zhí)行XX制度，發(fā)生重大泄密事件的；9擅自對數據、權限進展

51、修改、刪除，或擅自使用他人的用戶名、密碼進展操作訪問的；10其他過錯行為。對有意破壞、惡意攻擊稅收應用信息系統(tǒng)，造成重大損失，涉嫌刑事責任的，移送司法機關處理。B 數據質量評估方法下面將從數據質量評估核心指標、數據質量評估模式、數據質量評估管理流程三個方面介紹數據質量評估方法。數據質量評估的核心指標數據質量問題頻率指標定義：數據質量問題頻率數據質量問題發(fā)生次數/存儲的總數據量指標單位：次/GB根據數據質量評估指標將各數據倉庫中的主數據及其歷史行為劃分為三個等級：數據質量等級描述統(tǒng)計口徑一級數據質量差，需要重點監(jiān)控數據質量問題頻率大于等于1次/GB二級數據質量一般數據質量問題頻率大于等于0.5次

52、/GB，小于1次/GB三級數據質量好數據質量問題頻率小于0.5次/GB通過對數據質量問題頻率的考評和等級劃分，就可以從數據倉庫眾多的數據中解放出來，集中精力把有限的資源投入到需要重點關注的主題數據。因此數據質量可信等級是數據質量提高的有效途徑。與之相配套的，必須建立了一套相關的管理制度，管理制度主要包括：1可信等級初始值確立流程數據中心平臺各主題域的數據質量可信等級初始值一般設定為一級，由數據質量管理小組牽頭，執(zhí)行全面檢查后報數據中心主管部門批準后確立。2可信等級變更流程數據質量管理小組每季度、每年組織定時抽查、全面檢查時，每半年根據檢查結果對相關主題域的可信等級提出調整意見，報數據中心主管部

53、門批準后確立。數據質量評估具體方法：對于具體數據的質量檢查模式采用記錄數檢查法、關鍵指標總量驗證法、歷史數據比照法、值域判斷法、經歷審核法及匹配判斷法。通過這些方法方法，可以對單個數據點的數據準確性進展檢查，及時發(fā)現數據質量問題。1記錄數檢查法通過比擬記錄條數，對數據情況進展概括性驗證。主要是檢查數據表的記錄數是否為確定的數值或在確定的X圍內。適用X圍：對于數據表中按日期進展增量加載的數據，每個加載周期遞增的記錄數為常數值或可以確定的X圍時，必須進展記錄條數檢驗。2關鍵指標總量驗證法對于關鍵指標，比照數據總量是否一致。主要是指具有一樣業(yè)務含義，從不同維度統(tǒng)計的匯總邏輯的檢查。適用X圍：同表內對同個字段從不同的維度進展統(tǒng)計，存在匯總關系時，必須進展總量檢驗。本表的字段與其它表中的字段具有一樣的業(yè)務含義，從不同的維度統(tǒng)計，存在匯總關系，且兩X表的數據不是經同一數據源加工