《主數據管理實踐白皮書(2.0)》_第1頁
《主數據管理實踐白皮書(2.0)》_第2頁
《主數據管理實踐白皮書(2.0)》_第3頁
《主數據管理實踐白皮書(2.0)》_第4頁
《主數據管理實踐白皮書(2.0)》_第5頁
已閱讀5頁,還剩26頁未讀 繼續(xù)免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

版 權 聲 明本報告版權屬于CCSATC601大數據技術標準推進委員會,并受法律保護。轉載、摘編或利用其它方式使用本報告文字或者觀點的,應注明“來源:CCSATC601大數據技術標準推進委員會”。違反上述聲明者,本院將追究其相關法律責任。牽頭編寫單位:中國信息通信研究院云計算與大數據研究所參與編寫單位:中電金信軟件(上海)有限公司、海爾集團公司、中國聯(lián)合網絡通信集團有限公司、聯(lián)通數字科技有限公司、中國電信集團有限公司、中國移動信息技術中心、中移動信息技術公司、平安銀行股份有限公司、中信建投證券股份有限公司、浩鯨云計算科技股份有限公司、浙江數新網絡有限公司、上海浦東發(fā)展銀行股份有限公司、普元信息技術股份有限公司、湖北數據集團有限公司、北京東方金信科技股份有限公司、中數(深圳)時代科技有限公司、北京科杰科技有限公司、北京億信華辰軟件有限責任公司編寫組成員:姜春宇、王妙瓊、闞鑫禹、王宇龍、周京晶、張一鳴、張嬌婷、劉思達、周圣文、苗峰、劉青青、郭銳、狄秋燕、朱瑞、郝猛、王海鑫、王冀彬、陳卓、胡清源、劉宇、華桊興、項子林、趙亮、許立芳、劉樹國、覃國權、劉芬、段玉、宋文頂、朱穎、王詩岸、李書超、馬一驍、夏天翔、石棋玲、楚鑫、于海寧、馬超、朱建勇、賈光鋒、江夢珂特別感謝來自山東創(chuàng)恩信息科技股份有限公司、中國建設銀行股份有限公司、中國標準化研究院、昆侖數智科技有限責任公司、華夏銀行股份有限公司、北京安達維爾科信息技術有限公司、中國航空發(fā)動機研究院等的專家呂英勝、楊澤華、車春雷、王志強、馮霈、劉洋、王剛、王浦、常卓君、楊子政、王粲、吳超、張曉剛等對本白皮書編寫工作的支持。CONTENTS目 錄前言一、主數據管理概述(一)什么是主數據 011、主數據定義 012、主數據的特點 01(二)什么是主數據管理 021、主數據管理的定義 022、主數據管理的范圍 02(三)主數據管理的意義 031、主數據管理的核心價值 032、主數據管理的作用 03(四)主數據和其他數據的關系 041、主數據和元數據 042、主數據和明細數據 043、主數據和參考數據 05二、各行業(yè)主數據管理實踐(一)裝備制造行業(yè)主數據管理 06(二)能源化工行業(yè)主數據管理 06(三)金融行業(yè)主數據管理 07(四)通信行業(yè)主數據管理 08(五)地產行業(yè)主數據管理 08(六)政府機構主數據管理 09三、主數據管理主要內容(一)主數據識別 111、主數據對象識別 112、主數據屬性識別 11(二)主數據標準 121、編碼規(guī)范 122、分類體系 123、描述與表達規(guī)范 124、質量與安全規(guī)范 13(三)主數據管理制度 131、目的及適用范圍 142、組織確立及職責劃分 143、主數據工作流程 144、主數據管理考核 15(四)主數據管理平臺 151、主數據標準管理 152、主數據編碼管理 153、主數據建模管理 164、主數據生命周期管理 165、主數據集成管理 166、主數據質量管理 167、主數據安全管理 168、工作流程管理 169、用戶權限管理 16(六)主數據應用 161、集中式應用 172、聯(lián)邦式應用 173、分析式應用 18四、主數據管理策略(一)主數據管理成功要素 201、高層領導支持和參與 202、業(yè)務方深度參與和認責 203、合適的主數據管理模式 204、技術工具的選擇 205、主數據度量與評估 20(二)主數據管理的誤區(qū) 211、主數據管理無法貫穿源頭系統(tǒng) 212、混淆業(yè)務實體數據和主數據范圍 213、同時維護多套主數據編碼體系 214、組織內主數據編碼沿用外部編碼 225、將主數據作為孤立項目推行 22五、主數據管理未來展望(一)從結構化到非結構化 23(二)從自動化到智能化 23(三)從組織級到行業(yè)級 23(四)從有到“無” 24前 言2018年12月中國通信標準化協(xié)會大數據技術標準推進委員CCSATC601(1.0)》,對主數據管理的內涵、特點、實踐案例進行了研究和總結,在業(yè)界得到了傳播和認可。2023年12月,CCSATC601更新編制了《主數據管理實踐白皮書(2.0)》版本,進一步對主數據管理的管理模式、管理策略、成功要素、發(fā)展趨勢進行了更深入的研究和提煉。主數據是對組織核心業(yè)務實體狀態(tài)的反映,具有全局性、共享性、穩(wěn)定性等特點,可以進行跨系統(tǒng)、跨流程、跨部門的共享復用。過去的5年時間里,業(yè)界對主數據的探討和實踐十分活躍,普遍將主數據視作組織的核心數據資產,并將主數據管理作為企業(yè)數據管理體系的重要一環(huán)。未來,CCSATC601將持續(xù)開展主數據管理的研究工作,適時修訂發(fā)布新的白皮書版本。一、主數據管理概述(一)什么是主數據1、主數據定義主數據指滿足組織跨部門業(yè)務協(xié)同需要的、反映核心業(yè)務實體狀態(tài)屬性的基礎信息。主數據具有以下特征:(1)跨越部門:主數據是滿足跨部門業(yè)務協(xié)同需要的,是各個部門在開展業(yè)務過程中都需要的數據,是所有部門及其業(yè)務過程的“最大公約數據”;(2)跨越業(yè)務:主數據是跨越了業(yè)務界限,在多個業(yè)務領域中被廣泛使用的數據,其核心屬性也是來自業(yè)務;(3)跨越流程:主數據不依賴于某個具體的業(yè)務流程,但卻是主要業(yè)務流程都需要的。主數據的核心是反映對象的狀態(tài)屬性,它不隨某個具體流程而發(fā)生改變,而是作為其完整流程的不變要素;(4)跨越系統(tǒng):主數據是多個系統(tǒng)之間的共享數據,是應用系統(tǒng)建設的基礎,同時也是數據分析系統(tǒng)重要的分析對象,主數據系統(tǒng)服務于但是高于其它業(yè)務系統(tǒng);(5)跨越技術:由于主數據要滿足跨部門的業(yè)務協(xié)同,因而必須適應采用不同技術規(guī)范的不同業(yè)務系統(tǒng),所以主數據必須應用一種能夠為各類異構系統(tǒng)所兼容的技術條件。主數據不是組織內所有的數據,只是有必要在各個系統(tǒng)間共享的數據才是主數據,例如大部分的交易數據、帳單數據等都不是主數據,而像描述核心業(yè)務實體的數據,如客戶、供應商、帳戶、組織機構、人員、物料的基本信息等都是主數據。主數據是組織內能夠跨業(yè)務重復使用的高價值的數據。主數據在進行統(tǒng)一管理之前經常存在于多個異構或同構的系統(tǒng)中。2、主數據的特點主數據的特點主要包括:權威性、全局性、共享性、穩(wěn)定性、長期性、擴展性、高價值性。(1)權威性:主數據是經過跨部門業(yè)務協(xié)同和組織機構的基礎信息整合而成的,具有最高的數據質量要求,通常由一個權威部門或機構進行維護和管理。主數據實體要求具有唯一的數據識別,即主數據編碼。(2)全局性:主數據是反映核心業(yè)務實體狀態(tài)屬性的數據,其覆蓋范圍廣泛,涉及到組織的各個業(yè)務部門和業(yè)務流程。(3)共享性:主數據可以在組織范圍內被重復使用,無需進行重復存儲和冗余維護,從而避免數據不一致和冗余等問題。(4)穩(wěn)定性:主數據描述操作對象的關鍵信息,業(yè)務過程中識別的信息和關鍵特征,會被業(yè)務過程中產生的數據繼承、引用、復制。但是,除非該主數據的基本特征發(fā)生改變,否則主數據不會隨著業(yè)務的改變而改變。(5)長期性:主數據通常貫穿于業(yè)務對象的整個生命周期,甚至更長。換言之,只要主數據代表的業(yè)務對象存在,或者仍然有意義,則該主數據需要在系統(tǒng)中繼續(xù)存在,保持其有效性。(6)擴展性:主數據可以隨著組織業(yè)務的發(fā)展和變化而進行擴展和調整,具有良好的適應性和可擴展性。(7)高價值性:主數據具有很高的價值,首先通過主數據達成了系統(tǒng)之間的信息對稱,同時也是組織進行決策和分析的重要依據和基礎。(二)什么是主數據管理1、主數據管理的定義主數據管理是一系列規(guī)則、應用和技術,用以協(xié)調和管理與組織核心業(yè)務實體相關的系統(tǒng)記錄數據。通過主數據管理,主數據從應用和流程中獨立出來,并且將組織的主數據呈現(xiàn)為一系列可重用的服務。組織將由此獲得共享的、完整的、準確的主數據。主數據管理在保證最高水平的數據質量和標準化的前提下,實現(xiàn)了數據在不同數據庫之間進行傳輸和同步的自動化,以及在使用這些數據的不同應用系統(tǒng)之間傳輸和同步的自動化。2、主數據管理的范圍主數據的特征決定了可以從不同維度認識主數據管理的范圍。首先,從應用范圍來講,主數據的應用涵蓋了事務處理、業(yè)務經營和數據分析有關的系統(tǒng)范疇,從源頭到終端再回到源頭的一個閉環(huán)反饋系統(tǒng),主數據管理系統(tǒng)需要為各業(yè)務系統(tǒng)提供標準的、統(tǒng)一的數據服務;其次,從流程范圍來講,主數據管理要覆蓋數據的申請、校驗、審核、發(fā)布、維護、變更、停用等環(huán)節(jié),要實現(xiàn)全生命周期管理;第三,從管控范圍來講,主數據管理通過對組織、流程、績效考核、數據標準、系統(tǒng)應用的整體設計,形成一套體系化的管理模式,以建立起主數據管理的長效機制。(三)主數據管理的意義1、主數據管理的核心價值主數據首要是用于多系統(tǒng)集成應用的,也是多系統(tǒng)集成應用時的剛需,對跨系統(tǒng)的業(yè)務處理過程,通過對主數據的管理,各系統(tǒng)對同一業(yè)務實體數據的認識是一致的,從而達成信息對稱,支撐業(yè)務完整過程的多個系統(tǒng)的功能被集成為有機的整體,這是主數據的核心價值,也是主數據概念出現(xiàn)的本質原因,亦是主數據管理的目標。主數據在標準化的基礎上實現(xiàn)唯一化,通過主數據的唯一性保障在各系統(tǒng)之間基礎數據的一致性,并且能夠被各系統(tǒng)在交互數據時直接使用,無需額外維護映射表(字段)和進行翻譯等處理,為此主數據必須做到“一實體一編碼”,如一物一碼、一客(商)一碼、一人一碼等。2、主數據管理的作用主數據是組織的重要資產之一,具有極高的價值。實施有效的主數據管理不僅可以提升組織的業(yè)務經營效率,增強決策能力,還能夠加強數據整體的管理水平,以下列舉了三點關于主數據管理的作用。(1)降低信息交互成本通過統(tǒng)一的主數據管理機制,為所有信息的交互和集成提供統(tǒng)一的編碼數據,確保在異構系統(tǒng)之間協(xié)同業(yè)務處理的每個階段編碼信息的一致性,可以降低信息核對的成本,避免因為基礎數據的多樣導致的信息核對、匯總、統(tǒng)計的失誤和錯誤。同時也可以為決策支持和數據分析提供準確的數據源,提高決策的科學性和有效性。(2)增強數據標準化實現(xiàn)流程驅動和數據管控是主數據管理的重要目標,通過構建主數據管控體系和主數據運維體系,對組織架構、運營模式、管控流程、角色與職責進行明晰的定義。這將確保組織信息基礎數據集成和共享的穩(wěn)定性和高效性,強化組織數據的標準化管理。(3)提高數據源質量構建通用的、方便的、集中處理的主數據總線,實現(xiàn)一致性的組織級數據視圖,將大大降低數據交互訪問的復雜性。通過應用主數據標準模型和多重關聯(lián)校驗規(guī)則,對主數據平臺前端數據輸入源頭實現(xiàn)可靠的控制,有效降低人為因素所產生的數據問題,提高數據應用質量。(四)主數據和其他數據的關系數據可以按照多種維度劃分為多種類別,而對主數據而言,與其關系密切或易產生混淆的數據主要有元數據、明細數據和參考數據三類。1、主數據和元數據元數據是關于數據的描述性信息,它扮演著數據管理中的關鍵角色,提供關于數據的定義、結構、來源、格式等方面的詳細說明。元數據旨在幫助人們更好地理解、管理和使用數據,充當了數據的“數據說明書”。相比元數據,主數據是組織中廣泛使用的關鍵業(yè)務數據,如客戶、產品、供應商等。主數據包含實際的業(yè)務實體信息,是業(yè)務活動和決策的基礎。元數據與主數據之間的關系密切,因為元數據可以描述主數據的各種屬性,包括數據的名稱、類型、來源、創(chuàng)建日期等。通過元數據,我們可以更好地理解主數據,確保主數據的一致性和準確性。主數據是業(yè)務數據的重要組成部分,而元數據則提供了關于主數據的背景和主題,共同為組織提供了更好的數據理解和利用的基礎。這種相輔相成的關系使得組織能夠更有效地管理和運用其關鍵業(yè)務數據。2、主數據和明細數據主數據和明細數據之間的關系主要在于靜態(tài)和動態(tài)的關系,可以看作是名詞和動詞關系。主數據捕獲的是名詞,例如“物品中文名稱”或“企業(yè)注冊資金”,它們是相對穩(wěn)定的,靜止不變或者是一段時間內靜止不變的數據。而明細數據捕獲的是動詞,例如物流運輸數據或傳感器數據,它們是實時變化的數據,往往描述的是某一個時間點所發(fā)生的事務行為,如客戶訂單、存貨跟蹤、銷售記錄、售后事件等。3、主數據和參考數據從定義上來看主數據是代表業(yè)務對象的數據,由關鍵業(yè)務實體組成,它包含了整個組織共享的最有價值的信息;而參考數據是定義其他數據字段使用的一組允許值的數據,包含了附加的文本描述,更多的像是數據字典。從范圍上看,參考數據是主數據的一種特殊子集。主數據與參考數據都是為了業(yè)務數據的創(chuàng)建和使用提供重要的上下文語境信息,同時參考數據又為主數據提供上下文,以便用戶理解數據的含義。兩者在組織運營過程中均塑造了進入組織的業(yè)務數據,而且兩者都是組織層面的共享資源。二、各行業(yè)主數據管理實踐(一)裝備制造行業(yè)主數據管理裝備制造是指處于價值鏈高端和產業(yè)鏈核心環(huán)節(jié),并決定著整個產業(yè)鏈綜合競爭力的關鍵設備的制造。裝備制造具有技術密集、資金密集、附加值高、成長空間大、帶動作用強等突出特點。裝備制造業(yè)在數據管理方面起步較晚,但其主數據管理形式有著鮮明的特點,裝備制造業(yè)主數據管理對象通常包括通用類、人資類、客商類和物料類,其中物料類主數據最為重要,通常包含了材料、標準件、零組件等產品組成資源,貫穿于產品生產制造的全生命周期過程。從連續(xù)型制造業(yè)務線條來看,單一企業(yè)的主數據分布在設計、工藝、生產過程中的多個業(yè)務部門中,在眾多異構系統(tǒng)中使用,主數據本身具備多學科的特點,并且與生產制造的銜接過程存在著緊密的聯(lián)系。為了充分支持生產制造業(yè)務的進行,主數據通常需要集成到PDM、CAPP、MES、ERP等多個業(yè)務系統(tǒng),通過主數據的有效流通實現(xiàn)各生產環(huán)節(jié)的順暢銜接。從離散型制造業(yè)務線條來看,多業(yè)態(tài)集團企業(yè)的主數據管理多呈現(xiàn)出兩級的形態(tài),主要特點為集團主數據系統(tǒng)兩級部署、集團主數據集中管控和成員單位多方接入,通過集團主數據的統(tǒng)一標準、統(tǒng)一編碼、統(tǒng)一管理、統(tǒng)一發(fā)布,支撐主數據兩級應用模式:一套模型(標準)+一套主數據(集團與交互系統(tǒng))+多方接入(集團總部及各單位)。集團和成員單位之間通過兩級應用模式,實現(xiàn)集團對主數據及模型統(tǒng)一管理,保證集團管轄類主數據、主數據標準在集團范圍內的一致性,為數據共享和應用夯實數據基礎,同時也允許成員單位對集團管轄范圍外的主數據進行自管。(二)能源化工行業(yè)主數據管理能源化工是指利用石油、天然氣和煤等基礎能源資源,通過化學過程制備二次能源和化工產品的過程,主要包括石油化工、天然氣化工和煤化工等。能源化工產業(yè)鏈的上游主要是以天然氣、煤炭、石油等能源為原料能源的開采和運輸,中游主要是化學反應和產品加工,下游則是產品的銷售和使用。為了提高能源使用效率,提升產品價值,大型能源化工企業(yè)通常為多業(yè)態(tài)集團。在強管控模式下,集團會制定統(tǒng)一的主數據標準規(guī)范,并要求下屬企業(yè)按照規(guī)范執(zhí)行并上報數據。集團擁有對各下屬企業(yè)的主數據管理權限,并進行集中管控。這種模式有利于保證數據的規(guī)范性和一致性,同時能夠更好地進行數據的安全性和隱私保護。主數據是支持集團財務、人力資源和供應鏈集中管理的基礎。在弱管控模式下,集團一般只做財務合并,對下屬企業(yè)的人財物、產供銷不做干預。因此,這種模式下,集團會將數據權限下放到各下屬企業(yè),讓它們建立不同的屬地業(yè)務系統(tǒng)進行數據管理。對于主數據標準,集團可能會制定統(tǒng)一的會計科目規(guī)范,但不會制定人力資源和供應鏈管理的主數據規(guī)范。各下屬企業(yè)可以根據自己的業(yè)務需求和實際情況,自主決定數據的管理方式和格式。能源化工行業(yè)的產業(yè)鏈很長,涵蓋工程建設、能源開采、煉化、精細化工等業(yè)態(tài),所以主數據建設的周期也相對較長。能源化工企業(yè)典型的價值鏈是原料采購、生產加工和成品銷售。能源化工企業(yè)的原料進廠、生產加工和成品出廠的節(jié)奏很快,對物流、生產的效率要求高,物流與生產的自動化、智能化程度越來越高。企業(yè)關注的主數據對象通常有通用基礎類、財務類、單位類、物料類、物料分配類等。(三)金融行業(yè)主數據管理金融行業(yè)的主數據管理是在“以客戶為中心”的經營理念驅動下,起步于客戶信息管理系統(tǒng)(ECIF系統(tǒng)),并以此為基礎逐步拓展并構建了機構、產品、渠道等主數據管理能力??蛻糁鲾祿芾硪劳蠩CIF系統(tǒng)實現(xiàn)了集中式的管理架構,形成了以ECIF為中心、各業(yè)務系統(tǒng)為渠道的主副本架構,渠道系統(tǒng)負責采集數據,ECIF統(tǒng)一集成,實時廣播,用數業(yè)務系統(tǒng)訂閱廣播信息,實時同步數據。得益于較為完善的數據管理體系,金融業(yè)在主數據管理和應用過程中具有較為充分的組織保障和資源保障,主數據的質量管理、安全管理和分析應用能力較強,同時可以較為徹底對源頭業(yè)務系統(tǒng)進行改造升級,并做好全局的系統(tǒng)對接,確保主數據上下游一致貫通。在拓展主數據對象的過程中,金融業(yè)企業(yè)借助企業(yè)級數據模型的建設成果和行業(yè)實踐經驗,可以參考企業(yè)級數據模型的主題域劃分和邏輯數據模型建設成果,有效指導主數據對象的識別和主數據標準制定。以證券期貨業(yè)JR/T0176.3—2021標準將證券公司邏輯模型數據域劃分為例,包括主體、賬戶、品種、交易、資產、合同、渠道、營銷八個數據域。其中,主體數據域是證券公司開展客戶關系管理、進行客戶畫像和標簽管理、建設以客戶為中心的應用系統(tǒng)的重要基礎性模型。根據證券公司實際業(yè)務過程特征、數據分布、完整性、一致性等方面將主體歸納、抽象為用戶、客戶、內部組織與其他外部組織四大類,可作為主數據對象。(四)通信行業(yè)主數據管理通信行業(yè)主數據覆蓋網絡設備、客戶和訂購信息、電信產品與服務、網絡拓撲等領域,是業(yè)務應用系統(tǒng)和系統(tǒng)間交互的重要基礎。按照主數據對象的穩(wěn)定性、業(yè)務影響程度、共享調用頻率等因素,采取了注冊、審批和報備等主數據管理方法。通信行業(yè)的主數據對象通常具有長期穩(wěn)定性和唯一性,將主數據作為信息系統(tǒng)互聯(lián)互通的重要基礎,跨越管理支撐域(MSS)、業(yè)務支撐域(BSS)、運營支撐域(OSS)各域并在多業(yè)務電信業(yè)務流程中共享應用,在整個業(yè)務價值鏈上不斷復用并對運營決策過程產生重大影響。當前,通信企業(yè)將主數據管理作為業(yè)務運營工作的重要內容,正在積極通過數據治理工作釋放主數據潛在價值,將分散在B、M、O域多個系統(tǒng)中的主數據進行整合,破除跨域壁壘。通信企業(yè)普遍發(fā)布了主數據管理辦法對主數據新增、變更、調用等流程進行規(guī)范,發(fā)布主數據標準推動主數據在企業(yè)范圍內保持統(tǒng)一。通信企業(yè)普遍具備較強的數據質量管理、數據分析應用、數據運營管控能力,對主數據流轉、調用、質量等情況進行常態(tài)化管理和評價。通信企業(yè)定期開展主數據稽核工作并進行通報,對主數據總量、新增量、調用系統(tǒng)數量等情況進行匯總統(tǒng)計,對主數據的規(guī)范性、完整性、準確性、一致性等數據質量進行考核評價。通信企業(yè)的主數據管理在客戶服務、物資管理、網絡優(yōu)化、網格管理等方面發(fā)揮著積極作用。(五)地產行業(yè)主數據管理地產行業(yè)的主數據管理特點呈現(xiàn)出多元化的數據種類,龐大的數據量和復雜的數據質量管理挑戰(zhàn)。從客戶、樓盤、供應商到員工,各類信息交織復雜,需要綜合考慮業(yè)務流程、市場競爭等多方面需求。不論是普通典型的地產企業(yè)還是多業(yè)態(tài)的集團型地產企業(yè),主數據管理均扮演著關鍵角色。地產行業(yè)面臨著來自客戶、項目、供應商等多個方面的復雜數據,要求有效整合以支持業(yè)務流程和決策。在地產行業(yè),從普通級別的企業(yè)到集團級別的企業(yè),主數據管理呈現(xiàn)出差異明顯的現(xiàn)狀。普通企業(yè)主要面對基礎的客戶、項目和員工等主數據,管理相對較為簡單,注重的是數據的準確性和業(yè)務流程的高效性。而集團級別的企業(yè)由于在不同業(yè)務領域的拓展導致主數據管理變得復雜,集團型企業(yè)需要處理多元業(yè)態(tài)、跨地域的數據整合,涉及到住宅、商業(yè)、物業(yè)服務等多個領域,因此需同時管理多個維度的主數據。此外,不同業(yè)態(tài)之間的關聯(lián)性使得數據的交叉分析和業(yè)務流程的協(xié)同成為挑戰(zhàn)。(六)政府機構主數據管理近年來,隨著我國政府管理從信息化走向數字化,政務主數據管理已成為我國數字政府建設及運行的核心內容。特別是中共中央、國務院印發(fā)《數字中國建設整體布局規(guī)劃》、《全國一體化政務大數據體系建設指南》、《關于構建數據基礎制度更好發(fā)揮數據要素作用的意見》后,各級政府紛紛響應,積極推動數字政府在新政策、新形勢、新需求背景下的二次轉型,力圖構建更加智能、高效、穩(wěn)定、安全的政務數據資源管理體系,支撐、賦能政務服務及管理業(yè)務應用,因此政務主數據管理越發(fā)顯得重要。政務主數據一般借助數據資源庫的建設進行管理,通常包含基礎庫和主題庫兩大類,資源庫平臺上接國家,下通市州、橫聯(lián)廳局,集數據歸集、治理、管理、應用、共享、開放等多種功能于一體,依托共享門戶、管理門戶和開放門戶,為政務主數據共享、開放和管理提供統(tǒng)一的平臺支撐。政務主數據管理是數字政府一體化數據資源體系良好運轉最為關鍵的因素之一。首先,政務主數據管理通過制定統(tǒng)一的主數據標準及規(guī)范確保各政府部門之間、不同政務系統(tǒng)之間的核心數據資源的一致性和標準性,是政務數據資源共享共用的前提條件,為政務服務及管理業(yè)務提供了可用、好用的數據資源。其次,政務主數據管理為數字政府對政務數據質量檢測及管理工作提供了必要條件,是推動質量問題數據資源回流數源單位,打造政務數據質量改進閉環(huán)的核心因素。再次,通過政務主數據的集中管理,為跨部門、跨層級、跨地域的政務數據資源整合、共享、應用提供了可行性,為最大程度發(fā)揮政務數據價值提供了便利。通過激發(fā)數據潛能,使政務數據在推動社會經濟發(fā)展、提升社會群眾獲得感、幸福感方面發(fā)揮了更大的作用。三、主數據管理主要內容(一)主數據識別1、主數據對象識別主數據對象的識別主要依賴于所識別對象本身具有的特征,主要包括是否為核心對象、是否屬于基礎數據、是否被重復使用三個方面,被判定對象需要同時具備這三個方面的特征才能被識別為主數據對象。(1)核心對象:與組織業(yè)務經營直接相關的最關鍵、最核心的數據對象。(2)基礎數據:是組織業(yè)務經營活動發(fā)生的依托,屬于基礎數據的范疇。(3)重復使用:被組織多個業(yè)務部門、多個系統(tǒng)之間共享。2、主數據屬性識別組織通常會使用各種統(tǒng)計學方法來進行主數據的識別,最常見的一種為多因素分析方法,即結合主數據的特征,提煉主數據的共享性、權威性、穩(wěn)定性、高價值性等識別因素,判別因素的符合程度(符合、不符合),確定主數據范圍。例如根據主數據的共享性,可采用UC矩陣法定量判斷數據的共享程U(Use)C(Create)來表示數據的使用和產生情況,識別同一類數據由多少個源頭創(chuàng)建,由多少個系統(tǒng)共享。以下為某金融行業(yè)主數據識別定量分析UC矩陣示例。表1主數據識別定量分析UC矩陣(示例)數據名稱核心系統(tǒng)ECIF系統(tǒng)人力資源系統(tǒng)信用卡系統(tǒng)零售信貸系統(tǒng)機構管理信息系統(tǒng)......客戶數據UC/UU/機構數據UUCUUC員工信息UUCUU/存單信息C/////進一步地,可根據主數據的唯一性、穩(wěn)定性、長期性等特點進一步進行主數據的識別確認。表2主數據分析表(示例)序號數據名稱共享性唯一性穩(wěn)定性長期性是否主數據1客戶數據A符合符合符合符合是2機構數據B符合符合符合符合是3交易數據C符合符合不符合符合否4指標數據D符合符合不符合不符合否(二)主數據標準主數據標準化是建立在對業(yè)務流程分析基礎之上,是信息共享的前提和基礎。主數據標準是定義數據的基本單元,通過數據標準定義實現(xiàn)組織數據規(guī)范、數據質量校核準確、應用分析高效。主數據標準的根本目的在于,整個主數據管理活動中,各方的參與人員在接觸或使用相關名詞內容時,均能夠保持一致的理解,主數據標準通常包含編碼規(guī)范、分類體系、描述與表達規(guī)范、質量與安全規(guī)范。1、編碼規(guī)范編碼規(guī)范是用于唯一標識和分類主數據的一套規(guī)則,通常包括編碼規(guī)則、編碼結構、編碼字典三部分。(1)編碼規(guī)則:定義如何生成唯一的編碼,例如使用數字、字母或組合。(2)編碼結構:定義編碼的組成部分和它們之間的關系。(3)編碼字典:提供編碼的含義和解釋,以幫助用戶理解和使用編碼。2、分類體系分類體系是指對組織內的主數據進行分類和組織的一套方法和框架,通常包括分類方法、分類層次、分類字典三部分。(1)分類方法:定義如何對主數據進行分類,例如按業(yè)務領域、按數據類型、按數據來源等。(2)分類層次:定義分類的層次結構,例如一級分類、二級分類等。(3)分類字典:提供分類的含義和解釋,以幫助用戶理解和使用分類。3、描述與表達規(guī)范主數據描述與表達規(guī)范即主數據模型,是指一系列用于定義、組織和標準化主數據的規(guī)則、格式和結構。這些規(guī)范旨在確保主數據的一致性、可理解性和互操作性,以便于主數據在不同系統(tǒng)之間進行交換、分析和共享。主數據描述與表達規(guī)范通常包含主數據定義、數據格式、數據值范圍、數據字典、數據關系。(1)主數據定義:對主數據的含義、范圍和用途進行明確的定義。(2)數據格式:規(guī)定主數據的存儲格式和表示方式,包括數據類型、長度、精度等。(3)數據值范圍:指定主數據允許的取值范圍。(4)數據字典:對主數據的各個字段進行詳細描述,包括字段名稱、字段類型、字段長度、字段值范圍等。(5)數據關系:描述主數據之間的關系,如主鍵、外鍵、參照關系等。4、質量與安全規(guī)范組織在建立主數據標準體系過程中應進一步明確主數據的質量和安全要求。(1)數據質量規(guī)范:規(guī)定主數據的質量要求,如準確性、完整性、一致性、可用性等。(2)數據安全規(guī)范:規(guī)定主數據的安全要求,如訪問控制、加密、備份等。(三)主數據管理制度主數據管理制度是一種組織級方法,旨在確保在整個組織中,可對各類核心數據實體進行統(tǒng)一的、有序的管理,建立主數據管理制度有助于組織更好地理解、管理和利用其核心數據,提高業(yè)務效率,降低風險,支持戰(zhàn)略決策,并適應不斷變化的經營環(huán)境。主數據管理制度通常包含目的及適用范圍、組織確立及職責劃分、主數據工作流程、主數據管理考核。1、目的及適用范圍讓組織中的相關人員了解本制度推行的意義和作用,同時說明該本制度應用于何種場景,與哪些業(yè)務、哪些部門相關,確保本制度在后續(xù)的主數據管理活動中得以正確運用。2、組織確立及職責劃分為了確保主數據的質量及管理效率,組織需要明確負責主數據管理的組織,設立專門的主數據管理部門或成立管理委員會;組織成員可由專人專崗負責,也可以由相關部門的人員兼職擔任,做到責任到人。一般管理組織需要包含三層:決策層:通常由公司高層或者部門主管組成,負責制定主數據管理的戰(zhàn)略規(guī)劃和政策,對整個主數據管理工作進行最終的決策和審批。管理層:這一層通常由主數據管理人員組成,他們負責牽頭組織制定主數據標準、主數據管理制度和有關方案,并推進相關工作計劃的執(zhí)行。執(zhí)行層:由業(yè)務人員和技術人員共同組成,業(yè)務人員作為業(yè)務執(zhí)行層負責編寫主數據標準規(guī)范,設計主數據管理機制,并開展主數據申請、審核、使用等日常工作;技術人員作為技術執(zhí)行層負責將主數據標準和管理機制落標,按照既定的規(guī)范進行系統(tǒng)開發(fā)工作,以及按照規(guī)范要求執(zhí)行各項數據清洗、整合以及維護等任務。從以上三個層級展開,面向主數據管理全過程,如規(guī)劃、實施、維護等各項活動,組織還需要進一步明確相關角色,并對各角色的職責、權限進行詳細描述。3、主數據工作流程規(guī)范化的流程能夠確保組織內的主數據各項活動、操作按照事先定義好的標準和步驟進行,有助于建立一個有序、高效、質量可控的環(huán)境,為組織主數據管理的可持續(xù)發(fā)展提供了基礎。主要管理流程包括:(1)標準相關的流程,主要包括各主數據的標準的確立、變更、評審、發(fā)布,主數據模型的發(fā)布、變更等;(2)數據相關的流程,主要包括各主數據的申請、審核、錄入、維護、啟停用等操作涉及的流程;(3)系統(tǒng)集成相關的流程,主要包括各主數據的源數據接入、數據下發(fā)策略調整等;(4)數據質量相關流程,主要包括各主數據質檢規(guī)則的制定、數據質量檢查方案、問題數據整改等。4、主數據管理考核組織內需要定期對主數據管理的情況進行績效考核,通過定義一系列的績效指標,衡量管理工作執(zhí)行的好壞,通常可以從兩大方面進行考量,一個是主數據本身的質量,如主數據準確性、完整性、一致性、唯一性、及時性等;另一個是管理執(zhí)行的質量與效率,如主數據納管率、主數據系統(tǒng)覆蓋率、主數據同步成功率、主數據清洗完成度等。(四)主數據管理平臺主數據管理平臺是主數據標準、主數據管理制度的落標工具,通過成熟的、系統(tǒng)性的功能支撐主數據管理的高效運行。平臺應當具備的主要功能包括以下幾點:1、主數據標準管理支持在線編制標準目錄,創(chuàng)建、評審、發(fā)布主數據標準,并支持標準文檔的存儲管理與下載。2、主數據編碼管理支持統(tǒng)一管理主數據碼段體系,基于統(tǒng)一碼段體系,拼裝主數據編碼,將編碼綁定主數據模型,保障主數據的唯一性、規(guī)范化和一致性,提高主數據質量。3、主數據建模管理支持通過可視化界面配置主數據對象分類、視圖、屬性、填報界面、編碼規(guī)則、審批流程等,能夠支撐單一、層級結構,滿足多視圖間的一對多關系的構建,支持模型的審批發(fā)布及版本記錄。4、主數據生命周期管理支持主數據申請、校驗、審核、發(fā)布、維護、變更、停用等全生命周期管理,能夠在過程中提供數據查重、審核校驗、數據審批多種方式,確保數據的準確性,并能通過數據版本、操作的記錄保證數據的可追溯性。5、主數據集成管理支持通過組件化、可視化的方式,自由定義數據集成任務,實現(xiàn)源數據的接入、數據處理以及主數據對下游系統(tǒng)的分發(fā),能夠支撐實時、定時任務、手動多種執(zhí)行機制,完成數據庫、接口方式的數據集成。6、主數據質量管理能夠對常見的質量檢查規(guī)則進行內置,如:空值檢查、值域檢查、邏輯檢查等等,同時也能支持通過腳本的方式,形成個性化的檢查規(guī)則,并能根據需要制定檢查的時間及頻次,呈現(xiàn)檢查結果。7、主數據安全管理能夠保護主數據的安全性,防止數據丟失、泄漏和篡改,特別是涉及敏感信息(如客戶個人信息)時支持建立分類分級管理、設置安全標記、提供訪問控制、數據脫敏和數據水印等服務。8、工作流程管理支持工作流程的設計與配置,支持通過判斷審批數據的內容經不同的分支完成數據審批工作,并能記錄流程設計的版本。9、用戶權限管理支持機構、用戶、權限的靈活配置,能夠實現(xiàn)數據字段級的權限管控。(六)主數據應用1、集中式應用在集中式應用模式中,所有主數據都通過主數據管理系統(tǒng)進行創(chuàng)建、查詢和維護操作,再由主數據系統(tǒng)同步給業(yè)務系統(tǒng)。集中式應用通常采取較為嚴格主數據管控流程,主數據標準只需在統(tǒng)一的主數據管理系統(tǒng)內落標,并設置主數據申請、審批、分發(fā)等工作流程。同時針對不同類型的主數據對象,考慮到主數據管理職責、主數據屬性等因素,按照主數據對象設置差異化管控流程。集中式的應用模式通常配套建設獨立的主數據運營團隊,保證集團型或多層級組織的主數據一致性,保證核心業(yè)務系統(tǒng)間的貫通。(1)適用場景:適用于組織結構相對簡單,或決策權力高度集中,或對數據一致性和集中控制有較高要求時。(2)優(yōu)勢數據一致性高:中心化管理確保所有業(yè)務單元使用相同的主數據,減少了數據冗余和不一致性。管理簡便:中央管理使得數據更新、維護、權限控制更為簡便,降低了數據管理的復雜性。(3)劣勢不適應分散業(yè)務:對于多地域、多業(yè)務單元的行業(yè),中心化管理可能導致數據訪問的復雜性增加,無法滿足多樣化業(yè)務對主數據的需求。單點故障:中央數據庫成為單一故障點,出現(xiàn)故障可能導致全局性的數據不可用。2、聯(lián)邦式應用聯(lián)邦式應用模式一般由多個源頭系統(tǒng)作為主數據權威源頭,各類應用系統(tǒng)既可以將主數據記錄傳遞給主數據管理系統(tǒng)進行統(tǒng)一分發(fā),也可以直接在源頭業(yè)務系統(tǒng)間落實主數據記錄的同步和分發(fā)。聯(lián)邦式主數據應用模式以核心的多個源系統(tǒng)為主要管理對象,組織的信息化能力較強,源頭系統(tǒng)和主責部門具有很強的數據管理能力,支持系統(tǒng)的深度改造和開發(fā),可以承擔主數據管理的職能。(1)適用場景:適用于組織中業(yè)務分布廣泛,但仍需要一定程度的數據集中管理。各業(yè)務單元保留一定程度的自治權,但通過聯(lián)邦機制進行協(xié)同。(2)優(yōu)勢:部分自治權:各業(yè)務單元保持一定程度的自治權,能夠根據本地需求管理主數據。數據協(xié)同:通過聯(lián)邦機制實現(xiàn)數據協(xié)同,有利于跨業(yè)務單元的信息共享和流通。(3)劣勢:復雜性增加:相較于中心化管理,聯(lián)邦式管理的協(xié)同機制增加了系統(tǒng)的復雜性,需要更精細的協(xié)同管理。數據一致性挑戰(zhàn):雖然進行了聯(lián)邦協(xié)同,但在不同單元之間仍需謹慎管理數據一致性,否則可能出現(xiàn)問題。3、分析式應用分析式應用是在數據分析側對主數據對象進行分析提煉,進入數據倉庫和數據湖的數據中包含了主數據對象,經統(tǒng)一清洗、轉換、集成,形成準確、一致的主數據集合,為分析型應用提供數據支撐。分析式應用模式以組織的數據分析挖掘能力為核心,通過在數據入湖、入倉之后進行主數據質量的稽核監(jiān)控,實現(xiàn)對主數據對象一致性、準確性的管理,雖然有一定延遲但仍然可以很好地對源頭系統(tǒng)主數據質量問題管控。分析式應用適用于數據分析能力強、源頭業(yè)務系統(tǒng)復雜且穩(wěn)定,同時各業(yè)務單元較為獨立,數據協(xié)同需求弱的場景。(1)適用場景:適用于組織結構較為分散,各業(yè)務單元有較大獨立性,需要靈活管理主數據的情況。每個業(yè)務單元的數據管理自洽,跨業(yè)務協(xié)同需求少。(2)優(yōu)勢:業(yè)務自治:各業(yè)務單元可以根據自身需求自主管理主數據,不受其他單元的制約。本地化處理:每個地區(qū)或業(yè)務單元可以根據本地法規(guī)和業(yè)務特點進行數據管理,提高本地化適應性。(3)劣勢:數據不一致性:分散管理容易導致不同業(yè)務單元之間的數據不一致,增加了數據質量控制的難度。難以協(xié)同:難以實現(xiàn)全局性的數據協(xié)同和共享,容易導致信息孤島問題。四、主數據管理策略(一)主數據管理成功要素1、高層領導支持和參與確保高層領導的高度支持和參與,以促進跨部門、跨層級和跨企業(yè)的協(xié)作,并提供必要的資源保障,例如為主數據建設項目分配預算、人員以及在組織內推廣主數據管理的文化等。2、業(yè)務方深度參與和認責主數據管理與組織業(yè)務經營息息相關,確定清晰、具體的業(yè)務需求和目標,并確保這些目標與組織的戰(zhàn)略相一致,才能夠使主數據管理發(fā)揮真正的作用,而這就離不開業(yè)務方的參與。組織內相關業(yè)務部門需要深度參與到實施工作中來,并對不同類型的主數據對象進行認責。在整個主數據建設、管理和運營的過程中,必須始終堅持業(yè)務為主導的原則,才能達到通過主數據管理提升組織業(yè)務效率、降低經營成本等效果。3、合適的主數據管理模式隨著主數據管理模式的日益多樣化,組織應當根據自身的特性來選取最適合的管理模式,識別出具有最大業(yè)務影響的主數據對象,并保證主數據對象明確、主數據屬性精簡、主數據記錄集中。無論是集中式、聯(lián)邦式還是分析式管理,都必須以明確的業(yè)務需求和目標為基礎,確保所選擇的主數據管理模式能夠契合組織的業(yè)務特性和要求。4、技術工具的選擇為保證主數據技術解決方案有效執(zhí)行,應選擇適合的技術工具,除了支持與業(yè)務系統(tǒng)集成,還應支持與企業(yè)其他的數據管理平臺深度集成。另外,具有專業(yè)知識和豐富行業(yè)經驗的主數據服務商,可以更好地發(fā)揮主數據價值并縮短解決方案實施周期。5、主數據度量與評估組織應定義衡量主數據管理的能力指標,并定期進行審計和評估,以便不斷優(yōu)化主數據管理過程。也可以根據組織的特點使用已有的主數據管理能力評價模型。(二)主數據管理的誤區(qū)1、主數據管理無法貫穿源頭系統(tǒng)真正意義上的主數據管理必須在源頭完成,即把經過管理實現(xiàn)了標準化和唯一化之后的主數據分發(fā)給各系統(tǒng)使用,然后各系統(tǒng)在業(yè)務的跨系統(tǒng)處理過程中基于主數據產生業(yè)務意義一致的業(yè)務數據。如果不靠前完成主數據管理,而是通過維護系統(tǒng)之間的映射表在業(yè)務處理過程中由各系統(tǒng)通過翻譯交互數據,保障唯一性、維護映射關系和進行翻譯都有會產生大量的額外成本,系統(tǒng)之間數據交互復雜且成本高,因為主數據會持續(xù)產生和更新,使得上述問題會一直持續(xù)且越來越突出。更為嚴重的誤區(qū)是在各系統(tǒng)各自產生業(yè)務數據后,用其他數據處理系統(tǒng)基于某些共性內容對業(yè)務數據進行清洗,通過清洗和整合希望形成與主數據管理相似的一致性的結果數據,一則需要長期維護復雜的清洗規(guī)則和日常的大規(guī)模清洗數據,復雜度和成本都非常高,關鍵是沒有主數據管理往往也無法獲得正確的業(yè)務數據,這類有誤的數據是很難通過數據清洗等補救措施糾正的。綜上,如果沒有在源頭開展主數據管理工作,很難以較低的成本達成系統(tǒng)間的對稱,所以主數據一定是在系統(tǒng)集成時即把主數據的邏輯固化到多個相關系統(tǒng)的功能中,基于主數據形成各系統(tǒng)之間信息對稱的業(yè)務數據。2、混淆業(yè)務實體數據和主數據范圍業(yè)務實體數據為全面描述業(yè)務往往會有很多字段,而其中很多字段是該類業(yè)務特有的,不是其他相關系統(tǒng)需要引用的,所以非共用范圍的字段不應納入主數據管理。同時,把大量用于查詢、統(tǒng)計的字段納入到主數據范圍也是不合適的,主數據應是被相關系統(tǒng)共用后用以賦值、判斷等操作的,即相關系統(tǒng)使用主數據能夠完成一個實質的業(yè)務功能性處理,而不是主要用以查詢、統(tǒng)計等非業(yè)務功能性處理的,特別是與主數據應用無關的字段被納入主數據管理后,這些無關字段的變化也會影響主數據的穩(wěn)定的。所以在定義主數據模型時,只選擇主數據應用所需的元屬性作為主數據的內容,避免無關字段造成的非必要冗余存儲和非必要的主數據多變。3、同時維護多套主數據編碼體系按照主數據“一實體一編碼”的基本原則,各應用系統(tǒng)應盡量采用主數據編碼作為本系統(tǒng)內對應數據的編碼,這樣系統(tǒng)直接數據交互時無需翻譯直接傳遞,而部分企業(yè)并未嚴格遵照“一實體一編碼”的原則,在應用系統(tǒng)仍然使用自有編碼,同時在系統(tǒng)內為數據設置主數據編碼字段,對外交互數據時才使用主數據編碼,這樣相當于同一實體擁有了多個編碼,在維護數據和數據交互時更加復雜,不是成本最低的應用

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論