數(shù)據(jù)資產(chǎn)管理系統(tǒng)

數(shù)據(jù)資產(chǎn)管理系統(tǒng)演講人2020-12-1545.實施步驟34.組織架構(gòu)與角色職能23.保障措施11.背景52.架構(gòu)與功能目錄1.背景011.背景數(shù)據(jù)安全生命周期A產(chǎn)生/保護/傳輸B存儲C使用D共享E歸檔F銷毀1.背景IT數(shù)據(jù)資產(chǎn)化的管理流程登記申請銷毀1.背景數(shù)據(jù)價值釋放阻力01020304數(shù)據(jù)的質(zhì)量不過關(guān)數(shù)據(jù)獲取的成本較高05因為業(yè)務(wù)系統(tǒng)多、數(shù)據(jù)來源多，經(jīng)營所需的數(shù)據(jù)需求高頻且多樣化。但數(shù)據(jù)體系復(fù)雜、數(shù)據(jù)不統(tǒng)一，數(shù)據(jù)分析速度和數(shù)據(jù)準確一致性難保障，戰(zhàn)略決策與數(shù)據(jù)化運營受阻。數(shù)據(jù)難以打通數(shù)據(jù)的安全難以保障企業(yè)數(shù)據(jù)通常呈現(xiàn)碎片化分布，一共有多少系統(tǒng)，各系統(tǒng)之間有哪些關(guān)聯(lián)，對應(yīng)的關(guān)聯(lián)表又有哪些，企業(yè)一時很難厘清的06數(shù)據(jù)價值釋放阻力在企業(yè)中，更多是數(shù)據(jù)庫、報表、文件、接口、權(quán)限、視圖等零散的分布，所以經(jīng)常容易出現(xiàn)定義不統(tǒng)一、分配不明確、流程混亂、評估手段缺失等問題1.背景1.背景數(shù)據(jù)資產(chǎn)管理過盤點數(shù)據(jù)、提升數(shù)據(jù)質(zhì)量來打破數(shù)據(jù)的孤島，提高獲取的效率，保障數(shù)據(jù)的安全，最終形成一個持續(xù)的閉環(huán)，從而實現(xiàn)數(shù)據(jù)的可得、可用與好用，為企業(yè)的數(shù)字化轉(zhuǎn)型打下了基礎(chǔ)1.背景參考數(shù)據(jù)資產(chǎn)管理實踐白皮書4.0資產(chǎn)管理：/jiangzhenbo/article/details/102680580數(shù)據(jù)鏈溯源：/tech/designapplication/3000112146趨勢01數(shù)據(jù)管理對象少量多元實時數(shù)據(jù)處理架構(gòu)更新?lián)Q代02030405組織架構(gòu)升級變遷管理手段智能應(yīng)用范圍擴大數(shù)據(jù)處理架構(gòu)更新?lián)Q代云/分布式/hadoop/sparkETL到ELT趨勢趨勢組織架構(gòu)升級變遷新的數(shù)據(jù)資產(chǎn)管理團隊與管理角色管理手段智能數(shù)據(jù)可視化AI/BI趨勢應(yīng)用范圍擴大內(nèi)外共用跨界共享趨勢3.保障措施023.保障措施制定企業(yè)組織戰(zhàn)略，自上向下牽頭全局應(yīng)用完善組織架構(gòu)，明確資產(chǎn)管理角色職能建立制度體系，覆蓋數(shù)據(jù)生命周期，監(jiān)控標準規(guī)范執(zhí)行創(chuàng)建審計制度，完成數(shù)據(jù)權(quán)限審計/使用制度/審批流程開展培訓(xùn)與宣傳，提升團隊數(shù)據(jù)資產(chǎn)管理水平4.組織架構(gòu)與角色職能03上數(shù)據(jù)資產(chǎn)管理委員會類PMO數(shù)據(jù)資產(chǎn)管理中心運營/組織/協(xié)調(diào)/監(jiān)督中提供者配合數(shù)據(jù)標準/數(shù)據(jù)質(zhì)量開發(fā)者制定數(shù)據(jù)標準和質(zhì)量消費者應(yīng)用及反饋。。。

下5.實施步驟045.實施步驟統(tǒng)籌規(guī)劃階段管理實施稽核檢查資產(chǎn)運營5.實施步驟統(tǒng)籌規(guī)劃階段1.建立組織體系12.制定管理制度23.盤點數(shù)據(jù)資產(chǎn)，幫助企業(yè)更了解現(xiàn)在他們所擁有什么樣的數(shù)據(jù)34.評估數(shù)據(jù)管理水平——可以通過自評估或者他評估數(shù)據(jù)管理的方法45.制定數(shù)據(jù)的標準規(guī)范——在這個階段它產(chǎn)生了一些主要的交付物，包括數(shù)據(jù)資產(chǎn)管理的規(guī)劃、問責機制、清單以及現(xiàn)狀的評估等5交付物6統(tǒng)籌規(guī)劃階段1.建立組織體系

2.制定管理制度

3.盤點數(shù)據(jù)資產(chǎn)，幫助企業(yè)更了解現(xiàn)在他們所擁有什么樣的數(shù)據(jù)

4.評估數(shù)據(jù)管理水平——可以通過自評估或者他評估數(shù)據(jù)管理的方法

5.制定數(shù)據(jù)的標準規(guī)范——在這個階段它產(chǎn)生了一些主要的交付物，包括數(shù)據(jù)資產(chǎn)管理的規(guī)劃、問責機制、清單以及現(xiàn)狀的評估等

交付物數(shù)據(jù)資產(chǎn)管理規(guī)劃數(shù)據(jù)資產(chǎn)管理認責規(guī)制數(shù)據(jù)資產(chǎn)盤點清單數(shù)據(jù)資產(chǎn)管理現(xiàn)狀評估5.實施步驟管理實施包括數(shù)據(jù)模型、數(shù)據(jù)安全等其他的數(shù)據(jù)資產(chǎn)管理關(guān)鍵活動的落實。在這個階段主要的交付物包括數(shù)據(jù)資產(chǎn)的管理辦法，管理辦法涵蓋的內(nèi)容包括數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量等等交付物管理實施包括數(shù)據(jù)模型、數(shù)據(jù)安全等其他的數(shù)據(jù)資產(chǎn)管理關(guān)鍵活動的落實。在這個階段主要的交付物包括數(shù)據(jù)資產(chǎn)的管理辦法，管理辦法涵蓋的內(nèi)容包括數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量等等交付物數(shù)據(jù)資產(chǎn)管理辦法數(shù)據(jù)資產(chǎn)管理實施細則數(shù)據(jù)標準管理/質(zhì)量管理/元數(shù)據(jù)管理/主數(shù)據(jù)管理/安全管理/數(shù)據(jù)應(yīng)用管理等5.實施步驟稽核檢查交付物主要是對數(shù)據(jù)標準、數(shù)據(jù)存儲、數(shù)據(jù)管理等方面的相關(guān)檢查，從而形成數(shù)據(jù)稽核以及問題管理辦法等BA稽核檢查主要是對數(shù)據(jù)標準、數(shù)據(jù)存儲、數(shù)據(jù)管理等方面的相關(guān)檢查，從而形成數(shù)據(jù)稽核以及問題管理辦法等交付物數(shù)據(jù)資產(chǎn)管理稽核辦法數(shù)據(jù)資產(chǎn)管理問題管理辦法5.實施步驟資產(chǎn)運營0102主要包括數(shù)據(jù)資產(chǎn)的價值評估以及內(nèi)部流通和運營流通交付物資產(chǎn)運營主要包括數(shù)據(jù)資產(chǎn)的價值評估以及內(nèi)部流通和運營流通交付物數(shù)據(jù)資產(chǎn)價值評估方法數(shù)據(jù)資產(chǎn)成本管理方法數(shù)據(jù)資產(chǎn)共享流通管理辦法2.架構(gòu)與功能052.架構(gòu)與功能1.數(shù)據(jù)標準管理A2.數(shù)據(jù)模型管理B3.元數(shù)據(jù)管理C4.主數(shù)據(jù)管理D5.數(shù)據(jù)質(zhì)量管理E6.數(shù)據(jù)安全管理F2.架構(gòu)與功能7.數(shù)據(jù)價值管理18.數(shù)據(jù)共享管理22.架構(gòu)與功能1.數(shù)據(jù)標準管理數(shù)據(jù)內(nèi)外部使用和交換一致性和準確性、規(guī)范性的約束，數(shù)據(jù)標準管理則是通過統(tǒng)一的數(shù)據(jù)標準制定與發(fā)布來實現(xiàn)數(shù)據(jù)平臺的完整有效一致與規(guī)范。如果數(shù)據(jù)標準管理做得好的話，將很大程度上能夠?qū)崿F(xiàn)企業(yè)內(nèi)部數(shù)據(jù)的互聯(lián)互通，進而推動企業(yè)外部數(shù)據(jù)的共享交換主要的要素關(guān)鍵活動功能01030204主要的要素標準的信息項要是對標準的特點、性質(zhì)進行描述標準的分類分類維度基礎(chǔ)類數(shù)據(jù)標準指標類的數(shù)據(jù)標準其它維度公共代碼和編碼公共代碼和編碼很多企業(yè)也會參考國標和行標。如果國標、行標沒有的話，企業(yè)可以在內(nèi)部形成完整的數(shù)據(jù)標準編碼體系。與國標或者行標保持一致，將推動數(shù)據(jù)流通的實現(xiàn)主要的要素關(guān)鍵活動理解數(shù)據(jù)標準化的需求建立一些數(shù)據(jù)標準的管理工具制定數(shù)據(jù)標準的體系與規(guī)范制定相應(yīng)的管理辦法以及實施流程要求68%44%21%15%

結(jié)合公司戰(zhàn)略與現(xiàn)狀，

功能標準生成01標準映射02標準導(dǎo)出03標注版本管理042.架構(gòu)與功能2.數(shù)據(jù)模型管理主要模型01關(guān)鍵活動02功能03主要模型01面向用戶與客觀實踐的，其本身與數(shù)據(jù)庫或者數(shù)據(jù)倉庫的架構(gòu)搭建沒有特別多的關(guān)系概念模型02基于概念模型，面向業(yè)務(wù)的，用于指導(dǎo)一些數(shù)據(jù)庫系統(tǒng)的實構(gòu)建邏輯模型03基于邏輯模型，面向計算機物理表示，考慮了操作系統(tǒng)、硬件模型等等，描述數(shù)據(jù)在存儲介質(zhì)上的結(jié)構(gòu)物理模型制定數(shù)據(jù)模型實施流程與稽核要求3根據(jù)企業(yè)架構(gòu)設(shè)計標準化數(shù)據(jù)模型2定義標準化的業(yè)務(wù)用語/單詞/域/編碼1關(guān)鍵活動功能數(shù)據(jù)模型設(shè)計模型差異稽核模型變更管控模型可視化3.元數(shù)據(jù)管理描述數(shù)據(jù)的數(shù)據(jù)，表的metdata，存儲的數(shù)據(jù)量/大小/數(shù)據(jù)本身的屬性等，通過進行血緣分析和影響分析實現(xiàn)關(guān)鍵信息的記錄和跟蹤幫助我們了解一些數(shù)據(jù)的走向，知道數(shù)據(jù)是從哪里來到哪里去，也可以構(gòu)建數(shù)據(jù)地圖和數(shù)據(jù)目錄自動提取元數(shù)據(jù)信息，幫助我們了解這個企業(yè)目前擁有什么樣的數(shù)據(jù)資產(chǎn)，將會幫助我們實現(xiàn)關(guān)鍵信息的追蹤與記錄，快速掌握元數(shù)據(jù)的變化可能帶來的風(fēng)險。關(guān)鍵驅(qū)動力。關(guān)鍵驅(qū)動力數(shù)據(jù)的元數(shù)據(jù)管理及關(guān)聯(lián)/映射數(shù)據(jù)到元數(shù)據(jù)到元模型，具體到抽象元數(shù)據(jù)本身的數(shù)據(jù)結(jié)構(gòu)也是需要被定義和規(guī)范的，定義和規(guī)范元數(shù)據(jù)的就是元模型，國際上元模型的標準是CWM(CommonWarehouseMetamodel，公共倉庫元模型)，一個成熟的元數(shù)據(jù)管理工具，需要支持CWM標準。2.架構(gòu)與功能3.元數(shù)據(jù)管理元數(shù)據(jù)管理平臺通過多種分析方式幫助企業(yè)分析數(shù)據(jù)流向，具體到字段級的數(shù)據(jù)解析，如血緣分析、影響分析、關(guān)聯(lián)度分析等，幫助企業(yè)獲取數(shù)據(jù)上下游、對象關(guān)聯(lián)對象等等關(guān)系，快速定位問題字段，幫助企業(yè)降低數(shù)據(jù)問題的定位難度。2.架構(gòu)與功能2.架構(gòu)與功能3.元數(shù)據(jù)管理主要模塊關(guān)鍵活動功能業(yè)務(wù)元數(shù)據(jù)管理和業(yè)務(wù)相關(guān)的，包括業(yè)務(wù)的術(shù)語信息的分類、指標、統(tǒng)計口徑等技術(shù)元數(shù)據(jù)管理技術(shù)領(lǐng)域相關(guān)的，包括數(shù)據(jù)結(jié)構(gòu)的定義、數(shù)據(jù)的轉(zhuǎn)換等管理元數(shù)據(jù)管理領(lǐng)域相關(guān)的概念、規(guī)則，包括人員的角色、崗位的職責以及管理的流程等主要模塊關(guān)鍵活動開發(fā)設(shè)計元數(shù)據(jù)標準關(guān)鍵活動創(chuàng)建/采集/整合元數(shù)據(jù)關(guān)鍵活動管理元數(shù)據(jù)存儲元數(shù)據(jù)分析應(yīng)用01

血緣分析02數(shù)據(jù)地圖以數(shù)據(jù)搜索為基礎(chǔ)，提供表使用說明、數(shù)據(jù)類目、數(shù)據(jù)血緣、字段血緣等工具，幫助數(shù)據(jù)表的使用者和擁有者更好地管理數(shù)據(jù)、協(xié)作開發(fā)數(shù)據(jù)地圖03

影響分析4：3元數(shù)據(jù)采集功能功能元數(shù)據(jù)識別功能元數(shù)據(jù)分類元數(shù)據(jù)應(yīng)用元數(shù)據(jù)分析應(yīng)用血緣分析數(shù)據(jù)地圖影響分析功能/jiangzhenbo/article/details/852552402.架構(gòu)與功能4.主數(shù)據(jù)管理主數(shù)據(jù)管理可以使企業(yè)跨系統(tǒng)使用一致的和共享的數(shù)據(jù)，從而可以降低成本和復(fù)雜度，來支撐跨部內(nèi)、跨系統(tǒng)數(shù)據(jù)融合的應(yīng)用。通過對主數(shù)據(jù)的梳理和管理，將建立數(shù)據(jù)的一個參考，為數(shù)據(jù)標準后期的管理節(jié)約很多的人力和物力，這個效果也是可以在短期內(nèi)看到的。對于沒有經(jīng)驗開展數(shù)據(jù)資產(chǎn)管理的企業(yè)而言，從主數(shù)據(jù)管理入手（有的企業(yè)也將主數(shù)據(jù)管理納入數(shù)據(jù)標準管理）將會為企業(yè)開展數(shù)據(jù)資產(chǎn)管理帶來信心。比如說供應(yīng)商數(shù)據(jù)、物料數(shù)據(jù)、客戶數(shù)據(jù)、員工數(shù)據(jù)。關(guān)鍵活動功能將元數(shù)據(jù)庫數(shù)據(jù)（采集/檢驗/清洗/脫敏/補齊）處理形成統(tǒng)一的數(shù)據(jù)資產(chǎn)，監(jiān)控起來，提供API服務(wù)，通過稽核質(zhì)態(tài)庫的數(shù)據(jù)，維護數(shù)據(jù)的統(tǒng)一可用6月7月8月9月關(guān)鍵活動

識別主數(shù)據(jù)

定義和維護主數(shù)據(jù)的架構(gòu)

實現(xiàn)數(shù)據(jù)庫與主數(shù)據(jù)庫的同步采集清洗傳輸整合存儲數(shù)據(jù)集成功能01主數(shù)據(jù)提取整合主數(shù)據(jù)清洗校驗02主數(shù)據(jù)變更審批03主數(shù)據(jù)發(fā)布共享042.架構(gòu)與功能5.數(shù)據(jù)質(zhì)量管理01數(shù)據(jù)質(zhì)量的管理可以幫助企業(yè)獲得一些干凈以及結(jié)構(gòu)清晰的數(shù)據(jù)，進而可以提高數(shù)據(jù)應(yīng)用和服務(wù)的水平。質(zhì)量要求所帶來的成本上升及效益權(quán)衡。數(shù)據(jù)質(zhì)量是數(shù)據(jù)應(yīng)用的前提和基礎(chǔ)。02數(shù)據(jù)質(zhì)量好壞的衡量指標03關(guān)鍵活動04功能05元數(shù)據(jù)質(zhì)量檢核功能，包括一致性檢核、屬性填充率檢核和組合關(guān)系檢核，是保障元數(shù)據(jù)質(zhì)量的重要手段之一。數(shù)據(jù)質(zhì)量好壞的衡量指標完整性01準確性04規(guī)范性02唯一性05一致性03時效性06完整性數(shù)據(jù)是否缺失數(shù)據(jù)質(zhì)量好壞的衡量指標規(guī)范性數(shù)據(jù)是否按要求進行存儲/操作數(shù)據(jù)質(zhì)量好壞的衡量指標一致性數(shù)據(jù)的值是否存在含義沖突及多個主數(shù)據(jù)不一致數(shù)據(jù)質(zhì)量好壞的衡量指標準確性數(shù)據(jù)是否錯誤數(shù)據(jù)質(zhì)量好壞的衡量指標數(shù)據(jù)質(zhì)量好壞的衡量指標唯一性數(shù)據(jù)是否重復(fù)時效性數(shù)據(jù)是否按時效要求上傳數(shù)據(jù)質(zhì)量好壞的衡量指標關(guān)鍵活動01定義數(shù)據(jù)質(zhì)量要求02定義數(shù)據(jù)質(zhì)量測量指標03確定與評估數(shù)據(jù)質(zhì)量服務(wù)水平04持續(xù)測量和監(jiān)控數(shù)據(jù)質(zhì)量05分析產(chǎn)生數(shù)據(jù)質(zhì)量問題的根本原因06制定數(shù)據(jù)質(zhì)量改善方案關(guān)鍵活動監(jiān)控數(shù)據(jù)質(zhì)量管理操作程序和績效功能質(zhì)量需求管理質(zhì)量稽核規(guī)則設(shè)置數(shù)據(jù)質(zhì)量任務(wù)管理數(shù)據(jù)質(zhì)量報告6.數(shù)據(jù)安全管理2.架構(gòu)與功能主要是對數(shù)據(jù)設(shè)定一些安全等級來評估數(shù)據(jù)的安全風(fēng)險，來制定或完善數(shù)據(jù)安全管理相關(guān)的技術(shù)規(guī)范，進行數(shù)據(jù)安全分級分類。通過對數(shù)據(jù)進行全生命周期的安全管控，包括數(shù)據(jù)的生成、存儲、使用、共享、銷毀等實現(xiàn)事前可管、事中可控、事后可查。關(guān)鍵活動功能數(shù)據(jù)安全功能針對數(shù)據(jù)資產(chǎn)管理，提供數(shù)據(jù)識別、敏感數(shù)據(jù)發(fā)現(xiàn)、數(shù)據(jù)分類分級、脫敏、訪問監(jiān)控、風(fēng)險發(fā)現(xiàn)預(yù)警與審計能力。數(shù)據(jù)安全針對用戶權(quán)限管理，提供可視化申請審批流程，并可進行權(quán)限的審計和管理，提高您的數(shù)據(jù)安全等級，方便您進行數(shù)據(jù)權(quán)限管控。理解數(shù)據(jù)安全需求及監(jiān)管要求定義數(shù)據(jù)安全策略和安全標準管理數(shù)據(jù)訪問視圖與權(quán)限監(jiān)控用戶身份認證和訪問行為定義數(shù)據(jù)安全強度/劃分信息等級審計數(shù)據(jù)安全關(guān)鍵活動單擊此處添加文本具體內(nèi)容，簡明扼要的闡述您的觀點。根據(jù)需要可酌情增減文字，以便觀者準確的理解您傳達的思想。單擊此處添加標題功能數(shù)據(jù)獲取安全數(shù)據(jù)脫敏/加密角色授權(quán)/統(tǒng)一認證數(shù)據(jù)分級分類7.數(shù)據(jù)價值管理2.架構(gòu)與功能通過對數(shù)據(jù)內(nèi)在價值的度量，從數(shù)據(jù)的成本和數(shù)據(jù)的應(yīng)用價值兩個方面來開展，使企業(yè)能夠最優(yōu)化、最大化釋放數(shù)據(jù)的價值。數(shù)據(jù)價值管理分為數(shù)據(jù)成本管理及數(shù)據(jù)收益管理兩部分，通過維度確定他們的核算指標，監(jiān)控數(shù)據(jù)成本的產(chǎn)生或者是監(jiān)控數(shù)據(jù)收益的產(chǎn)生，來確定成本的優(yōu)化或者最大化收益的方案，進而實現(xiàn)數(shù)據(jù)內(nèi)部共享、數(shù)據(jù)外部流通、數(shù)據(jù)交易以及數(shù)據(jù)變現(xiàn)數(shù)據(jù)成本計量維度數(shù)據(jù)價值計量維度數(shù)據(jù)成本管理數(shù)據(jù)收益管理實現(xiàn)數(shù)據(jù)內(nèi)部共享、數(shù)據(jù)外部流通、數(shù)據(jù)交易以及數(shù)據(jù)變現(xiàn)2.架構(gòu)與功能7.數(shù)據(jù)價值管理功能數(shù)據(jù)成本計量維度采集/存儲/計算成本運維成本計量數(shù)據(jù)質(zhì)量成本計量數(shù)據(jù)價值計量維度應(yīng)用場景經(jīng)濟性評估數(shù)據(jù)活性評估數(shù)據(jù)質(zhì)量評估數(shù)據(jù)成本管理度量成本維度1確定成本核算指標2監(jiān)控數(shù)據(jù)成本產(chǎn)生3確定數(shù)據(jù)成本優(yōu)化方案4數(shù)據(jù)收益管理度量收