數(shù)據(jù)體系(數(shù)據(jù)領域總體框架圖)

數(shù)據(jù)體系概述2017-9-11決策者對數(shù)據(jù)的困惑數(shù)據(jù)之間有什么關系？誰能理解我們企業(yè)的數(shù)據(jù)？數(shù)據(jù)里面的同一個術語怎么有不同的解釋？我的企業(yè)里有什么數(shù)據(jù)？數(shù)據(jù)是如何在企業(yè)內(nèi)的各系統(tǒng)間傳遞的？數(shù)據(jù)是從哪里來的？我能相信我看到的數(shù)據(jù)嗎？展示類系統(tǒng)分析類系統(tǒng)存儲類系統(tǒng)采集類系統(tǒng)管理類系統(tǒng)數(shù)據(jù)領域總體框架圖規(guī)劃規(guī)范定義創(chuàng)建&獲取維護&使用存檔&檢索清除&銷毀生命周期管理角度系統(tǒng)角度模型角度概念模型邏輯模型物理模型標準模型數(shù)據(jù)管控平臺數(shù)據(jù)標準管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構系統(tǒng)數(shù)據(jù)標準管理元數(shù)據(jù)管理數(shù)據(jù)質量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構管理概念邏輯物理主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質量管理系統(tǒng)數(shù)據(jù)服務平臺主題主題間關系主題中的重要實體實體間的相互關系實體關系屬性數(shù)據(jù)庫表和字段索引應用數(shù)據(jù)模型滿足最終用戶對數(shù)據(jù)的訪問滿足應用系統(tǒng)對數(shù)據(jù)的存取數(shù)據(jù)分類標準數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級標準數(shù)據(jù)共享目錄數(shù)據(jù)管理政策、組織、流程企業(yè)主數(shù)據(jù)標準數(shù)據(jù)集成交換標準數(shù)據(jù)庫ETL數(shù)據(jù)倉庫決策分析數(shù)據(jù)采集器、攝像頭、掃描儀網(wǎng)絡爬蟲文件系統(tǒng)統(tǒng)計報表系統(tǒng)商業(yè)智能BI大屏展示系統(tǒng)實時監(jiān)控系統(tǒng)大數(shù)據(jù)平臺系統(tǒng)數(shù)據(jù)領域各模塊關系圖大數(shù)據(jù)平臺數(shù)據(jù)源采集層數(shù)據(jù)層能力層應用層爬蟲數(shù)據(jù)流處理ETL主數(shù)據(jù)庫分布式數(shù)據(jù)庫文件系統(tǒng)基礎分析能力多維分析能力數(shù)據(jù)挖掘能力實時分析能力數(shù)據(jù)共享能力自助分析能力指標應用報表應用主題分析專題分析標準概念模型邏輯模型主題主題間關系主題中的重要實體實體間的相互關系實體關系屬性數(shù)據(jù)分類標準數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級標準數(shù)據(jù)共享目錄數(shù)據(jù)集成交換標準給平臺提供模型、標準存儲的是經(jīng)過標準化的業(yè)務數(shù)據(jù)詳細、具體的標準、模型，沒有業(yè)務數(shù)據(jù)管理類系統(tǒng)數(shù)據(jù)管控平臺數(shù)據(jù)標準管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構系統(tǒng)主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質量管理系統(tǒng)數(shù)據(jù)服務平臺通過系統(tǒng)將模型、標準管理起來存儲具體的標準、模型，以及對模型、標準的管理與平臺進行集成，提供相應的服務。數(shù)據(jù)管控數(shù)據(jù)標準管理元數(shù)據(jù)管理數(shù)據(jù)質量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構管理明確數(shù)據(jù)管控的組織、職責，規(guī)范數(shù)據(jù)管控的制度、流程及系統(tǒng)工具支撐數(shù)據(jù)領域各要素關系圖之一數(shù)據(jù)庫對象集合數(shù)據(jù)集市數(shù)據(jù)流數(shù)據(jù)平臺系統(tǒng)管理平臺元數(shù)據(jù)，進行數(shù)據(jù)影響、血緣分析管理平臺數(shù)據(jù)質量提供平臺溝通渠道智能調(diào)度系統(tǒng)票務系統(tǒng)資產(chǎn)管理系統(tǒng)車輛安全元數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質量管理系統(tǒng)數(shù)據(jù)服務平臺分析、展示類應用系統(tǒng)數(shù)據(jù)抽取開發(fā)者業(yè)務部門管理員數(shù)據(jù)提供數(shù)據(jù)存儲管理公司內(nèi)的數(shù)據(jù)標準人力資源管理系統(tǒng)數(shù)據(jù)標準管理系統(tǒng)查詢數(shù)據(jù)標準，以開發(fā)符合數(shù)據(jù)標準的應用提交標準代碼比對文檔查詢數(shù)據(jù)標準規(guī)范，反饋建議提出數(shù)據(jù)標準需求申請維護數(shù)據(jù)標準制訂、發(fā)布標準應用系統(tǒng)代碼標準比對查詢數(shù)據(jù)平臺相關元數(shù)據(jù)，為開發(fā)應用提供參考數(shù)據(jù)變更影響評估申請數(shù)據(jù)變更影響分析數(shù)據(jù)問題血緣分析了解本機構特定系統(tǒng)數(shù)據(jù)質量提出業(yè)務數(shù)據(jù)質量檢核需求定義檢核需求與規(guī)則分析數(shù)據(jù)平臺數(shù)據(jù)質量發(fā)現(xiàn)、發(fā)布數(shù)據(jù)檢核問題針對數(shù)據(jù)質量問題提出完善建議數(shù)據(jù)平臺服務申請?zhí)峁?shù)據(jù)平臺服務數(shù)據(jù)平臺服務申請與數(shù)據(jù)平臺有效溝通數(shù)據(jù)存儲標準/模型庫圖示數(shù)據(jù)管理人員借助數(shù)據(jù)管理相關工具，實現(xiàn)對數(shù)據(jù)領域各要素的管理數(shù)據(jù)梳理業(yè)務梳理數(shù)據(jù)分析應用分析國家、行業(yè)標準定義標準定義模型定義規(guī)則數(shù)據(jù)源系統(tǒng)數(shù)據(jù)質量探查整體統(tǒng)計細節(jié)探索關聯(lián)分析數(shù)據(jù)質量評估報告數(shù)據(jù)標準、模型、規(guī)則數(shù)據(jù)處理匹配、融合標準化處理交互式修復優(yōu)質數(shù)據(jù)數(shù)據(jù)集成數(shù)據(jù)監(jiān)控大數(shù)據(jù)處理數(shù)據(jù)集成數(shù)據(jù)中心數(shù)據(jù)挖掘數(shù)據(jù)領域各要素關系圖之二L1：數(shù)據(jù)標準管理模塊將標準定義映射到元數(shù)據(jù)信息上，實現(xiàn)數(shù)據(jù)標準的規(guī)范要求落地。L2：元數(shù)據(jù)管理模塊為數(shù)據(jù)資產(chǎn)管理模塊提供存儲模型、屬性信息查詢服務。L3：元數(shù)據(jù)管理模塊為數(shù)據(jù)質量管理模塊提供元數(shù)據(jù)相關屬性信息。L4：用戶通過元數(shù)據(jù)定義大數(shù)據(jù)平臺的數(shù)據(jù)結構。L5：數(shù)據(jù)質量管理模塊根據(jù)采集需求從大數(shù)據(jù)平臺采集數(shù)據(jù)。L6：數(shù)據(jù)質量管理模塊將數(shù)據(jù)質量問題反饋給大數(shù)據(jù)平臺。L7：數(shù)據(jù)質量管理模塊向資產(chǎn)模塊提交數(shù)據(jù)質量評估結果。L8：元數(shù)據(jù)管理模塊為數(shù)據(jù)安全管理模塊提供隱私級別定義服務。L9：數(shù)據(jù)資產(chǎn)管理模塊發(fā)起資產(chǎn)訪問申請，由數(shù)據(jù)安全管理模塊控制用戶訪問權限，控制數(shù)據(jù)資產(chǎn)的增加、刪除、變更操作權限，對訪問的數(shù)據(jù)內(nèi)容、數(shù)據(jù)屬性等操作進行管控。L10：數(shù)據(jù)安全管理模塊為大數(shù)據(jù)平臺提供數(shù)據(jù)訪問權限策略。數(shù)據(jù)領域各要素關系圖之三概念模型邏輯模型物理模型構建邏輯模型的框架輸入ETL元數(shù)據(jù)管理輸入應用數(shù)據(jù)模型數(shù)據(jù)應用輸入數(shù)據(jù)倉庫數(shù)據(jù)集市數(shù)據(jù)領域各要素關系圖之四企業(yè)開展數(shù)據(jù)管理工作的順序展示類系統(tǒng)分析類系統(tǒng)存儲類系統(tǒng)采集類系統(tǒng)管理類系統(tǒng)管理角度系統(tǒng)角度模型角度概念模型邏輯模型物理模型標準模型數(shù)據(jù)管控平臺數(shù)據(jù)標準管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構系統(tǒng)數(shù)據(jù)標準管理元數(shù)據(jù)管理數(shù)據(jù)質量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構管理主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質量管理系統(tǒng)數(shù)據(jù)服務平臺主題主題間關系主題中的重要實體實體間的相互關系實體關系屬性數(shù)據(jù)庫表和字段索引應用數(shù)據(jù)模型滿足最終用戶對數(shù)據(jù)的訪問滿足應用系統(tǒng)對數(shù)據(jù)的存取數(shù)據(jù)分類標準數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級標準數(shù)據(jù)共享目錄數(shù)據(jù)管理政策、組織、流程企業(yè)主數(shù)據(jù)標準數(shù)據(jù)集成交換標準數(shù)據(jù)庫ETL數(shù)據(jù)倉庫決策分析數(shù)據(jù)采集器、攝像頭、掃描儀網(wǎng)絡爬蟲文件系統(tǒng)統(tǒng)計報表系統(tǒng)商業(yè)智能BI大屏展示系統(tǒng)實時監(jiān)控系統(tǒng)