數(shù)據(jù)湖建設(shè)項(xiàng)目解決方案

數(shù)據(jù)湖建設(shè)項(xiàng)目解決方案構(gòu)建安全、可信、高可用、高性能的大數(shù)據(jù)管理與應(yīng)用底座02總體規(guī)劃03建設(shè)方案04實(shí)施方案01總體概述建設(shè)背景集團(tuán)數(shù)據(jù)智能化集團(tuán)數(shù)據(jù)智能化行業(yè)運(yùn)營(yíng)智能化經(jīng)營(yíng)管理行業(yè)運(yùn)營(yíng)智能化經(jīng)營(yíng)管理智能化“4智”應(yīng)用基礎(chǔ)支撐應(yīng)用基礎(chǔ)支撐業(yè)務(wù)作業(yè)業(yè)務(wù)作業(yè)智能化解決數(shù)據(jù)“匯”、“存”、“管解決數(shù)據(jù)“匯”、“存”、“管”、“用”、“數(shù)據(jù)湖及應(yīng)用平臺(tái)開發(fā)管理、數(shù)據(jù)服務(wù)管理、數(shù)據(jù)安全管理和監(jiān)控集團(tuán)信息化現(xiàn)狀分析11223344業(yè)務(wù)運(yùn)營(yíng)和管理遇到的問(wèn)題分析集團(tuán)高管層（決策層）n信息化投入較大，卻不能及時(shí)有效了解集團(tuán)整體業(yè)務(wù)運(yùn)營(yíng)情況n海量業(yè)務(wù)報(bào)表，卻無(wú)法對(duì)決策管理提供有效支撐n無(wú)法通過(guò)企業(yè)關(guān)鍵績(jī)效指導(dǎo)決策業(yè)務(wù)運(yùn)營(yíng)管理層n大量時(shí)間精力投入到數(shù)據(jù)收集、報(bào)表制作中n缺乏統(tǒng)一的業(yè)務(wù)運(yùn)營(yíng)口徑和指標(biāo)標(biāo)準(zhǔn)n業(yè)務(wù)的管理口徑和財(cái)務(wù)口徑不一致，各部門運(yùn)營(yíng)管理信息存在交叉重復(fù)n對(duì)上級(jí)部門運(yùn)營(yíng)管理匯報(bào)要求不夠靈活，響應(yīng)效率低下；對(duì)下級(jí)單位數(shù)據(jù)收集不及時(shí)、不準(zhǔn)確n運(yùn)營(yíng)管理缺乏綜合性系統(tǒng)和完整的數(shù)據(jù)支撐能力IT服務(wù)支撐層n缺少統(tǒng)一的平臺(tái)滿足決策層、管理層和運(yùn)營(yíng)層等對(duì)數(shù)據(jù)應(yīng)用的各種需求n運(yùn)營(yíng)管理需求反復(fù)變更、“多對(duì)多”的情況，IT服務(wù)部門疲于應(yīng)付n運(yùn)營(yíng)管理應(yīng)用需求類型多、數(shù)量多、口徑不一和數(shù)據(jù)質(zhì)量差等原因，導(dǎo)致開發(fā)周期較長(zhǎng)，時(shí)效性差等問(wèn)題n業(yè)務(wù)數(shù)據(jù)來(lái)源分散，缺乏整合統(tǒng)一的基礎(chǔ)數(shù)據(jù)，無(wú)法有效支撐決策和管理總體建設(shè)目標(biāo)借助5G、云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)和人工智能等技術(shù)，重點(diǎn)解決戰(zhàn)略閉環(huán)、業(yè)務(wù)運(yùn)營(yíng)、管理支撐等業(yè)務(wù)系統(tǒng)間數(shù)據(jù)不通和數(shù)據(jù)孤島等問(wèn)題，15346721534672數(shù)據(jù)匯聚能力數(shù)據(jù)存儲(chǔ)能力數(shù)據(jù)治理能力數(shù)據(jù)分析能力數(shù)據(jù)服務(wù)能力數(shù)據(jù)應(yīng)用能力數(shù)據(jù)匯聚能力數(shù)據(jù)存儲(chǔ)能力數(shù)據(jù)治理能力數(shù)據(jù)分析能力數(shù)據(jù)服務(wù)能力數(shù)據(jù)應(yīng)用能力?統(tǒng)計(jì)分析?靈活查詢?多維分析?數(shù)據(jù)挖掘?人工智能?標(biāo)簽管理?指標(biāo)管理?知識(shí)圖譜?數(shù)據(jù)可視化離線數(shù)據(jù)采集?統(tǒng)計(jì)分析?靈活查詢?多維分析?數(shù)據(jù)挖掘?人工智能?標(biāo)簽管理?指標(biāo)管理?知識(shí)圖譜?數(shù)據(jù)可視化離線數(shù)據(jù)采集實(shí)時(shí)數(shù)據(jù)采集結(jié)構(gòu)化數(shù)據(jù)采集非結(jié)構(gòu)化數(shù)據(jù)采集視頻數(shù)據(jù)采集物聯(lián)網(wǎng)數(shù)據(jù)采集互聯(lián)網(wǎng)數(shù)據(jù)采集手工數(shù)據(jù)補(bǔ)錄采集?數(shù)據(jù)庫(kù)數(shù)據(jù)存儲(chǔ)?文件數(shù)據(jù)存儲(chǔ)?圖片數(shù)據(jù)存儲(chǔ)?聲音數(shù)據(jù)存儲(chǔ)?視頻數(shù)據(jù)存儲(chǔ)?關(guān)系圖譜數(shù)據(jù)存儲(chǔ)?時(shí)序數(shù)據(jù)存儲(chǔ)?數(shù)據(jù)需求管理?資源目錄管理?數(shù)據(jù)服務(wù)接口管理?數(shù)據(jù)共享交換管理?數(shù)據(jù)報(bào)送管理?數(shù)據(jù)開放管理?數(shù)據(jù)服務(wù)評(píng)價(jià)人員管理用戶管理營(yíng)銷管理渠道管理財(cái)務(wù)管理風(fēng)控管理工程管理生產(chǎn)管理監(jiān)管報(bào)送…?數(shù)據(jù)運(yùn)維管理?數(shù)據(jù)產(chǎn)品管理?數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估?數(shù)據(jù)資產(chǎn)營(yíng)銷推廣?數(shù)據(jù)資產(chǎn)合作?數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)?數(shù)據(jù)運(yùn)營(yíng)考核評(píng)價(jià)???????????????數(shù)據(jù)標(biāo)準(zhǔn)管理?數(shù)據(jù)建模管理?數(shù)據(jù)開發(fā)管理?數(shù)據(jù)調(diào)度管理?數(shù)據(jù)質(zhì)量管理?元數(shù)據(jù)管理?????……?數(shù)據(jù)生命周期管理……???………建設(shè)目標(biāo)本期目標(biāo)業(yè)務(wù)+（私域流量業(yè)務(wù)）綜合分析和智能化應(yīng)用，總結(jié)經(jīng)驗(yàn)教訓(xùn)，為集團(tuán)數(shù)據(jù)湖及應(yīng)用平臺(tái)的整體建設(shè)奠定基礎(chǔ)。55共享服務(wù)需求分析資源目錄梳理共享服務(wù)發(fā)布共享服務(wù)申請(qǐng)共享服務(wù)授權(quán)共享服務(wù)調(diào)用114n總體架構(gòu)規(guī)劃n數(shù)據(jù)架構(gòu)規(guī)劃n技術(shù)架構(gòu)規(guī)劃n應(yīng)用體系規(guī)劃n數(shù)據(jù)治理規(guī)劃n數(shù)據(jù)共享規(guī)劃n平臺(tái)工具規(guī)劃n平臺(tái)建設(shè)藍(lán)圖規(guī)劃應(yīng)用設(shè)計(jì)用戶需求分析數(shù)據(jù)及應(yīng)用開發(fā)數(shù)據(jù)共享與服務(wù)對(duì)接3用戶信息調(diào)研用戶數(shù)據(jù)采集數(shù)據(jù)標(biāo)準(zhǔn)管理用戶數(shù)據(jù)建模用戶數(shù)據(jù)開發(fā)元數(shù)據(jù)3用戶信息調(diào)研用戶數(shù)據(jù)采集數(shù)據(jù)標(biāo)準(zhǔn)管理用戶數(shù)據(jù)建模用戶數(shù)據(jù)開發(fā)元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量檢查2數(shù)據(jù)共享交換產(chǎn)品安裝部署2數(shù)據(jù)共享交換產(chǎn)品安裝部署數(shù)據(jù)治理產(chǎn)品安裝部署大數(shù)據(jù)平臺(tái)TBDS安裝部署預(yù)期成效：”七步走”解決企業(yè)面臨的數(shù)字化轉(zhuǎn)型發(fā)展痛點(diǎn) 信息煙囪03利益割據(jù)數(shù)據(jù)分散 信息煙囪03利益割據(jù)數(shù)據(jù)分散3數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一安全保障不健全數(shù)據(jù)保密不全面管理機(jī)制3數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一安全保障不健全數(shù)據(jù)保密不全面管理機(jī)制不成體系0405060702總體規(guī)劃數(shù)據(jù)治理體系咨詢規(guī)劃技術(shù)平臺(tái)能力增強(qiáng)數(shù)據(jù)治理體系咨詢規(guī)劃技術(shù)平臺(tái)能力增強(qiáng)???第四階段?集團(tuán)與四大事業(yè)部數(shù)據(jù)入湖全域數(shù)據(jù)采集、存儲(chǔ)、治理、?第四階段???AI平臺(tái)搭建與應(yīng)用探索??AI平臺(tái)搭建與應(yīng)用探索?基礎(chǔ)分析能力建設(shè)（指標(biāo)、標(biāo)簽、知識(shí)圖譜）?綜合分析應(yīng)用建設(shè)??基礎(chǔ)分析能力建設(shè)（指標(biāo)、標(biāo)簽、知識(shí)圖譜）?綜合分析應(yīng)用建設(shè)?實(shí)時(shí)分析與應(yīng)用場(chǎng)景探索?重點(diǎn)應(yīng)用建設(shè)支持?數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)規(guī)劃?數(shù)據(jù)產(chǎn)品體系建設(shè)?數(shù)據(jù)產(chǎn)品價(jià)值評(píng)估體系建設(shè)?數(shù)據(jù)價(jià)值變現(xiàn)體系建設(shè)?數(shù)據(jù)運(yùn)營(yíng)安全體系建設(shè)?數(shù)據(jù)采集能力迭代升級(jí)?數(shù)據(jù)治理能力迭代升級(jí)?數(shù)據(jù)分析能力迭代升級(jí)?數(shù)據(jù)應(yīng)用能力迭代升級(jí)?數(shù)據(jù)共享服務(wù)能力迭代升級(jí)?算法模型中心健全第三階段?數(shù)據(jù)采集技術(shù)平臺(tái)搭建第三階段??數(shù)據(jù)處理技術(shù)平臺(tái)搭建??數(shù)據(jù)調(diào)度技術(shù)平臺(tái)搭建?…?集團(tuán)與事業(yè)部應(yīng)用建設(shè)全面支撐（人員管理、用戶管理?…?集團(tuán)與事業(yè)部應(yīng)用建設(shè)全面支撐（人員管理、用戶管理?營(yíng)銷管理、渠道管理、財(cái)務(wù)管理、工程管理、合同管理、生產(chǎn)管理、風(fēng)控管理、應(yīng)急指揮、監(jiān)管報(bào)送…）?數(shù)據(jù)共享技術(shù)平臺(tái)搭建第二階段?試點(diǎn)數(shù)據(jù)域（用戶）采集、存儲(chǔ)、治理、分析第二階段??AI服務(wù)能力迭代升級(jí)?場(chǎng)景應(yīng)用持續(xù)推進(jìn)?數(shù)據(jù)運(yùn)營(yíng)考核體系建設(shè)第一階段?基礎(chǔ)分析能力完善（指標(biāo)、標(biāo)簽、知識(shí)圖譜）第一階段???…?態(tài)勢(shì)感知能力建設(shè)…?實(shí)時(shí)分析應(yīng)用場(chǎng)景體系建設(shè)?算法模型體系建設(shè)?AI服務(wù)體系化建設(shè)?區(qū)塊鏈技術(shù)場(chǎng)景應(yīng)用數(shù)據(jù)湖及應(yīng)用平臺(tái)總體架構(gòu)（構(gòu)建六個(gè)平臺(tái)、四個(gè)中心、三個(gè)保障體系，一個(gè)統(tǒng)一門戶）業(yè)務(wù)賦能業(yè)務(wù)賦能資金管理管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核…保障體系保障體系標(biāo)運(yùn)安準(zhǔn)維全規(guī)保保范障障體體體系系系數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成運(yùn)營(yíng)可視化統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)需求管理數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成運(yùn)營(yíng)可視化統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)需求管理數(shù)據(jù)資源目錄管理租戶管理9數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…654數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…9數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…654數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…數(shù)據(jù)共享開放平臺(tái)注冊(cè)注冊(cè)發(fā)布發(fā)布訂閱訂閱認(rèn)證認(rèn)證權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障共享審計(jì)共享審計(jì)文件共享服務(wù)文件共享服務(wù)庫(kù)表共享服務(wù)庫(kù)表共享服務(wù)接口共享服務(wù)接口共享服務(wù)數(shù)據(jù)服務(wù)中心指標(biāo)服務(wù)知識(shí)圖譜服務(wù)數(shù)據(jù)檢索服務(wù)數(shù)據(jù)沙箱服務(wù)數(shù)據(jù)沙箱服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)…數(shù)據(jù)資源中心實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算匯聚區(qū)臨時(shí)庫(kù)ODS庫(kù)基礎(chǔ)區(qū)主題區(qū)分析區(qū)應(yīng)用集市區(qū)財(cái)務(wù)營(yíng)銷管理標(biāo)簽庫(kù)…實(shí)時(shí)分析21實(shí)時(shí)分析213數(shù)據(jù)處理平臺(tái)離線數(shù)據(jù)處理實(shí)時(shí)數(shù)據(jù)處理非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化數(shù)據(jù)統(tǒng)一調(diào)度3存儲(chǔ)計(jì)算平臺(tái)Hadoop關(guān)系數(shù)據(jù)庫(kù)MPP內(nèi)存數(shù)據(jù)庫(kù)圖數(shù)據(jù)庫(kù)時(shí)序數(shù)據(jù)庫(kù)對(duì)象數(shù)據(jù)庫(kù)數(shù)據(jù)匯聚平臺(tái)數(shù)據(jù)共享交換離線數(shù)據(jù)同步實(shí)時(shí)數(shù)據(jù)同步爬蟲數(shù)據(jù)補(bǔ)錄互聯(lián)網(wǎng)數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)物聯(lián)網(wǎng)數(shù)據(jù)外部數(shù)據(jù)……數(shù)據(jù)源…數(shù)據(jù)源業(yè)務(wù)系統(tǒng)四階段：運(yùn)營(yíng)二階段四階段：運(yùn)營(yíng)二階段：夯實(shí)一階段：打基礎(chǔ)三階段：完善業(yè)務(wù)賦能業(yè)務(wù)賦能資金管理管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核…保障體系保障體系標(biāo)運(yùn)安準(zhǔn)維全規(guī)保保范障障體體體系系系數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)資源目錄管理租戶管理數(shù)據(jù)需求管理運(yùn)營(yíng)可視化數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)資源目錄管理租戶管理數(shù)據(jù)需求管理運(yùn)營(yíng)可視化9數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…654數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…9數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…654數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…數(shù)據(jù)共享開放平臺(tái)注冊(cè)注冊(cè)發(fā)布發(fā)布訂閱訂閱認(rèn)證認(rèn)證權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障共享審計(jì)共享審計(jì)文件共享服務(wù)文件共享服務(wù)庫(kù)表共享服務(wù)庫(kù)表共享服務(wù)接口共享服務(wù)接口共享服務(wù)數(shù)據(jù)服務(wù)中心指標(biāo)服務(wù)知識(shí)圖譜服務(wù)數(shù)據(jù)檢索服務(wù)數(shù)據(jù)沙箱服務(wù)數(shù)據(jù)沙箱服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)…數(shù)據(jù)資源中心實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算匯聚區(qū)臨時(shí)庫(kù)ODS庫(kù)基礎(chǔ)區(qū)主題區(qū)分析區(qū)應(yīng)用集市區(qū)財(cái)務(wù)營(yíng)銷管理標(biāo)簽庫(kù)…實(shí)時(shí)分析21實(shí)時(shí)分析213數(shù)據(jù)處理平臺(tái)離線數(shù)據(jù)處理實(shí)時(shí)數(shù)據(jù)處理非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化數(shù)據(jù)統(tǒng)一調(diào)度3存儲(chǔ)計(jì)算平臺(tái)Hadoop內(nèi)存數(shù)據(jù)庫(kù)關(guān)系數(shù)據(jù)庫(kù)MPP圖數(shù)據(jù)庫(kù)時(shí)序數(shù)據(jù)庫(kù)對(duì)象數(shù)據(jù)庫(kù)數(shù)據(jù)匯聚平臺(tái)數(shù)據(jù)共享交換離線數(shù)據(jù)同步實(shí)時(shí)數(shù)據(jù)同步爬蟲數(shù)據(jù)補(bǔ)錄互聯(lián)網(wǎng)數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)物聯(lián)網(wǎng)數(shù)據(jù)外部數(shù)據(jù)……數(shù)據(jù)源…數(shù)據(jù)源業(yè)務(wù)系統(tǒng)數(shù)據(jù)湖及應(yīng)用平臺(tái)數(shù)據(jù)架構(gòu)（統(tǒng)一標(biāo)準(zhǔn)，構(gòu)建集團(tuán)和四大事業(yè)部數(shù)據(jù)湖的六大數(shù)據(jù)區(qū)）離線采集實(shí)時(shí)服務(wù)API管理駕駛艙指標(biāo)服務(wù)API用戶分析標(biāo)簽服務(wù)API客戶營(yíng)銷關(guān)系圖譜服務(wù)API資金管理數(shù)據(jù)檢索服務(wù)API財(cái)務(wù)分析文件共享風(fēng)險(xiǎn)審計(jì)數(shù)據(jù)庫(kù)共享指揮調(diào)度API共享績(jī)效考核產(chǎn)能預(yù)測(cè)實(shí)時(shí)數(shù)據(jù)源物聯(lián)感知數(shù)據(jù)實(shí)時(shí)營(yíng)銷數(shù)據(jù)物流數(shù)據(jù)…外部數(shù)據(jù)離線數(shù)據(jù)源業(yè)務(wù)系統(tǒng)實(shí)時(shí)采集消息CDCAPI...文件數(shù)據(jù)庫(kù)接口離線采集實(shí)時(shí)服務(wù)API管理駕駛艙指標(biāo)服務(wù)API用戶分析標(biāo)簽服務(wù)API客戶營(yíng)銷關(guān)系圖譜服務(wù)API資金管理數(shù)據(jù)檢索服務(wù)API財(cái)務(wù)分析文件共享風(fēng)險(xiǎn)審計(jì)數(shù)據(jù)庫(kù)共享指揮調(diào)度API共享績(jī)效考核產(chǎn)能預(yù)測(cè)實(shí)時(shí)數(shù)據(jù)源物聯(lián)感知數(shù)據(jù)實(shí)時(shí)營(yíng)銷數(shù)據(jù)物流數(shù)據(jù)…外部數(shù)據(jù)離線數(shù)據(jù)源業(yè)務(wù)系統(tǒng)實(shí)時(shí)采集消息CDCAPI...文件數(shù)據(jù)庫(kù)接口16324主題區(qū)用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理集市區(qū)經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…5分析區(qū)指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜…匯聚區(qū)ODS庫(kù)集團(tuán)數(shù)據(jù)健康數(shù)據(jù)藥品數(shù)據(jù)中藥數(shù)據(jù)合約省醫(yī)藥數(shù)據(jù)……臨時(shí)庫(kù)基礎(chǔ)區(qū)采購(gòu)16324主題區(qū)用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理集市區(qū)經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…5分析區(qū)指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜…匯聚區(qū)ODS庫(kù)集團(tuán)數(shù)據(jù)健康數(shù)據(jù)藥品數(shù)據(jù)中藥數(shù)據(jù)合約省醫(yī)藥數(shù)據(jù)……臨時(shí)庫(kù)基礎(chǔ)區(qū)采購(gòu)當(dāng)事人生產(chǎn)內(nèi)部機(jī)構(gòu)銷售地理區(qū)域庫(kù)存產(chǎn)品營(yíng)銷運(yùn)輸事件財(cái)務(wù)計(jì)劃項(xiàng)目實(shí)時(shí)區(qū)實(shí)時(shí)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算數(shù)據(jù)安全服務(wù)API監(jiān)管報(bào)送……互聯(lián)網(wǎng)數(shù)據(jù)補(bǔ)錄填報(bào)6...數(shù)據(jù)安全服務(wù)API監(jiān)管報(bào)送……互聯(lián)網(wǎng)數(shù)據(jù)補(bǔ)錄填報(bào)6...2543事業(yè)部匯聚區(qū)事業(yè)部事業(yè)部事業(yè)部2543事業(yè)部匯聚區(qū)事業(yè)部事業(yè)部事業(yè)部事業(yè)部臨時(shí)庫(kù)ODS庫(kù)基礎(chǔ)區(qū)主題區(qū)分析區(qū)應(yīng)用集市區(qū)1 事業(yè)部實(shí)時(shí)區(qū)1、分析和數(shù)據(jù)共享服務(wù)；集團(tuán)數(shù)據(jù)湖根據(jù)事業(yè)部數(shù)據(jù)需求分采用集團(tuán)統(tǒng)一標(biāo)準(zhǔn)、統(tǒng)一建設(shè)、統(tǒng)一管理和統(tǒng)一16324用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理…經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜主題區(qū)16324用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理…經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜主題區(qū)集市區(qū)分析區(qū)5實(shí)時(shí)區(qū)實(shí)時(shí)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算匯聚區(qū)匯聚區(qū)ODS庫(kù)集團(tuán)數(shù)據(jù)健康數(shù)據(jù)產(chǎn)品藥品數(shù)據(jù)營(yíng)銷中藥數(shù)據(jù)合約省醫(yī)藥數(shù)據(jù)項(xiàng)目地理區(qū)域內(nèi)部機(jī)構(gòu)臨時(shí)庫(kù)基礎(chǔ)區(qū)當(dāng)事人庫(kù)存財(cái)務(wù)銷售生產(chǎn)采購(gòu)運(yùn)輸事件計(jì)劃……26543事業(yè)部匯聚區(qū)事業(yè)部事業(yè)部事業(yè)部26543事業(yè)部匯聚區(qū)事業(yè)部事業(yè)部事業(yè)部事業(yè)部 臨時(shí)庫(kù)ODS庫(kù)基礎(chǔ)區(qū)主題區(qū)分析區(qū)+應(yīng)用集市區(qū)1 事業(yè)部實(shí)時(shí)區(qū)103建設(shè)方案項(xiàng)目建設(shè)范圍用n總體架構(gòu)規(guī)劃n數(shù)據(jù)架構(gòu)規(guī)劃n技術(shù)架構(gòu)規(guī)劃n應(yīng)用體系規(guī)劃n數(shù)據(jù)治理規(guī)劃n數(shù)據(jù)共享規(guī)劃n平臺(tái)工具規(guī)劃n平臺(tái)建設(shè)藍(lán)圖規(guī)劃nTBDS基礎(chǔ)平臺(tái)搭n數(shù)據(jù)治理平臺(tái)搭建n數(shù)據(jù)共享服務(wù)平臺(tái)搭建3.數(shù)據(jù)匯聚4.數(shù)據(jù)資源中心建設(shè)nn健康事業(yè)部用戶數(shù)據(jù)匯聚n省醫(yī)藥公司用戶數(shù)據(jù)匯聚n藥品事業(yè)部用戶數(shù)據(jù)匯聚n云健康事業(yè)部用戶數(shù)據(jù)匯聚n信息調(diào)研n基礎(chǔ)區(qū)數(shù)據(jù)模型設(shè)計(jì)n主題區(qū)數(shù)據(jù)模型設(shè)計(jì)n應(yīng)用數(shù)據(jù)集市模型設(shè)計(jì)n數(shù)據(jù)清洗、轉(zhuǎn)換和匯總n數(shù)據(jù)標(biāo)準(zhǔn)管理n元數(shù)據(jù)管理n數(shù)據(jù)質(zhì)量管理nC端用戶分析需求調(diào)研nC端用戶數(shù)據(jù)分析設(shè)計(jì)nC源用戶數(shù)據(jù)分析開發(fā)nC端用戶數(shù)據(jù)資源目錄梳理nC端用戶數(shù)據(jù)共享發(fā)布項(xiàng)目建設(shè)總體思路FineReportFineBIFineReportFineBI本期范圍項(xiàng)目邏輯架構(gòu)：搭建基礎(chǔ)平臺(tái)，以集團(tuán)C端用戶需求為試點(diǎn)打通數(shù)據(jù)湖鏈路本期范圍業(yè)務(wù)賦能業(yè)務(wù)賦能資金管理管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核管理駕駛艙用戶分析客戶營(yíng)銷財(cái)務(wù)分析產(chǎn)能預(yù)測(cè)風(fēng)險(xiǎn)審計(jì)監(jiān)管報(bào)送績(jī)效考核…保障體系保障體系標(biāo)運(yùn)安準(zhǔn)維全規(guī)保保范障障體體體系系系數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)資源目錄管理租戶管理數(shù)據(jù)需求管理運(yùn)營(yíng)可視化數(shù)據(jù)統(tǒng)一門戶應(yīng)用集成統(tǒng)一用戶/權(quán)限平臺(tái)管理數(shù)據(jù)資源目錄管理租戶管理數(shù)據(jù)需求管理運(yùn)營(yíng)可視化9數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…69數(shù)據(jù)產(chǎn)品管理數(shù)據(jù)運(yùn)營(yíng)中心數(shù)據(jù)資產(chǎn)價(jià)值評(píng)估數(shù)據(jù)資產(chǎn)營(yíng)銷推廣數(shù)據(jù)資產(chǎn)價(jià)值變現(xiàn)數(shù)據(jù)運(yùn)營(yíng)維護(hù)運(yùn)營(yíng)考核評(píng)價(jià)共享服務(wù)管理共享服務(wù)引擎78AI中心文本識(shí)別語(yǔ)音識(shí)別圖像識(shí)別語(yǔ)義解析影像識(shí)別…6數(shù)據(jù)共享開放平臺(tái)注冊(cè)注冊(cè)發(fā)布發(fā)布訂閱訂閱認(rèn)證認(rèn)證權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障權(quán)鑒共享監(jiān)測(cè)共享服務(wù)保障共享審計(jì)共享審計(jì)文件共享服務(wù)文件共享服務(wù)庫(kù)表共享服務(wù)庫(kù)表共享服務(wù)接口共享服務(wù)接口共享服務(wù)數(shù)據(jù)服務(wù)中心指標(biāo)服務(wù)知識(shí)圖譜服務(wù)數(shù)據(jù)檢索服務(wù)數(shù)據(jù)沙箱服務(wù)數(shù)據(jù)沙箱服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)標(biāo)簽服務(wù)數(shù)據(jù)產(chǎn)品服務(wù)可信計(jì)算服務(wù)多方安全計(jì)算服務(wù)…54數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…54數(shù)據(jù)治理平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)模型管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理數(shù)據(jù)分析平臺(tái)統(tǒng)計(jì)分析即席查詢多維分析數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)…數(shù)據(jù)資源中心實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算匯聚區(qū)臨時(shí)庫(kù)ODS庫(kù)基礎(chǔ)區(qū)主題區(qū)分析區(qū)應(yīng)用集市區(qū)財(cái)務(wù)營(yíng)銷管理標(biāo)簽庫(kù)…主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理實(shí)時(shí)分析21主數(shù)據(jù)管理數(shù)據(jù)安全管理數(shù)據(jù)生命周期管理實(shí)時(shí)分析213數(shù)據(jù)處理平臺(tái)離線數(shù)據(jù)處理實(shí)時(shí)數(shù)據(jù)處理非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化數(shù)據(jù)統(tǒng)一調(diào)度3存儲(chǔ)計(jì)算平臺(tái)Hadoop內(nèi)存數(shù)據(jù)庫(kù)關(guān)系數(shù)據(jù)庫(kù)MPP圖數(shù)據(jù)庫(kù)時(shí)序數(shù)據(jù)庫(kù)對(duì)象數(shù)據(jù)庫(kù)數(shù)據(jù)匯聚平臺(tái)數(shù)據(jù)共享交換離線數(shù)據(jù)同步實(shí)時(shí)數(shù)據(jù)同步爬蟲數(shù)據(jù)補(bǔ)錄互聯(lián)網(wǎng)數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)物聯(lián)網(wǎng)數(shù)據(jù)外部數(shù)據(jù)……數(shù)據(jù)源…數(shù)據(jù)源業(yè)務(wù)系統(tǒng)項(xiàng)目數(shù)據(jù)架構(gòu)（4）治理（5）分析本期范圍本期范圍離線采集實(shí)時(shí)服務(wù)API管理駕駛艙指標(biāo)服務(wù)API用戶分析標(biāo)簽服務(wù)API客戶營(yíng)銷關(guān)系圖譜服務(wù)API資金管理數(shù)據(jù)檢索服務(wù)API財(cái)務(wù)分析文件共享風(fēng)險(xiǎn)審計(jì)數(shù)據(jù)庫(kù)共享指揮調(diào)度API共享績(jī)效考核產(chǎn)能預(yù)測(cè)實(shí)時(shí)數(shù)據(jù)源物聯(lián)感知數(shù)據(jù)實(shí)時(shí)營(yíng)銷數(shù)據(jù)物流數(shù)據(jù)…離線數(shù)據(jù)源健康事業(yè)部用戶數(shù)據(jù)省醫(yī)藥公司用戶數(shù)據(jù)藥品事業(yè)部用戶數(shù)據(jù)實(shí)時(shí)采集消息CDCAPI...文件數(shù)據(jù)庫(kù)接口離線采集實(shí)時(shí)服務(wù)API管理駕駛艙指標(biāo)服務(wù)API用戶分析標(biāo)簽服務(wù)API客戶營(yíng)銷關(guān)系圖譜服務(wù)API資金管理數(shù)據(jù)檢索服務(wù)API財(cái)務(wù)分析文件共享風(fēng)險(xiǎn)審計(jì)數(shù)據(jù)庫(kù)共享指揮調(diào)度API共享績(jī)效考核產(chǎn)能預(yù)測(cè)實(shí)時(shí)數(shù)據(jù)源物聯(lián)感知數(shù)據(jù)實(shí)時(shí)營(yíng)銷數(shù)據(jù)物流數(shù)據(jù)…離線數(shù)據(jù)源健康事業(yè)部用戶數(shù)據(jù)省醫(yī)藥公司用戶數(shù)據(jù)藥品事業(yè)部用戶數(shù)據(jù)實(shí)時(shí)采集消息CDCAPI...文件數(shù)據(jù)庫(kù)接口16324主題區(qū)用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理集市區(qū)經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…5分析區(qū)指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜…匯聚區(qū)ODS庫(kù)集團(tuán)數(shù)據(jù)健康數(shù)據(jù)藥品數(shù)據(jù)中藥數(shù)據(jù)合約省醫(yī)藥數(shù)據(jù)……臨時(shí)庫(kù)基礎(chǔ)區(qū)采購(gòu)當(dāng)事人16324主題區(qū)用戶管理營(yíng)銷管理財(cái)務(wù)管理運(yùn)營(yíng)管理風(fēng)險(xiǎn)管理集市區(qū)經(jīng)營(yíng)分析用戶畫像財(cái)務(wù)分析風(fēng)險(xiǎn)審計(jì)產(chǎn)能預(yù)警監(jiān)管報(bào)送事業(yè)部應(yīng)用…5分析區(qū)指標(biāo)庫(kù)標(biāo)簽庫(kù)關(guān)系圖譜…匯聚區(qū)ODS庫(kù)集團(tuán)數(shù)據(jù)健康數(shù)據(jù)藥品數(shù)據(jù)中藥數(shù)據(jù)合約省醫(yī)藥數(shù)據(jù)……臨時(shí)庫(kù)基礎(chǔ)區(qū)采購(gòu)當(dāng)事人生產(chǎn)內(nèi)部機(jī)構(gòu)銷售地理區(qū)域庫(kù)存產(chǎn)品營(yíng)銷運(yùn)輸事件財(cái)務(wù)計(jì)劃項(xiàng)目實(shí)時(shí)區(qū)實(shí)時(shí)區(qū)實(shí)時(shí)數(shù)據(jù)存儲(chǔ)實(shí)時(shí)分析處理實(shí)時(shí)指標(biāo)計(jì)算數(shù)據(jù)安全服務(wù)API監(jiān)管報(bào)送……云健康事業(yè)部用戶數(shù)據(jù)補(bǔ)錄填報(bào)6...數(shù)據(jù)安全服務(wù)API監(jiān)管報(bào)送……云健康事業(yè)部用戶數(shù)據(jù)補(bǔ)錄填報(bào)6...12543事業(yè)部主題區(qū)事業(yè)部分析區(qū)事業(yè)部應(yīng)用集市區(qū)事業(yè)部12543事業(yè)部主題區(qū)事業(yè)部分析區(qū)事業(yè)部應(yīng)用集市區(qū)事業(yè)部基礎(chǔ)區(qū)事業(yè)部實(shí)時(shí)區(qū)事業(yè)部實(shí)時(shí)區(qū)臨時(shí)庫(kù)臨時(shí)庫(kù)ODS庫(kù)1.數(shù)據(jù)湖平臺(tái)框架體系規(guī)劃服務(wù)提供商輸入與分析業(yè)務(wù)與IT部門輸入現(xiàn)狀調(diào)研現(xiàn)狀調(diào)研行業(yè)最佳實(shí)踐評(píng)估建議評(píng)估建議現(xiàn)狀期望問(wèn)題! !分項(xiàng)規(guī)劃分項(xiàng)規(guī)劃藍(lán)圖規(guī)劃與演進(jìn)平臺(tái)搭建流程預(yù)期成效2、基礎(chǔ)技術(shù)平臺(tái)搭建平臺(tái)搭建流程預(yù)期成效22 通??????…????????…?…3、數(shù)據(jù)采集匯聚臨時(shí)區(qū)智慧零售達(dá)人管理erp電商平臺(tái)用戶電商平臺(tái)用戶S臨時(shí)區(qū)智慧零售達(dá)人管理erp電商平臺(tái)用戶電商平臺(tái)用戶S電商系統(tǒng)數(shù)據(jù)電商平臺(tái)門店用戶數(shù)據(jù)生意參謀微信公眾號(hào)后臺(tái)醫(yī)療器械孩子王電商系統(tǒng)數(shù)據(jù)電商平臺(tái)門店用戶數(shù)據(jù)生意參謀微信公眾號(hào)后臺(tái)醫(yī)療器械孩子王數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)文件文件CDCCDC日志消息消息接口接口數(shù)據(jù)源管理數(shù)據(jù)采集開發(fā)管理數(shù)據(jù)采集調(diào)度管理數(shù)據(jù)采集監(jiān)控預(yù)警22 ?匯聚業(yè)務(wù)范圍確定?匯聚系統(tǒng)范圍確定?匯聚表范圍確定?匯聚手工數(shù)據(jù)范圍確定?系統(tǒng)信息整理?用戶信息配置?匯聚調(diào)度任務(wù)整理?數(shù)據(jù)字典整理?數(shù)據(jù)源配置?匯聚調(diào)度任務(wù)基礎(chǔ)信?接口信息整理?匯聚區(qū)建表配置息配置?網(wǎng)絡(luò)信息整理?數(shù)據(jù)匯聚任務(wù)配置與?匯聚調(diào)度任務(wù)依賴觸開發(fā)?數(shù)據(jù)匯聚任務(wù)測(cè)試?數(shù)據(jù)匯聚查看和問(wèn)題處理發(fā)配置?任務(wù)調(diào)度測(cè)試驗(yàn)證?調(diào)度任務(wù)監(jiān)控配置?匯聚任務(wù)監(jiān)控預(yù)警?匯聚監(jiān)控任務(wù)故障處理?日常運(yùn)維巡檢理和監(jiān)控運(yùn)維。?4、數(shù)據(jù)體系建設(shè)—總體流程需求分析系統(tǒng)設(shè)計(jì)系統(tǒng)開發(fā)上線與維護(hù)系統(tǒng)軟硬件資源安裝系統(tǒng)測(cè)試與驗(yàn)收系統(tǒng)管理與維護(hù)業(yè)務(wù)調(diào)研(BD）計(jì)談系統(tǒng)軟硬件資源安裝系統(tǒng)測(cè)試與驗(yàn)收系統(tǒng)管理與維護(hù)業(yè)務(wù)調(diào)研(BD）計(jì)談①②③④4、數(shù)據(jù)資源中心建設(shè)—步驟一：信息調(diào)研?了解企業(yè)的整體IT架構(gòu)和發(fā)展規(guī)劃?了解企業(yè)的當(dāng)前業(yè)務(wù)系統(tǒng)的現(xiàn)狀?了解3-5年內(nèi)業(yè)務(wù)系統(tǒng)建設(shè)的規(guī)化?了解企業(yè)針對(duì)信息系統(tǒng)建設(shè)標(biāo)準(zhǔn)化的規(guī)劃?掌握業(yè)務(wù)系統(tǒng)之間的業(yè)務(wù)功能劃分?掌握業(yè)務(wù)系統(tǒng)之間的數(shù)據(jù)交換、流向、以及數(shù)據(jù)衍生關(guān)系?掌握現(xiàn)有分析系統(tǒng)從業(yè)務(wù)系統(tǒng)之間進(jìn)行數(shù)據(jù)抽取的內(nèi)容和方式?掌握現(xiàn)有分析系統(tǒng)和業(yè)務(wù)系統(tǒng)以及應(yīng)用系統(tǒng)的數(shù)據(jù)回送情況?詳細(xì)查看每個(gè)實(shí)體業(yè)務(wù)含義和數(shù)據(jù)特征、并且進(jìn)行分類和取舍定義?詳細(xì)查看每個(gè)字段業(yè)務(wù)含義和數(shù)據(jù)物理特征、進(jìn)行分類和取舍定義?掌握針對(duì)人員、組織機(jī)構(gòu)、客戶、營(yíng)銷、產(chǎn)品、渠道、合同、財(cái)務(wù)、生產(chǎn)、ERP等定義重要業(yè)務(wù)編碼規(guī)則?仔細(xì)整理業(yè)務(wù)系統(tǒng)的代碼編碼、主外鍵關(guān)聯(lián)關(guān)系??檢查客戶提供的重要業(yè)務(wù)編碼規(guī)則是否在系統(tǒng)中完整執(zhí)行?檢查業(yè)務(wù)系統(tǒng)的代碼的一致性和完整性，并且做出代碼映射關(guān)系?基于實(shí)體和字段的物理特征，給出初步的數(shù)據(jù)質(zhì)量審核報(bào)告?基于現(xiàn)有ID情況，結(jié)合業(yè)務(wù)需求調(diào)研，進(jìn)行簡(jiǎn)要的缺口分析6調(diào)研報(bào)告評(píng)審準(zhǔn)備訪談分析評(píng)審6調(diào)研報(bào)告評(píng)審55調(diào)研報(bào)告編寫調(diào)研報(bào)告編寫各個(gè)源系統(tǒng)分別進(jìn)行各個(gè)源系統(tǒng)分別進(jìn)行4樣本數(shù)據(jù)分析2.評(píng)審信息調(diào)研報(bào)告3字段級(jí)調(diào)研1.通過(guò)分析樣本數(shù)據(jù)驗(yàn)證前期調(diào)研21.根據(jù)調(diào)研結(jié)果及入模型策略篩選入倉(cāng)范圍2.3字段級(jí)調(diào)研1.通過(guò)分析樣本數(shù)據(jù)驗(yàn)證前期調(diào)研2的結(jié)果、分析表間關(guān)系的結(jié)果、分析表間關(guān)系2.在復(fù)原源系統(tǒng)ER圖的過(guò)程中了解表之間關(guān)系、表與字段的業(yè)務(wù)含義系統(tǒng)與表級(jí)調(diào)研11.了解源系統(tǒng)的字段的業(yè)務(wù)含義1資料收集2.只調(diào)研初步篩選資料收集1.了解系統(tǒng)系統(tǒng)架構(gòu)、1.了解系統(tǒng)系統(tǒng)架構(gòu)、功能、業(yè)務(wù)處理及其它系統(tǒng)間的關(guān)系持續(xù)迭代完善持續(xù)迭代完善1.收集源系統(tǒng)源：系統(tǒng)需求文檔、操作手冊(cè)、表結(jié)1.收集源系統(tǒng)源：系統(tǒng)需求文檔、操作手冊(cè)、表結(jié)構(gòu)說(shuō)明書、代碼值、樣本數(shù)據(jù)、建庫(kù)腳本3.了解數(shù)據(jù)表的業(yè)務(wù)含義，并初步篩選出關(guān)注的表4.篩選出需求相關(guān)的表4、數(shù)據(jù)資源中心建設(shè)—步驟二：①數(shù)據(jù)模型設(shè)計(jì)方法↓務(wù)問(wèn)據(jù)型視↓務(wù)問(wèn)據(jù)型視4、數(shù)據(jù)資源中心建設(shè)—步驟二：②數(shù)據(jù)區(qū)定位與數(shù)據(jù)模型設(shè)計(jì)流程①?gòu)臉I(yè)務(wù)的角度出發(fā)全部原始數(shù)據(jù)全部原始數(shù)據(jù)核心數(shù)據(jù)、清洗融合后匯總與分析數(shù)據(jù)特定需求數(shù)據(jù)備 /驗(yàn) /驗(yàn)證型型計(jì)項(xiàng)目管理：文檔、溝通、問(wèn)題跟蹤、回顧、驗(yàn)證、測(cè)試、項(xiàng)目管理：文檔、溝通、問(wèn)題跟蹤、回顧、驗(yàn)證、測(cè)試、4、數(shù)據(jù)資源中心建設(shè)—步驟二：③基礎(chǔ)區(qū)數(shù)據(jù)模型設(shè)計(jì)線上媒體數(shù)據(jù)電商訂單數(shù)據(jù)數(shù)據(jù)采集、數(shù)據(jù)清洗數(shù)據(jù)采集、數(shù)據(jù)清洗線上媒體數(shù)據(jù)電商訂單數(shù)據(jù)數(shù)據(jù)采集、數(shù)據(jù)清洗數(shù)據(jù)采集、數(shù)據(jù)清洗基礎(chǔ)區(qū)建模數(shù)據(jù)采集、數(shù)據(jù)清洗線下活動(dòng)數(shù)據(jù)數(shù)據(jù)采集、數(shù)據(jù)清洗微信行為數(shù)據(jù)數(shù)據(jù)標(biāo)準(zhǔn)化ID識(shí)別微信openid手機(jī)號(hào)碼EmailQQ男性30歲華東地區(qū)會(huì)員等級(jí)會(huì)員積分會(huì)員權(quán)益CookieMAC微信unionid的行為“像素”。4、數(shù)據(jù)資源中心建設(shè)—步驟二：⑤用戶標(biāo)簽設(shè)計(jì)源數(shù)據(jù)標(biāo)簽體系標(biāo)簽構(gòu)建源數(shù)據(jù)標(biāo)簽體系【訂單】女裝無(wú)縫羽絨長(zhǎng)大衣409125金額：【訂單】女裝無(wú)縫羽絨長(zhǎng)大衣409125金額：1299元收貨地址：上海市X區(qū)XX大街手機(jī)號(hào)：138****8271購(gòu)買時(shí)間：2018/01/1109:21:212017/10/2119:40:22關(guān)注公眾號(hào)微信昵稱：skyfly001微信OPENID：nsisuykksikqy閱讀“U系列2019春夏款Lookbook”點(diǎn)擊菜單“會(huì)員福利-50元心意券”閱讀“2018年代表作”文章點(diǎn)擊菜單“年貨買買買”點(diǎn)擊商城-男裝-HEATTECH，訪問(wèn)某倍舒暖商品詳情頁(yè)收藏男裝HEATTECH螺紋圓領(lǐng)T恤413314瀏覽新春新品活動(dòng)頁(yè)消費(fèi)者維度認(rèn)知信息人口信息活動(dòng)偏好情感信息產(chǎn)品偏好場(chǎng)景偏好產(chǎn)品維度視覺(jué)系統(tǒng)功能賣點(diǎn)基本認(rèn)知信息人口信息活動(dòng)偏好情感信息產(chǎn)品偏好場(chǎng)景偏好產(chǎn)品維度視覺(jué)系統(tǒng)功能賣點(diǎn)基本信息情感賣點(diǎn)價(jià)格體系促銷活動(dòng)銷售終端相對(duì)穩(wěn)定的信息、人口學(xué)屬性、身份屬性性別有孩教育水平年齡地域婚否職業(yè)內(nèi)容場(chǎng)景社交屬性地點(diǎn)類型文化氛圍關(guān)鍵社交屬性地點(diǎn)類型文化氛圍關(guān)鍵詞衍生品根據(jù)行為與軌跡、自定義規(guī)則，自動(dòng)添加參與X活動(dòng)領(lǐng)取權(quán)益瀏覽X頁(yè)面線上消費(fèi)線下消費(fèi)報(bào)名訪問(wèn)時(shí)長(zhǎng)00:21:34跳出依據(jù)屬性行為、計(jì)算得出的客戶標(biāo)簽依據(jù)屬性行為、計(jì)算得出的客戶標(biāo)簽溝通時(shí)間：2018/01/0412:18:00溝通時(shí)間：2018/01/0412:18:00所在渠道：小程序商城手機(jī)號(hào)：138****8271咨詢問(wèn)題：倍舒暖與HEATTECH區(qū)別【訂單】童裝UltraStretch起居套裝414607下單時(shí)間：2018/01/3120:22:00下單門店：上海淮海中路旗艦店訂單金額：129元付款方式：支付寶品類偏好-童裝重要價(jià)值客戶重要價(jià)值客戶購(gòu)買力-購(gòu)買力-高30天活躍度-120分利用算法訓(xùn)練模型得到的預(yù)測(cè)標(biāo)簽預(yù)測(cè)流失風(fēng)險(xiǎn)-利用算法訓(xùn)練模型得到的預(yù)測(cè)標(biāo)簽預(yù)測(cè)流失風(fēng)險(xiǎn)-低需求推薦-限時(shí)特優(yōu)-女裝復(fù)購(gòu)可能預(yù)測(cè)-高匯總提煉提煉實(shí)時(shí)數(shù)據(jù)處理追加清洗、轉(zhuǎn)換和標(biāo)準(zhǔn)化加載追加清洗、轉(zhuǎn)換和標(biāo)準(zhǔn)化消息、接口定時(shí)抽取觸發(fā)提煉數(shù)據(jù)庫(kù)主動(dòng)采集文件監(jiān)聽文件加載任務(wù)文件檢查任務(wù)數(shù)據(jù)抽取加載任務(wù)數(shù)據(jù)匯聚加工任務(wù)數(shù)據(jù)質(zhì)量檢查任務(wù)匯總提煉提煉實(shí)時(shí)數(shù)據(jù)處理追加清洗、轉(zhuǎn)換和標(biāo)準(zhǔn)化加載追加清洗、轉(zhuǎn)換和標(biāo)準(zhǔn)化消息、接口定時(shí)抽取觸發(fā)提煉數(shù)據(jù)庫(kù)主動(dòng)采集文件監(jiān)聽文件加載任務(wù)文件檢查任務(wù)數(shù)據(jù)抽取加載任務(wù)數(shù)據(jù)匯聚加工任務(wù)數(shù)據(jù)質(zhì)量檢查任務(wù)數(shù)據(jù)清洗轉(zhuǎn)換任務(wù)業(yè)務(wù)檢核任務(wù)匯總提煉加工任務(wù)應(yīng)用數(shù)據(jù)加工任務(wù)元數(shù)據(jù)加載任務(wù)ETL調(diào)度管理ETL任務(wù)管理負(fù)載管理ETL監(jiān)控日志管理實(shí)時(shí)數(shù)據(jù)采集數(shù)據(jù)文件采集4、數(shù)據(jù)資源中心建設(shè)—步驟三：數(shù)據(jù)開發(fā)流程與支撐工具75267526 ??????建庫(kù)建表環(huán)境準(zhǔn)備開發(fā)系統(tǒng)準(zhǔn)備配置文件準(zhǔn)備信息調(diào)研結(jié)果數(shù)據(jù)模型成果..?創(chuàng)建數(shù)據(jù)庫(kù)?創(chuàng)建數(shù)據(jù)庫(kù)用戶?創(chuàng)建數(shù)據(jù)表?數(shù)據(jù)庫(kù)表賦權(quán)?…?表映射?字段映射?代碼映射?關(guān)聯(lián)過(guò)濾條件映射??????數(shù)據(jù)開發(fā)參數(shù)配置數(shù)據(jù)映射導(dǎo)入數(shù)據(jù)開發(fā)配置公共代碼配置腳本編寫調(diào)試…?單元測(cè)試模板準(zhǔn)備?單元測(cè)試執(zhí)行?單元測(cè)試報(bào)告?…?調(diào)度任務(wù)整理?調(diào)度任務(wù)基礎(chǔ)信息配置?調(diào)度任務(wù)依賴觸發(fā)配置?調(diào)度任務(wù)測(cè)試驗(yàn)證?…?集成測(cè)試模板準(zhǔn)備?集成測(cè)試執(zhí)行?集成測(cè)試報(bào)告?…4、數(shù)據(jù)資源中心建設(shè)—步驟四：數(shù)據(jù)統(tǒng)一調(diào)度管理ETL調(diào)度平臺(tái)口消息接口功能接口ETL調(diào)度平臺(tái)口消息接口功能接口Agent模塊定時(shí)任務(wù)文件監(jiān)控?cái)?shù)據(jù)卸載數(shù)據(jù)挖掘數(shù)據(jù)同步分析匯總質(zhì)量檢查機(jī)器學(xué)習(xí)Agent模塊定時(shí)任務(wù)文件監(jiān)控?cái)?shù)據(jù)卸載數(shù)據(jù)挖掘數(shù)據(jù)同步分析匯總質(zhì)量檢查機(jī)器學(xué)習(xí)數(shù)據(jù)加載清洗融合5、數(shù)據(jù)治理建設(shè)：數(shù)據(jù)標(biāo)準(zhǔn)管理標(biāo)準(zhǔn)范圍含哪些？目前的狀況如何？標(biāo)準(zhǔn)應(yīng)該什么樣？這些內(nèi)容都在哪兒？標(biāo)準(zhǔn)應(yīng)該如何執(zhí)行？如何維護(hù)理標(biāo)準(zhǔn)？ ?基礎(chǔ)標(biāo)準(zhǔn)管理：為實(shí)體及屬性設(shè)置標(biāo)準(zhǔn)?統(tǒng)計(jì)標(biāo)準(zhǔn)管理：為統(tǒng)計(jì)指標(biāo)設(shè)置標(biāo)準(zhǔn)?機(jī)構(gòu)清單管理：為層級(jí)化實(shí)體設(shè)置標(biāo)準(zhǔn)?公共代碼管理：引入國(guó)家、行業(yè)或企業(yè)自定義的代碼標(biāo)準(zhǔn)?業(yè)務(wù)術(shù)語(yǔ)管理：為元數(shù)據(jù)業(yè)務(wù)口徑配置業(yè)務(wù)術(shù)語(yǔ)?命名規(guī)范管理：為系統(tǒng)各類標(biāo)識(shí)符設(shè)立統(tǒng)一標(biāo)準(zhǔn)22?標(biāo)準(zhǔn)審核瀏覽：查看目前已發(fā)布的各類標(biāo)準(zhǔn)詳情?標(biāo)準(zhǔn)審核審批：審核新創(chuàng)建的標(biāo)準(zhǔn)并發(fā)布33?評(píng)分體系庫(kù)管理：設(shè)置元數(shù)據(jù)標(biāo)準(zhǔn)評(píng)分計(jì)算要素權(quán)重?標(biāo)準(zhǔn)評(píng)分管理：管理各級(jí)元數(shù)據(jù)的標(biāo)準(zhǔn)評(píng)分5、數(shù)據(jù)治理建設(shè)：元數(shù)據(jù)管理11223344數(shù)據(jù)源配置元數(shù)據(jù)采集任務(wù)配置數(shù)據(jù)庫(kù)元數(shù)據(jù)采集文件元數(shù)據(jù)采集接口元數(shù)據(jù)采集腳本元數(shù)據(jù)采集ETL調(diào)度元數(shù)據(jù)采集…?元數(shù)據(jù)檢索?系統(tǒng)、表與字段血緣關(guān)系分析?系統(tǒng)、表與字段影響分析關(guān)系分析?業(yè)務(wù)元數(shù)據(jù)分析????????數(shù)據(jù)資產(chǎn)展示數(shù)據(jù)字典管理數(shù)據(jù)對(duì)標(biāo)業(yè)務(wù)指標(biāo)管理數(shù)據(jù)質(zhì)量檢查系統(tǒng)故障排查變更影響評(píng)估…?元數(shù)據(jù)采集監(jiān)控預(yù)警?元數(shù)據(jù)采集問(wèn)題處理?系統(tǒng)日常運(yùn)維監(jiān)控?… 22 55包括技術(shù)元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)使用支持文檔上傳、下載、在