數(shù)字化轉(zhuǎn)型工業(yè)大數(shù)據(jù)智慧礦山平臺(tái)建設(shè)方案相關(guān)兩份資料

為貫徹落實(shí)國(guó)家發(fā)展改革委等八部委聯(lián)合印發(fā)的《關(guān)于加快煤礦智能化發(fā)

展的指導(dǎo)意見(jiàn)》（以下簡(jiǎn)稱“指導(dǎo)意見(jiàn)

”）、《我國(guó)煤炭行業(yè)高質(zhì)量發(fā)展總

體思路、

目標(biāo)方向、量化標(biāo)準(zhǔn)和重點(diǎn)舉

措研究》等國(guó)家相關(guān)政策，加快我國(guó)煤

礦智能化建設(shè)，推動(dòng)煤炭行業(yè)高質(zhì)量發(fā)

展，特制定本指南。本指南是促進(jìn)智能

化煤礦建設(shè)、行業(yè)技術(shù)進(jìn)步和規(guī)范發(fā)展

的指導(dǎo)性文件。

智慧

（煤礦）

礦山建設(shè)指南2（1

）子系統(tǒng)煙囪式建設(shè)

，數(shù)據(jù)獲取難。管理層需要業(yè)務(wù)數(shù)據(jù)時(shí)

，經(jīng)常需要軟件商配合

，用戶無(wú)法及時(shí)獲取并提供數(shù)據(jù)。二是數(shù)據(jù)無(wú)法按照集團(tuán)管控要求和時(shí)間及時(shí)提供。（2

）數(shù)據(jù)時(shí)效性差。目前從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù)到進(jìn)行精準(zhǔn)決策數(shù)據(jù)分析需要T+N天

，并且數(shù)據(jù)指標(biāo)維度不全面。當(dāng)前最新設(shè)備狀態(tài)參數(shù)數(shù)據(jù)、系統(tǒng)運(yùn)行數(shù)據(jù)無(wú)法及時(shí)獲取。（3

）缺乏平臺(tái)化“數(shù)據(jù)打通”，各個(gè)數(shù)據(jù)平臺(tái)煙囪式關(guān)系

，沒(méi)有統(tǒng)一的共享和管控體系

，數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一

，部門間無(wú)法有效共

享使用。（4

）缺乏全集團(tuán)統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)。“同名不同義、

同義不同名”。各業(yè)務(wù)系統(tǒng)數(shù)據(jù)以自家接口文檔形式提供輸出

，有的則手動(dòng)根據(jù)多個(gè)指標(biāo)庫(kù)內(nèi)抓數(shù)據(jù)分別提供

，無(wú)法做到企業(yè)全流程安全把控和規(guī)則制定。煤礦智能化（數(shù)字礦山/智慧礦山）

是煤礦綜合自動(dòng)化發(fā)展的新階段

，是煤炭工業(yè)高質(zhì)量發(fā)展的核心技術(shù)支撐。建設(shè)智能化煤礦是新時(shí)期煤炭企業(yè)面臨的重要任務(wù)

，是煤礦企業(yè)數(shù)字化轉(zhuǎn)型的基礎(chǔ)

，

已成為不可逆轉(zhuǎn)的發(fā)展趨勢(shì)。企業(yè)業(yè)務(wù)系統(tǒng)多

，系統(tǒng)煙囪式建設(shè)

，數(shù)據(jù)接入困難

，數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一

，數(shù)據(jù)孤島問(wèn)題嚴(yán)重。

煤礦企業(yè)數(shù)字化進(jìn)程中遇到的問(wèn)題數(shù)據(jù)時(shí)效性差數(shù)據(jù)無(wú)法共享數(shù)據(jù)獲取難數(shù)據(jù)缺乏標(biāo)準(zhǔn)31

2

3

4

5

…

…

n數(shù)據(jù)應(yīng)用數(shù)據(jù)資源數(shù)據(jù)應(yīng)用數(shù)據(jù)中臺(tái)全域數(shù)據(jù)資源（OneData）后臺(tái)?

子系統(tǒng)“煙囪”式建設(shè)

，數(shù)據(jù)不共享

，業(yè)務(wù)不聯(lián)動(dòng)

，管理改進(jìn)難?不同業(yè)務(wù)對(duì)接同一功能子系統(tǒng)，異構(gòu)重復(fù)建設(shè)

，成本高?業(yè)務(wù)創(chuàng)新需調(diào)用多子系統(tǒng)數(shù)據(jù)

，應(yīng)用構(gòu)建難

，開(kāi)發(fā)周期長(zhǎng)?新的數(shù)據(jù)架構(gòu)下

，打破數(shù)據(jù)壁壘

，滿足未來(lái)運(yùn)營(yíng)發(fā)展需求

煤炭企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

價(jià)值數(shù)據(jù)應(yīng)用開(kāi)發(fā)：

月/年

數(shù)據(jù)資源：

不可復(fù)用數(shù)據(jù)應(yīng)用開(kāi)發(fā)：

天/周數(shù)據(jù)資源：

可復(fù)用1

2…

…

n4數(shù)據(jù)資產(chǎn)

，技術(shù)

，組織

，業(yè)務(wù)流程多要素協(xié)同

，驅(qū)動(dòng)業(yè)務(wù)創(chuàng)新和業(yè)務(wù)升級(jí)業(yè)務(wù)導(dǎo)向建設(shè)數(shù)據(jù)模型強(qiáng)調(diào)數(shù)據(jù)時(shí)效性

，提供實(shí)時(shí)數(shù)據(jù)分析能

力面向數(shù)據(jù)價(jià)值

，為業(yè)務(wù)應(yīng)用提供統(tǒng)一數(shù)

據(jù)服務(wù)主要服務(wù)于一線業(yè)務(wù)人員核心功能為業(yè)務(wù)流程支撐提供基礎(chǔ)的統(tǒng)計(jì)、報(bào)表和數(shù)據(jù)分析功

能不同業(yè)務(wù)系統(tǒng)之間形成數(shù)據(jù)煙囪數(shù)據(jù)BI

數(shù)據(jù)中臺(tái)2

3強(qiáng)調(diào)數(shù)據(jù)集成

，整合多業(yè)務(wù)數(shù)據(jù)面向數(shù)據(jù)應(yīng)用、

BI報(bào)表、即席查

詢、交互探索數(shù)據(jù)支撐強(qiáng)調(diào)數(shù)據(jù)治理及數(shù)據(jù)管理組織、制度、流程

煤炭企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

企業(yè)數(shù)字化轉(zhuǎn)型的基礎(chǔ)業(yè)務(wù)系統(tǒng)1數(shù)據(jù)價(jià)值：高數(shù)據(jù)價(jià)值：低6

煤炭企業(yè)業(yè)務(wù)系統(tǒng)前期調(diào)研

（1）7

煤炭企業(yè)業(yè)務(wù)系統(tǒng)前期調(diào)研

（

2）8基本情況：

5個(gè)領(lǐng)導(dǎo)中心、

47個(gè)業(yè)務(wù)系統(tǒng)當(dāng)前煤炭企業(yè)業(yè)務(wù)系統(tǒng)由于沒(méi)有進(jìn)行相互集成

，系統(tǒng)之間數(shù)據(jù)沒(méi)有交互關(guān)系，所以本次調(diào)研根據(jù)所屬中心部門進(jìn)行劃分為：

“生產(chǎn)技術(shù)中心”

，

“機(jī)電運(yùn)輸

中心”

，

“調(diào)度指揮中心”

，

“后勤保障中心”

，

“安全中心”5個(gè)中心領(lǐng)導(dǎo)

部門

，其中梳理底層業(yè)務(wù)系統(tǒng)47個(gè)

，

計(jì)劃上線9個(gè)

，

目前正常使用38個(gè)。數(shù)據(jù)情況：

主要以下五種1、

SQL

Server

數(shù)據(jù)庫(kù)（安全監(jiān)測(cè)系統(tǒng)、

束管防滅火監(jiān)測(cè)等）2、

OPC協(xié)議（清洗泵房、

空壓機(jī)監(jiān)控系統(tǒng)）3、Access（電力計(jì)量系統(tǒng)、

ZKAcess人員刷卡系統(tǒng)）4、

My

SQL

（汽車裝車系統(tǒng)、

雙重預(yù)防信息系統(tǒng)等）5、接口對(duì)接（非數(shù)據(jù)庫(kù)類型、

數(shù)據(jù)獲取難）

煤炭企業(yè)業(yè)務(wù)系統(tǒng)前期調(diào)研

（

3）9主要中心主要部門系統(tǒng)名稱具體區(qū)域當(dāng)前情況主要功能開(kāi)發(fā)廠家數(shù)據(jù)庫(kù)類型對(duì)接方式10生產(chǎn)技術(shù)中心通防部通風(fēng)機(jī)管理系統(tǒng)未上線方案待定智能通風(fēng)管控系統(tǒng)未上線方案待定災(zāi)害智能融合分析與可

視化分析未上線方案待定瓦檢巡檢管理系統(tǒng)未上線方案待定安全監(jiān)測(cè)系統(tǒng)已上線粉塵、設(shè)備、

甲烷、一氧化碳、風(fēng)機(jī)開(kāi)停

監(jiān)控sqlserver

2008數(shù)據(jù)庫(kù)對(duì)接束管防滅火監(jiān)測(cè)已上線采空區(qū)氣體情況、識(shí)別氣燃發(fā)火氣體sqlserver

2009數(shù)據(jù)庫(kù)對(duì)接采空區(qū)光纖測(cè)溫系統(tǒng)已上線采空區(qū)溫度sqlserver

2010數(shù)據(jù)庫(kù)對(duì)接生產(chǎn)部總采頂板檢測(cè)系統(tǒng)已上線山東科技大學(xué)sql

server數(shù)據(jù)庫(kù)對(duì)接掘進(jìn)頂板檢測(cè)系統(tǒng)已上線山東光安sql

server數(shù)據(jù)庫(kù)對(duì)接地測(cè)部水文系統(tǒng)已上線地下水位觀測(cè)西安中煤可控集

團(tuán)西安研究院sqlserver

2008數(shù)據(jù)庫(kù)對(duì)接龍軟GIS已上線礦井地質(zhì)

，通風(fēng)參數(shù)

，地質(zhì)信息、錄入、

展示及分析北京龍軟sqlserver

2016數(shù)據(jù)庫(kù)對(duì)接智能地質(zhì)保障系統(tǒng)未上線地質(zhì)建模

，地質(zhì)推演

，地址數(shù)據(jù)可視化

，礦井地質(zhì)基礎(chǔ)信息、關(guān)聯(lián)信息、預(yù)測(cè)信息等能夠用可視化的方式直觀的展示出來(lái)。方案待定

煤炭企業(yè)數(shù)據(jù)中臺(tái)業(yè)務(wù)系統(tǒng)情況主要中心主要部門系統(tǒng)名稱具體區(qū)域當(dāng)前情況主要功能開(kāi)發(fā)廠家數(shù)據(jù)庫(kù)類型對(duì)接方式11機(jī)電運(yùn)輸中

心機(jī)電部門供排水系統(tǒng)中央泵房已上線流量壓力

，水泵負(fù)壓

，水泵入口

負(fù)壓，

出口正壓

，流量監(jiān)控、北京富力通winCC西門子OPC協(xié)議清洗泵房已上線流量壓力

，水泵負(fù)壓

，水泵入口

負(fù)壓，

出口正壓

，流量監(jiān)控、天地常州西門子300PLCOPC協(xié)議二盤區(qū)泵房已上線流量壓力

，水泵負(fù)壓

，水泵入口

負(fù)壓，

出口正壓

，流量監(jiān)控、淮南萬(wàn)泰西門子1500PLCOPC協(xié)議掘進(jìn)系統(tǒng)已上線目前沒(méi)有系統(tǒng)

，只有PLC智能設(shè)備通過(guò)上位機(jī)獲取PLC數(shù)據(jù)然后經(jīng)過(guò)OPC協(xié)議進(jìn)行數(shù)據(jù)傳輸電力安全監(jiān)控系統(tǒng)已上線監(jiān)控及控制變電所高壓柜及部分低壓柜西瑞sqlserver

2003數(shù)據(jù)庫(kù)對(duì)接主通風(fēng)機(jī)監(jiān)控系統(tǒng)已上線監(jiān)控主通風(fēng)機(jī)運(yùn)行及相關(guān)參數(shù)西安宇田一百立方供水已上線生活供水系統(tǒng)

，參數(shù)及狀態(tài)西安重裝kepserverOPC協(xié)議或kepserver電力計(jì)量系統(tǒng)已上線計(jì)量各個(gè)變電所高壓柜用電情況山東山大電力

設(shè)備access本身自帶系統(tǒng)

，可以提供賬號(hào)密碼

，同時(shí)提供傳輸點(diǎn)空壓機(jī)監(jiān)控系統(tǒng)一號(hào)壓風(fēng)機(jī)已上線監(jiān)控空壓機(jī)運(yùn)行參數(shù)西門子PLC315-2DT上位機(jī)走OPC協(xié)議二號(hào)壓風(fēng)機(jī)已上線監(jiān)控空壓機(jī)運(yùn)行參數(shù)ABPLC1769上位機(jī)rsslinx洗選部門設(shè)備自動(dòng)化控制系統(tǒng)已上線洗煤及選煤自動(dòng)化設(shè)備控制北京華宇sqlserver

expressOPC協(xié)議火車裝車系統(tǒng)已上線火車裝料北京華宇sqlserver數(shù)據(jù)庫(kù)對(duì)接汽車裝車系統(tǒng)已上線汽車裝料北京華宇mysql5.7數(shù)據(jù)庫(kù)對(duì)接運(yùn)輸部門主運(yùn)輸系統(tǒng)已上線皮帶參數(shù)

，運(yùn)行狀況南京北路sqlsever2008數(shù)據(jù)庫(kù)對(duì)接\接口輔助運(yùn)輸系統(tǒng)已上線車輛運(yùn)輸、運(yùn)料深圳翌日sql

server數(shù)據(jù)庫(kù)對(duì)接

接口

煤炭企業(yè)數(shù)據(jù)中臺(tái)業(yè)務(wù)系統(tǒng)情況\主要中心主要部門系統(tǒng)名稱具體區(qū)域當(dāng)前情況主要功能開(kāi)發(fā)廠家數(shù)據(jù)庫(kù)類型對(duì)接方式12后勤保障中心后勤部安防視頻監(jiān)控系統(tǒng)已上線礦區(qū)井上監(jiān)控視頻神州數(shù)碼視頻文件廠區(qū)內(nèi)一卡通門禁

系統(tǒng)已上線門禁識(shí)別系統(tǒng)

，主要針對(duì)培訓(xùn)中心

，文體中心

，5號(hào)公寓樓建設(shè)

，數(shù)據(jù)不互通

，單獨(dú)進(jìn)行授權(quán)皮克sqlserver

2005數(shù)據(jù)庫(kù)對(duì)接南大門-車牌識(shí)別系

統(tǒng)已上線南大門車輛進(jìn)出信息記錄

，車輛信息存儲(chǔ)，

由部分照片數(shù)據(jù)西安鼎眾設(shè)

備科技sql

server數(shù)據(jù)庫(kù)對(duì)接南大門-ZKAcess人

員刷卡系統(tǒng)已上線南大門人員進(jìn)出刷卡系統(tǒng)

，存儲(chǔ)個(gè)人信息

及進(jìn)出記錄西安鼎眾設(shè)

備科技accesss本身自帶系統(tǒng)

，可以

提供數(shù)據(jù)庫(kù)賬密南大門-人臉識(shí)別系

統(tǒng)已上線南大門人臉識(shí)別系統(tǒng)

，存儲(chǔ)個(gè)人信息及照

片信息數(shù)據(jù)及進(jìn)出記錄西安鼎眾設(shè)

備科技sql

server數(shù)據(jù)庫(kù)對(duì)接\接口保安巡邏系統(tǒng)已上線保安巡邏信息記錄

，點(diǎn)位信息數(shù)據(jù)藍(lán)卡軟件自帶數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)對(duì)接\接口停車管理系統(tǒng)已上線針對(duì)培訓(xùn)中心

，辦公樓

，地下車庫(kù)三個(gè)地

下停車場(chǎng)門禁管理

，數(shù)據(jù)信息管理藍(lán)卡sql

sever數(shù)據(jù)庫(kù)對(duì)接消防報(bào)警系統(tǒng)已上線主要針對(duì)辦公樓消防信息數(shù)據(jù)管理控制，根據(jù)反饋數(shù)據(jù)進(jìn)行報(bào)警西安萊科思OPC協(xié)議虹膜管理考勤系統(tǒng)已上線利用虹膜信息進(jìn)行打卡

，實(shí)現(xiàn)員工考勤記

錄凱宏電子sqlserver

2008數(shù)據(jù)庫(kù)對(duì)接一卡人臉收費(fèi)卡系

統(tǒng)已上線買飯購(gòu)物刷卡陜西春垚SecurityDBBock軟件自帶系統(tǒng)

，需要

和軟件開(kāi)發(fā)商溝通

煤炭企業(yè)數(shù)據(jù)中臺(tái)業(yè)務(wù)系統(tǒng)情況主要中心主要部門系統(tǒng)名稱具體區(qū)域當(dāng)前情況主要功能開(kāi)發(fā)廠家數(shù)據(jù)庫(kù)類型對(duì)接方式13調(diào)度指揮中心智能部人員定位系統(tǒng)已上線人員礦井定位深圳翌日sql

server數(shù)據(jù)庫(kù)對(duì)接調(diào)度通訊系統(tǒng)已上線礦井通訊信息數(shù)據(jù)北方聯(lián)創(chuàng)sql

server數(shù)據(jù)庫(kù)對(duì)接應(yīng)急廣播已上線礦井應(yīng)急廣播信息數(shù)據(jù)南京北路sql

server數(shù)據(jù)庫(kù)對(duì)接井下視頻系統(tǒng)已上線井下錄像視頻數(shù)據(jù)?？低曇曨l數(shù)據(jù)接口智能工作面25211工作面已上線智能化工作面觸電信息數(shù)據(jù)天瑪sql

server建議OPC協(xié)議對(duì)接44204工作面

和15215已上線智能化工作面觸電信息數(shù)據(jù)瑪珂OPC協(xié)議OPC協(xié)議設(shè)備管理系統(tǒng)已上線管理礦區(qū)設(shè)備情況宇通集團(tuán)數(shù)據(jù)難獲取非集團(tuán)建設(shè)部署OA辦公系統(tǒng)煤炭企業(yè)OA辦

公系統(tǒng)已上線數(shù)據(jù)陜煤集團(tuán)公司OA系統(tǒng)與釘釘已做對(duì)接陜煤股份數(shù)據(jù)難獲取非集團(tuán)建設(shè)部署安全中心

·安全部雙重預(yù)防信息系統(tǒng)已上線人工上傳安全隱患信息

，對(duì)礦廠安全隱

患事故進(jìn)行記錄處理中國(guó)礦大mysql

1.7+數(shù)據(jù)庫(kù)對(duì)接\接口安全檢查系統(tǒng)未上線徒步檢測(cè)

，定期檢查

，發(fā)放檢查任務(wù)，

發(fā)放檢查通知方案待定智能推送系統(tǒng)未上線需要與隱患系統(tǒng)、雙重預(yù)防信息系統(tǒng)及消防安全系統(tǒng)進(jìn)行聯(lián)調(diào)

，推送接受安全隱患信息方案待定智能信息系統(tǒng)未上線針對(duì)安全隱患現(xiàn)場(chǎng)進(jìn)行拍照上傳

，與推送系統(tǒng)進(jìn)行聯(lián)調(diào)

，通知到具體負(fù)責(zé)人進(jìn)行改良方案待定智慧園區(qū)系統(tǒng)未上線統(tǒng)一管理園區(qū)消防設(shè)備

，消防報(bào)警

，信

息報(bào)警

，培訓(xùn)中心

，行政中心

，5號(hào)公

寓樓

，救護(hù)隊(duì)

，視頻資源數(shù)據(jù)信息情況方案待定智能應(yīng)急管理系統(tǒng)未上線管理井下應(yīng)急事故及計(jì)劃預(yù)案

，同時(shí)與

通信呼叫心態(tài)

，人員定位系統(tǒng)進(jìn)行聯(lián)調(diào)，

井上針對(duì)救護(hù)中隊(duì)

，醫(yī)療室，應(yīng)急物資進(jìn)行統(tǒng)一管理

，對(duì)接調(diào)度中心方案待定

煤炭企業(yè)數(shù)據(jù)中臺(tái)業(yè)務(wù)系統(tǒng)情況構(gòu)建統(tǒng)一、

融合、

智能、

高效的煤礦大腦，

助力用戶逐步建設(shè)具有主動(dòng)感知、自動(dòng)分析、

深度學(xué)習(xí)、

智能決策、

科學(xué)指揮的智慧型礦山。

致力于為煤炭企業(yè)

構(gòu)建“全”、“統(tǒng)”、“通”、

”智”的

（大數(shù)據(jù)平臺(tái)/數(shù)據(jù)中臺(tái)）

體系，

基于“數(shù)字新基

建”時(shí)代的數(shù)據(jù)價(jià)值思考，

構(gòu)建全域數(shù)字化礦區(qū)共享能力中心，

助力煤炭企業(yè)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型，

打通底層系統(tǒng)之間數(shù)據(jù)壁壘，

加強(qiáng)公司整體管理和安全生產(chǎn)

系數(shù)，

為運(yùn)營(yíng)提供數(shù)據(jù)統(tǒng)籌模型，

實(shí)現(xiàn)重點(diǎn)數(shù)據(jù)實(shí)時(shí)監(jiān)控和數(shù)據(jù)共享開(kāi)放服務(wù)。全域分析智能決策打通原有業(yè)務(wù)系統(tǒng)統(tǒng)一煤炭企業(yè)統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)申請(qǐng)與審核統(tǒng)一數(shù)據(jù)報(bào)表支撐綜合管控?cái)?shù)據(jù)統(tǒng)一治理數(shù)據(jù)資產(chǎn)管理形成數(shù)據(jù)字典數(shù)據(jù)發(fā)布直觀掌握數(shù)據(jù)支撐決策分析（約47個(gè)）數(shù)據(jù)血緣提供決策依據(jù)支撐創(chuàng)新應(yīng)用等

煤炭企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

建設(shè)目標(biāo)統(tǒng)一資產(chǎn)統(tǒng)一標(biāo)準(zhǔn)數(shù)據(jù)管控打通數(shù)據(jù)14智慧礦山（數(shù)字礦山）綜合管控平臺(tái)后勤保障中心一卡通門禁車牌識(shí)別系統(tǒng)人臉識(shí)別系統(tǒng)保安巡邏系統(tǒng)消防報(bào)警系統(tǒng)安全中心雙重預(yù)防信息安全檢查系統(tǒng)智能推送系統(tǒng)智能信息系統(tǒng)智慧園區(qū)系統(tǒng)調(diào)度指揮中心機(jī)電運(yùn)輸中心

煤炭企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

大圖數(shù)字孿生

領(lǐng)導(dǎo)駕駛艙煤礦數(shù)字孿生煤炭企業(yè)當(dāng)前存在系統(tǒng)較多

，調(diào)研共計(jì)47個(gè)

，其中計(jì)劃上線9個(gè)

，當(dāng)前在使用系統(tǒng)38個(gè)。煤炭工業(yè)大數(shù)據(jù)平臺(tái)（數(shù)據(jù)中臺(tái)）煤礦高風(fēng)險(xiǎn)預(yù)警工業(yè)態(tài)勢(shì)感知不安全行為分析智慧園區(qū)管控綜合管控中心智能指揮調(diào)度3D可視化煤礦一張圖煤礦運(yùn)營(yíng)指標(biāo)體系安全生產(chǎn)監(jiān)測(cè)智能掘進(jìn)開(kāi)采束管防滅火空壓機(jī)監(jiān)控安全監(jiān)測(cè)系統(tǒng)瓦檢巡檢管理通風(fēng)機(jī)管理掘進(jìn)系統(tǒng)供排水系統(tǒng)主通風(fēng)機(jī)監(jiān)控調(diào)度通訊系統(tǒng)應(yīng)急廣播設(shè)備管理系統(tǒng)人員定位系統(tǒng)數(shù)據(jù)字典數(shù)據(jù)挖掘數(shù)據(jù)集市數(shù)據(jù)模型算法開(kāi)發(fā)標(biāo)簽中心數(shù)據(jù)血緣數(shù)據(jù)清洗數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)開(kāi)發(fā)數(shù)據(jù)治理智能通風(fēng)管控電力安全監(jiān)控智能工作面數(shù)據(jù)資產(chǎn)數(shù)據(jù)質(zhì)量數(shù)據(jù)采集中臺(tái)支持

·數(shù)據(jù)互通中臺(tái)支持

·數(shù)據(jù)互通中臺(tái)支持

·數(shù)據(jù)支撐中臺(tái)支持

·數(shù)據(jù)支撐15煤礦全域數(shù)據(jù)中心--數(shù)據(jù)中臺(tái)/大數(shù)據(jù)平臺(tái)大數(shù)據(jù)應(yīng)用領(lǐng)導(dǎo)駕駛艙高風(fēng)險(xiǎn)預(yù)警工業(yè)態(tài)勢(shì)感知應(yīng)急指揮調(diào)度智能開(kāi)采掘進(jìn)業(yè)務(wù)數(shù)據(jù)數(shù)據(jù)源數(shù)據(jù)集成數(shù)據(jù)開(kāi)發(fā)平臺(tái)SQLETLShellSpark

appMLAB數(shù)據(jù)集市數(shù)據(jù)資產(chǎn)數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)模型數(shù)據(jù)整合質(zhì)量監(jiān)控?cái)?shù)據(jù)血緣數(shù)據(jù)安全元數(shù)據(jù)管理數(shù)據(jù)服務(wù)

化能力共

享統(tǒng)一標(biāo)準(zhǔn)清洗融合建模挖掘大數(shù)據(jù)計(jì)算平臺(tái)數(shù)據(jù)倉(cāng)庫(kù)ODSSTDDWDDM數(shù)據(jù)同步數(shù)據(jù)同步數(shù)據(jù)治理平臺(tái)關(guān)系型數(shù)據(jù)庫(kù)拿拿煤礦全域數(shù)據(jù)中心--數(shù)據(jù)中臺(tái)/大數(shù)據(jù)平臺(tái)數(shù)據(jù)應(yīng)用數(shù)據(jù)開(kāi)發(fā)平臺(tái)大數(shù)據(jù)計(jì)算平臺(tái)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)集成業(yè)務(wù)數(shù)據(jù)數(shù)據(jù)治理平臺(tái)數(shù)據(jù)服務(wù)總線

+業(yè)務(wù)能力拿拿數(shù)據(jù)共享交換平臺(tái)數(shù)據(jù)同步拿拿外部數(shù)據(jù)關(guān)系型數(shù)據(jù)庫(kù)分析型數(shù)據(jù)庫(kù)業(yè)務(wù)庫(kù)n業(yè)務(wù)庫(kù)1前置庫(kù)

前置庫(kù)拿拿ETL

ETL

數(shù)據(jù)交換網(wǎng)關(guān)數(shù)據(jù)交換網(wǎng)關(guān)根據(jù)智能化煤礦(井工)分類、分級(jí)技術(shù)條件與評(píng)價(jià)標(biāo)準(zhǔn)，切實(shí)提升煤礦行業(yè)數(shù)字化指標(biāo)，實(shí)現(xiàn)智能化煤礦建設(shè)。

煤礦企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

實(shí)現(xiàn)目標(biāo)18指標(biāo)名稱計(jì)算方法數(shù)據(jù)服務(wù)分項(xiàng)分?jǐn)?shù)=a1+a2+a3a1.礦井地質(zhì)、工程等資料實(shí)現(xiàn)了數(shù)字化

，且數(shù)據(jù)進(jìn)行了合理的分類與存儲(chǔ)

，數(shù)據(jù)見(jiàn)交互方式合理,得0~40分；a2.文件類數(shù)據(jù)采用FTP進(jìn)行交互

，音頻數(shù)據(jù)采用SIP,RIP和RTSP協(xié)議實(shí)現(xiàn)

，非標(biāo)準(zhǔn)工控類設(shè)備數(shù)據(jù)采用OPC/OPC

UA

標(biāo)準(zhǔn)實(shí)現(xiàn)

，對(duì)于環(huán)境類數(shù)據(jù)

，井下人員數(shù)據(jù)、非標(biāo)準(zhǔn)機(jī)電設(shè)備檢測(cè)控制類數(shù)據(jù)采用行業(yè)統(tǒng)一的數(shù)據(jù)交換標(biāo)準(zhǔn)規(guī)范

協(xié)議,得0~40分；a3.具有合理的數(shù)據(jù)源分析屬性、產(chǎn)生層級(jí)及交互層次規(guī)范

，得0~20分；

大數(shù)據(jù)中心的數(shù)據(jù)服務(wù)功能及健全程度評(píng)價(jià)指標(biāo)見(jiàn)表7所示。表28數(shù)據(jù)中心指標(biāo)評(píng)價(jià)方法指標(biāo)名稱計(jì)算方法數(shù)據(jù)服務(wù)分項(xiàng)分?jǐn)?shù)=a1+a2+a3a1.礦井各類資料均實(shí)現(xiàn)了數(shù)字化

，且數(shù)據(jù)進(jìn)行了合理的分類與存儲(chǔ)

，數(shù)據(jù)間交互方式合理,得0~40分；

a2.采用行業(yè)統(tǒng)一的數(shù)據(jù)交換標(biāo)準(zhǔn)規(guī)范協(xié)議

，得0~40分；a3.具有全面的數(shù)據(jù)分類屬性、產(chǎn)生層級(jí)及交互層次規(guī)范

，得0~20分；

大數(shù)據(jù)中心的數(shù)據(jù)服務(wù)功能及健全程度評(píng)價(jià)指標(biāo)見(jiàn)表7所示。表7數(shù)據(jù)中心指標(biāo)評(píng)價(jià)方法根據(jù)智能化煤礦(井工)分類、分級(jí)技術(shù)條件與評(píng)價(jià)標(biāo)準(zhǔn)，切實(shí)提升煤礦行業(yè)數(shù)字化指標(biāo)，實(shí)現(xiàn)智能化煤礦建設(shè)。

煤礦企業(yè)大數(shù)據(jù)平臺(tái)

（數(shù)據(jù)中臺(tái)）

實(shí)現(xiàn)目標(biāo)19

智慧

（數(shù)字）

礦山

，

煤礦企業(yè)的發(fā)展方向煤礦企業(yè)大數(shù)據(jù)平臺(tái)/數(shù)據(jù)中臺(tái)建設(shè)四維度：實(shí)現(xiàn)海量數(shù)據(jù)治理

整合

，對(duì)數(shù)據(jù)進(jìn)行

清洗比對(duì)加工、存

儲(chǔ)和交互

，確保大

數(shù)據(jù)應(yīng)用分析的準(zhǔn)

確性數(shù)據(jù)采集管理自動(dòng)

化

，實(shí)現(xiàn)生產(chǎn)數(shù)據(jù)、

業(yè)務(wù)數(shù)據(jù)、管理數(shù)

據(jù)的全面、實(shí)時(shí)、多結(jié)構(gòu)自動(dòng)采集降低數(shù)據(jù)使用門檻、

提升數(shù)據(jù)使用效率，

打破數(shù)據(jù)孤島

，全

面支持高層決策分

析和創(chuàng)新業(yè)務(wù)應(yīng)用四、數(shù)據(jù)分析/數(shù)據(jù)

使用智能化統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)

，快

速建立分析模型

，

挖掘有用價(jià)值

，推

動(dòng)管理升級(jí)

，預(yù)測(cè)

未來(lái)發(fā)展趨勢(shì)三、數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一

化/模型開(kāi)發(fā)簡(jiǎn)單化二、數(shù)據(jù)治理/數(shù)

據(jù)整合加工流程化一、數(shù)據(jù)采集管

理自動(dòng)化采用統(tǒng)一的數(shù)據(jù)接入模式

，

以標(biāo)準(zhǔn)化、

模塊化的方式進(jìn)行多源異構(gòu)數(shù)據(jù)資源的接入

，解決應(yīng)急管理信息資

源在集中匯聚時(shí)面臨的分散孤立、

源頭多樣、

跨網(wǎng)傳輸?shù)葐?wèn)題

，為應(yīng)急數(shù)據(jù)資源的匯聚集中、

統(tǒng)一標(biāo)準(zhǔn)化

處理和信息資源池構(gòu)建提供源數(shù)據(jù)支撐。新型NoSQL數(shù)據(jù)庫(kù)文件系統(tǒng)開(kāi)源大數(shù)據(jù)平臺(tái)一、

全域數(shù)據(jù)中心建設(shè)--數(shù)據(jù)集成全量抽取實(shí)時(shí)增量抽取時(shí)間戳增量抽取實(shí)時(shí)日志增量抽取全量覆蓋追加Append寫入沖突行覆蓋忽略沖突行關(guān)系型數(shù)據(jù)庫(kù)其他類型數(shù)據(jù)源其他格式數(shù)據(jù)數(shù)據(jù)接入系統(tǒng)晶數(shù)據(jù)倉(cāng)庫(kù)對(duì)象存儲(chǔ)數(shù)據(jù)庫(kù)直觀易用的B/S用戶界面是DataBridge區(qū)別于其它同類產(chǎn)品的重要特色。

DataBridge屏蔽了復(fù)雜的數(shù)據(jù)操作過(guò)程，無(wú)需高級(jí)DBA或技術(shù)人員提供咨詢或編寫不透明的定制腳本代碼

，通過(guò)簡(jiǎn)單的界面操作

，就可實(shí)現(xiàn)大部分?jǐn)?shù)據(jù)轉(zhuǎn)

換整合的應(yīng)用場(chǎng)景。

同時(shí)可根據(jù)業(yè)務(wù)需要周期性的對(duì)作業(yè)進(jìn)行自動(dòng)調(diào)度

，無(wú)需人工干預(yù)。完全基于B/S用戶界面、

簡(jiǎn)單易用晶國(guó)產(chǎn)數(shù)據(jù)庫(kù)支持--數(shù)據(jù)集成國(guó)產(chǎn)化大數(shù)據(jù)平臺(tái)與數(shù)據(jù)庫(kù)引擎、

消息中間件對(duì)接：n

HW：

HDFS、

HBASE、

HIVE、

OBS、

Elasticsearch、

gaussDB100、

gaussDB200、

gaussDB300n

阿里：

MaxCompute(ODPS)、ADS、

RDS、

OTS、

OSS、

Datahub、

DRDS、

HibridDB(PetaData)n

中興：

HDFS、

HBASE、

HIVEn

南大通用：

GBase8a/8s/8tn

達(dá)夢(mèng)：

DM7n

人大金倉(cāng)：

KingbaseES

V8n

金碟/中興/H為消息中間件

：AMQ消息中間件Apusi

c

V9.0、

中興kafka、

H為kafka、多源異構(gòu)數(shù)據(jù)采集轉(zhuǎn)換--數(shù)據(jù)集成n

支持主流數(shù)據(jù)庫(kù)和大數(shù)據(jù)平臺(tái)

，如Oracle、

MySQL、

SQLServer、

Db2、

Sybase、

PostgreSQL、TeraData、

Redis、

MongoDB、

REST、

達(dá)夢(mèng)、

南大通用GBase8t、

HDFS、

HBase、

Hive、GreenPlum、

H為Hive、

H為L(zhǎng)ibrA等；n

阿里云的RDS、

DRDS、

MaxCompute、

AnalyticDB、

DataHub、

OTS、

OSS等組件的數(shù)據(jù)互通；n

支持文件搬移與文件解析

，

FileServer協(xié)議支持SFTP、

SMB、

FTP、

OBS、

OSS等

，

文件解析支持諸如xml、

txt、

csv和Excel等格式

，

支持zip包；n

支持全量高速同步以及增量同步

，

文件同步；n

支持Oracle

dmp文件導(dǎo)入；

支持?jǐn)?shù)據(jù)加密傳輸

，保證數(shù)據(jù)傳輸過(guò)程中不泄密。七大組件數(shù)據(jù)/服務(wù)資源目錄、

數(shù)據(jù)交換中

控、數(shù)據(jù)交換總線、

數(shù)據(jù)交換網(wǎng)關(guān)

、API服務(wù)中控、

API服務(wù)網(wǎng)關(guān)、

數(shù)

據(jù)ETL工具。高性能?

單節(jié)點(diǎn)120MB/S、

30萬(wàn)條/秒

（工信部下屬第三方測(cè)試結(jié)果）?

支持集群高可靠?

支持自動(dòng)斷點(diǎn)續(xù)傳?

支持?jǐn)嚅_(kāi)網(wǎng)絡(luò)或系統(tǒng)重啟后數(shù)據(jù)不丟失高安全?

支持?jǐn)?shù)據(jù)傳輸過(guò)程加解密?

專利技術(shù)實(shí)現(xiàn)非侵入式增量數(shù)據(jù)提取?

基于大數(shù)據(jù)平臺(tái)支持安全交換高易用?

目錄驅(qū)動(dòng)的交換?

多源異構(gòu)數(shù)據(jù)的匯聚、

交換?

庫(kù)級(jí)交換、

匯聚

交換網(wǎng)關(guān)API網(wǎng)關(guān)

前置庫(kù)

開(kāi)放服務(wù)

ETL

業(yè)務(wù)系統(tǒng)

部門2

交換網(wǎng)關(guān)API網(wǎng)關(guān)

前置庫(kù)

開(kāi)放服務(wù)

ETL

業(yè)務(wù)系統(tǒng)

部門N數(shù)據(jù)資源目錄/服務(wù)資源目錄二、

數(shù)據(jù)交換共享系統(tǒng)

交換網(wǎng)關(guān)API網(wǎng)關(guān)前置庫(kù)

開(kāi)放服務(wù)

ETL

數(shù)據(jù)交換中控API服務(wù)中控?cái)?shù)據(jù)交換總線中心數(shù)據(jù)庫(kù)業(yè)務(wù)系統(tǒng)部門1。

。

?；驍?shù)據(jù)標(biāo)簽結(jié)構(gòu)化數(shù)據(jù)比對(duì)非結(jié)構(gòu)化數(shù)據(jù)比對(duì)結(jié)構(gòu)與非結(jié)構(gòu)化融合比對(duì)三、

數(shù)據(jù)治理建設(shè)內(nèi)容數(shù)據(jù)標(biāo)識(shí)數(shù)據(jù)探查數(shù)據(jù)比對(duì)數(shù)據(jù)提取數(shù)據(jù)清洗表級(jí)探查字段級(jí)探查非結(jié)構(gòu)化

數(shù)據(jù)提取視頻、

圖

像數(shù)據(jù)提文本數(shù)據(jù)

提取音頻數(shù)據(jù)

提取結(jié)構(gòu)化數(shù)

據(jù)提取數(shù)據(jù)格轉(zhuǎn)數(shù)據(jù)校驗(yàn)數(shù)據(jù)過(guò)濾數(shù)據(jù)去重取26過(guò)濾日期值清洗數(shù)據(jù)清洗即可實(shí)現(xiàn)對(duì)結(jié)構(gòu)化和半結(jié)構(gòu)化清洗

，

如對(duì)原始庫(kù)中的數(shù)據(jù)靜態(tài)數(shù)據(jù)清洗

，

也可以對(duì)流數(shù)據(jù)進(jìn)行清洗。數(shù)據(jù)治理數(shù)據(jù)清洗原始庫(kù)消息隊(duì)列資源庫(kù)消息隊(duì)列離線數(shù)據(jù)實(shí)時(shí)消息流式數(shù)據(jù)清洗離線數(shù)據(jù)清洗編碼轉(zhuǎn)換去重校驗(yàn)格式轉(zhuǎn)換編碼核驗(yàn)字段長(zhǎng)度清洗值域清洗時(shí)間值清洗多表處理多表合并實(shí)時(shí)業(yè)務(wù)表表級(jí)處理分區(qū)標(biāo)準(zhǔn)化多列合并波動(dòng)監(jiān)控表大小波動(dòng)檢測(cè)表行數(shù)波動(dòng)檢測(cè)值監(jiān)控布爾分析完整性分析字符串處理去除空白字符去除特定字符值清洗數(shù)據(jù)脫敏同義詞替換數(shù)據(jù)清洗組件唯一性分析數(shù)值分布分析外鍵檢查分析日期分析日期范圍分析數(shù)據(jù)分組合并空值填充列均值波動(dòng)監(jiān)測(cè)列值和波動(dòng)檢測(cè)枚舉值分析數(shù)值分析漢語(yǔ)轉(zhuǎn)拼音字符串截取身份證信息提取日期拆分長(zhǎng)度過(guò)濾正則過(guò)濾標(biāo)準(zhǔn)值域過(guò)濾空值過(guò)濾轉(zhuǎn)為Unix時(shí)間戳日期標(biāo)準(zhǔn)化電話號(hào)碼清洗JavaScript清洗歷史拉鏈表轉(zhuǎn)換為字符串全角半角轉(zhuǎn)換身份證校驗(yàn)轉(zhuǎn)換列最值波動(dòng)檢測(cè)標(biāo)準(zhǔn)值域分析大小寫轉(zhuǎn)換SQL清洗拆分列數(shù)據(jù)標(biāo)識(shí)是利用標(biāo)簽庫(kù)中已經(jīng)建設(shè)好的規(guī)則

，對(duì)數(shù)據(jù)進(jìn)行比對(duì)分析和模型計(jì)算

，將符合規(guī)則的數(shù)據(jù)進(jìn)行標(biāo)識(shí)

，

為進(jìn)一步

的數(shù)據(jù)使用提供支撐

，數(shù)據(jù)標(biāo)識(shí)支持表標(biāo)識(shí)

，列標(biāo)識(shí)

，數(shù)據(jù)規(guī)則獲取規(guī)則解析規(guī)則執(zhí)行結(jié)果輸出1、創(chuàng)建標(biāo)簽類目3、

配置標(biāo)簽打標(biāo)規(guī)則2、標(biāo)簽類目中創(chuàng)建標(biāo)簽4、

配置引用數(shù)據(jù)數(shù)據(jù)治理數(shù)據(jù)標(biāo)識(shí)列標(biāo)識(shí)待標(biāo)識(shí)數(shù)據(jù)標(biāo)簽庫(kù)表標(biāo)識(shí)條目標(biāo)識(shí)條目標(biāo)識(shí)。標(biāo)簽引擎兩級(jí)可視化數(shù)據(jù)清洗與挖掘任務(wù)工作流

清洗任務(wù)配置兩級(jí)可視化數(shù)據(jù)治理數(shù)據(jù)管控系統(tǒng)數(shù)據(jù)管控要實(shí)現(xiàn)對(duì)數(shù)據(jù)資源池?cái)?shù)據(jù)的管理和控制

，功能主要有數(shù)據(jù)標(biāo)準(zhǔn)（數(shù)據(jù)元）

管理、

數(shù)據(jù)字典管理、

數(shù)據(jù)質(zhì)量管理、

數(shù)據(jù)血緣等。創(chuàng)建并維護(hù)數(shù)據(jù)模型中使用的數(shù)據(jù)字典

，制定并管理平臺(tái)遵循的統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)

，幫助平臺(tái)管理者和數(shù)據(jù)管理者管控治理后數(shù)據(jù)的一致性和數(shù)據(jù)質(zhì)量。建立系統(tǒng)數(shù)據(jù)質(zhì)量評(píng)估標(biāo)準(zhǔn)

，從完整性、一致性、準(zhǔn)確性、及時(shí)性、唯一性等方面評(píng)估數(shù)據(jù)是否達(dá)到預(yù)期設(shè)定的質(zhì)量要求。全鏈的數(shù)據(jù)血緣分析和展示

，通過(guò)數(shù)據(jù)血緣清晰的查看數(shù)據(jù)在數(shù)據(jù)源庫(kù)、原始庫(kù)、資源庫(kù)、主題庫(kù)和專題庫(kù)之間的總體流向。對(duì)數(shù)據(jù)標(biāo)準(zhǔn)定義、維度定義、維值代碼定義、公共統(tǒng)計(jì)規(guī)則的管理和維護(hù)

，為用戶制定后續(xù)的標(biāo)準(zhǔn)化和歸一化的清洗規(guī)則提供強(qiáng)有力的參考依據(jù)。數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)字典管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)血緣管理數(shù)據(jù)治理數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)數(shù)據(jù)標(biāo)準(zhǔn):數(shù)據(jù)拍標(biāo)準(zhǔn)

(勘據(jù)元)規(guī)范,

是對(duì)數(shù)據(jù)類型

，通過(guò)定義、標(biāo)識(shí)、表示以及允許值等一系列屬性描述的數(shù)據(jù)單元。

它是數(shù)據(jù)資源池?cái)?shù)據(jù)清洗、標(biāo)準(zhǔn)化、以及數(shù)據(jù)質(zhì)量監(jiān)控的基礎(chǔ)依據(jù)數(shù)據(jù)治理建設(shè)過(guò)程中要對(duì)數(shù)據(jù)元素進(jìn)行標(biāo)準(zhǔn)制定、對(duì)數(shù)據(jù)字典進(jìn)行標(biāo)準(zhǔn)制定數(shù)據(jù)標(biāo)準(zhǔn)體系數(shù)據(jù)字典標(biāo)準(zhǔn)數(shù)據(jù)元素標(biāo)準(zhǔn)數(shù)據(jù)治理建設(shè)要求實(shí)現(xiàn)對(duì)數(shù)據(jù)血緣的管理

，數(shù)據(jù)血緣管理了數(shù)據(jù)從哪里來(lái)到哪里去的完整鏈路

，如下圖所示

,通過(guò)數(shù)據(jù)血緣查詢可獲取主題庫(kù)“事件事故基本表”從哪些系統(tǒng)融合了數(shù)據(jù)

，

又被哪些業(yè)務(wù)系統(tǒng)所使用數(shù)據(jù)治理數(shù)據(jù)血緣管理l

一張圖看清每個(gè)數(shù)據(jù)的來(lái)龍去脈l

基于血緣圖進(jìn)行數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全問(wèn)題溯源、

影響分析數(shù)據(jù)治理

“

全鏈路

”數(shù)據(jù)血緣建立數(shù)據(jù)質(zhì)量管理體系

，實(shí)現(xiàn)數(shù)據(jù)治理平臺(tái)數(shù)據(jù)質(zhì)量的

有效管控

，管理維度包括：

完整性：

主要包括屬性缺失、

記錄缺失、

字段缺失幾個(gè)方面

合效性：

主要包括格式、

類型、

值域、

和業(yè)務(wù)規(guī)則的有效性

及時(shí)性

：指數(shù)據(jù)刷新、

修改和提取等的及時(shí)和快速性

一致性

：數(shù)據(jù)含義一致性、

數(shù)據(jù)格式一致性、

數(shù)據(jù)傳輸不丟失

，指

統(tǒng)一數(shù)據(jù)來(lái)源、

冗余存儲(chǔ)和統(tǒng)一口徑的一致性

唯一性

：指主鍵唯一和候選鍵唯一兩個(gè)方面

，

主鍵重復(fù)數(shù)據(jù)檢核

，

主外鍵是否缺失檢核

準(zhǔn)確性

：指計(jì)量誤差、

度量單位等方面的精確度數(shù)據(jù)治理數(shù)據(jù)質(zhì)量管理體系數(shù)據(jù)質(zhì)

量準(zhǔn)確性合規(guī)性唯一性及時(shí)性完整性一致性序號(hào)表名稱表中文名稱字段名稱字段類型字段注釋檢查類

型有無(wú)質(zhì)量

問(wèn)題問(wèn)題分類問(wèn)題記錄

數(shù)表總記錄

數(shù)1t_yj_tfsj_sb_r突發(fā)事件表IDvarchar(64)ID(主鍵)一致性Y一致性:數(shù)據(jù)不一

致9584217932t_yj_tfsj_sb_r突發(fā)事件表TITLEvarchar(64)標(biāo)題完整性Y123135183t_yj_tfsj_sb_r突發(fā)事件表varchar(64)災(zāi)害類型完整性Y完整性:空值1366277434t_yj_tfsj_sb_r突發(fā)事件表REPORT_MANvarchar(64)報(bào)送人完整性Y完整性:空值141970320314025t_yj_tfsj_sb_r突發(fā)事件表REPORT_TIMEdatetime報(bào)送時(shí)間完整性Y完整性:

值658988659004檢核的表檢核的字段及規(guī)則檢核的結(jié)果說(shuō)明及問(wèn)題歸類樣例：基于數(shù)據(jù)質(zhì)量檢核表或字段進(jìn)行概況統(tǒng)計(jì)的報(bào)表

，展現(xiàn)全局資源池資料狀態(tài)數(shù)據(jù)質(zhì)量統(tǒng)計(jì)報(bào)告，全局分析數(shù)據(jù)治理質(zhì)量情況，了解資源池整體數(shù)據(jù)質(zhì)量情況數(shù)據(jù)治理數(shù)據(jù)質(zhì)量報(bào)告對(duì)開(kāi)戶日期進(jìn)行完整性檢查

，檢查數(shù)據(jù)的

缺失情況統(tǒng)計(jì)信貸系統(tǒng)和核心系統(tǒng)證件號(hào)一致,客戶

號(hào)不一致的記錄數(shù)。對(duì)客戶名稱進(jìn)行完整性檢查

，檢查客戶名

稱是否存在空值。對(duì)客戶名稱進(jìn)行完整性檢查

，檢查客戶名

稱是否存在空值。對(duì)開(kāi)戶日期進(jìn)行完整性檢查

，檢查數(shù)據(jù)的

缺失情況樣例：基于突發(fā)事件表五個(gè)字段進(jìn)行一致性和完整性的質(zhì)量檢查及表級(jí)數(shù)據(jù)質(zhì)量明細(xì)報(bào)告selectcount(*)fromCUSVAA

a

join

CUSM

b

ona.cust_no

=b.cust_acct_nowhereb.CUSTOMER_TYPE

in

('02','03')andtrim(a.

NAME)

is

null;selectcount(*)from

MICMajoin

CUSM

b

ona.customer_no

=b.prim_acctwhereb.CUSTOMER_TYPE='01'and

trim(a.NAME_2)

is

null;selectcount(*)from

ind_infoa

join

CUSVDD

b

ona.certid

=trim(substr(b.id1,

1,32))wherea.customerid<>substr(b.cust_no,8,9)selectcount(*)fromCUSMwhereCREATE_DT

is

nullor

CREATE_DT

=0;selectcount(*)from

CUSVCCwhereOPEN_DATE_01

is

nullorOPEN_DATE_01

=0;對(duì)公客戶及金融機(jī)構(gòu)客戶共13518對(duì)私證件及姓名記錄數(shù)627743完整性:空值檢查sql檢查概述TYPE備注四、

大數(shù)據(jù)計(jì)算平臺(tái)軟件大數(shù)據(jù)計(jì)算平臺(tái)（以下簡(jiǎn)稱）

，采用內(nèi)存迭代計(jì)算技術(shù)

，集SQL、

MR、

Graph、

ML多種計(jì)算

能力于一體

，

可以提供TB/PB級(jí)別以上的數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)分析處理能力。數(shù)據(jù)倉(cāng)庫(kù)

大數(shù)據(jù)應(yīng)用數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)SQL

、海量數(shù)據(jù)存儲(chǔ)MapReduce

、

Graph

MLLIBl0編程基礎(chǔ)大數(shù)據(jù)算法開(kāi)發(fā)l算法開(kāi)發(fā)整體效率提升2倍以上l一站式數(shù)據(jù)開(kāi)發(fā)、測(cè)試、生產(chǎn)、運(yùn)維環(huán)境數(shù)據(jù)開(kāi)發(fā)(Studio)全可視化數(shù)據(jù)/算法開(kāi)發(fā)算法開(kāi)發(fā)數(shù)據(jù)開(kāi)發(fā)服務(wù)共享中控能力共享平臺(tái)

能力共享平臺(tái)

：

以信息目錄的

形式提供數(shù)據(jù)及能力展示的窗

口

，

并提供服務(wù)檢索能力；

服務(wù)共享中控：

提供服務(wù)開(kāi)發(fā)、

管理、

運(yùn)維、

統(tǒng)計(jì)的能力；

API服務(wù)網(wǎng)關(guān)：

提供轉(zhuǎn)發(fā)能力

，

具備服務(wù)路由

，

協(xié)議轉(zhuǎn)換

，

服

務(wù)流控

，插件熱加載等機(jī)制。開(kāi)放服務(wù)

六、

數(shù)據(jù)服務(wù)總線開(kāi)發(fā)與運(yùn)維人員服務(wù)開(kāi)發(fā)服務(wù)調(diào)用運(yùn)維監(jiān)控權(quán)限控制DataMallCSP

Gate

API服務(wù)網(wǎng)關(guān)DataMallCSP

Gate

API服務(wù)網(wǎng)關(guān)DataMallCSP

Gate

API服務(wù)網(wǎng)關(guān)業(yè)務(wù)用戶服務(wù)發(fā)布

服務(wù)申請(qǐng)

服務(wù)授權(quán)...

...

數(shù)據(jù)庫(kù)開(kāi)放服務(wù)開(kāi)放服務(wù)數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)

對(duì)服務(wù)的全生命周期進(jìn)行有效管理

管控目標(biāo)：

服務(wù)標(biāo)準(zhǔn)化、

服務(wù)松耦合、

服務(wù)可重用、

服務(wù)透明性及服務(wù)可發(fā)

現(xiàn)

通過(guò)對(duì)服務(wù)質(zhì)量的管控

，進(jìn)而實(shí)現(xiàn)對(duì)

開(kāi)發(fā)商（服務(wù)提供者和服務(wù)消費(fèi)者）

進(jìn)行量化管理服務(wù)開(kāi)發(fā)、服務(wù)發(fā)布服務(wù)生命周期管理服務(wù)訂閱、服務(wù)調(diào)用解決管理難：

服務(wù)全生命周期管理服務(wù)生命周期管理審計(jì)、優(yōu)化提升運(yùn)行質(zhì)量監(jiān)控以用戶服務(wù)的安全為首要任務(wù)

，提供多種有效防護(hù)來(lái)保障用戶服務(wù)的安全：

以RESTful

API的方式對(duì)外提供間接的數(shù)

據(jù)訪問(wèn)服務(wù)，

隱藏服務(wù)的真實(shí)地址，

降低服務(wù)開(kāi)放風(fēng)險(xiǎn)；

提供服務(wù)訪問(wèn)身份鑒權(quán)機(jī)制

，具有防偽造和防重放功能，

防止對(duì)服務(wù)的非法訪問(wèn)；

提供服務(wù)申請(qǐng)審批機(jī)制，

防止未經(jīng)授權(quán)的

非法訪問(wèn)；

提供服務(wù)調(diào)用限速機(jī)制

，抵抗對(duì)服務(wù)的高并發(fā)沖擊。解決管理難：

全面的安全訪問(wèn)防護(hù)說(shuō)明：

服務(wù)級(jí)限速：

服務(wù)創(chuàng)建時(shí)

，對(duì)外整個(gè)服務(wù)的閾值限制

應(yīng)用級(jí)限速

：應(yīng)用申請(qǐng)服務(wù)時(shí)

，該服務(wù)對(duì)該應(yīng)用的閾值限制解決管理難：

訪問(wèn)限速控制服務(wù)級(jí)限速應(yīng)用級(jí)限速API服務(wù)網(wǎng)關(guān)限速器解決使用難：

多種協(xié)議相互轉(zhuǎn)換通過(guò)API網(wǎng)關(guān)

，可基于新式資源創(chuàng)建新API服務(wù)

，然后使用靈活的動(dòng)態(tài)數(shù)據(jù)/協(xié)議轉(zhuǎn)換功

能，

以目標(biāo)服務(wù)期望使用的協(xié)議或語(yǔ)言生成請(qǐng)求。協(xié)議轉(zhuǎn)換支持常用協(xié)議服務(wù)的接入和開(kāi)放（

RESTFUL/Web

Service/HTTP/DataBase）可擴(kuò)展支持定制化的協(xié)議轉(zhuǎn)換

，未來(lái)將直接支持更多通用協(xié)議。管理開(kāi)發(fā)

運(yùn)維安全

高可靠高性能/catalog

/payment

/economic能力共享平臺(tái)數(shù)據(jù)庫(kù)服務(wù)合作方應(yīng)用互聯(lián)網(wǎng)應(yīng)用移動(dòng)應(yīng)用云服務(wù)43部門1部門1API

Server服務(wù)共享中控

高性能保障服務(wù)質(zhì)量

，單節(jié)點(diǎn)4K

QPS

，支持不

同用戶獨(dú)立設(shè)置調(diào)用速率

分布式架構(gòu)

，采用多實(shí)例部署方式

，避免單點(diǎn)故

障導(dǎo)致整個(gè)系統(tǒng)的不可用

水平擴(kuò)展

，轉(zhuǎn)發(fā)能力隨節(jié)點(diǎn)的增加呈線性增長(zhǎng)

，

擴(kuò)容過(guò)程無(wú)需繁瑣操作

，轉(zhuǎn)發(fā)業(yè)務(wù)不中斷

采用負(fù)載均衡組件

，

可以在業(yè)務(wù)高峰時(shí)自動(dòng)進(jìn)行

業(yè)務(wù)分流

，提高平臺(tái)的整體性能

API自動(dòng)生成功能。

能夠根據(jù)數(shù)據(jù)庫(kù)表數(shù)據(jù)信息

自動(dòng)生成Rest

API對(duì)外提供服務(wù)部門NAPI

Server部門N部門2API

Server部門M部門M應(yīng)用M部門2解決使用難：

高性能、

高可靠、

按需擴(kuò)展等↓API網(wǎng)關(guān)1單節(jié)點(diǎn)4KQPS根據(jù)數(shù)據(jù)元信息自動(dòng)

生成API↓API網(wǎng)關(guān)M↓API網(wǎng)關(guān)N↓API網(wǎng)關(guān)2能力共享平臺(tái)解決運(yùn)維難：

服務(wù)質(zhì)量可度量量化是管理基礎(chǔ)：用戶可直觀地監(jiān)控API服務(wù)的調(diào)用情況

，包括耗時(shí)統(tǒng)計(jì)、

調(diào)用統(tǒng)計(jì)和調(diào)用記錄等，

提供按小時(shí)、

天、

月、

年周期性的調(diào)用軌跡跟蹤和分析

，

為服務(wù)優(yōu)化和再開(kāi)發(fā)提供數(shù)據(jù)支持根據(jù)治理需求設(shè)計(jì)度量指標(biāo)：

統(tǒng)計(jì)接口響應(yīng)超時(shí)

統(tǒng)計(jì)接口超并發(fā)

統(tǒng)計(jì)接口平均響應(yīng)時(shí)間

記錄接口非授權(quán)調(diào)用明細(xì)

統(tǒng)計(jì)應(yīng)用系統(tǒng)訪問(wèn)次數(shù)

統(tǒng)計(jì)接口被訪問(wèn)次數(shù)TOP10

統(tǒng)計(jì)接口訪問(wèn)次數(shù)服務(wù)運(yùn)維可預(yù)測(cè)：

容量估算、提前擴(kuò)容

峰值預(yù)測(cè)、提前保障

改“事后補(bǔ)救”為“事前預(yù)警”服務(wù)運(yùn)行全程監(jiān)控

調(diào)用次數(shù)趨勢(shì)圖

報(bào)文大小趨勢(shì)圖

平均相應(yīng)時(shí)間趨勢(shì)圖解決運(yùn)維難：

系統(tǒng)容量可預(yù)測(cè)按照指定時(shí)間段精確查看服務(wù)調(diào)用信息。如用最

頻繁的時(shí)段

，側(cè)面反映業(yè)務(wù)的熱度

，可考慮安排更多的窗口服務(wù)人員；可以查看任意時(shí)間段內(nèi)的

調(diào)用記錄通過(guò)API的延時(shí)、調(diào)用結(jié)果等健康信息查看。一個(gè)服務(wù)某個(gè)時(shí)間段內(nèi)耗時(shí)較長(zhǎng)的所有記錄

，

可以聯(lián)系調(diào)用方和服務(wù)方

，讓他們分析下問(wèn)題

的原因。服務(wù)故障探測(cè)

，故障告警功能解決運(yùn)維難：

多維度分析時(shí)間維度

01

02

API服務(wù)維度指定一個(gè)或者多個(gè)API的調(diào)用情況。例如一個(gè)服務(wù)某時(shí)間段內(nèi)被哪個(gè)應(yīng)用調(diào)用的次數(shù)最多，可以針對(duì)應(yīng)用進(jìn)行SLA（服務(wù)質(zhì)量）保障按照調(diào)用部門或提供部門進(jìn)行分析

，可以對(duì)部

門提供服務(wù)的數(shù)目進(jìn)行排序

，可提升部門貢獻(xiàn)

服務(wù)的積極性部門維度

0304健康維度七、

數(shù)據(jù)資源目錄服務(wù)系統(tǒng)“根據(jù)客戶的需求定制性開(kāi)發(fā)

，

專門用來(lái)做數(shù)據(jù)查詢服務(wù)、

數(shù)據(jù)統(tǒng)計(jì)服務(wù)、

數(shù)據(jù)比對(duì)訂閱服務(wù)和數(shù)

據(jù)推送服務(wù)軟件功能模塊”信息資源目錄數(shù)據(jù)資源目錄服務(wù)系統(tǒng)數(shù)據(jù)資源目錄服務(wù)提供目錄分類展示和資源目錄檢索

，

用戶可以按照主題類目、

行業(yè)類目和部門類目分類，

用戶可以按主題、

行業(yè)及部門分類瀏覽數(shù)據(jù)目錄或API服務(wù)目錄

，也可以按關(guān)鍵字搜索相關(guān)內(nèi)容。服務(wù)總線大數(shù)據(jù)平臺(tái)數(shù)據(jù)查詢服務(wù)!

!

!信息資源檢索統(tǒng)計(jì)分析數(shù)據(jù)編目數(shù)據(jù)推送服務(wù)授權(quán)共享注冊(cè)審核申請(qǐng)發(fā)布下線變更八、

可視化：

數(shù)據(jù)資產(chǎn)一張圖接入大盤：

全域數(shù)據(jù)高效接入服務(wù)大盤：

數(shù)據(jù)服務(wù)能力全景洞察四川電信企業(yè)級(jí)大數(shù)據(jù)中心整體規(guī)劃讓數(shù)據(jù)產(chǎn)生美！MaketheDataWonderful!目錄行業(yè)標(biāo)桿重點(diǎn)措施規(guī)劃思路回顧總結(jié)亞馬遜與數(shù)據(jù)湖AWS在云上為企業(yè)構(gòu)建數(shù)據(jù)湖提供服務(wù)收集和存儲(chǔ)任何類型的數(shù)據(jù)，在任何規(guī)模，并以低成本保護(hù)數(shù)據(jù)并防止未經(jīng)授權(quán)的訪問(wèn)目錄，搜索，并在中央存儲(chǔ)庫(kù)中查找相關(guān)數(shù)據(jù)。快速輕松地執(zhí)行新類型的數(shù)據(jù)分析使用廣泛的分析引擎進(jìn)行臨時(shí)分析，實(shí)時(shí)流，預(yù)測(cè)分析，人工智能（AI）和機(jī)器學(xué)習(xí)AWS上的數(shù)據(jù)湖可以幫助您AmazonKinesisAmazonS3AmazonGlacierIAMEncryptedDataSecurityTokenServiceAWSLambdaSearchIndexMetadataIndexAPIGatewayUsersUI-ElasticBeanstalkKMSCollect

&StoreCatalogue&SearchEntitlements&AccessControlsAPIs&UI數(shù)據(jù)湖（DataLake）的概念在2011年提出后被Gartner、哈佛大學(xué)等國(guó)際組織和學(xué)校發(fā)揚(yáng)光大，并被國(guó)內(nèi)外的多個(gè)企業(yè)如IBM、EMC、普華永道等所采用并實(shí)踐；數(shù)據(jù)湖被多個(gè)國(guó)際組織和企業(yè)所采用亞馬遜與數(shù)據(jù)湖Netflix（AWS構(gòu)建數(shù)據(jù)湖案例)應(yīng)用場(chǎng)景Netflix通過(guò)AWS構(gòu)建數(shù)據(jù)湖總體架構(gòu)全球領(lǐng)先的互聯(lián)網(wǎng)在線影視服務(wù)供應(yīng)商，在美國(guó)有超過(guò)3千萬(wàn)的訂閱用戶。AWS的通過(guò)云計(jì)算、數(shù)據(jù)湖吸引和支撐了Netflix這樣規(guī)模的客戶。S3作為數(shù)據(jù)湖可以針對(duì)不同的工作負(fù)載彈性配置多個(gè)Hadoop集群阿里巴巴與數(shù)據(jù)中臺(tái)阿里數(shù)據(jù)中臺(tái)，基于數(shù)據(jù)驅(qū)動(dòng)的理念統(tǒng)籌設(shè)計(jì)，融合全域數(shù)據(jù)并按垂直業(yè)務(wù)類型進(jìn)行劃分，完成服務(wù)化封裝。各業(yè)務(wù)前端根據(jù)商業(yè)訴求，彈性調(diào)用封裝后的數(shù)據(jù)能力，快速響應(yīng)市場(chǎng)變化，快速創(chuàng)新構(gòu)建數(shù)據(jù)中臺(tái)，賦能前端業(yè)務(wù)依托能力中臺(tái)，凸顯大數(shù)據(jù)價(jià)值ZJ移動(dòng)2018按照“能力為根、安全為本、價(jià)值為魂”原則，基于企業(yè)級(jí)大數(shù)據(jù)平臺(tái)積極探索集中化數(shù)據(jù)管理，對(duì)內(nèi)服務(wù)精益運(yùn)營(yíng)、對(duì)外賦能行業(yè)發(fā)展，實(shí)現(xiàn)價(jià)值變現(xiàn)和規(guī)模運(yùn)營(yíng)。平臺(tái)能力：企業(yè)級(jí)大數(shù)據(jù)平臺(tái)規(guī)模達(dá)到1400多臺(tái)，向各地市各部門開(kāi)放租戶超過(guò)100個(gè)，大數(shù)據(jù)應(yīng)用上線時(shí)間縮短至3天左右。數(shù)據(jù)能力：整合B/O/M三域數(shù)據(jù)資產(chǎn)，日新增數(shù)據(jù)140T600億+條；數(shù)據(jù)規(guī)模超過(guò)5PB，為集團(tuán)內(nèi)數(shù)據(jù)最多最全的省公司之一。模型能力：實(shí)現(xiàn)建模核心能力自主掌控，構(gòu)建基礎(chǔ)模型近2000多個(gè)。已建成客戶標(biāo)簽體系包括習(xí)慣偏好、消費(fèi)行為等7大類10萬(wàn)+標(biāo)簽。

產(chǎn)品平臺(tái)喜?

（拓客）慧?

（洞察）喜刷街喜轉(zhuǎn)盤城市經(jīng)濟(jì)地圖智慧精選信用分交通治堵城市規(guī)劃線下零售效能擺攤精靈（駐點(diǎn)直銷）人氣精靈（潛/熟客）選址精靈（加盟廳）喜傳單信?（風(fēng)控）天盾反欺詐金融驗(yàn)真商業(yè)選址能力中臺(tái)應(yīng)用服務(wù)接口：提供用戶畫像、推薦觸達(dá)、行業(yè)洞察、風(fēng)險(xiǎn)防控等6大類288個(gè)服務(wù)接口，月均調(diào)用超1.47億次。對(duì)內(nèi)：數(shù)據(jù)驅(qū)動(dòng)“智慧運(yùn)營(yíng)”對(duì)外：需求驅(qū)動(dòng)“價(jià)值運(yùn)營(yíng)”智慧應(yīng)用百花齊放：開(kāi)放用戶畫像、時(shí)機(jī)觸發(fā)、產(chǎn)品推薦等5大類46個(gè)服務(wù)接口，年支撐創(chuàng)新場(chǎng)景近30個(gè)，月均營(yíng)銷成功用戶數(shù)提升1倍。線上千人千面咪咕愛(ài)看視頻推薦手機(jī)營(yíng)業(yè)廳福利社地市官微微服務(wù)全域旅游商用產(chǎn)品全線拓展：拓客類產(chǎn)品業(yè)務(wù)布局初步成型，意向客戶超70家；客流、選址等洞察類拳頭產(chǎn)品收入突破千萬(wàn)；信用分創(chuàng)新風(fēng)控類產(chǎn)品已應(yīng)用于欠費(fèi)免停機(jī)場(chǎng)景，單客戶ARPU可提升1.64元目錄行業(yè)標(biāo)桿重點(diǎn)措施規(guī)劃思路回顧總結(jié)現(xiàn)狀分析數(shù)據(jù)中心建設(shè)現(xiàn)狀基于HADOOP架構(gòu)，建設(shè)形成具備6大能力的大數(shù)據(jù)中心平臺(tái)，有效支撐企業(yè)重點(diǎn)業(yè)務(wù)應(yīng)用。平臺(tái)架構(gòu)完成平臺(tái)擴(kuò)容，搭建了研發(fā)和生產(chǎn)環(huán)境分離的大數(shù)據(jù)基礎(chǔ)平臺(tái)，實(shí)現(xiàn)以租戶形式提供存儲(chǔ)和計(jì)算資源。數(shù)據(jù)匯聚有序推進(jìn)BOM域數(shù)據(jù)整合，已匯聚IT、網(wǎng)絡(luò)、平臺(tái)共39個(gè)系統(tǒng)約2.2P的數(shù)據(jù)數(shù)據(jù)管理構(gòu)建數(shù)據(jù)資產(chǎn)地圖，支撐數(shù)據(jù)資產(chǎn)的量化、可視化運(yùn)營(yíng)管理，模型注冊(cè)和數(shù)據(jù)處理的配置化管理，實(shí)現(xiàn)從數(shù)據(jù)管理到數(shù)據(jù)資產(chǎn)管理的提升。安全管理提供實(shí)時(shí)/離線加密服務(wù)，形成了加解密算法庫(kù)。數(shù)據(jù)服務(wù)提供標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)的統(tǒng)一開(kāi)放共享。平臺(tái)運(yùn)維搭建了統(tǒng)一的數(shù)據(jù)中心運(yùn)維平臺(tái)，實(shí)現(xiàn)了跨系統(tǒng)運(yùn)維資源的整合開(kāi)發(fā)工具提供了可視化組件，已經(jīng)支撐業(yè)管、電金、新媒體3個(gè)部門以及樂(lè)山分公司的數(shù)據(jù)應(yīng)用，以及資陽(yáng)、眉山分公司的應(yīng)用推廣模型設(shè)計(jì)資產(chǎn)目錄資產(chǎn)視圖問(wèn)題總結(jié)數(shù)據(jù)中心能力待改進(jìn)需求總結(jié)平臺(tái)架構(gòu)1、需要完善本地網(wǎng)的應(yīng)用支撐2、可視化管理、跨集群數(shù)據(jù)交換能力不足3、集中運(yùn)維、自動(dòng)化運(yùn)維能力不足4、hadoop組件開(kāi)源開(kāi)發(fā)能力不足數(shù)據(jù)匯聚1、數(shù)據(jù)采集匯聚效率不足2、數(shù)據(jù)采集范圍尚未覆蓋企業(yè)級(jí)整體數(shù)據(jù)3、不同種類的數(shù)據(jù)存放仍需規(guī)范化4、源系統(tǒng)接口不規(guī)范，數(shù)據(jù)采集不穩(wěn)定數(shù)據(jù)處理1、實(shí)時(shí)、準(zhǔn)實(shí)時(shí)數(shù)據(jù)處理支撐能力不足2、數(shù)據(jù)處理的效率有待提升數(shù)據(jù)治理1、數(shù)據(jù)資產(chǎn)可視化程度偏低2、缺少數(shù)據(jù)資產(chǎn)面向企業(yè)的服務(wù)能力3、數(shù)據(jù)質(zhì)量管理仍有很大的提升空間數(shù)據(jù)開(kāi)發(fā)1、開(kāi)發(fā)流程管控能力有待提升2、數(shù)據(jù)開(kāi)發(fā)支撐工具還需補(bǔ)充3、開(kāi)發(fā)工具的易用性有待提高數(shù)據(jù)應(yīng)用1、基于數(shù)據(jù)中心的前端應(yīng)用缺乏深度2、缺少數(shù)據(jù)驅(qū)動(dòng)型產(chǎn)品的支撐

3、資產(chǎn)服務(wù)（血緣、運(yùn)維等）很少引用到前端應(yīng)用中系統(tǒng)運(yùn)維1、系統(tǒng)運(yùn)維智慧化程度不足2、缺乏基礎(chǔ)平臺(tái)運(yùn)維監(jiān)控能力數(shù)據(jù)安全1、數(shù)據(jù)安全體系持續(xù)完善中優(yōu)化數(shù)據(jù)中心資產(chǎn)能力，深化賦能型企業(yè)中臺(tái)建設(shè)規(guī)劃思路數(shù)據(jù)湖：擴(kuò)展數(shù)據(jù)匯聚能力，快速滿足分析型、探索型、挖掘型業(yè)務(wù)需求MPP架構(gòu)：引入MPP架構(gòu)，優(yōu)化本地網(wǎng)及各部門數(shù)據(jù)應(yīng)用支撐能力基礎(chǔ)架構(gòu)集約化建設(shè)：優(yōu)化和完善數(shù)據(jù)中心的管理模式，提升對(duì)本地網(wǎng)及業(yè)務(wù)部門的數(shù)據(jù)應(yīng)用承載的支撐能力高效處理：提升實(shí)時(shí)、準(zhǔn)實(shí)時(shí)應(yīng)用的處理能力，快速支撐業(yè)務(wù)需求應(yīng)用管理：提高本地網(wǎng)及合作方應(yīng)用的快速部署能力運(yùn)維保障：實(shí)現(xiàn)從平臺(tái)到應(yīng)用的端對(duì)端保障數(shù)據(jù)開(kāi)放及探索：建立數(shù)據(jù)開(kāi)放機(jī)制，助力數(shù)據(jù)價(jià)值體現(xiàn)平臺(tái)能力數(shù)據(jù)中心組織保障：建立跨部門數(shù)據(jù)管理團(tuán)隊(duì)，為數(shù)據(jù)質(zhì)量提供保障數(shù)據(jù)質(zhì)量：數(shù)據(jù)質(zhì)量能力提升，保障全流程數(shù)據(jù)質(zhì)量數(shù)據(jù)安全：建設(shè)全面統(tǒng)一的數(shù)據(jù)安全體系資產(chǎn)運(yùn)營(yíng)：打造貫穿數(shù)據(jù)生產(chǎn)服務(wù)鏈的全景式數(shù)據(jù)資產(chǎn)管理及運(yùn)營(yíng)體系資產(chǎn)管控?cái)?shù)據(jù)應(yīng)用：發(fā)揮數(shù)據(jù)資產(chǎn)管理優(yōu)勢(shì)，深入發(fā)掘數(shù)據(jù)價(jià)值，打造數(shù)據(jù)中心新應(yīng)用數(shù)據(jù)應(yīng)用借鑒AWS數(shù)據(jù)湖理念和阿里、移動(dòng)公司數(shù)據(jù)中臺(tái)建設(shè)經(jīng)驗(yàn)，結(jié)合現(xiàn)狀，進(jìn)一步深化企業(yè)數(shù)據(jù)中臺(tái)建設(shè)，為生產(chǎn)、營(yíng)銷、管理、運(yùn)營(yíng)類數(shù)據(jù)需求提供全方位的能力支撐。數(shù)據(jù)存儲(chǔ)/計(jì)算數(shù)據(jù)匯聚業(yè)務(wù)洞察（業(yè)務(wù)知識(shí)）業(yè)務(wù)策略（過(guò)程智慧）業(yè)務(wù)事件（行為感知）業(yè)務(wù)協(xié)同（過(guò)程管控）業(yè)務(wù)質(zhì)量評(píng)估（過(guò)程優(yōu)化）業(yè)務(wù)知識(shí)沉淀（知識(shí)庫(kù)）對(duì)內(nèi)精確支撐對(duì)外合作運(yùn)營(yíng)營(yíng)銷支撐管理支撐生產(chǎn)支撐本地網(wǎng)/公司行業(yè)數(shù)據(jù)分析行業(yè)數(shù)據(jù)挖掘行業(yè)精確營(yíng)銷客戶視圖渠道視圖產(chǎn)品視圖風(fēng)控視圖資源視圖……資產(chǎn)管理線資產(chǎn)運(yùn)營(yíng)線資產(chǎn)管理業(yè)務(wù)生產(chǎn)線原子業(yè)務(wù)倉(cāng)庫(kù)組織保障資產(chǎn)分析資產(chǎn)安全運(yùn)營(yíng)規(guī)劃資產(chǎn)開(kāi)發(fā)資產(chǎn)治理資產(chǎn)評(píng)估資產(chǎn)開(kāi)放資源目標(biāo)市場(chǎng)SaaSSoftwareasaServiceDaaSDataasaServicePaaSPlatformasaService智能化分析（機(jī)器學(xué)習(xí)）智能化管理（數(shù)據(jù)治理）智能化運(yùn)維（智能運(yùn)維）對(duì)內(nèi)智慧運(yùn)營(yíng)對(duì)外合作創(chuàng)新總體架構(gòu)數(shù)據(jù)中心架構(gòu)全景視圖在建/增強(qiáng)規(guī)劃建議已建數(shù)據(jù)源B域M域網(wǎng)絡(luò)O域平臺(tái)數(shù)據(jù)層DataT-PaaS平臺(tái)層D-PaaSA-PaaS應(yīng)用層數(shù)據(jù)運(yùn)營(yíng)數(shù)據(jù)安全數(shù)據(jù)治理標(biāo)準(zhǔn)化管理元數(shù)據(jù)管理數(shù)據(jù)體檢數(shù)據(jù)質(zhì)量管理數(shù)據(jù)網(wǎng)關(guān)安全策略安全審計(jì)安全控制DaaSSaaS數(shù)據(jù)湖區(qū)（以HDFS為主Store）Data

in

Model（結(jié)構(gòu)化數(shù)據(jù)）Data

is

Object（非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)）傳統(tǒng)模型數(shù)據(jù)探索中間層匯總層標(biāo)簽庫(kù)指標(biāo)庫(kù)開(kāi)發(fā)庫(kù)統(tǒng)計(jì)分析庫(kù)數(shù)據(jù)挖掘庫(kù)存儲(chǔ)計(jì)算Hadoop存儲(chǔ)與計(jì)算集群MPP存儲(chǔ)與計(jì)算集群分布式緩存與計(jì)算流處理RDB存儲(chǔ)與計(jì)算平臺(tái)工具數(shù)據(jù)自服務(wù)數(shù)據(jù)可視化智慧門戶標(biāo)簽工具指標(biāo)工具應(yīng)用托管應(yīng)用工具應(yīng)用部署代碼構(gòu)建應(yīng)用編排數(shù)據(jù)開(kāi)發(fā)數(shù)據(jù)產(chǎn)品驅(qū)動(dòng)應(yīng)用精準(zhǔn)營(yíng)銷精確管理精細(xì)服務(wù)精益網(wǎng)運(yùn)行業(yè)應(yīng)用客戶洞察渠道洞察位置模型風(fēng)控模型……消費(fèi)品洞察新型數(shù)據(jù)數(shù)據(jù)對(duì)象視圖內(nèi)容解析檢索工具流處理工具數(shù)據(jù)挖掘數(shù)據(jù)采集爬蟲(chóng)工具多租戶管理API&UI數(shù)據(jù)開(kāi)發(fā)管控資產(chǎn)目錄及注冊(cè)數(shù)據(jù)開(kāi)放作業(yè)統(tǒng)一調(diào)度數(shù)據(jù)同步數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)統(tǒng)一運(yùn)維采集適配平臺(tái)光網(wǎng)、無(wú)線目錄行業(yè)標(biāo)桿重點(diǎn)措施規(guī)劃思路回顧總結(jié)基礎(chǔ)架構(gòu)平臺(tái)能力數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)數(shù)據(jù)驅(qū)動(dòng)舉措：基于現(xiàn)有能力，擴(kuò)展構(gòu)建數(shù)據(jù)湖基于現(xiàn)有平臺(tái)能力，擴(kuò)展數(shù)據(jù)湖能力。豐富數(shù)據(jù)中心的匯聚能力，補(bǔ)充光網(wǎng)、無(wú)線數(shù)據(jù)的直接接入。接入數(shù)據(jù)的統(tǒng)一注冊(cè)和管控，保證數(shù)據(jù)質(zhì)量。生產(chǎn)環(huán)境的HDFS作為熱數(shù)據(jù)區(qū)，研發(fā)環(huán)境作為溫?cái)?shù)據(jù)和冷數(shù)據(jù)區(qū)。完成資產(chǎn)管理平臺(tái)與采集適配平臺(tái)的對(duì)接。定義接口規(guī)范并落實(shí)接口規(guī)范完善接口稽核和監(jiān)控?；A(chǔ)架構(gòu)數(shù)據(jù)源2.核心處理（數(shù)據(jù)交互、任務(wù)調(diào)度、數(shù)據(jù)建模）2.1.研發(fā)環(huán)境（研發(fā)分析）2.2.生產(chǎn)環(huán)境（統(tǒng)一建模、調(diào)度、交互）采集適配平臺(tái)（光網(wǎng)無(wú)限）JOB發(fā)布研發(fā)數(shù)據(jù)倉(cāng)庫(kù)Hive

（輕度匯總）

數(shù)據(jù)湖（溫?cái)?shù)據(jù)區(qū)，冷數(shù)據(jù)區(qū)）生產(chǎn)數(shù)據(jù)倉(cāng)庫(kù)Hive（輕度匯總）研發(fā)數(shù)據(jù)倉(cāng)庫(kù)MPP（復(fù)雜關(guān)聯(lián)）

生產(chǎn)數(shù)據(jù)倉(cāng)庫(kù)MPP（復(fù)雜關(guān)聯(lián)）保證數(shù)據(jù)及時(shí)性同步數(shù)據(jù)資產(chǎn)管控平臺(tái)數(shù)據(jù)湖（熱數(shù)據(jù)區(qū)）舉措：引入MPP架構(gòu)，完善大數(shù)據(jù)平臺(tái)的處理能力平臺(tái)架構(gòu)彌補(bǔ)大數(shù)據(jù)數(shù)據(jù)平臺(tái)關(guān)聯(lián)計(jì)算及匯總處理效率的不足，同時(shí)兼顧本地網(wǎng)開(kāi)發(fā)人員技能平滑過(guò)渡，提高數(shù)據(jù)開(kāi)發(fā)和處理的效率，需引入MPP架構(gòu)，形成數(shù)據(jù)中心完善的架構(gòu)支撐能力。平臺(tái)層處理層MPP數(shù)據(jù)庫(kù)Hadoop平臺(tái)報(bào)表應(yīng)用自助取數(shù)輕度匯總數(shù)據(jù)應(yīng)用寬表指標(biāo)清單數(shù)據(jù)文本數(shù)據(jù)流數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)業(yè)務(wù)部門工具層可視化工具智慧數(shù)據(jù)門戶資產(chǎn)管理平臺(tái)數(shù)據(jù)挖掘工具文本檢索工具自助分析其他分公司數(shù)據(jù)及技術(shù)專家數(shù)據(jù)模型開(kāi)發(fā)第三方開(kāi)發(fā)者多維分析準(zhǔn)實(shí)時(shí)應(yīng)用數(shù)據(jù)流處理數(shù)據(jù)挖掘建模文本日志處理查詢分析角色數(shù)據(jù)中心數(shù)據(jù)中心MPP架構(gòu)分角色支撐能力提升數(shù)據(jù)交換能力提升大數(shù)據(jù)集群間數(shù)據(jù)交換的效率建立大數(shù)據(jù)平臺(tái)與MMP數(shù)據(jù)庫(kù)的交換能力建立MPP數(shù)據(jù)庫(kù)與結(jié)構(gòu)化數(shù)據(jù)庫(kù)的交換能力提升資產(chǎn)管理平臺(tái)支撐能力封裝跨平臺(tái)數(shù)據(jù)處理引擎，支撐MPP環(huán)境下的數(shù)據(jù)模型開(kāi)發(fā)能力統(tǒng)一數(shù)據(jù)資產(chǎn)管理，建立跨平臺(tái)的數(shù)據(jù)注冊(cè)、管理體系實(shí)現(xiàn)本地網(wǎng)應(yīng)用的遷移提供豐富的MPP數(shù)據(jù)庫(kù)開(kāi)發(fā)工具，降低本地網(wǎng)人員開(kāi)發(fā)難度建立本地網(wǎng)推廣組織，協(xié)助本地網(wǎng)應(yīng)用逐步遷移到數(shù)據(jù)中心目錄行業(yè)標(biāo)桿重點(diǎn)措施規(guī)劃思路回顧總結(jié)基礎(chǔ)架構(gòu)平臺(tái)能力數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)數(shù)據(jù)驅(qū)動(dòng)對(duì)租戶的開(kāi)通，資源分配，服務(wù)實(shí)例的分配，數(shù)據(jù)的授權(quán)，應(yīng)用構(gòu)建等，進(jìn)行統(tǒng)一的可視化租戶管理。封裝統(tǒng)一的數(shù)據(jù)資源適配層，對(duì)接底層混搭的數(shù)據(jù)庫(kù)架構(gòu)。統(tǒng)一多租戶管理Hadoop集群MPP集群服務(wù)適配層（service

broker）租戶賬號(hào)創(chuàng)建資源分配服務(wù)分配數(shù)據(jù)授權(quán)應(yīng)用構(gòu)建應(yīng)用集群（K8S）租戶帳號(hào)開(kāi)通計(jì)算、存儲(chǔ)資源RDB組件服務(wù)數(shù)據(jù)授權(quán)服務(wù)12345圖例租戶帳號(hào)開(kāi)通服務(wù)計(jì)算、存儲(chǔ)資源服務(wù)組件服務(wù)調(diào)用數(shù)據(jù)授權(quán)服務(wù)調(diào)用應(yīng)用構(gòu)建服務(wù)調(diào)用多租戶管理舉措：實(shí)現(xiàn)可視化的多租戶管理流程租戶管理簡(jiǎn)潔化：改變傳統(tǒng)的通過(guò)后臺(tái)分配租戶、數(shù)據(jù)訪問(wèn)權(quán)限等操作，非技術(shù)人員也可以通過(guò)可視化的操作，快速創(chuàng)建租戶，并對(duì)租戶數(shù)據(jù)進(jìn)行賦權(quán)。權(quán)限管理視圖：解決現(xiàn)階段后臺(tái)操作賦權(quán)后，沒(méi)有統(tǒng)一完整的視圖展現(xiàn)租戶與數(shù)據(jù)庫(kù)表之間的關(guān)系，可視化多租戶管理能夠通過(guò)可視化的界面對(duì)權(quán)限進(jìn)行梳理、分析、配置。完善管控流程：將現(xiàn)階段線上郵件申請(qǐng)，線下賦權(quán)的管理流程規(guī)范化，統(tǒng)一納入到線上管控流程中，減少了人為因素導(dǎo)致的問(wèn)題出現(xiàn)的概率，同時(shí)也可以記錄操作日志，對(duì)違規(guī)操作進(jìn)行審計(jì)，提高了系統(tǒng)運(yùn)維的安全性。平臺(tái)能力舉措：完善平臺(tái)組件能力，支撐本地網(wǎng)開(kāi)發(fā)全流程資產(chǎn)管理平臺(tái)可視化能力類組件SQL取數(shù)組件診斷能力類組件可視化取數(shù)組件DTS工具門戶數(shù)據(jù)開(kāi)發(fā)報(bào)表開(kāi)發(fā)業(yè)務(wù)診斷IT人員取數(shù)業(yè)務(wù)人員取數(shù)數(shù)據(jù)查閱數(shù)據(jù)開(kāi)發(fā)類組件數(shù)據(jù)處理類引擎數(shù)據(jù)采集類組件MPPhive產(chǎn)品銷售品類本地寬表新增優(yōu)化其他管控?cái)?shù)據(jù)獲取DTS工具：DTS工具新增“魚(yú)骨圖”、“思維導(dǎo)圖”組件提供業(yè)務(wù)人員診斷能力；DTS工具優(yōu)化“可視化取數(shù)”支持外關(guān)聯(lián)的取數(shù)支持，方便業(yè)務(wù)人員實(shí)現(xiàn)可視化自助取數(shù)；DTS工具優(yōu)化“手寫SQL”報(bào)表組件UI及鉆取透視功能；DTS工具集成“SQL查詢”模塊，支持IT人員使用SQL完成臨時(shí)取數(shù)需求；資產(chǎn)管理平臺(tái)優(yōu)化“數(shù)據(jù)采集類組件”，支持準(zhǔn)實(shí)時(shí)的接口提速，并且同步到MPP；資產(chǎn)管理平臺(tái)優(yōu)化“數(shù)據(jù)開(kāi)發(fā)類組件”，支持MPP數(shù)據(jù)庫(kù)的數(shù)據(jù)加工邏輯的開(kāi)發(fā)與任務(wù)調(diào)度開(kāi)發(fā)；資產(chǎn)管理平臺(tái)優(yōu)化“數(shù)據(jù)處理類引擎”，支持MPP數(shù)據(jù)處理邏輯能正常運(yùn)行調(diào)度；1、完善平臺(tái)組件能力，支撐本地網(wǎng)從數(shù)據(jù)開(kāi)發(fā)、報(bào)表開(kāi)發(fā)、數(shù)據(jù)查閱、自助取數(shù)、業(yè)務(wù)診斷的端到端的數(shù)據(jù)應(yīng)用能力；2：實(shí)現(xiàn)數(shù)據(jù)不出數(shù)據(jù)中心。數(shù)據(jù)湖資產(chǎn)管理平臺(tái)：流處理工具舉措：提升實(shí)時(shí)分析的能力建設(shè)目標(biāo)建議舉措1:實(shí)時(shí)處理可視化編排目前已經(jīng)具備實(shí)時(shí)數(shù)據(jù)接入能力，但對(duì)實(shí)時(shí)營(yíng)銷、實(shí)時(shí)數(shù)據(jù)分析場(chǎng)景開(kāi)發(fā)周期長(zhǎng)，開(kāi)發(fā)門檻高，無(wú)法快速響應(yīng)市州分公司等業(yè)務(wù)訴求，缺乏一套配置使用簡(jiǎn)單具備平臺(tái)管理的實(shí)時(shí)處理與分析能力。可視化DAG配置可視化監(jiān)控運(yùn)維平臺(tái)需要具備特性二次開(kāi)發(fā)熔斷/流控管理開(kāi)放與集成容錯(cuò)處理failover分布式處理高性能可擴(kuò)展實(shí)時(shí)抽取組件業(yè)務(wù)處理組件自由編排建議舉措2:與資產(chǎn)管理平臺(tái)打通元數(shù)據(jù)實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)、離線數(shù)據(jù)統(tǒng)一管理需要與資產(chǎn)管理平臺(tái)打通元數(shù)據(jù)資產(chǎn)統(tǒng)一管理的必要性流處理工具

四川電信目前已經(jīng)具備實(shí)時(shí)數(shù)據(jù)接入能力，但對(duì)實(shí)時(shí)營(yíng)銷、實(shí)時(shí)數(shù)據(jù)分析、實(shí)時(shí)業(yè)務(wù)監(jiān)控等對(duì)實(shí)時(shí)處理能力要求高的業(yè)務(wù)還缺乏統(tǒng)一的平臺(tái)支撐；需要提供一個(gè)處理流數(shù)據(jù)低延遲、可高度擴(kuò)展的，滿足海量且多樣化數(shù)據(jù)源處理的高性能平臺(tái)。舉措：提升實(shí)時(shí)事件處理能力.......流程化配置管理圖表化監(jiān)控視圖流處理引擎輸入適配HTTPSocketFlumeKafka……數(shù)據(jù)訂閱HDFSHBaseMySQLKafka……一站式操作界面豐富的數(shù)據(jù)訂閱規(guī)則輸出適配通用可配置的數(shù)據(jù)源適配器精準(zhǔn)營(yíng)銷實(shí)時(shí)預(yù)警個(gè)性推薦位置運(yùn)營(yíng)客戶畫像開(kāi)放的label擴(kuò)展接口………一站式操作界面，提供便捷且直觀的流處理管理能力。豐富的數(shù)據(jù)訂閱規(guī)則，確保企業(yè)業(yè)務(wù)數(shù)據(jù)間的隱私，同時(shí)為精準(zhǔn)分析和決策提供依據(jù)參考。提供多樣化的接入方式，幫助企業(yè)更加快速、方便的接入多樣化數(shù)據(jù)舉措：構(gòu)建安全的數(shù)據(jù)開(kāi)放形式1：數(shù)據(jù)開(kāi)放的標(biāo)準(zhǔn)化和安全性。2：平臺(tái)提供工具，為租戶提供開(kāi)發(fā)能力。資產(chǎn)管理平臺(tái)：提供各種底層接口的適配能力提供服務(wù)和數(shù)據(jù)的安全控制策略提供各類服務(wù)調(diào)用方式（包括文件和Http），及數(shù)據(jù)封裝。租戶按照數(shù)據(jù)服務(wù)申請(qǐng)，授權(quán)，數(shù)據(jù)加工，數(shù)據(jù)發(fā)布，API封裝，API開(kāi)發(fā)的流程完成數(shù)據(jù)開(kāi)放過(guò)程。應(yīng)用開(kāi)放統(tǒng)一接入數(shù)據(jù)適配服務(wù)路由服務(wù)監(jiān)控安全控制服務(wù)編排能力代理協(xié)議轉(zhuǎn)換能力適配統(tǒng)一接入MPPHadoopHBaseRDB…...基礎(chǔ)數(shù)據(jù)數(shù)據(jù)適配jdbcRESTSOAPWebService特定APIPGOracleHive同步異步消息服務(wù)訂閱數(shù)據(jù)調(diào)用接入鑒權(quán)業(yè)務(wù)路由負(fù)載均衡服務(wù)緩存安全控制數(shù)據(jù)動(dòng)態(tài)脫敏數(shù)據(jù)加密IP控制字段級(jí)控制服務(wù)控制配額控制流量控制統(tǒng)一日志使用計(jì)量資產(chǎn)管理平臺(tái)數(shù)據(jù)服務(wù)平臺(tái)能力舉措：提高本地網(wǎng)應(yīng)用快速部署能力平臺(tái)能力1：通過(guò)數(shù)據(jù)服務(wù)化的支撐分公司的應(yīng)用創(chuàng)新。2：提高應(yīng)用微服務(wù)化的平臺(tái)支撐能力。建設(shè)統(tǒng)一的應(yīng)用管理平臺(tái)，針對(duì)地市獨(dú)立開(kāi)發(fā)的應(yīng)用，做到資源按需分配。避免申請(qǐng)資源直接申請(qǐng)物理機(jī)、VM情況。應(yīng)用管理平臺(tái)能夠查看各個(gè)本地網(wǎng)應(yīng)用使用數(shù)據(jù)的情況。集中管理應(yīng)用的高可用，負(fù)載均衡，灰度發(fā)布，彈性擴(kuò)縮容的。實(shí)現(xiàn)應(yīng)用的自動(dòng)化管理。集中監(jiān)控應(yīng)用的狀態(tài)，對(duì)異常的應(yīng)用集中告警。用例覆蓋場(chǎng)景詳細(xì)描述與四川電信場(chǎng)景結(jié)合優(yōu)先級(jí)CICD場(chǎng)景持續(xù)集成/部署、鏡像安全、應(yīng)用隔離、應(yīng)用配置、應(yīng)用升級(jí)／回滾通過(guò)CICD和DevOps流程管理開(kāi)發(fā)和第三方軟件提供商的開(kāi)發(fā)流程，實(shí)現(xiàn)應(yīng)用快速迭代。高彈性伸縮根據(jù)應(yīng)用彈性自動(dòng)伸縮電渠平臺(tái)面臨促銷、團(tuán)購(gòu)等活動(dòng)時(shí)，通過(guò)彈性伸縮能力及時(shí)響應(yīng)業(yè)務(wù)量暴漲帶來(lái)的前端壓力，并保障業(yè)務(wù)不間斷。高有狀態(tài)應(yīng)用容器遷移、mysql數(shù)據(jù)庫(kù)的完整性驗(yàn)證解決有狀態(tài)應(yīng)用的靈活擴(kuò)展帶來(lái)的數(shù)據(jù)遷移問(wèn)題。高租戶應(yīng)用資源隔離多租戶配額限制與賬戶管理對(duì)外提供服務(wù)，對(duì)不同的用戶提供不同資源配額和空間。中運(yùn)維監(jiān)控監(jiān)控、日志提供容器環(huán)境下完善的監(jiān)控和日志平臺(tái)，智能高效運(yùn)維，降低管理成本，保證業(yè)務(wù)高可用。高應(yīng)用容器化常用中間件容器化

Tomcat、Redis、kafka、mysql等將常用中間件置于能力開(kāi)放平臺(tái)，可大大減短應(yīng)用的開(kāi)發(fā)周期，提高開(kāi)發(fā)效率，及應(yīng)用的穩(wěn)定性。高容器安全鏡像安全、及容器應(yīng)用隔離分別從鏡像和運(yùn)行時(shí)容器多維度保障應(yīng)用安全。中穩(wěn)定性／性能異常測(cè)試高可用、性能測(cè)試；保障平臺(tái)高可用，評(píng)測(cè)支撐業(yè)務(wù)規(guī)模。高關(guān)鍵技術(shù)（網(wǎng)絡(luò)技術(shù)）多主機(jī)之間網(wǎng)絡(luò)通信為不同的業(yè)務(wù)場(chǎng)景提供豐富的網(wǎng)絡(luò)方案和模型。高平臺(tái)能力舉措：提升診斷、取數(shù)自服務(wù)能力，支撐移動(dòng)端開(kāi)發(fā)

提升在線洞察診斷能力為業(yè)務(wù)人員提供魚(yú)骨圖、思維導(dǎo)圖組件：用于分析關(guān)聯(lián)業(yè)務(wù)因素主因，清晰展現(xiàn)診斷思路

提升在線數(shù)據(jù)自服務(wù)能力新增“SQL查詢”（WEB版本SQL查詢頁(yè)面），利用JDBC支持多種數(shù)據(jù)源的SQL執(zhí)行，以支撐本地網(wǎng)IT人員完成臨時(shí)需求取數(shù)；支持移動(dòng)端適配可視化工具的“可視化引擎”增加“移動(dòng)端適配”支持，制作圖表可在移動(dòng)端展現(xiàn)1、提升工具可視化診斷、取數(shù)能力，支撐業(yè)務(wù)人員在線自助的分析與取數(shù)工作；2、可視化工具支撐移動(dòng)端應(yīng)用圖表開(kāi)發(fā)，同一應(yīng)用可適配移動(dòng)端與PC端，減少IT人員開(kāi)發(fā)工作量；智慧數(shù)據(jù)門戶分析能力異常預(yù)警異常追溯業(yè)務(wù)風(fēng)控業(yè)務(wù)評(píng)估個(gè)性化能力收藏訂閱智能推薦交互性能力工作流評(píng)論分享手機(jī)門戶PC門戶新增優(yōu)化其他數(shù)據(jù)查詢能力血緣追溯圖表呈現(xiàn)圖表聯(lián)動(dòng)數(shù)據(jù)下鉆自助取數(shù)提供智慧分析能力通過(guò)集成固化業(yè)務(wù)分析模型，為智慧門戶提供業(yè)務(wù)異常預(yù)警、異常追溯能力，同時(shí)也能對(duì)業(yè)務(wù)風(fēng)險(xiǎn)控制、業(yè)務(wù)發(fā)展評(píng)估提供支撐提升個(gè)性化能力收藏與訂閱：配合指標(biāo)庫(kù)改造，優(yōu)化指標(biāo)的收藏與訂閱，完成個(gè)人工作臺(tái)定制；智能推薦：根據(jù)業(yè)務(wù)人員偏好，完成指標(biāo)、報(bào)表、預(yù)警信息推送；新增移動(dòng)端的交互能力通過(guò)實(shí)現(xiàn)工作流能力支撐，省市、業(yè)務(wù)人員與分析人員、領(lǐng)導(dǎo)者與運(yùn)維者等多角度交互，形成在線溝通的快速保障能力；同時(shí)郵件、短彩信等多渠道分享促進(jìn)員工間協(xié)同，使正確的信息，在正確的時(shí)間，以專業(yè)的可視化形式流向決策者！優(yōu)化數(shù)據(jù)查詢能力通過(guò)打通與資產(chǎn)管理平臺(tái)，優(yōu)化指標(biāo)血緣追溯能力；同時(shí)通過(guò)集成自助取數(shù)工具，支撐業(yè)務(wù)人員自助取數(shù)需求1、優(yōu)化門戶智慧分析能力模塊與優(yōu)化門戶個(gè)性化能力支持，為門戶注智；2、新增移動(dòng)端交互能力，實(shí)現(xiàn)多終端、多渠道的協(xié)同，使正確決策信息以專業(yè)的可視化形式流向決策者；3、優(yōu)化數(shù)據(jù)查詢能力，更方便讓數(shù)據(jù)使用者了解和自助完成數(shù)據(jù)獲取。平臺(tái)能力舉措：優(yōu)化門戶實(shí)現(xiàn)報(bào)表支撐型向智慧服務(wù)型轉(zhuǎn)變建議：基于從平臺(tái)到應(yīng)用端到端的運(yùn)維保障一體化運(yùn)維以大數(shù)據(jù)中心的應(yīng)用為視角，向下關(guān)聯(lián)平臺(tái)、資源、基礎(chǔ)服務(wù)的運(yùn)行情況和數(shù)據(jù)使用情況，當(dāng)應(yīng)用出現(xiàn)故障時(shí)，能夠?qū)崿F(xiàn)端到端的快速故障定位、原因排查、故障排除建議的服務(wù)。從應(yīng)用角度出發(fā)，解決定位問(wèn)題難、解決問(wèn)題難、總結(jié)問(wèn)題難的難題。需要多個(gè)部門聯(lián)合推動(dòng)一體化