多渠道智能一體化運(yùn)維管理平臺(tái)

多渠道智能一體化運(yùn)維治理平臺(tái)

工程背景及目標(biāo)

在我國(guó)過(guò)去20年里,IT信息化建設(shè)在國(guó)內(nèi)各行各業(yè)開展迅速，

尤其在金融領(lǐng)域極為明顯.然而隨著業(yè)務(wù)規(guī)模的不斷擴(kuò)大,IT根底資

源建設(shè)規(guī)模也越來(lái)越大,IT根底資源規(guī)模的快速增長(zhǎng)給IT治理部門

帶來(lái)了莫大的挑戰(zhàn)，即“網(wǎng)絡(luò)平安穩(wěn)定、根底設(shè)施平安可靠、應(yīng)用

系統(tǒng)平安穩(wěn)定高效、業(yè)務(wù)滿足7X24小時(shí)效勞等〃各種要求,再加上

監(jiān)管部門的各種平安標(biāo)準(zhǔn)與要求,IT治理部門需要克服現(xiàn)實(shí)工作中

的各種技術(shù)及治理問(wèn)題.在諸多問(wèn)題中最突出的問(wèn)題主要集中在

“IT運(yùn)維的系統(tǒng)化治理〃上：

一是在如此繁雜TT架構(gòu)下，TT根底信息治理混亂、對(duì)象間關(guān)

系模糊，缺少對(duì)TT對(duì)象的系統(tǒng)化、標(biāo)準(zhǔn)化治理；二是皿監(jiān)控分專

業(yè)，專業(yè)間數(shù)據(jù)無(wú)關(guān)聯(lián)，缺少一套集中式監(jiān)控與預(yù)警系統(tǒng)；三是業(yè)務(wù)

發(fā)生故障時(shí)IT響應(yīng)滯后、被動(dòng)，缺少網(wǎng)絡(luò)性能及交易性能方面的監(jiān)

控手段.

這些問(wèn)題的存在，從短期看，已或大或小地影響了天津農(nóng)商銀行

IT信息化建設(shè)，如：不利于IT根底設(shè)施資產(chǎn)統(tǒng)計(jì)、不利于IT基礎(chǔ)

設(shè)施生命周期的跟蹤、限制與治理、圍繞IT根底設(shè)施生產(chǎn)運(yùn)維工

作效率提升不上去及生產(chǎn)運(yùn)維工作難以形成“主動(dòng)運(yùn)維〃機(jī)制等

等；從長(zhǎng)期看，已經(jīng)嚴(yán)重影響到了天津農(nóng)商銀行新數(shù)據(jù)中央的建設(shè),

關(guān)系到未來(lái)天津農(nóng)商銀行新數(shù)據(jù)中央啟用后IT運(yùn)維治理水平能否

再上新臺(tái)階.

綜上所述，天津農(nóng)商銀行需要搭建一套能夠滿足未來(lái)新數(shù)據(jù)中

心需求、為信息科技治理工作質(zhì)量提升及快速實(shí)現(xiàn)“科技引領(lǐng)業(yè)務(wù)〃

目標(biāo)起到推動(dòng)作用的“多渠道一體化運(yùn)維治理平臺(tái)〃.

工程方案

天津農(nóng)商銀行通過(guò)構(gòu)建“多渠道智能一體化運(yùn)維治理〃體系，

并以此指導(dǎo)“多渠道智能一體化運(yùn)維治理平臺(tái)〃建設(shè)過(guò)程.該平臺(tái)

能夠有效實(shí)現(xiàn)對(duì)IT運(yùn)行整體環(huán)境的監(jiān)控,即對(duì)主機(jī)系統(tǒng)、網(wǎng)絡(luò)系統(tǒng)、

平安設(shè)備、數(shù)據(jù)庫(kù)、中間件、存儲(chǔ)設(shè)備、應(yīng)用系統(tǒng)、IT環(huán)境等的集

中監(jiān)控和治理.能夠及時(shí)采集各類告警數(shù)據(jù)、性能數(shù)據(jù)和配置數(shù)據(jù)，

進(jìn)行集成統(tǒng)一的分析、查詢、報(bào)告和展示，幫助運(yùn)維治理人員方便有

效的定位系統(tǒng)問(wèn)題,直觀快速的診斷和分析問(wèn)題，將運(yùn)維模式由被動(dòng)

的支持轉(zhuǎn)為主動(dòng)式效勞.通過(guò)幫助效勞臺(tái)接收各類告警事件,根據(jù)預(yù)

先定義的事件治理流程完成事件的處理,建立故障管理、問(wèn)題治理、

變更治理、配置治理等效勞工作流程，通過(guò)治理人員、技術(shù)和流程的

有機(jī)結(jié)合,實(shí)現(xiàn)IT運(yùn)維治理標(biāo)準(zhǔn)化和標(biāo)準(zhǔn)化,形成一套完整的IT一

體化運(yùn)維治理體系.平臺(tái)主要功能包括：

一是,基于ITIL理念結(jié)合IT信息化治理要求,構(gòu)建IT根底信

息數(shù)據(jù)庫(kù)（CMDB）,實(shí)現(xiàn)對(duì)天津農(nóng)商銀行IT根底信息的統(tǒng)一標(biāo)準(zhǔn)化、

系統(tǒng)化治理；

二是,結(jié)合當(dāng)今IT信息化技術(shù),采用帶外技術(shù)構(gòu)建基于帶外數(shù)據(jù)

的性能監(jiān)控系統(tǒng),實(shí)現(xiàn)對(duì)天津農(nóng)商銀行重要、一級(jí)、二級(jí)業(yè)務(wù)系統(tǒng)網(wǎng)

絡(luò)性能及交易性能方面監(jiān)控；

三是，構(gòu)建“多渠道智能一體化運(yùn)維治理平臺(tái)〃根底平臺(tái)，打

通該平臺(tái)與各專業(yè)監(jiān)控系統(tǒng)信息通道,實(shí)現(xiàn)對(duì)IT根底對(duì)象的集中式

監(jiān)控與統(tǒng)一預(yù)警.

創(chuàng)新點(diǎn)

一、本系統(tǒng)的技術(shù)架構(gòu)以基于SOA架構(gòu)，集成動(dòng)環(huán)、網(wǎng)絡(luò)、系

統(tǒng)監(jiān)控以及交易監(jiān)控等系統(tǒng)，以IT根底信息配置治理為建設(shè)根底，

以CMDB為核心支撐點(diǎn)，以業(yè)務(wù)為治理視角實(shí)現(xiàn)監(jiān)控集中和統(tǒng)一展

現(xiàn)；

二、基于CMDB構(gòu)建ITSM流程化限制與治理功能和移動(dòng)終端

APP功能;

三、利用大數(shù)據(jù)技術(shù)通過(guò)對(duì)全I(xiàn)T日志進(jìn)行統(tǒng)計(jì)分析實(shí)現(xiàn)“事件

關(guān)聯(lián)預(yù)警〃，結(jié)合各種IT運(yùn)維場(chǎng)景,利用機(jī)器學(xué)習(xí)與算法建模技術(shù),

實(shí)現(xiàn)基于TT運(yùn)維日志數(shù)據(jù)輔助提升IT運(yùn)維質(zhì)量的“精準(zhǔn)預(yù)警、異

常檢測(cè)、容量治理〃等深度應(yīng)用.

技術(shù)實(shí)現(xiàn)特點(diǎn)

集中事件告警實(shí)時(shí)監(jiān)控視圖業(yè)務(wù)影響視圖實(shí)時(shí)數(shù)據(jù)/故除診斷

展示及

集中事件管理平臺(tái)性維分析統(tǒng)計(jì)報(bào)表信息七詢1

處理層

工作流平臺(tái)診斷修且業(yè)務(wù)影響分析

數(shù)據(jù)致榭整合平臺(tái)DIP）數(shù)據(jù)庫(kù)

整合信

適配需適配圖雙HHJfr蠲及

<NoSQL

主機(jī)省理M絡(luò)管理危其管理

專業(yè)f分析教翻怖

系統(tǒng)（SQL）

機(jī)房環(huán)境管理配置管理

CMDB(SQL)

數(shù)怖

采集公介入式采餐非介入式采集

基礎(chǔ)資源

層

“多渠道智能一體化運(yùn)維治理平臺(tái)〃技術(shù)架構(gòu)圖如上圖所示：

一、內(nèi)部結(jié)構(gòu)采用分層式設(shè)計(jì)，各層間通過(guò)接口對(duì)接,為了保證

接口的標(biāo)準(zhǔn)化和數(shù)據(jù)傳遞的標(biāo)準(zhǔn)性，設(shè)計(jì)中采用效勞總線的設(shè)計(jì)思

想和相關(guān)技術(shù)實(shí)現(xiàn)數(shù)據(jù)整合平臺(tái)（DIP）,它介于專業(yè)子系統(tǒng)層和集

中處理層之間，起到標(biāo)準(zhǔn)數(shù)據(jù)交換標(biāo)準(zhǔn)、可以消除不同監(jiān)控應(yīng)用之間

的技術(shù)差異，讓不同的專業(yè)子系統(tǒng)協(xié)調(diào)運(yùn)作,實(shí)現(xiàn)了不同效勞之間的

通信與整合.

二、數(shù)據(jù)整合平臺(tái)采用標(biāo)準(zhǔn)、通用的接口技術(shù)（如WebService

等），實(shí)現(xiàn)性能數(shù)據(jù)、事件告警數(shù)據(jù)、其它事件數(shù)據(jù)、配置數(shù)據(jù)、報(bào)

表數(shù)據(jù)在專業(yè)子系統(tǒng)層與集中處理層之間的數(shù)據(jù)傳送；

三、外部訪問(wèn)接口提供多種接口，如文件接口、rest接口、Web

service接口等，以滿足三方系統(tǒng)不同接入方式，這也為后續(xù)該平臺(tái)

的可擴(kuò)展性提供了方便.

工程過(guò)程治理

依工程初期制定的目標(biāo)，整個(gè)工程實(shí)施分成了兩個(gè)子工程，即

“多渠道智能一體化運(yùn)維治理平臺(tái)〃根底平臺(tái)和基于帶外流數(shù)據(jù)的

“性能監(jiān)控系統(tǒng)〃.前者實(shí)現(xiàn)對(duì)IT根底信息的統(tǒng)一標(biāo)準(zhǔn)化、系統(tǒng)化

治理及“集中監(jiān)控與統(tǒng)一預(yù)警〃功能，后者主要實(shí)施“網(wǎng)絡(luò)性能監(jiān)

控〃及“交易性能監(jiān)控〃,由于兩個(gè)系統(tǒng)間有關(guān)聯(lián)，所以由一個(gè)大項(xiàng)

組分出兩個(gè)小工程組各負(fù)責(zé)一個(gè)子工程,大工程組統(tǒng)一治理兩個(gè)小

工程組,負(fù)責(zé)工程間協(xié)調(diào)和統(tǒng)一工程治理工作.整個(gè)工程從工程啟動(dòng)

會(huì)直至投產(chǎn)試運(yùn)行,平均12個(gè)人歷經(jīng)8個(gè)月.

運(yùn)營(yíng)情況

一、“多渠道智能一體化運(yùn)維治理平臺(tái)〃已經(jīng)實(shí)現(xiàn)了基于天津

農(nóng)商銀行IT信息化治理要求的IT根底信息數(shù)據(jù)結(jié)構(gòu)落地工作,各局

部數(shù)據(jù)按要求有序入庫(kù)治理,數(shù)據(jù)治理T作例行納管流程有序推進(jìn);

平臺(tái)已納管全部重要、一級(jí)、二級(jí)業(yè)務(wù)系統(tǒng)相關(guān)效勞器、數(shù)據(jù)庫(kù)、

中間件、應(yīng)用等監(jiān)控任務(wù)，經(jīng)過(guò)近半年左右的優(yōu)化，己能夠?qū)π谄?/p>

硬件、存儲(chǔ)硬件、操作系統(tǒng)、數(shù)據(jù)庫(kù)、中間件、應(yīng)用等進(jìn)行實(shí)時(shí)監(jiān)

控,并能夠根據(jù)預(yù)設(shè)的預(yù)警規(guī)那么進(jìn)行有效預(yù)警；

二、“網(wǎng)絡(luò)性能監(jiān)控〃已實(shí)現(xiàn)對(duì)天津農(nóng)商銀行全部生產(chǎn)環(huán)境中

重要網(wǎng)絡(luò)設(shè)備的網(wǎng)絡(luò)性能監(jiān)控;

三、“交易性能監(jiān)控”已實(shí)現(xiàn)對(duì)天津農(nóng)商銀行重要、一級(jí)、二級(jí)

近40余套業(yè)務(wù)系統(tǒng)的交易性監(jiān)控，預(yù)警信息實(shí)時(shí)推送“多渠道智能

一體化運(yùn)維治理平臺(tái)〃實(shí)現(xiàn)統(tǒng)一預(yù)警；

四、“動(dòng)環(huán)監(jiān)控〃系統(tǒng)實(shí)時(shí)推送預(yù)警信息給“多渠道智能一體

化運(yùn)維治理平臺(tái)〃實(shí)現(xiàn)統(tǒng)一預(yù)警.

工程成效

一、在IT根底信息管控方面，“多渠道智能一體化智能運(yùn)維管

理平臺(tái)〃讓IT運(yùn)維人員徹底辭別了之前臺(tái)賬式無(wú)系統(tǒng)的IT根底數(shù)

據(jù)治理時(shí)代,CMDB結(jié)合制度化流程管控，IT根底數(shù)據(jù)賬實(shí)相符度比之

前提升了40%-50取數(shù)據(jù)質(zhì)量顯著提升；

二、網(wǎng)絡(luò)性能監(jiān)控實(shí)時(shí)監(jiān)測(cè)重要監(jiān)測(cè)點(diǎn)的網(wǎng)絡(luò)流，特別是與第三

方相關(guān)的網(wǎng)絡(luò)，如銀聯(lián)、人行、農(nóng)信銀等，比起之前在出現(xiàn)與三方間

交易性能或交易中斷問(wèn)題時(shí)通過(guò)命令排查網(wǎng)絡(luò)問(wèn)題,排查效率大大

提升；

三、交易性能監(jiān)控系統(tǒng)實(shí)時(shí)從“交易量、響應(yīng)時(shí)間、響應(yīng)率、成

功率〃四個(gè)維度對(duì)每個(gè)業(yè)務(wù)系統(tǒng)的相關(guān)監(jiān)控點(diǎn)進(jìn)行監(jiān)控，實(shí)時(shí)保存

流水?dāng)?shù)據(jù),并依預(yù)設(shè)預(yù)警規(guī)那么實(shí)時(shí)預(yù)警,這既改變了之前交易故障

時(shí)IT運(yùn)維人員的被動(dòng)運(yùn)維狀態(tài),而且也為IT運(yùn)維人員排障提供了

有效的排障依據(jù),從而提升了排障速度.

經(jīng)驗(yàn)總結(jié)

經(jīng)過(guò)多渠道智能一體化運(yùn)維治理平臺(tái)的落地實(shí)施,天津農(nóng)商銀

行已經(jīng)實(shí)現(xiàn)了對(duì)IT運(yùn)行整體環(huán)境的集中監(jiān)控、治理和統(tǒng)一展現(xiàn),并

能幫助運(yùn)維治理人員方