業(yè)務(wù)性能管理監(jiān)控方案

1、金融行業(yè)業(yè)務(wù)性能管理監(jiān)控方案以奕信息2015/03/09運維現(xiàn)狀近年來，各金融企業(yè)的IT系統(tǒng)發(fā)展朝著集約化、高效化的方向發(fā)展，伴隨著各種復(fù)雜的應(yīng)用對IT系統(tǒng)的支持要求越來越高,IT系統(tǒng)規(guī)模越來越大，架構(gòu)也越來越復(fù)雜，IT系統(tǒng)的后期維護管理顯的越來越重要。傳統(tǒng)的IT維護管理方式已經(jīng)無法滿足現(xiàn)有IT系統(tǒng)與信息化建設(shè)的迫切需要，同時在管理大量分布在不同地理位置的IT設(shè)備，也會大大增加故障的發(fā)現(xiàn)與響應(yīng)時間以及運維成本。那么如何通過引入新的運維思路、方法并在保證IT系統(tǒng)與應(yīng)用穩(wěn)定高效運行的前提下，減少運維支出，提升服務(wù)質(zhì)量是急待解決的問題。傳統(tǒng)的運維方法造成了各運維部門之間的運維管理是割裂的，出現(xiàn)業(yè)務(wù)故

2、障時，應(yīng)用管理人員只能通過服務(wù)器性能狀態(tài)收集，大量的交易日志來排查問題，但無法定位非服務(wù)器外的問題。網(wǎng)絡(luò)管理人員通過應(yīng)用管理的人員的交易故障描述排查網(wǎng)絡(luò)問題，通過自身的網(wǎng)管平臺進行配置梳理，網(wǎng)絡(luò)設(shè)備日志查看、網(wǎng)絡(luò)延遲測試、端口流量帶寬跟蹤等手段來定位網(wǎng)絡(luò)故障，實際上很難定位問題，在遇上棘手問題時，網(wǎng)管人員都會使用網(wǎng)絡(luò)嗅探技術(shù)來抓取交易的網(wǎng)絡(luò)原始數(shù)據(jù)包進行分析，但其難度更大，首先要求網(wǎng)管人員對TCP/IP協(xié)議組的技術(shù)理解要高，要有日積月累的抓包分析經(jīng)驗，第二對業(yè)務(wù)交互的特點要了解，如果遇上一些特殊機制的應(yīng)用，如長連接、多通道交互的應(yīng)用或者多通道異步應(yīng)用，通過大量數(shù)據(jù)包的查看，定位問題的效率很低，

3、而且往往有時也不能精準(zhǔn)定位。要求網(wǎng)管人員對生產(chǎn)業(yè)務(wù)系統(tǒng)都要有很好的理解，也不太現(xiàn)實。所以如何將網(wǎng)管人員和應(yīng)用管理人員的運維工作通過一套監(jiān)控系統(tǒng)來聯(lián)系起來，簡化生產(chǎn)運維工作，提高服務(wù)質(zhì)量管理，避免部門間互相推諉責(zé)任的現(xiàn)象，是我們企業(yè)面臨的真正挑戰(zhàn)。2. 方案思路為適應(yīng)各金融企業(yè)大規(guī)模集約化運營管理的需求，解決IT運維中專業(yè)事件處理量大、業(yè)務(wù)影響分析困難、故障根源定位慢、故障節(jié)點難以自動隔離恢復(fù)等問題。為此，我們提出面向業(yè)務(wù)應(yīng)用交易的運維監(jiān)控系統(tǒng)的搭建，通過實時跟蹤業(yè)務(wù)交易的四大性能指標(biāo)（帶寬、交易響應(yīng)時間、交易請求量、交易響應(yīng)量），多個業(yè)務(wù)緯度（業(yè)務(wù)子交易類型、交易請求碼、交易返回碼、客戶交易區(qū)

4、域碼）來及時地掌握業(yè)務(wù)應(yīng)用系統(tǒng)的運行情況。面向交易的應(yīng)用監(jiān)控系統(tǒng)有如下特點：面向服務(wù)的性能監(jiān)控，深入服務(wù)組件同時關(guān)注業(yè)務(wù)性能與網(wǎng)絡(luò)性能 貫通面向服務(wù)的完整路徑 支持多中心監(jiān)控，實時監(jiān)測組件跨中心切換 實時性高、符合面向服務(wù)架構(gòu)的敏捷原則純旁路監(jiān)控，無需Agent,對服務(wù)和網(wǎng)絡(luò)無影響 實施簡單，快速實現(xiàn)SOA治理中的性能管理目標(biāo)3. 方案架構(gòu)EstopBPM基于網(wǎng)絡(luò)數(shù)據(jù)包嗅探技術(shù)，通過先進的協(xié)議解碼技術(shù)，充分利用可靠的網(wǎng)絡(luò)數(shù)據(jù)源，在端到端的整個業(yè)務(wù)交易路徑上通過Tap方式或端口鏡像旁路的方式將網(wǎng)絡(luò)流量引流到Estopflowsensor，EstopBPM后臺監(jiān)控系統(tǒng)實時提取各網(wǎng)絡(luò)節(jié)點Sesor上

5、的數(shù)據(jù)進行分析，呈現(xiàn)以業(yè)務(wù)為中心的各項性能監(jiān)控指標(biāo)，幫助企業(yè)IT部門建立自主可控的應(yīng)用性能管理平臺，從而實現(xiàn)應(yīng)用可用性、性能、負(fù)載量的全面可視化。4. 功能展示實時告警帶寬超閥值告警 最大響應(yīng)時間超閥值告警 業(yè)務(wù)響應(yīng)成功率低告警告警功能處于任何監(jiān)控系統(tǒng)的核心位置，告警系統(tǒng)的優(yōu)劣直接導(dǎo)致了運維人員處理故障的效率，EstopBMP告警功能實時收集不同網(wǎng)絡(luò)節(jié)點的三個緯度告警（帶寬、業(yè)務(wù)最大響應(yīng)時間、業(yè)務(wù)響應(yīng)成功率），幫助運維人員通過業(yè)務(wù)交易的實時告警可知告警發(fā)生物理位置，告警內(nèi)容，以及告警級別。業(yè)務(wù)系統(tǒng)網(wǎng)絡(luò)拓?fù)涑尸F(xiàn)通過交易應(yīng)用的訪問關(guān)系，梳理出交易的網(wǎng)絡(luò)訪問路徑圖，對理解業(yè)務(wù)流訪問關(guān)系，故障定位有很

6、大好處。實時監(jiān)控業(yè)務(wù)四大性能指標(biāo)實時展示跨越各網(wǎng)絡(luò)節(jié)點的交易時延，并進行比對分析，充分反映網(wǎng)絡(luò)交付時延、服務(wù)器處理時延、網(wǎng)絡(luò)設(shè)備處理時延的變化。業(yè)務(wù)帶寬統(tǒng)計監(jiān)控業(yè)務(wù)實際所占網(wǎng)絡(luò)帶寬的變化，跟蹤帶寬負(fù)載，并為帶寬擴容等需求提供依據(jù)。交易請求量，交易響應(yīng)量實時統(tǒng)計每秒的交易請求數(shù)、交易的應(yīng)答數(shù)，跟蹤每秒交易請求響應(yīng)的變化，查看每秒交易不成功的原因，如下圖所示：此功能的最大價值：快速定位網(wǎng)絡(luò)故障快速定位應(yīng)用故障的能力 適用于多種網(wǎng)絡(luò)場景如：比對每秒防火墻前后、負(fù)載均衡器前后、通訊網(wǎng)關(guān)前后的交易請求、應(yīng)答數(shù)目，快速定位網(wǎng)絡(luò)設(shè)備故障、服務(wù)器無響應(yīng)故障等。 適用于多種業(yè)務(wù)場景如：監(jiān)控TCP長連接，多通道應(yīng)用交付，監(jiān)控異步非對稱路徑的應(yīng)用交付等。實時業(yè)務(wù)統(tǒng)計實時統(tǒng)計業(yè)務(wù)各交易子類型、交易返回碼、交易金額等多維度的統(tǒng)計。歷史數(shù)據(jù)統(tǒng)計分析對過去歷史某一時間段的所有交易性能狀態(tài)指標(biāo)進行回溯分析歷史交易查詢按照交易時間、交易子類型，返回代碼等多種條件查詢業(yè)務(wù)量，如下圖所示：提