XX商業(yè)銀行業(yè)務(wù)監(jiān)控測試報告

XX商業(yè)銀行

業(yè)務(wù)交易性能監(jiān)控測試報告目錄TOC\o"1-5"\h\z\o"CurrentDocument"總體概述 3\o"CurrentDocument"測試背景 3\o"CurrentDocument"測試目標(biāo) 3\o"CurrentDocument"測試過程概述 4\o"CurrentDocument"測試環(huán)境 4\o"CurrentDocument"測試內(nèi)容/場景 4\o"CurrentDocument"測試效果 4業(yè)務(wù)全局概覽 5業(yè)務(wù)路徑分析 5故障快速定位 6交易明細(xì)追蹤 7多維度應(yīng)用趨勢分析 8\o"CurrentDocument"測試結(jié)論 11\o"CurrentDocument"測試結(jié)果列表 11\o"CurrentDocument"超長交易捕獲 11\o"CurrentDocument"測試小結(jié) 121總體概述測試背景業(yè)務(wù)交易性能監(jiān)控系統(tǒng)解決方案，采用“多維度、立體化”的交叉監(jiān)控方式，對數(shù)據(jù)中心內(nèi)部的設(shè)備、系統(tǒng)、服務(wù)、業(yè)務(wù)等進(jìn)行多方面的統(tǒng)一的監(jiān)控管理。依托大數(shù)據(jù)處理平臺，將多層次、多維度的監(jiān)控數(shù)據(jù)進(jìn)行整合和關(guān)聯(lián)分析，并對運(yùn)行異常及時通過短信、郵件等方式推送到相關(guān)負(fù)責(zé)人，通過性能預(yù)警、故障告警、潛在問題挖掘等多手段做到數(shù)據(jù)中心運(yùn)行狀況透明化，使IT人員實(shí)時觀察數(shù)據(jù)中心各個系統(tǒng)的整體運(yùn)行情況、應(yīng)用交易狀況，出現(xiàn)問題得到及時反饋并快速定位故障點(diǎn)，實(shí)現(xiàn)從被動管理向主動管理的關(guān)鍵性轉(zhuǎn)變，提升運(yùn)維效率。測試目標(biāo)通過業(yè)務(wù)性能監(jiān)控系統(tǒng)，實(shí)現(xiàn)對關(guān)鍵業(yè)務(wù)系統(tǒng)進(jìn)行有效的性能監(jiān)控，并提供準(zhǔn)確的實(shí)時報警機(jī)制，通過關(guān)鍵指標(biāo)能夠快速定位故障環(huán)節(jié)；通過系統(tǒng)模塊間訪問關(guān)系定位到性能瓶頸；根據(jù)交易關(guān)鍵字可以關(guān)聯(lián)一筆業(yè)務(wù)在多個系統(tǒng)環(huán)節(jié)中的運(yùn)行結(jié)果，對業(yè)務(wù)系統(tǒng)的運(yùn)行情況、關(guān)鍵指標(biāo)以圖表的形式展現(xiàn)；業(yè)務(wù)監(jiān)控系統(tǒng)對被監(jiān)控的系統(tǒng)無任何影響。測試目標(biāo)主要為：.提供統(tǒng)一監(jiān)控臺，監(jiān)控所有業(yè)務(wù)系統(tǒng)的運(yùn)行狀態(tài)；.實(shí)現(xiàn)業(yè)務(wù)性能的端到端可視化，展示每個節(jié)點(diǎn)的性能；.實(shí)現(xiàn)業(yè)務(wù)性能的圖表式可視化，性能指標(biāo)支持最高1分鐘精確度；.性能異常的快速告警與預(yù)警；.性能故障的快速定位至節(jié)點(diǎn)，并支持深入分析；.交易性能指標(biāo)的多維度統(tǒng)計分析；.單筆交易追蹤，展示單筆交易在各個節(jié)點(diǎn)的處理耗時和結(jié)果；.歷史數(shù)據(jù)自動保存，提供下載接口供下載回溯；2測試過程概述2.1測試環(huán)境本次測試環(huán)境信息如下:設(shè)備名稱配置需求功能說明數(shù)量業(yè)務(wù)交易性能監(jiān)控服務(wù)器具備4個千兆SFP流量采集端口，內(nèi)置EDH大數(shù)據(jù)處理模塊、Web展示模塊，千兆以太網(wǎng)卡，6TB硬盤用于原始數(shù)據(jù)包采集、解碼、信息統(tǒng)計、大數(shù)據(jù)分析、Web展示等1臺客戶端Windows操作系統(tǒng)，裝有GoogleChrome或Firefox瀏覽器訪問應(yīng)用平臺，用于系統(tǒng)配置、調(diào)試、分析、結(jié)果驗(yàn)證等1臺業(yè)務(wù)測試環(huán)境柜面系統(tǒng)壓測環(huán)境模擬存取款業(yè)務(wù)交易2.2測試內(nèi)容/場景交易監(jiān)控測試系統(tǒng)為柜面系統(tǒng)到核心系統(tǒng)的交易，主要包括取款，存款交易，監(jiān)控交易發(fā)生過程中，數(shù)據(jù)通信狀態(tài)，交易響應(yīng)率，成功率等其他交易指標(biāo)。測試組使用TestRunner工具，分別模擬10用戶并發(fā)50用戶并發(fā)300用戶并發(fā)，進(jìn)行批量交易壓測，監(jiān)控核心系統(tǒng)處理性能，通過業(yè)務(wù)交易性能監(jiān)控系統(tǒng)對核心系統(tǒng)交易量、超長處理交易進(jìn)行捕獲分析。2.3測試效果

2.3.1業(yè)務(wù)全局概覽圖1統(tǒng)一監(jiān)控臺在總控臺頁面同時展示所有業(yè)務(wù)系統(tǒng)最近30分鐘的運(yùn)行狀態(tài)和監(jiān)控狀態(tài)。展示通過每分鐘精確度的單一時間片實(shí)現(xiàn)，狀態(tài)包括正常、有故障、數(shù)據(jù)異常。監(jiān)控狀態(tài)每分鐘自動刷新，鼠標(biāo)放置在告警時間片上自動顯示時間和告警簡介。點(diǎn)擊時間片，可以直接關(guān)聯(lián)至業(yè)務(wù)路徑視圖。2.3.2業(yè)務(wù)路徑分析圖2業(yè)務(wù)路徑圖針對每一個業(yè)務(wù)系統(tǒng)，可以定制獨(dú)立的業(yè)務(wù)路徑圖，貫穿業(yè)務(wù)邏輯圖中的每個關(guān)鍵節(jié)點(diǎn)，在業(yè)務(wù)路徑圖中實(shí)時呈現(xiàn)業(yè)務(wù)系統(tǒng)在各個節(jié)點(diǎn)的服務(wù)質(zhì)量。監(jiān)控視圖以分鐘為單位進(jìn)行展示，每分鐘自動刷新一次。提供基于業(yè)務(wù)系統(tǒng)的交易性能展示，以節(jié)點(diǎn)為單位，重點(diǎn)關(guān)注業(yè)務(wù)交易的狀態(tài)，以交易類型為區(qū)分，動態(tài)展示交易量、交易響應(yīng)率、交易成功率、平均響應(yīng)時間四個參數(shù)。對于多臺服務(wù)器的節(jié)點(diǎn)，可以深入至單臺服務(wù)器。數(shù)據(jù)統(tǒng)計精確至分鐘級。2.3.3故障快速定位圖3告警節(jié)點(diǎn)在業(yè)務(wù)路徑圖中展示其告警狀況，異常節(jié)點(diǎn)將觸發(fā)紅色告警信息，直接定位至具體的告警節(jié)點(diǎn)。對于多服務(wù)器的節(jié)點(diǎn)，可以深入至每臺服務(wù)器，點(diǎn)擊告警信息，展示觸發(fā)告警的指標(biāo)、數(shù)量信息。點(diǎn)擊該告警指標(biāo)，會直接跳轉(zhuǎn)列出觸發(fā)此告警的交易列表。

謝黃H 吃5皿11加1T業(yè)與皿噂?*!**?血露若？！t期**加5T:峽i>T王IW6:133.1583122 手g現(xiàn)期MUHWAswtwi向iaa-l4-10-14帕1411SB超常郎正?以10制述鼻甜苗韭有翅：!07正京J*1劭 312Mo包就?1喊1陰33說玩口承含工U6JME1司115-1必M加好槌M生，電資心硒W*只?土1孤舞拈笈韭就祐4正*1用tIai6-in-ia14?.?史啊;.1S^1Sa33Z2TDI1甌紀(jì)舌"1口1正朝Ia彳I&如W5毗聿龍巴1J工?MMKiMMK1q正宗『士草1包如碉Etoaas101iEKIJMt?2di€-10-ia得上"P?曲?移土isa對zzT24-3蛔史”1。景5a正*序*1即修IQ.忡11Nil例聲噬心19M5B3.3ZZT271項玷拳擊210q?11aifl-w-i?uz?65謝??電口率/H1JqLEJfelSV?好梯M生1電貂心jm兩工?粵?土箱“癡酩破4鉆￡aiEWIMk-0營舸SSffiE公rsrai/泠4i二圖4告警瀏覽器2.3.4交易明細(xì)追蹤圖5交易追蹤交易統(tǒng)計頁面中，能夠按照時間段、客戶端IP、服務(wù)器IP、交易類型、交易渠道、交易結(jié)果、交易返回碼、無響應(yīng)交易做單一或復(fù)合條件進(jìn)行交易查詢。并且支持增加協(xié)議內(nèi)其他已解碼字段作為擴(kuò)展查詢條件。根據(jù)查詢條件，列出所選時間段內(nèi)所有符合查詢條件的交易，呈現(xiàn)這些交易各項信息，包括交易響應(yīng)時間、交易結(jié)果、交易類型、交易渠道、返回碼值、客戶IP、服務(wù)器IP，以及交易關(guān)鍵字。

2.3.5多維度應(yīng)用趨勢分析-：n>e-id-idlueK *氣1.U| 舊口號“ 文Ml毫J 的力詞國即聞 儂至 唐功革 」北AUe■由接?總司 八叼中ii-3ep圖6應(yīng)用視圖1圖7應(yīng)用視圖2應(yīng)用視圖呈現(xiàn)應(yīng)用性能的多個指標(biāo)曲線，以監(jiān)控節(jié)點(diǎn)為區(qū)分，提供該節(jié)點(diǎn)下服務(wù)器列表，默認(rèn)展示該節(jié)點(diǎn)所有服務(wù)器最近30分鐘的平均運(yùn)行數(shù)據(jù)。支持手動選擇歷史數(shù)據(jù)展示時間區(qū)間，精確度支持1秒、1分、15分、1小時等顆粒度。.-'JU-ininisjMD枇計列志守推1型空息事0哈哥片 城苛言?匚■FitlP|■枇計列志守推1型空息事0哈哥片 城苛言?匚■FitlP|■必.a|1空■■2W0MHJhv<i±Mg*±I 九的11順imI 02??1西img0￡02便SJ.Ha［吟I D1012:43100%1??丸弟110ire*叫0^4-15lOQrtfe1WS.峭H*u郵端鋪軸喻1叱D119111IDTKi［則HWidflf即IWI2WE的I入1H,跖小星理11-anp圖8多維分析1器tF沿所1S31^5S.22：?S3*isinwssazTHiIMISAJAZZ.7MiT1M115aMMR7H0I931MS3：.2￡?S^ieaiM55.2￡7>*T1%1再見峭3IR酩爾坦例1狗和U。1S3.124M2Z7KS百程七器tF沿所1S31^5S.22：?S3*isinwssazTHiIMISAJAZZ.7MiT1M115aMMR7H0I931MS3：.2￡?S^ieaiM55.2￡7>*T1%1再見峭3IR酩爾坦例1狗和U。1S3.124M2Z7KS百程七一二...：懶i阻巨雨ns^H|你i男配因咫HferwiHffEHin-V^XIDP1IX%I*它叼H/pl凰ElIJ.IJW抑KO3D.OMIVfiKdiPJS^tlltoplU的19k隴內(nèi)22濁l>5155IWJJ25-?1Hk']MLlU2-n?31口%56熱22加狎1鼬圮?卻22列國iSAr5ft3322^?Hi5%a?nZ2-?ipmjLum+a19M的沿22汨3設(shè)廠將北22MM2i般1姐d必雙i吟甬i口打蠅313：222Hi鼬蚱?”22:RH吟5&3B23題1a311弟1卡趙英叫帖W.QWF圖9多維分析2針對交易性能指標(biāo)，支持進(jìn)行多維度分析功能，通過交易類型、交易狀態(tài)、返回碼、響應(yīng)時間、服務(wù)器IP等條件對交易性能進(jìn)行多維度分類統(tǒng)計，展示相關(guān)類型的統(tǒng)計信息?？梢詮娜我饩S度作為起始點(diǎn)，逐層向下展開統(tǒng)計，比如在交易類型這個統(tǒng)計維度中列出所有交易類型的統(tǒng)計結(jié)果，再選擇某一個交易類型展開交易返回碼維度。通過多維度分析頁面，雙擊相應(yīng)維度的分析，可自動跳轉(zhuǎn)至對應(yīng)的交易統(tǒng)計頁面。通過監(jiān)控系統(tǒng)的告警瀏覽器，可以查看所有性能告警列表，并利用時間、業(yè)務(wù)、節(jié)點(diǎn)等條件進(jìn)行過濾。告警信息可以通過短信或郵件實(shí)時發(fā)送。3測試結(jié)論3.1測試結(jié)果列表此次測試在不同壓力情況下，業(yè)務(wù)數(shù)據(jù)捕獲匹配度100%。測試場景交易總量存款類型交易筆數(shù)取款類型交易筆數(shù)與壓測數(shù)據(jù)匹配度10用戶并發(fā)288013891491100%50用戶并發(fā)302215171505100%300用戶并發(fā)316020851075100%圖10測試數(shù)據(jù)3.2超長交易捕獲此次測試部分核心交易超過40s（此部分交易因?yàn)閷?shí)際上是有正常的請求和響應(yīng)），平臺捕獲此類核心系統(tǒng)超長交易，用于事后分析以便針對性優(yōu)化。測試場景存款類型超長交易取款類型超長交易10并發(fā)0筆0筆50并發(fā)1筆0筆300并發(fā)64筆42筆通過測試可分析出，隨著用戶并發(fā)量增長，40s以上的超長交易隨之增長。以下是超長交易截圖。

R累利看3卿的詆曼雀:|1R累利看3卿的詆曼雀:|13：|e|XFU:[1駁1丁怡1芯J :|四1 1至林我?。骸福菀卜磪s可：「&?i：r>w=：文思！EM.更SZ，至⑸?:元.至0▼1十交幽姓學(xué)士&卻z星m*Zl■rwpt: 沏”干/iSLia1als”4的臺□式MlM僧屋的HI晶457S5融AAA^Wimis&uiz雌32201-5-M.2715JiJ1第隨id力凱iCO如顯J8&7B皿AAAjMJJ.［世i建片u7U￡tiIUli&S.-iE-iB2期一括二/15.45:5Il9?i：di4匕跖加0找明81英2tKih\D21722&郎AAAAXU1鼬1世院日19iZ1M.-iEiaaZCr|5-WZ715：4?：J5i!E2?QW1E3M5J崛AAAAW1W.1M.HZ2”之iHJEja2KII-W-ZF155a?：i9中少m3=iP52WMWliXJl?]ZQW1|盅的JWAWlW.15a>5ZZ7WTl？tlM.lPIflE劉1酊制上下1￡觸：1&M的螳4國通必出曲詡上瑜］阻郎AAAaam1駐1電拈22Ttitn1虹】以尚且2aj1-5--?.2r15.45ABSZWJOlXrl00199205s0211237郎AAAAAMmisauzzJU1619IZ1H.1EIJaaii-HZ715:45:3a5CT6W.ABSEGOKW1OT1932QW1虛ZKZ7CffliM/AWIW.ISaiSEi加圻19L15i.1FIJaz201^2?15^-137201W后的儂冷期c（ng支MOi|國AAAAAM1W1MI52?川精q物4.曲卻T弓基心法偏出4陋￡5處男士雌］M2-7EW1AAAaaaai駁i世的&7W9-iiUl-iEj.ifiiJ2-2idS$7I_1-I熟畔1'il口蕈|圖11第二輪50并發(fā)，1筆存款類型交易超時IU的岬胤＞勺■ ■ ■ ■,■■■' ■ ? ?， L ???■?. ，位龍觸 &r亶也《|w“iii翎 H第0第：|g | *=?H|瑛1知6? |宜WJSI-low葺電融■I |.理叼引.| |皿E.| |SWfl.| 1nsnA至薛r| ■生薛▼ khhfii：主除下L_JMssw丹| 嵬啊E， SSC^I 立眼啦屯舄鼻里女TB轉(zhuǎn)時修， 裝距■? 石JBWHIPi F穹awn *F?IP*HS3Jlt-WHJia255DMflJlR ASMflSWWWi9]?WD2 D2 記1“ 記H AMMA*m15I.U2Z T1S2 192JM1MQ19I「 ?16-in-10142i;4y.M54&7 4電20仃000'001E1* DfilQ D2 2二由 五環(huán) AAAAXM.193.151.^22 T1乳? 192.IEfi.1tLB113M6rW10liE2:2&.[)eM7U ABSZWSIKD'Wl?aSWE CE 5^495 蘇ft MMW195151.33猊 TOB 192.1MU1S101HI 曲各10T◎歷M顏迎'5 *K2OOS(COX?1935冊射粕 過⑹ 磯195144.152^ 川沔 192.1MUift151l^y 孫&加也1星2#￥舊拓 上國飄心第0煙】婦4 許必 總 的段 五由 aAAAAaaiQMjEtI.招力 70%d"都小加」。1!』斯」也第&明喜KT［Ormi!9珞 啪泣 說 砌 馬岫1:9梵乂總22 厚幅 1?.l5ti.1t1e133J1€-W.1Q11K1DMW?7 AKBXISWO'Wi?^ H DQ *1陰 v^2 3心3m151.^22 E5 193J5?U181930代通1。1廿程覿碇1器 &P5nmWXTE叫心 TOW 期 3ICC3 Mt MAMAAmiM.JSEZ ?1(M 132.1Ml?1Q10JQitifllti1425-：1J：.MOOl-u ^匿刈孑IXWMiq居 照必 心 5i>?! 硒 jlMAAaa他±1&1.科力 J22n i!U.i5f.iti.fi17acne-10.10142=41.4771a q的國值箕仃Ri%珞 施酶 K =04M m aAAAAmlSMM.5-322 押訃 19l2.l5g.1tl.fi伯■NaMQ5&rj-.i(H-Rif■Hnaraa t八陽跖電星.ii-reQ圖12第三輪300并發(fā)，64筆存款類型交易超時，42筆取款類型交易超時3.3測試小結(jié)此次測試表明，業(yè)務(wù)性能交易監(jiān)控系統(tǒng)監(jiān)控整體應(yīng)用性能，分析應(yīng)用瓶頸。本次測試對商業(yè)銀行核心系統(tǒng)業(yè)務(wù)環(huán)節(jié)的關(guān)鍵性能指標(biāo)進(jìn)行輸出展示（包括實(shí)時監(jiān)控、指標(biāo)統(tǒng)計、多維度統(tǒng)計），通過多個壓力測試確認(rèn)，交易數(shù)據(jù)監(jiān)控準(zhǔn)確無誤，準(zhǔn)確率達(dá)100%。測試過程中對業(yè)務(wù)指標(biāo)設(shè)置告警閾值，并在業(yè)務(wù)指標(biāo)滿足條件時產(chǎn)生告警。測試項目結(jié)果如下：.業(yè)務(wù)服務(wù)路徑圖：視圖本身呈現(xiàn)了業(yè)務(wù)系統(tǒng)組件的訪問關(guān)系以及交易路徑，把業(yè)務(wù)環(huán)節(jié)按照流程有序組織在一起，用非常直觀的方式讓運(yùn)維人員獲