業(yè)務(wù)級運(yùn)維利器應(yīng)用性能管理聽云吳靜濤

1、業(yè)務(wù)級運(yùn)維 聽云技術(shù)副總裁BS 轉(zhuǎn)云端帶來新的挑戰(zhàn)CDN虛擬計(jì)算虛擬存儲虛擬網(wǎng)絡(luò)DBA log研發(fā)網(wǎng)絡(luò)運(yùn)維外網(wǎng)監(jiān)控客服WebAppDB傳統(tǒng)運(yùn)維和業(yè)務(wù)級運(yùn)維革新的方式，業(yè)務(wù)級運(yùn)維的方法真實(shí)用戶的體驗(yàn)數(shù)字化最終用戶體驗(yàn)視角展現(xiàn)慢交互追蹤解決卡頓崩潰軌跡回溯解決閃退行業(yè)對比（競品分析）全網(wǎng)監(jiān)控業(yè)務(wù)流量傳輸應(yīng)用流程和傳輸監(jiān)測首屏?xí)r間評估，CDN評估在造成用戶影響前報警行業(yè)對比（競品分析）應(yīng)用實(shí)時性能監(jiān)控生產(chǎn)環(huán)境的性能展現(xiàn)代碼級監(jiān)控和慢應(yīng)用追蹤應(yīng)用性能的診斷，追蹤和優(yōu)化依據(jù)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)CDN虛擬計(jì)算虛擬存儲虛擬網(wǎng)絡(luò)DBA log研發(fā)網(wǎng)絡(luò)運(yùn)維外網(wǎng)監(jiān)控客服WebAppDB位置方式技術(shù)侵入式

2、競品對標(biāo)網(wǎng)絡(luò)問題定位全樣本代碼級定位后端服務(wù)監(jiān)控客戶端主動基于自動化測試的撥測-OO-被動瀏覽器嵌碼O-O-App嵌碼O-OOO-服務(wù)端被動旁路監(jiān)聽-OO-O應(yīng)用探針O-OOO構(gòu)建全網(wǎng)應(yīng)用性能監(jiān)控的方式客戶端APMClient5客戶端APM監(jiān)測方式主動式基于自動化測試的性能撥測客戶端APM監(jiān)測方式被動式基于頁面插碼或App嵌碼的性能監(jiān)測建立覆蓋全面的監(jiān)測網(wǎng)絡(luò)：地域、運(yùn)營商、接入方式可調(diào)度的分布式自動化監(jiān)測引擎：網(wǎng)絡(luò)測試（ping, traceroute），瀏覽器測試，流媒體測試、手機(jī)瀏覽器測試等基于自動化測試的主動式性能撥測在頁面中插入JavaScript代碼以采集最終用戶的性能體驗(yàn)Navig

3、ation Timing ()通過頁面插碼監(jiān)測客戶端瀏覽器應(yīng)用性能移動應(yīng)用的客戶端性能采集手機(jī)瀏覽器自動撥測頁面插碼應(yīng)用內(nèi)插碼 + H5頁面內(nèi)插件 + jsBirdge Web App:01Native App:02Hybrid App:應(yīng)用內(nèi)插碼網(wǎng)絡(luò)訪問性能采集方法調(diào)用性能采集Crash日志采集03客戶端APM方式的優(yōu)缺點(diǎn)主動式采集方式優(yōu)點(diǎn)非侵入式，不影響性能可做發(fā)布前、發(fā)布后監(jiān)測互聯(lián)網(wǎng)壓力測試競品對標(biāo)，服務(wù)選型精確定位網(wǎng)絡(luò)問題主動式采集方式缺點(diǎn)樣本偏差監(jiān)測網(wǎng)絡(luò)部署成本高被動式采集方式優(yōu)點(diǎn)全樣本覆蓋，準(zhǔn)確性高成本相對較低監(jiān)測網(wǎng)絡(luò)節(jié)點(diǎn)真實(shí)用戶被動式采集方式缺點(diǎn)無法提供競品和對標(biāo)數(shù)據(jù)手工插碼的開

4、發(fā)工作量大對性能的影響服務(wù)器端APMServer-Side11受網(wǎng)絡(luò)影響嚴(yán)重?zé)o法精確定位服務(wù)端的問題僅部署客戶端APM的局限與客戶端APM互補(bǔ)更精確定位應(yīng)用和服務(wù)的問題被動式的應(yīng)用性能數(shù)據(jù)采集服務(wù)端的APM服務(wù)端APM實(shí)現(xiàn)方式旁路監(jiān)聽采集方式應(yīng)用內(nèi)探針采集方式服務(wù)端旁路監(jiān)聽APM部署定位Sniffer網(wǎng)絡(luò)報文解析NPM通過SPAN, TAP旁路應(yīng)用訪問流量進(jìn)行Sniffer各類TCP協(xié)議分析和性能采集（NPM）優(yōu)點(diǎn)：非侵入式，對生產(chǎn)影響最小缺點(diǎn)：報文處理能力多協(xié)議的適配無法定位應(yīng)用代碼問題應(yīng)用內(nèi)探針APM技術(shù)部署位置：應(yīng)用服務(wù)器采集數(shù)據(jù)庫等各類服務(wù)的訪問時間采集應(yīng)用響應(yīng)時間和代碼執(zhí)行時間在應(yīng)用

5、代碼中埋點(diǎn)來實(shí)現(xiàn)性能監(jiān)控BCI（ByteCode Instrumentation)技術(shù)優(yōu)點(diǎn)代碼級別的性能監(jiān)控可監(jiān)控到應(yīng)用相關(guān)的各類服務(wù)性能缺點(diǎn)侵入式監(jiān)控，可能對應(yīng)用性能和穩(wěn)定性產(chǎn)生輕微影響聽云構(gòu)建的“業(yè)務(wù)級運(yùn)維平臺”15業(yè)務(wù)級運(yùn)維革新的方式，業(yè)務(wù)級運(yùn)維的方法真實(shí)用戶的體驗(yàn)數(shù)字化最終用戶體驗(yàn)視角展現(xiàn)慢交互追蹤解決卡頓崩潰軌跡回溯解決閃退行業(yè)對比（競品分析）全網(wǎng)監(jiān)控業(yè)務(wù)流量傳輸應(yīng)用流程和傳輸監(jiān)測首屏?xí)r間評估，CDN評估在造成用戶影響前報警行業(yè)對比（競品分析）應(yīng)用實(shí)時性能監(jiān)控生產(chǎn)環(huán)境的性能展現(xiàn)代碼級監(jiān)控和慢應(yīng)用追蹤應(yīng)用性能的診斷，追蹤和優(yōu)化依據(jù)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)CDN虛擬計(jì)算虛擬存儲虛擬

6、網(wǎng)絡(luò)DBA log研發(fā)網(wǎng)絡(luò)運(yùn)維外網(wǎng)監(jiān)控客服WebAppDB解決業(yè)務(wù)運(yùn)維研發(fā)的問題CDN虛擬計(jì)算虛擬存儲WebAppDB虛擬網(wǎng)絡(luò)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)業(yè)務(wù)研發(fā)運(yùn)維開發(fā)團(tuán)隊(duì)關(guān)心的問題視圖加載 視圖布局圖像處理 數(shù)據(jù)存儲JSON處理 網(wǎng)絡(luò)訪問運(yùn)維團(tuán)隊(duì)關(guān)注的問題2G、3G、WIFI接入不穩(wěn)定自身機(jī)房鏈路不佳服務(wù)器運(yùn)行不穩(wěn)定CDN加速效果不理想當(dāng)?shù)剡\(yùn)營商出現(xiàn)劫持業(yè)務(wù)關(guān)心的問題活躍用戶量交易量和交易筆數(shù)用戶體驗(yàn)可量化行業(yè)指標(biāo)對比卡頓閃退崩潰等嚴(yán)重問題起源于互聯(lián)網(wǎng)的聽云，采用極簡部署，免學(xué)習(xí)風(fēng)格的理念，將動輒幾千萬的傳統(tǒng)APM，帶給互聯(lián)網(wǎng)應(yīng)用。將互聯(lián)網(wǎng)的敏捷迭代開發(fā)，開發(fā)運(yùn)營的理念，通過統(tǒng)一的聽云平

7、臺，實(shí)時監(jiān)控用戶傳輸應(yīng)用的性能，在用戶投訴前發(fā)現(xiàn)，定位，協(xié)助解決應(yīng)用性能危機(jī)。高度自動化的工具，降低客戶自行研發(fā)帶來的時間和穩(wěn)定性成本，更加關(guān)注核心業(yè)務(wù)，持續(xù)提升用戶體驗(yàn)，留住用戶，保障業(yè)務(wù)。聽云平臺的構(gòu)建聽云App聽云Network聽云ServerCDN虛擬計(jì)算虛擬存儲WebAppDB虛擬網(wǎng)絡(luò)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)互聯(lián)網(wǎng)的數(shù)據(jù)傳輸首包時間首屏?xí)r間總下載時間CDN節(jié)點(diǎn)判斷行業(yè)競品分析終端用戶體驗(yàn)量化應(yīng)用交互執(zhí)行性能時間標(biāo)準(zhǔn)閃退崩潰率的標(biāo)準(zhǔn)錯誤率細(xì)化標(biāo)準(zhǔn)綜合評分體系傳輸服務(wù)終端總下載時間Apdex 應(yīng)用性能指數(shù)首屏?xí)r間1. 標(biāo)準(zhǔn)制定 用戶體驗(yàn)和應(yīng)用性能標(biāo)準(zhǔn)化2. 行業(yè)參考 標(biāo)準(zhǔn)化后的行業(yè)

8、指標(biāo)CDN虛擬計(jì)算虛擬存儲WebAppDB虛擬網(wǎng)絡(luò)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)傳輸服務(wù)終端外部接口：響應(yīng)時間應(yīng)小于1.5秒。內(nèi)部接口：響應(yīng)時間應(yīng)小于1.1秒。圖片體積：平均小于50KB。主機(jī)錯誤率：小于1.07。App崩潰率：小于1 。旅行預(yù)訂首屏?xí)r間：2.1秒可用性：99.8%網(wǎng)上支付首屏?xí)r間：2.3秒可用性：99.5%綜合搜索首屏?xí)r間：1.1秒可用性：99.7%門戶網(wǎng)站首屏?xí)r間：2.3秒可用性：99.6%電商網(wǎng)站首屏?xí)r間：2.3秒可用性：99.7%政府網(wǎng)站首屏?xí)r間：1.7秒可用性：99.8%T值缺省500ms使用者可設(shè)置3. 客戶定制 定制業(yè)務(wù)關(guān)鍵交易過程CDN虛擬計(jì)算虛擬存儲WebAp

9、pDB虛擬網(wǎng)絡(luò)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)傳輸服務(wù)終端客戶端定制關(guān)鍵交易定制關(guān)鍵頁面服務(wù)定制關(guān)鍵應(yīng)用過程慢應(yīng)用追蹤定義聽云平臺的日常監(jiān)控展現(xiàn)展現(xiàn)用戶體驗(yàn)組合通過采集操作系統(tǒng)版本信息，了解當(dāng)前APP最活躍的系統(tǒng)版本是哪些，同時展現(xiàn)使用性能數(shù)據(jù)，可以有針對性的進(jìn)行系統(tǒng)優(yōu)化，保障APP在各版本上的運(yùn)行效率。展現(xiàn)用戶體驗(yàn)系統(tǒng)版本信息聽云Server會根據(jù)應(yīng)用模塊的關(guān)聯(lián)關(guān)系自動生成應(yīng)用拓?fù)鋱D，讓使用者通過視圖查看監(jiān)控的應(yīng)用模塊（數(shù)據(jù)庫、NoSQL、外部調(diào)用等）和應(yīng)用模塊之間的性能數(shù)據(jù)。應(yīng)用模塊性能縮略圖展現(xiàn)應(yīng)用性能應(yīng)用拓?fù)鋱D聽云App發(fā)現(xiàn)，定位(代碼級)和解決閃退崩潰問題新版本小范圍上線后發(fā)現(xiàn)崩潰比例

10、較高，排除問題后，再進(jìn)行大范圍分發(fā)，加快版本上線進(jìn)度問題發(fā)現(xiàn)閃退崩潰APP近一周崩潰率達(dá)到了387.76（行業(yè)標(biāo)準(zhǔn)值1），已嚴(yán)重影響用戶體驗(yàn)。需要崩潰率與影響用戶數(shù)統(tǒng)計(jì)閃退崩潰需要上下文信息需要格式化的詳細(xì)調(diào)用堆棧崩潰調(diào)用堆棧支持反混淆還原真實(shí)堆棧代碼，準(zhǔn)確定位代碼行數(shù)。閃退崩潰需要崩潰軌跡追蹤創(chuàng)新的追蹤App崩潰過程，為應(yīng)用迭代升級提供代碼級關(guān)鍵信息，快速發(fā)現(xiàn)和解決崩潰問題，提升客戶體驗(yàn)，留住客戶。聽云Server 發(fā)現(xiàn)，定位(代碼級)和解決PHP慢應(yīng)用問題發(fā)現(xiàn)耗時的Web應(yīng)用過程，并以圖表關(guān)聯(lián)響應(yīng)時間和吞吐量。Web應(yīng)用過程響應(yīng)快慢排序Web應(yīng)用過程對每個URL調(diào)用過程的性能進(jìn)行分解分析，

11、明確執(zhí)行過程中性能消耗的原因。性能分解后，響應(yīng)慢的過程Web應(yīng)用過程-分解鉆取慢應(yīng)用過程，摘要可以看到該過程中所有組件的訪問量、耗時和響應(yīng)耗時%。在響應(yīng)慢的過程中發(fā)現(xiàn)導(dǎo)致慢的組件應(yīng)用過程慢追蹤-摘要應(yīng)用過程追蹤列表業(yè)務(wù)級運(yùn)維革新的方式，業(yè)務(wù)級運(yùn)維的方法真實(shí)用戶的體驗(yàn)數(shù)字化最終用戶體驗(yàn)視角展現(xiàn)慢交互追蹤解決卡頓崩潰軌跡回溯解決閃退行業(yè)對比（競品分析）全網(wǎng)監(jiān)控業(yè)務(wù)流量傳輸應(yīng)用流程和傳輸監(jiān)測首屏?xí)r間評估，CDN評估在造成用戶影響前報警行業(yè)對比（競品分析）應(yīng)用實(shí)時性能監(jiān)控生產(chǎn)環(huán)境的性能展現(xiàn)代碼級監(jiān)控和慢應(yīng)用追蹤應(yīng)用性能的診斷，追蹤和優(yōu)化依據(jù)研發(fā)網(wǎng)絡(luò)CDN評估業(yè)務(wù)運(yùn)維主機(jī)CDN虛擬計(jì)算虛擬存儲虛擬網(wǎng)絡(luò)DBA log研發(fā)網(wǎng)絡(luò)運(yùn)維外網(wǎng)監(jiān)控客服WebAppDB聽云業(yè)務(wù)級運(yùn)維的客戶價值