系統(tǒng)卡頓原因分析和定位使用方法

1、精選優(yōu)質(zhì)文檔-傾情為你奉上系統(tǒng)卡頓原因主要分為網(wǎng)絡(luò)傳輸過程中網(wǎng)絡(luò)不穩(wěn)定以及服務(wù)器本身導(dǎo)致。網(wǎng)絡(luò)傳輸過程主要有以下幾個(gè)原因：1、網(wǎng)絡(luò)異常1）、網(wǎng)絡(luò)延遲網(wǎng)絡(luò)延遲可以通過ping命令檢查出具體延遲多少，通過指定發(fā)送包和返回包的時(shí)間，命令如下：Ping -c 4 -t 1 26顯示如下：比對(duì)兩次ping的time時(shí)長(zhǎng)，差值即為網(wǎng)絡(luò)延遲的值，舉例：某系統(tǒng)發(fā)起身份查詢請(qǐng)求，設(shè)置查詢時(shí)間3s，后臺(tái)監(jiān)控發(fā)現(xiàn)網(wǎng)絡(luò)延遲3s，此時(shí)，網(wǎng)絡(luò)傳輸還在進(jìn)行，但系統(tǒng)出現(xiàn)報(bào)錯(cuò)或白屏甚至頁(yè)面卡頓。2） 、帶寬滿通過ftp或者scp等上傳下載命令，或者網(wǎng)絡(luò)設(shè)備自帶帶寬監(jiān)控功能（網(wǎng)絡(luò)設(shè)備上顯示實(shí)時(shí)使用帶寬，以及剩

2、余帶寬）。ftp或scp上傳包后，通過包大小/執(zhí)行時(shí)長(zhǎng)，判斷出此時(shí)帶寬網(wǎng)速，比對(duì)該帶寬上限值，確定此時(shí)，帶寬是否滿。舉例：無(wú)紙化代碼包服務(wù)器26，額定帶寬100m/s，無(wú)紙化免填單大小10m，查詢時(shí)間上限值2s，通過ftp 26，傳輸一個(gè)2G的包，記錄需要多久時(shí)間，假設(shè)需要512s ，則此時(shí)帶寬網(wǎng)速為4m/s,不滿足無(wú)紙化系統(tǒng)獲取免填單各項(xiàng)數(shù)據(jù)（10m）允許的時(shí)間獲取數(shù)據(jù)完成，換句話說(shuō)，此時(shí)，帶寬滿（其他系統(tǒng)進(jìn)程作業(yè)影響），不能滿足無(wú)紙化免填單業(yè)務(wù)需求。此時(shí)，前臺(tái)表現(xiàn)為報(bào)錯(cuò)或一致卡頓至帶寬滿足5m/s時(shí)結(jié)束。3） 、網(wǎng)絡(luò)抖動(dòng)網(wǎng)絡(luò)中的延遲是指信息從發(fā)送到接

3、收經(jīng)過的延遲時(shí)間，一般由傳輸延遲及處理延遲組成；而抖動(dòng)是指最大延遲與最小延遲的時(shí)間差，如最大延遲是20，最小延遲為5，那么就是15，它主要標(biāo)識(shí)一個(gè)網(wǎng)絡(luò)的穩(wěn)定性?，F(xiàn)有工具：glance主機(jī)監(jiān)控，看一段時(shí)間內(nèi)的波動(dòng)圖舉例：某時(shí)間段內(nèi)發(fā)現(xiàn)濱江機(jī)房網(wǎng)絡(luò)抖動(dòng)3秒，則屬于該機(jī)房服務(wù)器上主機(jī)承載的業(yè)務(wù)出現(xiàn)異常，如渠道協(xié)同，濱江機(jī)房網(wǎng)絡(luò)抖動(dòng)3秒，則調(diào)用時(shí)間要求在3秒內(nèi)的esb接口調(diào)用出現(xiàn)異常，具體反映為esb總體成功率下降，進(jìn)而導(dǎo)致某系統(tǒng)調(diào)用該esb服務(wù)的業(yè)務(wù)界面出現(xiàn)報(bào)錯(cuò)或卡頓。4） 、丟包通過Ping -c 4 -t 1 26命令，檢查packet loss字段確定丟包數(shù)多少如：某系統(tǒng)前

4、臺(tái)發(fā)起資料查詢，負(fù)責(zé)查詢請(qǐng)求的進(jìn)程出現(xiàn)丟包，則導(dǎo)致前臺(tái)界面部分?jǐn)?shù)據(jù)顯示報(bào)錯(cuò)、異常或該界面直接卡頓在那里。以上網(wǎng)絡(luò)原因目前都有工具監(jiān)控，或者使用腳本命令連續(xù)性監(jiān)控。2、服務(wù)器主機(jī)或docs1）、資源滿Cpu、內(nèi)存使用率>=95%2） 、hang登陸主機(jī)，等不不上且卡住，說(shuō)明hang3） 、系統(tǒng)性能極差執(zhí)行一條系統(tǒng)命令，>=30s才顯示命令狀態(tài)以上三點(diǎn)主要體現(xiàn)在當(dāng)某系統(tǒng)前臺(tái)操作，后端進(jìn)程發(fā)起請(qǐng)求獲取不到相對(duì)應(yīng)的返回時(shí)，導(dǎo)致程序重新發(fā)起請(qǐng)求，獲取資源，如此反復(fù)，最終前臺(tái)反饋超時(shí)或者認(rèn)為該請(qǐng)求還在執(zhí)行即卡頓。根據(jù)后端監(jiān)控方法，逆向推斷前臺(tái)卡頓原因1、 梳理主機(jī)上應(yīng)用文件、進(jìn)程要相關(guān)數(shù)據(jù)庫(kù)業(yè)

5、務(wù)配置表和前臺(tái)業(yè)務(wù)對(duì)應(yīng)關(guān)系,如下：后端前端前端業(yè)務(wù)舉例IP系統(tǒng)模塊crm前臺(tái)web進(jìn)程具體業(yè)務(wù)處理邏輯銷戶邏輯處理工作流主機(jī)上應(yīng)用文件業(yè)務(wù)菜單銷戶菜單數(shù)據(jù)庫(kù)表業(yè)務(wù)菜單數(shù)據(jù)銷戶界面具體數(shù)據(jù)通過梳理，明確后端和前臺(tái)業(yè)務(wù)一一對(duì)應(yīng)關(guān)系，后端異常反應(yīng)前臺(tái)異常。2、通過后端監(jiān)控發(fā)現(xiàn)網(wǎng)絡(luò)異?；蛑鳈C(jī)hang等異常，確定異常具體原因，最后確定出受影響的主機(jī)或主機(jī)上具體進(jìn)程，最終根據(jù)1中對(duì)應(yīng)關(guān)系確定出前臺(tái)受印象范圍和業(yè)務(wù)。后端前端前端業(yè)務(wù)舉例IP異常（服務(wù)器hang）系統(tǒng)模塊crm前臺(tái)web登錄報(bào)錯(cuò)或卡頓進(jìn)程（主機(jī)hang或進(jìn)程hang）具體業(yè)務(wù)處理邏輯銷戶業(yè)務(wù)辦理報(bào)錯(cuò)或卡頓主機(jī)上應(yīng)用文件（網(wǎng)絡(luò)丟包）業(yè)務(wù)菜單銷戶

6、菜單打不開或卡頓數(shù)據(jù)庫(kù)表（網(wǎng)絡(luò)延遲）業(yè)務(wù)菜單數(shù)據(jù)銷戶界面具體數(shù)據(jù)缺失或卡頓3、最終根據(jù)受影響的后端主機(jī)或進(jìn)程，判斷出前臺(tái)卡頓具體業(yè)務(wù)和范圍。檢測(cè)工具1、網(wǎng)絡(luò)延遲_psping50-100ms 延遲，人眼有感覺，>100ms 延遲感覺強(qiáng)烈2、 Tcptrack_帶寬監(jiān)控工具使用pcap庫(kù)來(lái)捕獲數(shù)據(jù)包，并計(jì)算各種統(tǒng)計(jì)信息，比如每個(gè)連接所使用的帶寬。client表示客戶端，server表示服務(wù)端，state表示客戶端和服務(wù)端連接狀態(tài)，speed表示使用的網(wǎng)絡(luò)帶寬，total表示目前使用總帶寬，跟額定帶寬比較就知道是否帶寬滿網(wǎng)絡(luò)抖動(dòng)看一段時(shí)間內(nèi)變化曲線是否平穩(wěn)，不平穩(wěn)表示抖動(dòng)3、 丟包_mtrLoss%：是顯示的每個(gè)對(duì)