ipub故障分析v市公開課一等獎省賽課獲獎課件

常見故障案例分析與排除V1.1IPUB_702_C1ipub故障分析v第1頁學習完本課程，您應該能夠：認識當前網(wǎng)絡故障產(chǎn)生環(huán)境了解故障分析基本方法和步驟熟悉慣用故障排除工具能夠分析和排除網(wǎng)絡基本故障課程目標ipub故障分析v第2頁2341故障概述故障定位、分析與排除方法故障排除慣用工具介紹經(jīng)典故障案例分析內(nèi)容提要５小結ipub故障分析v第3頁故障概述世上本無新鮮事；排列組合出稀奇。ipub故障分析v第4頁故障概述數(shù)據(jù)網(wǎng)絡：故障硬件:主機服務器集線器交換機網(wǎng)橋路由器路由交換機……連接：……無線傳輸光纖網(wǎng)線軟件：操作系統(tǒng)軟件版本配置二層協(xié)議路由協(xié)議應用層協(xié)議……ipub故障分析v第5頁故障概述網(wǎng)絡現(xiàn)實狀況：網(wǎng)管GAR用戶層T16T64T160關鍵層匯聚層接入層POS/GE計費Radiotower寬帶無線接入POS/GEPOS/GET64DSLM運行商骨干網(wǎng)RadiotowerT32GERn*E110M/100M/GEn*E1集團用戶集團用戶集團用戶10M/100M信息化小區(qū)10M/100M/GE信息化小區(qū)ATM/FE信息化小區(qū)接入層T32T160GE/FE/POS/ATM/E3/n*E1GE/FE/POS/ATM/E3/n*E1HFC網(wǎng)數(shù)據(jù)、音頻和視頻三網(wǎng)合一趨勢新技術不停出現(xiàn)當代網(wǎng)絡與傳統(tǒng)網(wǎng)絡共存眾多廠商產(chǎn)品共存故障復雜化ipub故障分析v第6頁１34２故障概述故障定位、分析與排除方法故障排除慣用工具介紹經(jīng)典故障案例分析內(nèi)容提要５小結ipub故障分析v第7頁故障定位區(qū)分是單點故障還是多點故障單點故障查找多點故障查找ipub故障分析v第8頁故障定位首先判斷故障點。有以下幾個方法能夠借鑒：參考模型定位法對比定位法分段排除法替換法經(jīng)驗排除法ipub故障分析v第9頁單點與多點故障首先判斷故障是單點還是多點：檢驗一下與故障主機在同一集線器或交換機上其它主機是否斷線。若聯(lián)通則是單點故障，不然是多點故障。ipub故障分析v第10頁單點故障主機故障點可能有本機協(xié)議、網(wǎng)卡、網(wǎng)線、網(wǎng)絡設備端口等原因。首先，ping檢驗本機問題，再ping網(wǎng)關。接下來檢驗網(wǎng)卡指示燈是否正常，判斷是網(wǎng)卡損壞還是網(wǎng)卡松動。在網(wǎng)絡設備上調換端口，觀察是否聯(lián)通。使用網(wǎng)絡測試儀測試網(wǎng)線設備故障可能有產(chǎn)品單板、接口、光模塊、主控板、電源、協(xié)議配置等原因。首先觀察設備上指示燈然后觀察故障現(xiàn)象，是整臺機器業(yè)務中止還是部分業(yè)務中止假如條件允許，替換板件或主控板深入查看假如條件允許，對比有一樣功效或一樣配置設備，查看配置有沒有問題ipub故障分析v第11頁多點故障對于多點故障，應該發(fā)生在多個用戶共同接入地方，譬如機柜、機房、DSLAM、匯聚交換機、關鍵路由器等。要對故障機器上一級或更高逐層查找。若故障發(fā)生在局域網(wǎng)內(nèi)，應通知網(wǎng)絡主管或運行商。若故障發(fā)生在運行商網(wǎng)內(nèi)，應盡快通知網(wǎng)管相關人員，并匯報信息中心。ipub故障分析v第12頁故障排除過程在開始動手排除故障之前，最好先準備一支筆和一張紙，然后將故障現(xiàn)象認真仔細統(tǒng)計下來。在觀察和統(tǒng)計時一定注意細節(jié)，排除大型網(wǎng)絡故障如此，普通十幾臺電腦小型網(wǎng)絡故障也如此，因為有時正是一些最小細節(jié)使整個問題變得明朗。ipub故障分析v第13頁識別故障現(xiàn)象作為管理員，在你排故障之前，也必須確切地知道網(wǎng)絡上到底出了什么毛病，是不能共享資源，還是找不到另一臺電腦，如此等等。知道出了什么問題并能夠及時識別，是成功排除故障最主要步驟。為了與故障現(xiàn)象進行對比，必須知道系統(tǒng)在正常情況下是怎樣工作，反之，極難對問題和故障進行定位。ipub故障分析v第14頁對故障現(xiàn)象進行詳細描述對故障現(xiàn)象詳細描述尤為主要。假如僅憑操作人員一面之詞，有時還極難下結論，這時就需要管理員親自操作一下剛才犯錯程序，并注意犯錯信息。比如，在使用Web瀏覽器進行瀏覽時，不論鍵入哪個網(wǎng)站都返回“該頁無法顯示”之類信息。使用ping命令時，不論ping哪個IP地址都顯示超時連接信息等。諸如這類犯錯消息會為縮小問題范圍提供許多有價值信息。ipub故障分析v第15頁列舉可能造成錯誤原因作為網(wǎng)絡管理員，則應該考慮，造成無法查看信息原因可能有哪些，如網(wǎng)卡硬件故障、網(wǎng)絡連接故障、網(wǎng)絡設備(如集線器、交換機)故障、TCP/IP協(xié)議設置不妥等等。注意：不要著急下結論，能夠依據(jù)犯錯可能性把這些原因按優(yōu)先級別進行排序，一個個先后排除。ipub故障分析v第16頁縮小搜索范圍對全部列出可能造成錯誤原因逐一進行測試，而且不要依據(jù)一次測試，就斷定某一區(qū)域網(wǎng)絡是運行正?；蚴遣徽！Ａ硗?，也不要在自己認為已經(jīng)確定了第一個錯誤上停下來，應直到測試完為止。除了測試之外，網(wǎng)絡管理員還要注意：千萬不要忘記去看一看網(wǎng)卡、Hub、Switch、路由器面板上LED指示燈。通常情況下，綠燈表示連接正常，紅燈表示連接故障，不亮表示無連接或線路不通。依據(jù)數(shù)據(jù)流量大小，指示燈會時快時慢閃爍。同時，不要忘記統(tǒng)計全部觀察及測試伎倆和結果。ipub故障分析v第17頁隔離錯誤經(jīng)過你一番折騰后，這時你基本上知道了故障部位，對于電腦錯誤，你能夠開始檢驗該電腦網(wǎng)卡是否安裝好、TCP/IP協(xié)議是否安裝并設置正確、Web瀏覽器連接設置是否得當?shù)纫磺信c已知故障現(xiàn)象相關內(nèi)容。然后剩下事情就是排除故障了。對于設備故障，看是不是配置有問題或隱患，更改配置排除。若是產(chǎn)品本身或軟件版本問題，通知廠家工程人員。ipub故障分析v第18頁故障分析處理完問題后，作為網(wǎng)絡管理員，還必須搞清楚故障是怎樣發(fā)生，是什么原因造成了故障發(fā)生，以后怎樣防止類似故障發(fā)生，確定對應對策，采取必要辦法，制訂嚴格規(guī)章制度。ipub故障分析v第19頁故障原因即使故障原因各種多樣，但總來講不外乎就是硬件問題和軟件問題，說得再確切一些，這些問題就是：網(wǎng)絡連接性問題配置文件選項問題網(wǎng)絡協(xié)議問題ipub故障分析v第20頁2１4３故障概述故障定位、分析與排除方法故障排除慣用工具介紹經(jīng)典故障案例分析內(nèi)容提要５小結ipub故障分析v第21頁故障排除慣用工具介紹PingNetNetstatIpconfigTracertNslookupArpRouteipub故障分析v第22頁故障分析工具：Ping驗證與遠端電腦或設備連接ipub故障分析v第23頁故障分析工具：Pingping–ncount發(fā)送count指定Echo數(shù)據(jù)包數(shù)。ping-llength定義Echo數(shù)據(jù)包大小。ping-f在數(shù)據(jù)包中發(fā)送“不要分段”標志。ipub故障分析v第24頁故障分析工具：Pingping-iTTL指定TTL值在對方系統(tǒng)里停留時間。ping-rcount在“統(tǒng)計路由”字段中統(tǒng)計傳出和返回數(shù)據(jù)包路由。ping-wtimeout指定超時間隔，單位為毫秒。ipub故障分析v第25頁故障分析工具:pingping完之后，會有以下幾個返回信息：Replyfrom1:bytes=32time=10msTTL=124－目標主機發(fā)回響應，連接成功。Unknownhost

－無法解析主機名稱；往往代表了DNS服務器設置有問題。Requesttimedout

－主機在指定時間內(nèi)未響應；往往代表了目標主機情況不正常。Destinationhostunreachable

－無法找到一條通向指定主機路由；往往代表了你路由設置有問題。ipub故障分析v第26頁故障分析工具:NetNET命令是很多網(wǎng)絡命令集合，在WindowsME/NT//XP內(nèi)，很多網(wǎng)絡功效都是以net命令為開始，經(jīng)過nethelp能夠看到這些命令詳細介紹：(慣用是NETUSE和NETVIEW)ipub故障分析v第27頁故障分析工具:Netnetuse本命令用于建立或取消抵達特定共享點映像驅動器連接ipub故障分析v第28頁故障分析工具:Netnetview利用此命令，你能夠查看目標服務器上共享點名字。任何局域網(wǎng)里人都能夠發(fā)出此命令，而且不需要提供用戶ID或口令。

ipub故障分析v第29頁故障分析工具－NetstatNetstat命令能夠幫助網(wǎng)絡管理員了解網(wǎng)絡整體使用情況。它能夠顯示當前正在活動網(wǎng)絡連接詳細信息，比如顯示網(wǎng)絡連接、路由表和網(wǎng)絡接口信息，能夠統(tǒng)計當前總共有哪些網(wǎng)絡連接正在運行。利用命令參數(shù)，命令能夠顯示全部協(xié)議使用狀態(tài)，這些協(xié)議包含TCP協(xié)議、UDP協(xié)議以及IP協(xié)議等，另外還能夠選擇特定協(xié)議并查看其詳細信息，還能顯示全部主機端口號以及當前主機詳細路由信息。ipub故障分析v第30頁故障分析工具－Netstat命令格式：netstat[-r][-s][-n][-a][-e]參數(shù)含義：-r顯示本機路由表內(nèi)容；-s顯示每個協(xié)議使用狀態(tài)(包含TCP協(xié)議、UDP協(xié)議、IP協(xié)議)；-n以數(shù)字表格形式顯示地址和端口；-a顯示全部主機端口號；-e顯示Ethernet統(tǒng)計。ipub故障分析v第31頁故障分析工具－Netstatnetstat-a顯示全部連線及端口號ipub故障分析v第32頁故障分析工具－Netstatnetstat-e顯示Ethernet統(tǒng)計ipub故障分析v第33頁故障分析工具－Netstatnetstat-s本選項能夠按照各個協(xié)議分別顯示其統(tǒng)計數(shù)據(jù)ipub故障分析v第34頁故障分析工具－Netstatnetstat-r顯示路由表內(nèi)容ipub故障分析v第35頁故障分析工具:ipconfig顯示全部當前網(wǎng)絡設定值ipub故障分析v第36頁故障分析工具:ipconfigipconfig/all完整顯示主機網(wǎng)卡配置或取得信息ipub故障分析v第37頁故障分析工具:ipconfig假如你PC是經(jīng)過DHCP方式來取得IP地址，你能夠經(jīng)過以下命令來釋放和重新取得IP地址。C:\>ipconfig/releaseC:\>ipconfig/renewipub故障分析v第38頁故障分析工具:ipconfigipconfig/release釋放當前DHCP設定ipub故障分析v第39頁故障分析工具:ipconfigipconfig/renew更新DHCP設定參數(shù)ipub故障分析v第40頁故障分析工具:tracerttracert能夠跟蹤一個IP包從本機到目標主機經(jīng)過路徑，打印經(jīng)過每一個路由器IP地址，比如：C:\>tracertTracingrouteto[1]overamaximumof30hops:1<10ms10ms<10ms2<10ms<10ms<10ms43320ms50ms50ms534<10ms10ms10ms530ms40ms40ms[1]Tracecomplete.ipub故障分析v第41頁故障分析工具:tracerttracertTargetName追蹤當?shù)刂返侥繕说刂匪?jīng)過三層路由ipub故障分析v第42頁故障分析工具:tracerttracert-d不顯示路由器名稱ipub故障分析v第43頁故障分析工具:tracerttracert-hmax_hop指定最大跳點數(shù)目ipub故障分析v第44頁故障分析工具:Nslookup有些時候使用者可能想要手動去查詢DNS上一些資料，或者要檢驗DNS是否有問題，nslookup會根據(jù)使用者所輸入內(nèi)容去找到所要使用LocalDNSServer。ipub故障分析v第45頁故障分析工具:Nslookupnslookupipub故障分析v第46頁故障分析工具:Nslookupsetall預設設定值ipub故障分析v第47頁故障分析工具:Nslookupserverdns_server_ip將內(nèi)定LocalDNS換成另一部Serveripub故障分析v第48頁故障分析工具:routeroute能夠查看、管理本機路由表。使用“print”參數(shù)能夠查看路由表，使用“add”、“delete”能夠添加、刪除路由表。比如：C:\>routeprint……ActiveRoutes:NetworkDestinationNetmaskGatewayInterfaceMetric891889855955558898895555881DefaultGateway:ipub故障分析v第49頁故障分析工具:arp你能夠經(jīng)過以下命令來顯示arp表內(nèi)容：D:\>arp-aInterface:44onInterface0x1000003InternetAddressPhysicalAddressType800-c0-df-b3-30-b9dynamic0000-04-c1-4e-83-c4dynamic用下面命令清空arp表內(nèi)容：D:\>arp-dipub故障分析v第50頁故障分析工具ZXR10#showinterface查看端口統(tǒng)計ZXR10#showipinterfacebrief系統(tǒng)接口IP配置及接口狀態(tài)ZXR10#ping<對端接口IP>檢測連通性ZXR10#showarp<interface>系統(tǒng)ARP表中接口ARP與用戶終端ARPZXR10#showiproute顯示系統(tǒng)當前路由表ZXR10#showrunning-config查看當前設備上配置信息ipub故障分析v第51頁故障分析工具ZXR10#showprocessor查看各單板CPU利用率ZXR10#showversion查看系統(tǒng)當前軟件版本ZXR10#showloggingalarm顯示系統(tǒng)統(tǒng)計告警信息ZXR10#showlogfile顯示系統(tǒng)統(tǒng)計操作信息ZTE#showvlan查看設備VLAN配置信息是否符合配置要求ZTE#showmac系統(tǒng)MAC表中終端MAC是否存在或改變情況ipub故障分析v第52頁2１３４故障概述故障定位、分析與排除方法故障排除慣用工具介紹經(jīng)典故障案例分析內(nèi)容提要５小結ipub故障分析v第53頁主機A能否Ping通主機C?主機C能否Ping通主機A?主機A能否Ping通主機B?主機D能否Ping通主機C?主機D

主機C

主機B

主機A

Ethernet1

Ethernet0

子網(wǎng)2子網(wǎng)1IP地址配置故障ipub故障分析v第54頁局域網(wǎng)連通性故障連通性故障通常表現(xiàn)為以下幾個情況：①電腦無法登錄到服務器；②電腦無法經(jīng)過局域網(wǎng)接入Internet；③電腦在“網(wǎng)上鄰居”中只能看到自己，而看不到其它電腦，從而無法使用其它電腦上共享資源和共享打印機；④電腦無法在網(wǎng)絡內(nèi)實現(xiàn)訪問其它電腦上資源；⑤網(wǎng)絡中部分電腦運行速度異常遲緩。ipub故障分析v第55頁故障原因①網(wǎng)卡未安裝，或未安裝正確，或與其它設備有沖突；②網(wǎng)卡硬件故障；③網(wǎng)絡協(xié)議未安裝，或設置不正確；④網(wǎng)線、跳線或信息插座故障；⑤Hub電源未打開，Hub硬件故障，或Hub端口硬件故障;⑥UPS電源故障。ipub故障分析v第56頁排除方法①確認連通性故障當出現(xiàn)故障時，如無法接入Internet。應嘗試查找網(wǎng)絡中其它電腦，或使用局域網(wǎng)中Web瀏覽。假如能夠在“網(wǎng)上鄰居”中找到其它電腦，或可ping到其它電腦，即可排除連通性故障。假如其它網(wǎng)絡應用均無法實現(xiàn)，繼續(xù)下面操作。②看LED燈判斷網(wǎng)卡故障正常情況下，在不傳送數(shù)據(jù)時，網(wǎng)卡指示燈閃爍較慢，傳送數(shù)據(jù)時，閃爍較快。不論是不亮，還是長亮不滅，都表明有故障存在。對于Hub指示燈，凡是插有網(wǎng)線端口，指示燈都亮。ipub故障分析v第57頁排除方法（續(xù)）③用ping命令排除網(wǎng)卡故障使用ping命令，ping、當?shù)豂P地址或主機名，檢驗網(wǎng)卡和IP網(wǎng)絡協(xié)議是否安裝完好。假如能ping通，說明該主機網(wǎng)卡和協(xié)議設置都沒問題。所以，應該檢驗網(wǎng)線和網(wǎng)絡設備接口狀態(tài)。假如無法ping通，只能說明協(xié)議有問題。這時能夠在電腦“控制面板”“系統(tǒng)”中，查看網(wǎng)卡是否已經(jīng)安裝或犯錯。假如在系統(tǒng)中硬件列表中沒有發(fā)覺網(wǎng)絡適配器，或網(wǎng)絡適配器前方有一個黃色“！”，說明網(wǎng)卡未安裝正確。ipub故障分析v第58頁④假如確定網(wǎng)卡和協(xié)議都正確情況下，還是網(wǎng)絡不通，可初步斷定是Hub和雙絞線問題。為了深入進行確認，可再換一臺主機用一樣方法進行判斷。假如其它主機與本機連接正常，則故障一定是先前那臺電腦和Hub接口上。⑤假如確定Hub有故障，應首先檢驗Hub指示燈是否正常，假如先前那臺電腦與Hub連接接口燈不亮說明該Hub接口有故障排除方法（續(xù)）ipub故障分析v第59頁⑥假如網(wǎng)絡設備沒有問題，則檢驗主機到網(wǎng)絡設備那一段雙絞線和所安裝網(wǎng)卡是否有故障。測試網(wǎng)線時主要測試1、2和3、6四條線(其中1、2線用于發(fā)送，3、6線用于接收)。經(jīng)過上面故障壓縮，我們就能夠判斷故障到底是出在協(xié)議、網(wǎng)卡、雙絞線還是網(wǎng)絡設備上。排除方法（續(xù)）ipub故障分析v第60頁接口故障問題描述：故障現(xiàn)象：一臺T16C千兆接口連接上光纖后，LINK燈不亮故障分析：當初傳輸設備網(wǎng)管上顯示T16C已經(jīng)發(fā)光，對t16c做自環(huán)測試發(fā)覺燈也不亮，懷疑燈壞了或者板子有問題，但局方人員說前幾天還是好。故障排查：原來路由器上做了端口鏡像，該千兆口為target-port，試驗將該配置去掉后，燈亮了。分析：做了端口鏡像，千兆接口不能自動進行鏈路協(xié)商了，所以鏈路起不來。ipub故障分析v第61頁網(wǎng)線衰減問題描述：某企業(yè)網(wǎng)反應用戶訪問某服務器時通時不通。故障排查與分析：懷疑是服務器本身問題，但把電腦和服務器直接連接就沒問題；懷疑線路問題，但用測試儀測試卻沒任何問題，抱著僥幸心理，試著換了網(wǎng)線，問題處理。故障分析：有部分集成商為了利潤，在綜合布線時候可能會采取些劣質材料。有時候會因為網(wǎng)線線纜質量造成網(wǎng)絡不通。那些劣質線纜在傳輸距離較短時候可能感覺不出來，不過假如從機房到PC終端距離較長那么線纜質量就會對網(wǎng)絡造成影響，故障非常隱蔽，不輕易發(fā)覺。向管理人員反應后，更換全部網(wǎng)線。ipub故障分析v第62頁T64G瞬斷現(xiàn)象問題描述：XX運行商，ZXR10-T64G下帶華為5100設備出現(xiàn)閃斷現(xiàn)象,還有告警信息。故障分析：T64Ggei_4/1上聯(lián)5200G，fei_2/3和fei_2/9下掛DSLAM，察看告警發(fā)覺fei_2/3和fei_2/9之間有個0810.17CC.3685地址發(fā)生飄逸，造成一些業(yè)務瞬斷。經(jīng)用戶確認該地址是2/3下掛DSLAM一個靜態(tài)地址用戶，用于網(wǎng)吧，懷疑網(wǎng)吧用戶可能中毒或者fei_2/9下面用戶中毒仿制了一樣一個MAC造成。故障排除：當前暫時將該MAC綁定在fei_2/3端口。T64G不出現(xiàn)告警，觀察一段時間確認沒有瞬斷發(fā)生。

ipub故障分析v第63頁CPU占用率高故障一故障描述：T128路由器NPCI接口板CPU占用率很高，甚至造成接口板吊死故障現(xiàn)場信息采集與分析：執(zhí)行debugipicmp看到路由器發(fā)出大量icmp報文，其類型是ttlexceed,這表明路由器收到大量ttl=1數(shù)據(jù)報，這種情況表示網(wǎng)絡中存在路由環(huán)路，而T128處于環(huán)路中間。經(jīng)過分析，T128上聯(lián)cisco7206路由器指過來靜態(tài)路由是：iprouteiproute28這些都是以后要用到網(wǎng)段，但當前使用較少。T128配置了其中幾個子網(wǎng)（192.208/28,192.240/28,193-195.0/24,etc）靜態(tài)路由，有些配置了靜態(tài)路由但接口還沒有連線使用。而T128是經(jīng)過缺省路由指向7206。所以，公網(wǎng)上病毒掃描(TCP包)這些未用子網(wǎng)，T128就經(jīng)過缺省路由到7206，7206又經(jīng)過靜態(tài)路由返回給T128，所以形成了loop故障處理:創(chuàng)建一個loopback接口，然后對7206指過來網(wǎng)段做一個靜態(tài)路由指到loopback接口上，這就是黑洞路由，那么當?shù)貨]有路由，數(shù)據(jù)包都指向loopback扔掉了。ipub故障分析v第64頁CPU占用率高故障二問題描述：T16CCPU占用率高達90％以上，用戶上網(wǎng)感覺慢。故障信息采集與分析：觀察上行接口所在槽位數(shù)據(jù)流量，systemshowl3-flowprotocolipmodule2；發(fā)覺有大量源地址為127.x.x.x地址向同一個地址發(fā)起http連接，連接數(shù)量約20多萬。故展排除：啟用黑洞路由，ipaddroutex.x.x.x/32blackhole，x.x.x.x為被攻擊ip地址。這么cpu占用率下降為2%左右。ipub故障分析v第65頁CPU占用率高故障三問題描述：xx運行商，T64G上某接口丟包率高，CPU利用率高達70％故障信息采集與分析：經(jīng)觀察，大量報文從問題端口進來，丟包達20％左右，CPU很高，到達60％。用軟件抓包，有很多疑點，很多報文不是給我們設備，包含協(xié)議包，數(shù)據(jù)包。但為何發(fā)給我們T64G，向局方提出問題和相關數(shù)據(jù)，局方登錄上連設備（其它廠商產(chǎn)品），查看結果是，我們T64G所連接端口前段時間做過端口鏡像，但忘記取消命令，割接后，偏偏又割接在同一端口，造成大量無須要報文涌向本公司設備。故展排除：在上行設備上取消端口鏡像命令。ipub故障分析v第66頁蠕蟲病毒防范針對可能暴發(fā)異常流量端口應用ACL過濾對應數(shù)據(jù)包，以控制流量擁塞廣域網(wǎng)。1.在全局配置模式下定義ACL：zxr10(config)#access-list101denyudpanyanyeq1434zxr10(config)#access-list101