網(wǎng)絡(luò)應(yīng)急方案

網(wǎng)絡(luò)應(yīng)急方案（一） 應(yīng)急方案啟動(dòng)條件當(dāng)核心交換機(jī)（三層交換機(jī)）無(wú)法正常完成路由功能、無(wú)法正常啟動(dòng)?；蛘吆诵穆酚善鳠o(wú)法正常工作時(shí)，為了保證核心網(wǎng)絡(luò)的正常運(yùn)行，啟動(dòng)該應(yīng)急方案。（二） 應(yīng)急方案繼續(xù)執(zhí)行原則核心交換機(jī)沒(méi)有熱備份，核心路由器有利舊設(shè)備作為熱備份。若出現(xiàn)核心交換機(jī)不能正常工作或者核心路由器的主備均不能正常工作的情況，則立刻報(bào)告中心申請(qǐng)技術(shù)支持盡快恢復(fù)。（三） 皿。核心網(wǎng)絡(luò)現(xiàn)狀1、核心網(wǎng)絡(luò)現(xiàn)狀3、網(wǎng)絡(luò)結(jié)構(gòu)圖核心交換機(jī)機(jī)箱故障的處理遼寧移動(dòng)通信公司存有1臺(tái)cisco6509交換機(jī)做為核心。1） 交換機(jī)莫名重啟2） 交換機(jī)個(gè)別槽位無(wú)法辨識(shí)板卡1） 交換機(jī)沒(méi)有良好的接地，熱插拔板卡時(shí)沒(méi)有帶放靜電手帶，熱插拔板卡時(shí)損毀交換機(jī)總線插槽2） 過(guò)大的電流沖擊損壞交換機(jī)電源和總線3） 交換機(jī)長(zhǎng)時(shí)間處于環(huán)境溫度過(guò)低的環(huán)境中，總線器件老化。當(dāng)交換機(jī)出現(xiàn)莫名重啟現(xiàn)象的時(shí)候首先檢查一下引擎工作是否正常，有無(wú)異常log記錄，如果引擎工作正常說(shuō)明交換機(jī)總線可能存在老化情況需要更換。交換機(jī)運(yùn)轉(zhuǎn)中發(fā)生個(gè)別板卡發(fā)生無(wú)法辨識(shí)的情況下，首先更改板卡槽位，若板卡可以正常辨識(shí)，打聽(tīng)另外一塊板卡加裝在故障槽位，若能正常辨識(shí)，表明先前板卡和總線碰觸不好，再次掛一次，如果任何板卡填入改為故障槽位都無(wú)法辨識(shí)表明總線存有問(wèn)題應(yīng)立即更改機(jī)箱。有時(shí)交換機(jī)ios或catos存有bug，當(dāng)處理某類數(shù)據(jù)包或遭到某種攻擊后會(huì)出現(xiàn)重啟現(xiàn)象，此類故障通過(guò)升級(jí)交換機(jī)軟件可以解決。在無(wú)任何連接的情況下升級(jí)多個(gè)版本的軟件后仍出現(xiàn)此類故障，但使用其它引擎后交換機(jī)仍出現(xiàn)重啟現(xiàn)象，說(shuō)明機(jī)箱故障需要申請(qǐng)rma。省公司的核心交換機(jī)板為熱備份狀態(tài)，交換機(jī)發(fā)生問(wèn)題后將影響整個(gè)網(wǎng)絡(luò)的聯(lián)通性，須要盡快將備件替代掉下來(lái)原故障板卡。短時(shí)間內(nèi)盡快展開(kāi)rma處置。常用檢測(cè)命令：showmodule:檢測(cè)板卡運(yùn)轉(zhuǎn)狀態(tài)showenvironmentall:檢查交換機(jī)電源及溫度狀態(tài)核心交換機(jī)主引擎故障處置省公司核心交換機(jī)采用雙引擎，正常狀態(tài)下兩個(gè)引擎呈主備狀態(tài)，平常只有一塊引擎處于工作狀態(tài)另外一臺(tái)處于standby狀態(tài)。1） 交換機(jī)發(fā)生莫名其妙重新啟動(dòng)現(xiàn)象2） 引擎工作狀態(tài)不正常，二層、三層的主備在同一個(gè)引擎上3） 引擎硬件送檢失利，交換機(jī)無(wú)法啟動(dòng)1） 引擎沒(méi)有完全插入總線插槽內(nèi)或引擎與總線接口接觸不好2） 采用的ios、catos存有bug3） 系統(tǒng)電源不穩(wěn)定，加速引擎電子器件老化，無(wú)法正常工作發(fā)生引擎無(wú)法辨識(shí)的情況時(shí)，再次忽掛一下引擎，如果故障依舊，更改一下引擎邊線，該引擎仍無(wú)法辨識(shí)表明該引擎故障，須要提出申請(qǐng)rma。有時(shí)交換機(jī)ios或catos存有bug，當(dāng)處理某類數(shù)據(jù)包或遭到某種攻擊后會(huì)出現(xiàn)重啟現(xiàn)象，此類故障通過(guò)升級(jí)交換機(jī)軟件可以解決。為了確保交換機(jī)可以長(zhǎng)久、平衡的運(yùn)轉(zhuǎn)一定必須為交換機(jī)提供更多一個(gè)較好的供電系統(tǒng)。省公司的核心交換機(jī)引擎為熱備份狀態(tài)，交換機(jī)的一塊引擎出現(xiàn)問(wèn)題后都不會(huì)影響到整個(gè)業(yè)務(wù)的進(jìn)行，短時(shí)間內(nèi)可以進(jìn)行rma處理。常用檢測(cè)命令：showmodule:檢測(cè)板卡運(yùn)行狀態(tài)showdiagnosticspower-on：交換機(jī)引擎2層、三層送檢核心交換機(jī)板卡故障處理1） 交換機(jī)板卡無(wú)法正常辨識(shí)2） 板卡端口工作異常，時(shí)常updown或根本無(wú)反映3） 板卡經(jīng)常出現(xiàn)重新啟動(dòng)1） 交換機(jī)槽位故障2） 板卡與總線插槽接觸不良3） 板卡老化，個(gè)別固定端口出現(xiàn)問(wèn)題4） gbic模塊老化，信號(hào)損耗過(guò)低運(yùn)行中的板卡出現(xiàn)無(wú)法識(shí)別的情況，首先拔插一下板卡，插緊板卡并上緊板卡螺絲，如果拔卡工作正常說(shuō)明板卡與總線接觸不好，若識(shí)別后運(yùn)行時(shí)間不常再次出現(xiàn)上述故障說(shuō)明板卡故障，需要申請(qǐng)rma。如果板卡上的個(gè)別端口時(shí)常發(fā)生updown的情況，檢查相連接終端的網(wǎng)卡或網(wǎng)線是否存在問(wèn)題，更換網(wǎng)線使用其它終端接入后若仍出現(xiàn)問(wèn)題說(shuō)明板卡問(wèn)題，需要申請(qǐng)rma。常用檢測(cè)命令：showmodule:檢測(cè)板卡運(yùn)行狀態(tài)showport/interface：檢測(cè)端口運(yùn)轉(zhuǎn)狀態(tài)核心交換機(jī)互連gbic模塊故障處理gbic就是一種采用最廣為的高速相連接模塊，gbic模塊受到溫度，采用時(shí)間等諸多因素的影響，最久壽命僅約5-6年最少2年左右，因此該模塊發(fā)生問(wèn)題屬正?，F(xiàn)象。1） 模塊無(wú)法識(shí)別2） 長(zhǎng)時(shí)間運(yùn)轉(zhuǎn)后丟包3） 能看到模塊中的光柱，但無(wú)法聯(lián)通1）模塊老化、跳線相連接頭存污垢或劃痕2）板卡gbic端口故障gbic成本相對(duì)較低，且用量非常大，建議常備幾塊牽制萬(wàn)一。如果系統(tǒng)運(yùn)行中出現(xiàn)模塊無(wú)法識(shí)別的情況，更換gbic模塊，若故障依更換模塊位置，更換模塊位置后仍存在上述問(wèn)題說(shuō)明光纖問(wèn)題。更改模塊邊線時(shí)特別注意留存原端口配置。核心交換機(jī)互連城域網(wǎng)線路故障應(yīng)急處理省公司城域網(wǎng)全部使用雙連接結(jié)構(gòu)，正常情況下不存有中斷故障，但是不確定因?yàn)樵O(shè)備故障、運(yùn)營(yíng)商線路檢修或斷電而引起的網(wǎng)絡(luò)中斷。城域網(wǎng)線路中斷影響面較大，這里的核心交換機(jī)連接了多個(gè)辦公機(jī)構(gòu)，一旦設(shè)備出現(xiàn)問(wèn)題將造成多處機(jī)構(gòu)無(wú)法正常通訊。通常發(fā)生城域網(wǎng)故障時(shí)就是由于運(yùn)轉(zhuǎn)商線路故障和交換機(jī)房斷電。城域網(wǎng)連接不能等到故障后才去處理，應(yīng)當(dāng)有一套備用系統(tǒng)，可以使用isdn、低檔路由器作為備份系統(tǒng)保持生產(chǎn)業(yè)務(wù)的正常進(jìn)行。交換機(jī)二層環(huán)路故障應(yīng)急處置二層環(huán)路是一種比較嚴(yán)重的故障，它會(huì)產(chǎn)生嚴(yán)重的廣播風(fēng)暴阻塞整個(gè)網(wǎng)段。常見(jiàn)故障現(xiàn)象1） 網(wǎng)段內(nèi)所有pc無(wú)法訪問(wèn)網(wǎng)絡(luò)資源，無(wú)法ping通網(wǎng)關(guān)和網(wǎng)段內(nèi)其它pc2） 交換機(jī)死機(jī)3） 核心交換機(jī)cpu利用率增高樓層一個(gè)hub連接了該層交換機(jī)的2個(gè)相同vlan的端口最輕易的方式就是由辨認(rèn)出問(wèn)題的最終用戶通告，可以根據(jù)他們提供更多的資料隨心所欲搜尋至環(huán)路的邊線。如果沒(méi)有任何人通知，發(fā)現(xiàn)核心交換機(jī)cpu利用率反常的時(shí)候，使用ipscan軟件檢測(cè)樓層各交換機(jī)是否能夠ping通，如果發(fā)現(xiàn)有交換機(jī)無(wú)法ping通立即趕到出事樓層配線間，通過(guò)console登陸交換機(jī)（此時(shí)無(wú)反映）以此拔下交換機(jī)以太網(wǎng)線直至交換機(jī)有反映為止，還原網(wǎng)絡(luò)連接（故障線路除外）根據(jù)故障網(wǎng)線對(duì)應(yīng)的信息點(diǎn)查找出現(xiàn)環(huán)路的最終設(shè)備。如果系統(tǒng)中能設(shè)置一個(gè)能快速發(fā)散設(shè)備log的工具就可以隨心所欲化解此類問(wèn)題，當(dāng)辨認(rèn)出環(huán)路后只須要直觀在log服務(wù)器上搜尋該設(shè)備最后一個(gè)up的端口即可。樓層交換機(jī)引擎故障處理省公司樓層交換機(jī)采用cisco2900系列交換機(jī)，上聯(lián)cisco4500該類交換機(jī)除45o7r外只積極支持單引擎，一旦引擎發(fā)生問(wèn)題交換機(jī)將無(wú)法啟動(dòng)。1） 交換機(jī)出現(xiàn)莫名重啟現(xiàn)象2） 引擎工作狀態(tài)不正常，二層、三層的主備在同一個(gè)引擎上3） 引擎硬件自檢失敗，交換機(jī)無(wú)法啟動(dòng)1） 引擎沒(méi)全然填入總線插槽內(nèi)或引擎與總線USB碰觸不好2） 使用的ios、catos有bug3） 系統(tǒng)電源不平衡，快速引擎電子器件老化，無(wú)法正常工作出現(xiàn)引擎無(wú)法識(shí)別的情況時(shí)，重新拔插一下引擎，如果故障依舊，更換一下引擎位置，該引擎仍無(wú)法識(shí)別說(shuō)明該引擎故障，需要申請(qǐng)rma。有時(shí)交換機(jī)ios或catos存bug，當(dāng)處置某類數(shù)據(jù)包或遭某種反擊后可以發(fā)生重新啟動(dòng)現(xiàn)象，此類故障通過(guò)升級(jí)交換機(jī)軟件可以化解。為了保證交換機(jī)可以長(zhǎng)久、穩(wěn)定的運(yùn)行一定要為交換機(jī)提供一個(gè)良好的供電系統(tǒng)。常用檢測(cè)命令：showmodule:檢測(cè)板卡運(yùn)行狀態(tài)showdiagnosticspower-on：交換機(jī)引擎2層、三層送檢樓層交換機(jī)故障處理4） 交換機(jī)板卡無(wú)法正常辨識(shí)5） 板卡端口工作異常，時(shí)常updown或根本無(wú)反映6） 板卡經(jīng)常出現(xiàn)重新啟動(dòng)5） 交換機(jī)槽位故障6） 板卡與總線插槽接觸不良7） 板卡老化，個(gè)別固定端口出現(xiàn)問(wèn)題8）gbic模塊老化，信號(hào)損耗過(guò)低運(yùn)行中的板卡出現(xiàn)無(wú)法識(shí)別的情況，首先拔插一下板卡，插緊板卡并上緊板卡螺絲，如果拔卡工作正常說(shuō)明板卡與總線接觸不好，若識(shí)別后運(yùn)行時(shí)間不常再次出現(xiàn)上述故障說(shuō)明板卡故障，需要申請(qǐng)rma。如果板卡上的個(gè)別端口時(shí)常發(fā)生updown的情況，檢查相連接終端的網(wǎng)卡或網(wǎng)線與否存有問(wèn)題，更改網(wǎng)線采用其它終端互連后若仍發(fā)生問(wèn)題表明板卡問(wèn)題，須要提出申請(qǐng)rma。常用檢測(cè)命令：showmodule:檢測(cè)板卡運(yùn)轉(zhuǎn)狀態(tài)showport/interface：檢測(cè)端口運(yùn)行狀態(tài)樓層交換機(jī)布局遺失或處在rmon狀態(tài)無(wú)法啟動(dòng)處置當(dāng)樓層交換機(jī)因斷電出現(xiàn)重啟，有時(shí)候會(huì)進(jìn)入rmon狀態(tài)，此狀態(tài)并不是很嚴(yán)重的故障，出現(xiàn)此類問(wèn)題的原因時(shí)啟動(dòng)時(shí)系統(tǒng)沒(méi)有調(diào)用ios軟件。解決此類故障的方法只需要在在rmon提示符下鍵入reset或boot讓系統(tǒng)重新引導(dǎo)。如果系統(tǒng)鼓勵(lì)過(guò)程中可以首先檢測(cè)系統(tǒng)二層、三層硬件系統(tǒng)，如果發(fā)生錯(cuò)誤提示信息表明引擎故障須要更改。為了減少此類事故的重演應(yīng)定期備份交換機(jī)配置，并定期做設(shè)備老化測(cè)試，定期在下班后斷電重啟樓層交換機(jī)。樓層交換機(jī)線路故障處置省公司樓層交換機(jī)采用雙線路連接至核心交換機(jī)，正常情況下不存在線路完全斷掉的問(wèn)題，但不能排除交換機(jī)gbic老化問(wèn)題，應(yīng)定期進(jìn)行線路迂回測(cè)試，及時(shí)排除gbic和光纖的問(wèn)題，保證網(wǎng)絡(luò)系統(tǒng)在一個(gè)穩(wěn)定的傳輸環(huán)境中運(yùn)行。dhcp服務(wù)器故障處置dhcp服務(wù)器是省公司關(guān)鍵服務(wù)器之一，它負(fù)擔(dān)了所有辦公用終端ip地址的自動(dòng)分配。（sunsolaris）1） 少數(shù)地址狀態(tài)為otheravailable2） 多數(shù)地址狀態(tài)為pendingavailable3） 系統(tǒng)步入ok狀態(tài)無(wú)法正常鼓勵(lì)當(dāng)出現(xiàn)上述故障的前兩項(xiàng)時(shí)，首先檢查一下dhcp服務(wù)器的聯(lián)通性，如果聯(lián)通性沒(méi)有問(wèn)題，嘗試在地址屬性上執(zhí)行forceavailable，如果仍無(wú)發(fā)解決，在dhcp服務(wù)的根目錄下執(zhí)行reload，若仍無(wú)法解決該問(wèn)題reboot系統(tǒng)。當(dāng)系統(tǒng)鼓勵(lì)時(shí)步入ok狀態(tài)時(shí)，須要在ok提示符下鍵入“80”即可再次鼓勵(lì)系統(tǒng)。1） 聯(lián)系公司維護(hù)小組工程師或現(xiàn)