中興交換機故障分析診斷

1、ZXJ10交換機故障預防中興通訊網(wǎng)絡事業(yè)部南京用服部1. 病毒感染 32. 網(wǎng)絡風暴 43. 傳輸故障 54. 對端設備問題 65. 雷擊 76. 日常維護 76.1服務器C盤空間不足76.2服務器數(shù)據(jù)庫空間不足 86.3數(shù)據(jù)未及時備份 96.4數(shù)據(jù)未及時轉(zhuǎn)儲 96.5機房環(huán)境不符合要求 106.6線纜松動117. 機房停電 118. 誤操作 138.1數(shù)據(jù)配置誤操作 138.2硬件操作不規(guī)范149. 未購買維保服務 14、八、刖言隨著消費者對通訊服務要求的日益提高，要求我們的通訊設備能夠穩(wěn)定運行，并且在出現(xiàn)業(yè)務中斷后能迅速恢復。目前很多故障是由于沒有很好的預防導致的， 如果能夠進行有效預防，

2、則可以大大降低 故障發(fā)生的概率，并且即使在故障發(fā)生以后， 也能盡快的恢復業(yè)務。 下面對常見的會引起重 大故障的情況以及預防措施進行介紹，希望能給各個局予以參考。1. 病毒感染故障現(xiàn)象：1. 服務器或操作終端反應速度慢，無法正常操作；2. 后臺程序無法正常運行，報錯，或自動退出；3. 計費服務器不能正常登錄或計費進程不接收話單，導致立即計費、IP超市不 能正常使用；4. 鑒權(quán)服務器不能提供實時的服務 ，造成鑒權(quán)、攔截等業(yè)務呼叫失敗；5. 破壞數(shù)據(jù)庫，尤其是計費庫，使數(shù)據(jù)丟失；6. 話務臺、網(wǎng)管前置機等后臺終端不能正常使用。7. 計算機自動重啟。影響范圍：1. 影響計算機的正常操作，不能進行正常的

3、日常維護；2. 影響實時的業(yè)務，如立即計費、鑒權(quán)等。3. 影響到話務臺、網(wǎng)管前置機等終端。預防措施：1. 安裝中興通訊指定的防病毒軟件， 并定期更新病毒庫，定期進行全盤病毒掃描；2. 操作系統(tǒng)、數(shù)據(jù)庫打最新的補丁；3. 安裝中興通訊自主研發(fā)的網(wǎng)絡安全軟件，對關(guān)鍵程序、系統(tǒng)進程實時監(jiān)控， 防 止病毒感染；4. 后臺網(wǎng)絡與大網(wǎng)隔離，防止外網(wǎng)病毒入侵；5. 不在ZXJ10后臺維護網(wǎng)絡上安裝、使用其它無關(guān)軟件；6. 不使用其它媒介（U盤、移動硬盤、軟盤等）對服務器和終端進行操作；7. 定期作好數(shù)據(jù)備份，包括交換機數(shù)據(jù)和計費設置數(shù)據(jù)等，以便萬一出現(xiàn)故障后 能夠進行迅速恢復；& 加強機房操作維護人

4、員管理，強化防病毒意識。案例1 :現(xiàn)象：XX局ZXJ10V10交換機的IP前置機計費操作失敗，影響結(jié)算。處理：檢查發(fā)現(xiàn)前臺積累大量的話單文件，無法完全及時的傳送到后臺，并且后臺話單文件無法進行入庫操作，后臺計算機反應速度非常慢。經(jīng)過檢查是因為計費服務器感染病毒 引起的，該病毒的名字是 wom.lovegate，通過殺毒，故障恢復！點評：該故障就是因為沒有做好防病毒工作導致的，由于本局沒有立即計費、IP超市、鑒權(quán)等實時業(yè)務，因此影響還不是很大，只是影響了正常結(jié)算和話單及時接收， 如果存在上 述業(yè)務，則影響就很大了，因此平時必須做好病毒預防工作。案例2:現(xiàn)象：XX局ZXJ10V10交換機的計費服務

5、器出問題，影響8個點的話吧業(yè)務。處理：經(jīng)檢查，是由于計費服務器染病毒不能正常啟動，立即計費終止，話吧用戶不能正常使用，殺毒后正常。點評：這是一起有實時計費業(yè)務的案例，對業(yè)務的影響就比較大，話吧無法營業(yè)。2. 網(wǎng)絡風暴故障現(xiàn)象：1. 交換機前后臺不能正常通信。2. 前臺MP自動重起；3. MP的CPU占用率高，呼叫困難；4. 計算機速度慢，終端不能從服務器獲得數(shù)據(jù)，或獲取數(shù)據(jù)的速度很慢。 影響范圍：1. 前后臺通訊；2. 前臺MP3. 后臺服務器及操作終端。 預防措施：1. 后臺網(wǎng)絡與大網(wǎng)隔離，防止廣播風暴；2. 作好防病毒工作。3. 操作系統(tǒng)、數(shù)據(jù)庫打最新的補丁；案例：現(xiàn)象：XX局ZXJ10交

6、換機MP不能正常啟動。處理：詢問現(xiàn)場情況，兩個MP勻不能正常啟動，和服務器通訊中斷，將后臺網(wǎng)絡斷開并重啟MP后，正常。點評：事后經(jīng)分析相關(guān)跟蹤文件，發(fā)現(xiàn)是網(wǎng)絡風暴引起的，該交換機的后臺維護系統(tǒng)與 其它網(wǎng)絡相連，當有網(wǎng)絡風暴產(chǎn)生時，會直接影響到MP與后臺的通訊，并影響到MP本身的 工作。3傳輸故障故障現(xiàn)象：1. 模塊間通信中斷；2. 模塊間通信瞬斷；3. 遠端用戶單元通信阻斷；4. 局間業(yè)務中斷；5. 模塊間、局間電話雜音等。影響范圍：1. 模塊間電話業(yè)務；2. 局間電話業(yè)務。預防措施：1. 加強傳輸設備的定期檢查維護，對于隱患要及時排除；2. 對傳輸設備進行割接或維護后，要立即對經(jīng)過該傳輸設備

7、的所有業(yè)務進行測 試，及時排除故障，消除隱患；3. 電話用戶出現(xiàn)業(yè)務故障后， 不僅要檢查交換設備， 還要迅速檢查傳輸設備， 以 減少影響的時間；4. 在作傳輸設備割接等工作前，通知到相關(guān)的設備主管部門，以做好防范和通信 保障措施。案例1 :現(xiàn)象：XX分公司XX端局ZXJ10下掛一個模塊中斷，影響約五百用戶。處理：經(jīng)過了解現(xiàn)場情況， 該中斷的模塊內(nèi)用戶可以互相撥打，DTI板狀態(tài)正常，在DDF上給DTI環(huán)回也正常。查傳輸通道有問題，處理后，模塊間通信恢復點評：由于現(xiàn)場及時檢查了傳輸，使得問題較快定位。案例2:現(xiàn)象：XX局ZXJ10反映撥打一個局向電話不通。處理：局內(nèi)可以正常撥打，該局向電話不能呼入

8、呼出。經(jīng)查，系傳輸中斷，處理后，恢 復正常。點評：這是一起傳輸問題引起局間電話不通的案例，因此，首先保障傳輸安全，才能保 障通信暢通。4. 對端設備問題故障現(xiàn)象：1. 對端誤操作，數(shù)據(jù)配置錯誤，導致業(yè)務不通；2. 對端設置了電路閉塞，導致中繼不通；3. 對端做了電路自環(huán)，影響中繼業(yè)務和信令；4. 對端做了升級、重組網(wǎng)、搬遷等中斷業(yè)務的操作，影響本端業(yè)務。影響范圍：視對端的操作情況而影響不一樣，可能會影響本端部分用戶， 或某個局向的電話業(yè)務。預防措施：1. 在修改數(shù)據(jù)時要考慮到對各鄰接局向的影響；2. 在某個局進行設備割接、升級等工作前，能夠通知到其它各鄰接局，使各方能有所準備；3. 出現(xiàn)故障后

9、，及時與對端局溝通，雙方配合，縮短中斷時間。案例：現(xiàn)象：XX局某個局向業(yè)務中斷處理：經(jīng)了解該局出中繼為 PRA對端局做數(shù)據(jù)時將對應 PRA中繼的30B+D用戶置為欠 費。讓對端局將該 30B+D用戶欠費標志取消后正常。點評：這是一起對端誤操作的案例，在這起案例中，對端局在修改數(shù)據(jù)時沒有考慮到對其它局的影響（也可能是誤操作），從而導致電話不通，因此在做數(shù)據(jù)時要考慮到對鄰接局向的影響，并且在修改數(shù)據(jù)后要及時撥打測試，一旦出現(xiàn)故障需盡快查明原因，并進行恢復處理。5. 雷擊故障現(xiàn)象：雷擊后，部分單板損壞、部分后背板損壞、部分線纜損壞，導致該模塊部分單元或 整個模塊電話不通。故障范圍：本模塊部分用戶或全

10、部用戶。預防措施：1. 保證設備接地良好，接地電阻符合郵電部機房環(huán)境規(guī)范；2. 按中興通訊提供的防雷改造方案，對設備進行防雷改造；3. 對于雷擊多發(fā)地區(qū)，要準備備板備件，以便雷擊后能迅速進行部件的更換；4. 設備所在的機房要符合郵電部相關(guān)機房防雷規(guī)范。案例：現(xiàn)象：XX局ZXJ10模塊間通信阻斷，有 1000多用戶只能內(nèi)部通信。處理：檢查發(fā)現(xiàn)，因雷擊導致 COMM板故障，影響模塊間通訊，更換故障單板，問題解 決。點評：該局沒有做防雷改造， 機房也沒有很好的防雷措施，導致雷擊時更易出現(xiàn)設備損壞，慶幸的是，現(xiàn)場及時提供了備板，使中斷時間不是太長。6. 日常維護6.1服務器C盤空間不足故障現(xiàn)象：1.

11、程序運行錯誤，不能正常運行；2. 計算機啟動后程序不能正常運行，或速度很慢。影響范圍：不能進行正常的后臺操作維護。預防措施：1. 作好日常檢查工作， 檢查服務器C盤（系統(tǒng)盤）的剩余空間，保證C盤剩余空 間不能少于500M;2. 不要在計算機上，尤其是 C盤上安裝其它軟件；案例： 現(xiàn)象：XX局服務器數(shù)據(jù)庫出錯，后臺無法運行。處理：現(xiàn)場檢查時發(fā)現(xiàn)， C盤的空間只有200M左右，空間已不能使程序正常的運行了， 且交換機的運行程序目錄也已被刪除（可能是在處理中誤刪除了），只能重新對后臺進行安裝，安裝過程中還出了一些報錯，經(jīng)過處理，最終安裝成功，故障消除。點評：由于C盤空間太小，本來只需要刪掉一些無關(guān)的

12、程序即可，但用戶在現(xiàn)場處理時又將C盤上ZXJ10維護系統(tǒng)目錄誤刪除， 導致故障范圍加大。 本故障的根源是在 C盤上安裝 了太多的程序，導致C盤剩余空太小造成的， 因此如果平時能注意 C盤空間，在出問題后能 正常處理，則不會出現(xiàn)該案例中的一系列問題。6.2服務器數(shù)據(jù)庫空間不足故障現(xiàn)象：數(shù)據(jù)庫滿，相關(guān)的業(yè)務中止。影響范圍：后臺服務器、相關(guān)業(yè)務。預防措施：1. 合理分配數(shù)據(jù)庫空間， 對于計費庫，要根據(jù)話單量進行數(shù)據(jù)庫空間的分配，保 證可以保存三個月以上的話單；2. 定期檢查數(shù)據(jù)庫空間， 對于即將滿的數(shù)據(jù)庫要分析原因，如果是本身空間分配比較小，則要做擴庫操作，如果是因為過期數(shù)據(jù)沒有及時刪除，則需要進行

13、及時的清理。3. 不要在計算機上安裝其它軟件，占用硬盤空間。案例：現(xiàn)象：XX局ZXJ10V10大面積話吧出現(xiàn)撥號完之后立馬出現(xiàn)忙音現(xiàn)象。處理：檢查發(fā)現(xiàn)計費服務器 130的計費庫已滿，一年前的話單還存在。將計費庫由4000M 擴到6000M,并將過期話單清除后故障解決。點評：由于硬盤空間和數(shù)據(jù)庫空間有限，隨著話單的不斷增加，總有一天硬盤空間或數(shù)據(jù)庫空間會不夠，因此，在日常維護中，要定期檢查硬盤和數(shù)據(jù)庫空間，對于過期話單，要及時清理。該局的計費庫空間其實是足夠的，主要是歷史話單太多，沒有及時清理，如果能夠及時清理話單，本次話吧不能撥打的情況可以避免。6.3數(shù)據(jù)未及時備份故障現(xiàn)象：后臺數(shù)據(jù)庫或者后臺

14、服務器崩潰后不能及時進行數(shù)據(jù)的恢復，延長了業(yè)務中斷時 間。影響范圍：全局業(yè)務或計費系統(tǒng)。預防措施：1. 定期人工備份交換機的后臺數(shù)據(jù)和計費設置數(shù)據(jù)，數(shù)據(jù)備份到不同的介質(zhì)；2. 定期人工備份IP超市系統(tǒng)數(shù)據(jù)；3. 設置交換機后臺數(shù)據(jù)自動備份功能；案例：現(xiàn)象：XX局，立即計費系統(tǒng)無法正常工作。處理：查詢數(shù)據(jù)庫，發(fā)現(xiàn) JYSYS被置為可疑狀態(tài)。經(jīng)過長時間的努力，最終解決問題。 該局用戶沒有養(yǎng)成備份數(shù)據(jù)的習慣，另外計算機也可能染有病毒。點評：出現(xiàn)問題后，一個簡單的有效的方法就是重裝服務器，將備份數(shù)據(jù)恢復即可，但由于用戶沒有養(yǎng)成備份數(shù)據(jù)的習慣，現(xiàn)場的計費設置數(shù)據(jù)還是很久以前備份的，已經(jīng)沒有使用價值，如果

15、重新設置則工作量太大，并且也記不清到底是怎樣的設置了，因此現(xiàn)場只能是解決JFSYS置疑問題，從而花去了大量的時間，影響了立即計費等業(yè)務。在本次故障處理中，也發(fā)現(xiàn)了計算機存在病毒，這也是導致計算機數(shù)據(jù)庫故障的原因之。6.4數(shù)據(jù)未及時轉(zhuǎn)儲故障現(xiàn)象：當MP重啟或設備突然掉電，造成數(shù)據(jù)不正確（恢復到轉(zhuǎn)儲前的數(shù)據(jù)），影響業(yè)務。影響范圍：根據(jù)未轉(zhuǎn)儲的數(shù)據(jù)不同，而造成的影響也不一樣。預防措施：1. 通常是ZXJ10V4.X交換機有此問題，ZXJ10 A型交換機數(shù)據(jù)配置后，數(shù)據(jù)存于內(nèi)存中，必須進行轉(zhuǎn)儲才能將數(shù)據(jù)保存到硬盤文件中，因此，進行數(shù)據(jù)修改后，需要及時進行數(shù)據(jù)轉(zhuǎn)儲。2. 對于ZXJ10V10交換機，動態(tài)

16、數(shù)據(jù)會定時轉(zhuǎn)儲，但如果做了動態(tài)數(shù)據(jù)后需要重 啟MP則也需要進行動態(tài)數(shù)據(jù)轉(zhuǎn)儲，防止動態(tài)數(shù)據(jù)失。案例：現(xiàn)象：XX局MP數(shù)據(jù)丟失，所有電話無法入局，出局正常。處理：A及B兩地專網(wǎng)交換機 MP出現(xiàn)過倒換，而用戶沒有養(yǎng)成轉(zhuǎn)儲數(shù)據(jù)的習慣；這就 導致數(shù)據(jù)丟失，造成局碼不對，通過創(chuàng)建本局局碼及升位本局局碼等手段將局碼改成正確局 碼，大部分業(yè)務恢復。點評：該局是一個 ZXJ10 V4.X版本的交換機，由于沒有及時轉(zhuǎn)儲，造成數(shù)據(jù)丟失，花 了好多時間和精力進行補救，并且還影響了業(yè)務，很不值得。因此平時一定要在做數(shù)據(jù)后進 行轉(zhuǎn)儲，并且能定期將前臺數(shù)據(jù)備份到后臺不同介質(zhì)中，防止MP損壞等意外發(fā)生后能夠及時恢復業(yè)務。6.

17、5機房環(huán)境不符合要求故障現(xiàn)象：環(huán)境不符合信產(chǎn)部通信機房環(huán)境要求；溫度過高或過低、濕度過大或過小、灰塵大、振動大、接地不良等。影響范圍：機房里的通訊設備及輔助設備。預防措施：1. 嚴格按照信產(chǎn)部通信機房環(huán)境要求對機房定期進行檢查整理，形成制度；2. 定期清洗板件、防塵網(wǎng)。案例：現(xiàn)象：4K一體機出現(xiàn)5框POW起不來，用戶無法使用業(yè)務處理：因該機房灰塵較重，設備長時間運行后，板內(nèi)積灰很多，導致MTT板內(nèi)電路短路， 進而影響該框電源板工作， 使該單元通訊中斷。 觀察機架內(nèi)的電纜連接，未見異常和錯誤之處。第四框右邊POWER_故障指示燈點亮，此板已故障。拔出此故障板，插好其他單板，設 備工作正常。故障消

18、除，通訊恢復正常。點評：機房防塵和除塵是一個基本的日常維護工作，如果機房里灰塵太多， 會導致單板或線纜接觸不良。長時間積塵，還會導致電路老化，形成短路等現(xiàn)象，這個局“板內(nèi)積灰很 多”，是沒有做好機房環(huán)境整理的結(jié)果。6.6線纜松動故障現(xiàn)象：部分單元通信中斷，業(yè)務受影響。影響范圍：部分單元，與這些單元相關(guān)的話路、信令等。預防措施：1. 工程實施后注意檢查電纜，避免松動；2. 在進行日常維護、設備衛(wèi)生清理后注意檢查電纜，避免松動；3. 定期檢查，保證電纜整齊、規(guī)范。案例：現(xiàn)象：XX局交換機故障處理：到現(xiàn)場看設備的狀態(tài)，發(fā)現(xiàn)，MPPP板亮紅燈，說明 MP與PP的通信出了問題，把MP到MPPP勺通信線重

19、新插了一下，告警消失。點評：本局可能是在日常維護中碰到了線纜，導致線纜松動，因此在日常維護中， 要注意檢查線纜是否插緊，是否綁扎好，在出了故障以后，除了檢查數(shù)據(jù)、單板外，還要檢查后 背板上的線纜。7. 機房停電故障現(xiàn)象：1. 機架停電，來電后設備加電，違反交換機各機框的上電順序，導致板件損壞或 數(shù)據(jù)加載錯誤，影響業(yè)務。2. 后臺停電，服務器中斷，非正常關(guān)機，來電后計算機起不來， 或者某些程序運行不起來。計費服務器等不能提供實時的服務，鑒權(quán)服務器不能提供實時的服務等。影響范圍：1. 本模塊；如果是中繼模塊則影響到出入局；如果是中心模塊則影響到模塊間通信；2. 本服務器，立即計費、鑒權(quán)、 IP超市

20、等。預防措施：1. 交換設備要有后備電源， 并且保證使用正常， 后備電源要有足夠的容量， 能夠 支持設備運行的時間足夠長；2. 后臺服務器要配有 UPS防止計算機突然掉電；3. 對于有實時業(yè)務的服務器，要和交換設備共用電源，配備逆變器供電；3. 定期數(shù)據(jù)備份，防止突然停電導致MP故障或后臺服務器故障后數(shù)據(jù)丟失，以 便及時恢復；4. 重要單板適量備份，以便由于突然停電造成單板損壞后能夠迅速更換部件，恢 復業(yè)務；5. 按照電池維護規(guī)程進行，定期充放電。案例1 :現(xiàn)象：XX局交換機XX遠端模塊MMF后背板故障處理：用戶反映近期停電頻繁， XX遠端模塊的MMF層電源板處打火，收號器不能工作， 用戶不能

21、呼出。與用戶到現(xiàn)場對后背板燒 MMF進行更換，接上電源，該層板件正常，進行呼 叫試驗也正常。點評：程控交換設備是精密的電子設備，由于頻繁的停電，造成設備經(jīng)常非正常掉電上電，容易造成設備的損壞，因此對于這種經(jīng)常停電的機房，尤其需要配備后備電源，并保證 其能夠正常工作。案例2:現(xiàn)象：XX局ZXJ10設備起不來，有一個模塊局間用戶無法通話，大概有 2000用戶無法 打電話。處理：用戶反映，昨晚下雨雷擊后停電， 現(xiàn)在發(fā)電后設備已有電， 接線員說各單板狀態(tài) RUN燈看著正常。安排人員前往現(xiàn)場，發(fā)現(xiàn)有一塊COMN( MPPP有告警，復位倒換后正常。點評：由于設備是非正常開機的，單板的運行可能會受到影響，產(chǎn)

22、生不可預見的后果， 導致業(yè)務不通。案例3:現(xiàn)象：XX局交換機配套電池損壞處理：確認是電池壽限問題，電話只有100多門。建議客戶自行購買電池更換。點評：電池也需要維護，需要定期充放電，否則時間長了會失去作用。8. 誤操作8.1數(shù)據(jù)配置誤操作故障現(xiàn)象：數(shù)據(jù)制作生效后，部分業(yè)務或全部業(yè)務異常。影響范圍：部分用戶或全局用戶。預防措施：1. 做數(shù)據(jù)前進行數(shù)據(jù)備份；2. 做數(shù)據(jù)要求仔細、傳數(shù)據(jù)前需認真檢查、對于每個操作要理解它的含義；3. 加強技術(shù)培訓和學習；4. 數(shù)據(jù)要規(guī)范配置。案例1 :現(xiàn)象：XX局接入網(wǎng)從匯接局進來的電話不能接通。處理：XX局接入網(wǎng)局到中興匯接局的中繼建立在3號模塊上，分布在 3塊D

23、TI板上，3號模塊上同時還有到長途的中繼，打開話務統(tǒng)計查看，正常。試著復位COMI板和倒換3號模塊的MP沒有任何改善。從回送的信令來看，可能是進行了中繼鑒權(quán)或是呼轉(zhuǎn)。查看中 繼上的標志位，發(fā)現(xiàn)此中繼果真將呼叫鑒權(quán)上打了勾，去掉后恢復正常。查看操作維護日志，為28日上午10點多改了中繼標志位。點評：用戶在做數(shù)據(jù)時，可能不理解這些標志的含義，導致問題。因此需要在理解的情況下進行數(shù)據(jù)的配置，不能盲目進行操作。案例2:現(xiàn)象：XX局部分模塊電話打不通，內(nèi)部可以打通，通過現(xiàn)場故障復現(xiàn)，發(fā)現(xiàn)是部分局 向中繼出向閉塞，導致局內(nèi)用戶呼出困難。處理：懷疑和七號數(shù)據(jù)有關(guān)，仔細檢查，發(fā)現(xiàn)該局的其他局向都是準直聯(lián)，但是在交換局配置中都配成了直聯(lián)， 重新修改上述數(shù)據(jù)，然后傳2#模塊全部表，傳完后測試一切正常， 故障隱患消除。點評：這是一起數(shù)據(jù)與實際情況不符合的案例，在進行數(shù)據(jù)配置時， 要能夠了解現(xiàn)場組網(wǎng)情況，以便數(shù)據(jù)與實際相符，避免不必要的故障。8.2硬件操作不規(guī)范故障現(xiàn)象：操作后部分業(yè)務或全部業(yè)中斷。影響范圍：根據(jù)用