SCTP偶聯(lián)中斷故障處理案例

1、sctp偶聯(lián)中斷故障處理故障現(xiàn)象：諾西端局csgs45的單塊esb板故障，造成sctp偶聯(lián)的主通路中斷，由于現(xiàn)網(wǎng)局間sctp偶聯(lián)均配置了雙通路，單塊esb板故障并不會導(dǎo)致局間sctp偶聯(lián)中斷。而實(shí)際情況是，csgs45至中興局向部分sctp偶聯(lián)中斷，而到華為局向和其他諾西局向的sctp偶聯(lián)均正常，也就是說sctp的雙通路并未起到保護(hù)作用，對此，我們進(jìn)行了分析，并排除了故障。原因分析：分析判斷可能原因：1、備用通路不通2、諾西端局硬件或配置問題3、中興端局硬件或配置問題原因排查：sctp（stream control transmission protocol 流控制傳輸協(xié)議）能在兩個(gè)端點(diǎn)之間提

2、供穩(wěn)定、有序的數(shù)據(jù)傳遞服務(wù)，在sigtran協(xié)議的應(yīng)用中，sctp上層用戶是scn 信令的適配模塊（如m2ua、m3ua），下層是ip網(wǎng)。偶聯(lián)實(shí)際上是在兩個(gè)sctp端點(diǎn)之間建立的連接關(guān)系，任何時(shí)刻兩個(gè)sctp端點(diǎn)之間能且僅能建立一個(gè)偶聯(lián)。通路則是一個(gè)端點(diǎn)將sctp分組數(shù)據(jù)發(fā)送到對端端點(diǎn)特定傳送地址的路由。在現(xiàn)網(wǎng)中，如下圖1所示，兩個(gè)端局之間配置了4個(gè)偶聯(lián)，每個(gè)偶聯(lián)具有主備兩條通路，并采用了心跳機(jī)制，即當(dāng)某條通路空閑時(shí)，本端端點(diǎn)會生成相應(yīng)的心跳消息并通過該空閑通路發(fā)送到對端端點(diǎn)，而對端端點(diǎn)收到消息后將立即發(fā)回對應(yīng)的心跳確認(rèn)消息。該機(jī)制被用來隨時(shí)監(jiān)視偶聯(lián)通路的可用情況，當(dāng)某一條通路故障時(shí)，數(shù)據(jù)傳送

3、將立即切換到另一條通路上，以此來保持sctp偶聯(lián)的可靠性和穩(wěn)定性。圖1 局間偶聯(lián)示意圖圖2 諾西端局偶聯(lián)配置示意圖如上圖所示，諾西端局的偶聯(lián)建立在gisu板上，每一塊gisu板對應(yīng)一個(gè)偶聯(lián)。每個(gè)偶聯(lián)的兩條通路分別通過兩塊esb板連接直ip承載網(wǎng)，進(jìn)而與對端局相連。本次故障起因?yàn)閑sb1板故障，但單塊esb板故障只會導(dǎo)致偶聯(lián)2條通路中的1條通路中斷，根據(jù)偶聯(lián)的心跳機(jī)制，數(shù)據(jù)傳輸將立即切換到另一條通路上，整個(gè)偶聯(lián)將不會受影響。而實(shí)際情況是csgs45至中興局向部分sctp偶聯(lián)中斷，而到華為局向和其他諾西局向的sctp偶聯(lián)均正常，也就是說sctp的雙通路并未起到保護(hù)作用，對此，我們進(jìn)行了如下分析。1

4、、偶聯(lián)備用通路不通當(dāng)偶聯(lián)的主用通路中斷后，備用通路未起到作用，導(dǎo)致偶聯(lián)中斷。因此，首先排查備用通路是連通。通過zoyi:a;命令查詢了偶聯(lián)對應(yīng)的ip地址如下。association set name assoc set id sctp user role- - - -csgs9bicc 9 m3ua server assoc. assoc id parameter set ind unit in unit name state - - - - - 0 gisu-2 - mssbicc sctp-down source address 1 . . . . . : 8 sou

5、rce address 2 . . . . . : 66 source port . . . . . . . : 2905 primary dest. address . . : 3/27 secondary dest. address . : 4/27 destination port . . . . . : 8071 data stream count . . . . : 16 assoc. assoc id parameter set ind unit in unit name state - - - - - 1 gisu-4

6、 - mssbicc sctp-down source address 1 . . . . . : 9 source address 2 . . . . . : 67 source port . . . . . . . : 2905 primary dest. address . . : 3/27 secondary dest. address . : 4/27 destination port . . . . . : 8072 data stream count . . . . : 16 assoc. ass

7、oc id parameter set ind unit in unit name state - - - - - 2 gisu-5 - mssbicc sctp-down source address 1 . . . . . : 0 source address 2 . . . . . : 68 source port . . . . . . . : 2905 primary dest. address . . : 3/27 secondary dest. address . : 4/27 destinati

8、on port . . . . . : 8073 data stream count . . . . : 16 assoc. assoc id parameter set ind unit in unit name state - - - - - 3 gisu-8 4 mssbicc asp-down source address 1 . . . . . : 1 source address 2 . . . . . : 69 source port . . . . . . . : 2905 primary dest. address . . : 10

9、.157.5.13/27 secondary dest. address . : 4/27 destination port . . . . . : 8074 data stream count . . . . : 16specification version . . : 1.0 (rfc) traffic mode . . . . . . . : load-share asp messages . . . . . . . : yes registration request . . . : yes ssnm messages broadcast . : no netwo

10、rk appearance . . . . : 4294967295asp messages in ipsp . . . : no routing context . . . . . : - first data stream number . : 1 tack .: 2 seconds m3ua hb.interval.: 15 seconds activation delay.: 0 seconds其中source address 1與primary dest. address對應(yīng)了主用通路的兩個(gè)端點(diǎn)的ip地址，source address 2與secondary dest. addres

11、s對應(yīng)了備用通路兩個(gè)端點(diǎn)的ip地址。利用zqrx命令，對每個(gè)偶聯(lián)的備用通路ip地址進(jìn)行了ping測試，結(jié)果均能ping通，表明備用通路每個(gè)地址都是連通的。< qrx:gisu,3:ip="4",src="66",;loading program version 24.18-0msci csgs45 2013-01-21 17:23:36ping, sending unit: gisu-2 ping 4 (4) from 66: 56 data b

12、ytes64 bytes from 4: icmp_seq=0 ttl=251 time=26.921 ms- 4 ping statistics -1 packets transmitted, 1 packets received, 0% packet lossround-trip min/avg/max/stddev = 26.921/26.921/26.921/0.000 mscommand executed2、諾西端局硬件或配置問題諾西端局的偶聯(lián)是由gisu板負(fù)責(zé)的，首先通過zusi命令查詢各gisu板工作狀態(tài)均正常，且無任何告警，證明硬件無問題

13、。< zusi;loading program version 27.15-0execution startedmsci csgs45 2013-01-21 17:13:32working state of units unit phys state location infogisu-0 003a sp-ex vmu-2 idle gisu-1 003b wo-ex vmu-2 - gisu-2 003c wo-ex vmu-3 - gisu-3 003d wo-ex vmu-3 - gisu-4 003e wo-ex vmu-4 - gisu-5 003f wo-ex vmu-5 -

14、 gisu-6 0040 wo-ex vmu-6 - gisu-7 0041 wo-ex vmu-7 - gisu-8 0042 wo-ex vmu-8 - gisu-9 0043 wo-ex vmu-9 - gisu-10 0044 wo-ex vmu-10 - gisu-11 0045 sp-ex vmu-10 idle 接下來查詢建立在同一塊gisu板上，但到其它局向的偶聯(lián)狀態(tài)。如下所示，標(biāo)黃的部分為到華為關(guān)口局hyads2的偶聯(lián)，且開在gisu-2和gisu-4板上，這與到中興csgs9局的偶聯(lián)開在同一塊板件上。兩者采用相同配置，到華為關(guān)口局的偶聯(lián)正常，排除了因諾西端局配置不當(dāng)導(dǎo)致偶聯(lián)

15、中斷的因素。association set name assoc set id sctp user role- - - -hyads2bicc 6 m3ua server assoc. assoc id parameter set ind unit in unit name state - - - - - 0 gisu-1 7 mssbicc asp-active source address 1 . . . . . : 6 source address 2 . . . . . : 64 source port . . . . . . . : 290

16、5 primary dest. address . . : /27 secondary dest. address . : 30/27 destination port . . . . . : 2906 data stream count . . . . : 16 assoc. assoc id parameter set ind unit in unit name state - - - - - 1 gisu-0 7 mssbicc asp-active source address 1 . . . . . : 7 sou

17、rce address 2 . . . . . : 65 source port . . . . . . . : 2905 primary dest. address . . : /27 secondary dest. address . : 31/27 destination port . . . . . : 2906 data stream count . . . . : 16 assoc. assoc id parameter set ind unit in unit name state - - - - - 2 gi

18、su-2 6 mssbicc asp-active source address 1 . . . . . : 8 source address 2 . . . . . : 66 source port . . . . . . . : 2905 primary dest. address . . : /27 secondary dest. address . : 30/27 destination port . . . . . : 2906 data stream count . . . . : 16 a

19、ssoc. assoc id parameter set ind unit in unit name state - - - - - 3 gisu-4 6 mssbicc asp-active source address 1 . . . . . : 9 source address 2 . . . . . : 67 source port . . . . . . . : 2905 primary dest. address . . : /27 secondary dest. address . : 3

20、1/27 destination port . . . . . : 2906 data stream count . . . . : 16specification version . . : 1.0 (rfc) traffic mode . . . . . . . : load-share asp messages . . . . . . . : yes registration request . . . : yes ssnm messages broadcast . : no network appearance . . . . : 8asp messages in ipsp . . . : no routing context . . . . . : - first data stream number . : 1 tack .: 2 seconds m3ua hb.interval.: 15 seconds activation delay.: 0 seconds3、中興端局硬件或配置問題1）中興端局的偶聯(lián)是由sipi板負(fù)責(zé)的，經(jīng)診斷2塊sipi單板工作狀態(tài)均正常，且無任何告警，證明硬件無問題。2）查看中興交換機(jī)csgs9 sctp偶聯(lián)配置，數(shù)據(jù)配置正確，如下：3）、查看bfd（雙向轉(zhuǎn)發(fā)檢測：bidirectional forwarding det