SCTP鏈路IP地址配置錯誤導致切換入該站小區(qū)全部失敗案例

-.z.SCTP鏈路IP地址配置錯誤導致切換入小區(qū)全部失敗一、問題發(fā)現(xiàn)問題現(xiàn)象：核查7月7日TOP小區(qū)發(fā)現(xiàn)D2_YQ河莊村ZLF_H-3小區(qū)切換成功率僅為5.23%，全天切換失敗次數(shù)為22343次；針對該小區(qū)切換嚴重差問題啟動TOP差處理流程；網(wǎng)元小區(qū)名稱切換成功率失敗次數(shù)小區(qū)216923D2_YQ河莊村ZLF_H-35.23%223433224360A2_JY晉源ZLF_H-277.83%67752224505A2_WB義井西一里ZLD_H-292.94%52832224493A2_WB福利大廈ZLD_H-263.35%41212224144B2_GJ國稅宿舍南ZLF_H-392.59%32583216633A2_WB新道村ZLF_H-271.82%29172224219D2_YQ榮家莊ZLF_H-386.73%25743224486B2_Q*新紫金大酒店ZLF_H-296.35%23022224171D2_YQ馬坡ZLF_H-288.21%21342224368A2_JY晉源鎮(zhèn)西(高速)ZLF_H-288.16%19842二、問題分析問題定位：提取D2_YQ河莊村ZLF_H-3小區(qū)鄰區(qū)對切換指標發(fā)現(xiàn)D2_YQ河莊村ZLF_H-3切換向225049:1、225049:2、225049:3小區(qū)全部失?。恍^(qū)名稱鄰區(qū)關系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關系目標小區(qū)無響應原因導致的切換出準備失敗次數(shù)[LTE]系統(tǒng)每相鄰關系目標小區(qū)回復切換準備失敗消息導致切換出準備失敗次數(shù)D2_YQ河莊村ZLF_H-30:460:00:216721:300100.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河莊村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河莊村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河莊村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河莊村ZLF_H-30:460:00:225239:111100.00%00D2_YQ河莊村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河莊村ZLF_H-30:460:00:225239:354546485.14%00D2_YQ河莊村ZLF_H-30:460:00:225249:200100.00%00核查關于225049，D2_YQ河莊村北fbsZLF_H基站相關指標，發(fā)現(xiàn)周圍小區(qū)切向225049三個小區(qū)請求全部失敗，問題定位指向D2_YQ河莊村北fbsZLF_H，且切換失敗原因為"系統(tǒng)每相鄰關系目標小區(qū)無響應原因導致的切換出準備失敗”；小區(qū)名稱鄰區(qū)關系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關系目標小區(qū)無響應原因導致的切換出準備失敗次數(shù)[LTE]系統(tǒng)每相鄰關系目標小區(qū)回復切換準備失敗消息導致切換出準備失敗次數(shù)D2_YQ河莊村ZLF_H-10:460:00:225049:139400.00%3799D2_YQ河莊村ZLF_H-10:460:00:225049:26000.00%245D2_YQ河莊村ZLF_H-10:460:00:225049:317500.00%1741D2_YQ河莊村ZLF_H-20:460:00:225049:1120100.00%102242D2_YQ河莊村ZLF_H-20:460:00:225049:23200.00%311D2_YQ河莊村ZLF_H-20:460:00:225049:339700.00%3016D2_YQ河莊村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河莊村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河莊村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河莊鐵路ZLF_H-10:460:00:225049:2579500.00%417446D2_YQ河莊鐵路ZLF_H-20:460:00:225049:11900.00%10D2_YQ河莊鐵路ZLF_H-20:460:00:225049:2237500.00%1704167D2_YQ河莊鐵路ZLF_H-20:460:00:225049:3500.00%00D2_YQ河莊鐵路ZLF_H-30:460:00:225049:26000.00%471針對D2_YQ河莊村北fbsZLF_H，進行問題排查：1、干擾排查D2_YQ河莊村北fbsZLF_H無明顯干擾情況，三小區(qū)平均底噪均低于-110dB；2、告警故障排查D2_YQ河莊村北fbsZLF_H無故障告警發(fā)生；3、信令跟蹤排查利用網(wǎng)管信令平臺跟蹤小區(qū)級信令，發(fā)現(xiàn)切換失敗原因為”S1切換源側準備失敗由于切換響應定時器超時”,根據(jù)信令觀察發(fā)現(xiàn)，0707-16:06:22.480ENODB21692-3上發(fā)handoverrequired到MME，之后ENODB21692-3等待來自handovermand超時，于16:06:32.470向MME發(fā)送handovercancer（切換取消）；問題匯交于ENODB21692-3切換源小區(qū)向MME發(fā)送handoverrequired后，MME無響應超時導致切換失敗；其過信令觀察handoverrequired是由eNODB向MME，經(jīng)由S1鏈路發(fā)送向MME后，MME沒有通過S1向225049-1小區(qū)發(fā)出handoverrequest，導致切換準備超時；在這個階段目前有幾個需要排查的問題1、MME是否收到ENODB21692-3上發(fā)的handoverrequired；2、MME假如成功接收到handoverrequired后，是否向目標小區(qū)下發(fā)handoverrequest信令；關于問題1，根據(jù)切換對指標，發(fā)現(xiàn)周圍基站小區(qū)均是切換向D2_YQ河莊村北fbsZLF_H（225049）S1切換準備失敗，切向其他小區(qū)的切換成功率均較高（指標下圖），說明源小區(qū)側ENODB21692-3到MME的S1鏈路是正常的；小區(qū)名稱鄰區(qū)關系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關系目標小區(qū)無響應原因導致的切換出準備失敗次數(shù)[LTE]系統(tǒng)每相鄰關系目標小區(qū)回復切換準備失敗消息導致切換出準備失敗次數(shù)D2_YQ河莊村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河莊村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河莊村ZLF_H-30:460:00:225239:354546485.14%00通過上述判斷，對于問題2可以初步斷定，MME是可以正常收到源小區(qū)ENODB21692-3D2_YQ河莊村ZLF_H-3上發(fā)的handoverrequired，但是MME下發(fā)向目標小區(qū)的D2_YQ河莊村北fbsZLF_H（225049）的handoverreques未被收到，問題在于MME到D2_YQ河莊村北fbsZLF_H（225049）的S1鏈路上；4、參數(shù)核查我們針對S1鏈路SCTP參數(shù)核查，D2_YQ河莊村北fbsZLF_H（225049）IP地址如下；ENODB21692-3D2_YQ河莊村ZLF_H-3的S1鏈路SCTP參數(shù)IP地址如下我們發(fā)現(xiàn)D2_YQ河莊村北fbsZLF_H（225049）S1鏈路的IP地址與周圍站小區(qū)的IP地址明顯不同，我們判斷是由于D2_YQ河莊村北fbsZLF_H（225049）鏈路的IP地址在MME側未做切換功能的登記，導致該S1的IP地址無法進行S1切換信令交互，導致切換準備失?。蝗⒃矸治稣５腟1切換流程：S1切換流程與*2切換類似，只不過所有的站間交互信令及數(shù)據(jù)轉發(fā)都需要通過S1口到核心網(wǎng)進行轉發(fā)，時延比*2口略大。協(xié)議36.300中規(guī)定eNodeB間切換一般都要通過*2接口進行，但當如下條件中的任何一個成立時則會觸發(fā)S1接口的eNodeB間切換：（1）源eNodeB和目標eNodeB之間不存在*2接口；（2）源eNodeB嘗試通過*2接口切換，但被目標eNodeB拒絕。從LTE網(wǎng)絡結構來看，可以把兩個eNodeB與MME之間的S1接口連同MME實體看做是一個邏輯*2接口。相比較于通過*2接口的流程，通過S1接口切換的流程在切換準備過程和切換完成過程有所不同。S1切換的前提條件：目標基站和源基站沒有配置*2鏈路，或是配置的*2鏈路不可用。如果同時配置了*2和S1鏈路，優(yōu)先走*2切換。下圖中的流程沒有跨MME和SGW，相對簡單。即使涉及跨MME，主流程差異不大，主要在核心網(wǎng)的信令會更多一點而已。S1切換流程說明其中步驟1到9為切換準備過程，步驟10、11為切換執(zhí)行過程，步驟12到16為切換完成過程。1~4)圖中1~4步驟與*2切換相同，不做累述；5)源eNB通過S1接口的HANDOVERREQUIRED消息發(fā)起切換請求，消息中包含MMEUES1APID、源側分配的eNBUES1APID等信息。6)MME向目標eNB發(fā)送HANDOVERREQUEST消息，消息中包括MME分配的MMEUES1APID、需要建立的EPS列表以及每個EPS承載對應的核心網(wǎng)側數(shù)據(jù)傳送的地址等參數(shù)。7~8)目標eNB分配后目標側的資源后，進行切換入的承載接納處理，如果資源滿足，小區(qū)接入允許就給MME發(fā)送HANDOVERREQUESTACKNOWLEDGE消息，包含目標側側分配的eNBUES1APID，接納成功的EPS承載對應的eNodeB側數(shù)據(jù)傳送的地址等參數(shù)。9)源eNB收到HANDOVERMAND，獲知接納成功的承載信息以及切換期間業(yè)務數(shù)據(jù)轉發(fā)的目標側地址。10)源eNB向UE發(fā)送RRCConnectionReconfiguration消息，指示UE切換指定的小區(qū).11)源eNB通過eNBStatusTransfer消息，MME通過MMEStatusTransfer消息，將PDCP序號通過MME從源eNB傳遞到目標eNB。目標eNB收到UE發(fā)送的RRCConnectionReconfigurationplete消息，表明切換成功。12）目標eNodeB向MME發(fā)送PATHSWITCHREQUEST消息請求，請求MME更新業(yè)務數(shù)據(jù)通道的節(jié)點地址，通知MME切換業(yè)務數(shù)據(jù)的接續(xù)路徑，從源eNB到目標eNB，消息中包含原側側的MMEUES1APID、目標側側分配的eNBUES1AP、EPS承載在目標側將使用的下行地址；13)MME成功更新數(shù)據(jù)通道節(jié)點地址，向目標eNodeB發(fā)送PATHSWITCHREQUESTACKNOWLEDGE消息，表示可以在新的SAEbearers上進行業(yè)務通信；14）目標側eNB發(fā)送HANDOVERNOTIFY消息，通知MME目標側UE已經(jīng)成功接入。15）源ENB收到"UECONTE*TRELEASEMAND”消息后，開始進入釋放資源的流程。切換定時器采樣點：本案例，切換準備失敗的信令示意圖：四、解決方案我們把D2_YQ河莊村北fbsZLF_H（225049）S1鏈路的SCTPIP地址與周圍站點參數(shù)同步；參數(shù)修改如下：五、解決效果修改后D2_YQ河莊村ZLF_H-3切換入D2_YQ河莊村北fbsZLF_H（225049）成功率上升，周圍小區(qū)切入也恢復正常；開始時間[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)8:00:003525.71%8:15:002827.14%8:30:00414204.83%8:45:00469377.89%9:00:0038513.16%9:15:00675111.63%9:30:003438.82%9:45:0071591.26%修改時間點22836.36%10:15:00375375100.00%10:30:00111090.91%10:45:0056100.00%11:00:00363363100.00%11:15:002828100.00%