SCTP鏈路IP地址配置錯誤導(dǎo)致切換入該站小區(qū)全部失敗案例

-.z.SCTP鏈路IP地址配置錯誤導(dǎo)致切換入小區(qū)全部失敗一、問題發(fā)現(xiàn)問題現(xiàn)象：核查7月7日TOP小區(qū)發(fā)現(xiàn)D2_YQ河莊村ZLF_H-3小區(qū)切換成功率僅為5.23%，全天切換失敗次數(shù)為22343次；針對該小區(qū)切換嚴(yán)重差問題啟動TOP差處理流程；網(wǎng)元小區(qū)名稱切換成功率失敗次數(shù)小區(qū)216923D2_YQ河莊村ZLF_H-35.23%223433224360A2_JY晉源ZLF_H-277.83%67752224505A2_WB義井西一里ZLD_H-292.94%52832224493A2_WB福利大廈ZLD_H-263.35%41212224144B2_GJ國稅宿舍南ZLF_H-392.59%32583216633A2_WB新道村ZLF_H-271.82%29172224219D2_YQ榮家莊ZLF_H-386.73%25743224486B2_Q*新紫金大酒店ZLF_H-296.35%23022224171D2_YQ馬坡ZLF_H-288.21%21342224368A2_JY晉源鎮(zhèn)西(高速)ZLF_H-288.16%19842二、問題分析問題定位：提取D2_YQ河莊村ZLF_H-3小區(qū)鄰區(qū)對切換指標(biāo)發(fā)現(xiàn)D2_YQ河莊村ZLF_H-3切換向225049:1、225049:2、225049:3小區(qū)全部失??；小區(qū)名稱鄰區(qū)關(guān)系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)無響應(yīng)原因?qū)е碌那袚Q出準(zhǔn)備失敗次數(shù)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)回復(fù)切換準(zhǔn)備失敗消息導(dǎo)致切換出準(zhǔn)備失敗次數(shù)D2_YQ河莊村ZLF_H-30:460:00:216721:300100.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河莊村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河莊村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河莊村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河莊村ZLF_H-30:460:00:225239:111100.00%00D2_YQ河莊村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河莊村ZLF_H-30:460:00:225239:354546485.14%00D2_YQ河莊村ZLF_H-30:460:00:225249:200100.00%00核查關(guān)于225049，D2_YQ河莊村北fbsZLF_H基站相關(guān)指標(biāo)，發(fā)現(xiàn)周圍小區(qū)切向225049三個小區(qū)請求全部失敗，問題定位指向D2_YQ河莊村北fbsZLF_H，且切換失敗原因為"系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)無響應(yīng)原因?qū)е碌那袚Q出準(zhǔn)備失敗”；小區(qū)名稱鄰區(qū)關(guān)系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)無響應(yīng)原因?qū)е碌那袚Q出準(zhǔn)備失敗次數(shù)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)回復(fù)切換準(zhǔn)備失敗消息導(dǎo)致切換出準(zhǔn)備失敗次數(shù)D2_YQ河莊村ZLF_H-10:460:00:225049:139400.00%3799D2_YQ河莊村ZLF_H-10:460:00:225049:26000.00%245D2_YQ河莊村ZLF_H-10:460:00:225049:317500.00%1741D2_YQ河莊村ZLF_H-20:460:00:225049:1120100.00%102242D2_YQ河莊村ZLF_H-20:460:00:225049:23200.00%311D2_YQ河莊村ZLF_H-20:460:00:225049:339700.00%3016D2_YQ河莊村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河莊村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河莊村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河莊鐵路ZLF_H-10:460:00:225049:2579500.00%417446D2_YQ河莊鐵路ZLF_H-20:460:00:225049:11900.00%10D2_YQ河莊鐵路ZLF_H-20:460:00:225049:2237500.00%1704167D2_YQ河莊鐵路ZLF_H-20:460:00:225049:3500.00%00D2_YQ河莊鐵路ZLF_H-30:460:00:225049:26000.00%471針對D2_YQ河莊村北fbsZLF_H，進(jìn)行問題排查：1、干擾排查D2_YQ河莊村北fbsZLF_H無明顯干擾情況，三小區(qū)平均底噪均低于-110dB；2、告警故障排查D2_YQ河莊村北fbsZLF_H無故障告警發(fā)生；3、信令跟蹤排查利用網(wǎng)管信令平臺跟蹤小區(qū)級信令，發(fā)現(xiàn)切換失敗原因為”S1切換源側(cè)準(zhǔn)備失敗由于切換響應(yīng)定時器超時”,根據(jù)信令觀察發(fā)現(xiàn)，0707-16:06:22.480ENODB21692-3上發(fā)handoverrequired到MME，之后ENODB21692-3等待來自handovermand超時，于16:06:32.470向MME發(fā)送handovercancer（切換取消）；問題匯交于ENODB21692-3切換源小區(qū)向MME發(fā)送handoverrequired后，MME無響應(yīng)超時導(dǎo)致切換失?。黄溥^信令觀察handoverrequired是由eNODB向MME，經(jīng)由S1鏈路發(fā)送向MME后，MME沒有通過S1向225049-1小區(qū)發(fā)出handoverrequest，導(dǎo)致切換準(zhǔn)備超時；在這個階段目前有幾個需要排查的問題1、MME是否收到ENODB21692-3上發(fā)的handoverrequired；2、MME假如成功接收到handoverrequired后，是否向目標(biāo)小區(qū)下發(fā)handoverrequest信令；關(guān)于問題1，根據(jù)切換對指標(biāo)，發(fā)現(xiàn)周圍基站小區(qū)均是切換向D2_YQ河莊村北fbsZLF_H（225049）S1切換準(zhǔn)備失敗，切向其他小區(qū)的切換成功率均較高（指標(biāo)下圖），說明源小區(qū)側(cè)ENODB21692-3到MME的S1鏈路是正常的；小區(qū)名稱鄰區(qū)關(guān)系[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)無響應(yīng)原因?qū)е碌那袚Q出準(zhǔn)備失敗次數(shù)[LTE]系統(tǒng)每相鄰關(guān)系目標(biāo)小區(qū)回復(fù)切換準(zhǔn)備失敗消息導(dǎo)致切換出準(zhǔn)備失敗次數(shù)D2_YQ河莊村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河莊村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河莊村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河莊村ZLF_H-30:460:00:225239:354546485.14%00通過上述判斷，對于問題2可以初步斷定，MME是可以正常收到源小區(qū)ENODB21692-3D2_YQ河莊村ZLF_H-3上發(fā)的handoverrequired，但是MME下發(fā)向目標(biāo)小區(qū)的D2_YQ河莊村北fbsZLF_H（225049）的handoverreques未被收到，問題在于MME到D2_YQ河莊村北fbsZLF_H（225049）的S1鏈路上；4、參數(shù)核查我們針對S1鏈路SCTP參數(shù)核查，D2_YQ河莊村北fbsZLF_H（225049）IP地址如下；ENODB21692-3D2_YQ河莊村ZLF_H-3的S1鏈路SCTP參數(shù)IP地址如下我們發(fā)現(xiàn)D2_YQ河莊村北fbsZLF_H（225049）S1鏈路的IP地址與周圍站小區(qū)的IP地址明顯不同，我們判斷是由于D2_YQ河莊村北fbsZLF_H（225049）鏈路的IP地址在MME側(cè)未做切換功能的登記，導(dǎo)致該S1的IP地址無法進(jìn)行S1切換信令交互，導(dǎo)致切換準(zhǔn)備失??；三、原理分析正常的S1切換流程：S1切換流程與*2切換類似，只不過所有的站間交互信令及數(shù)據(jù)轉(zhuǎn)發(fā)都需要通過S1口到核心網(wǎng)進(jìn)行轉(zhuǎn)發(fā)，時延比*2口略大。協(xié)議36.300中規(guī)定eNodeB間切換一般都要通過*2接口進(jìn)行，但當(dāng)如下條件中的任何一個成立時則會觸發(fā)S1接口的eNodeB間切換：（1）源eNodeB和目標(biāo)eNodeB之間不存在*2接口；（2）源eNodeB嘗試通過*2接口切換，但被目標(biāo)eNodeB拒絕。從LTE網(wǎng)絡(luò)結(jié)構(gòu)來看，可以把兩個eNodeB與MME之間的S1接口連同MME實體看做是一個邏輯*2接口。相比較于通過*2接口的流程，通過S1接口切換的流程在切換準(zhǔn)備過程和切換完成過程有所不同。S1切換的前提條件：目標(biāo)基站和源基站沒有配置*2鏈路，或是配置的*2鏈路不可用。如果同時配置了*2和S1鏈路，優(yōu)先走*2切換。下圖中的流程沒有跨MME和SGW，相對簡單。即使涉及跨MME，主流程差異不大，主要在核心網(wǎng)的信令會更多一點而已。S1切換流程說明其中步驟1到9為切換準(zhǔn)備過程，步驟10、11為切換執(zhí)行過程，步驟12到16為切換完成過程。1~4)圖中1~4步驟與*2切換相同，不做累述；5)源eNB通過S1接口的HANDOVERREQUIRED消息發(fā)起切換請求，消息中包含MMEUES1APID、源側(cè)分配的eNBUES1APID等信息。6)MME向目標(biāo)eNB發(fā)送HANDOVERREQUEST消息，消息中包括MME分配的MMEUES1APID、需要建立的EPS列表以及每個EPS承載對應(yīng)的核心網(wǎng)側(cè)數(shù)據(jù)傳送的地址等參數(shù)。7~8)目標(biāo)eNB分配后目標(biāo)側(cè)的資源后，進(jìn)行切換入的承載接納處理，如果資源滿足，小區(qū)接入允許就給MME發(fā)送HANDOVERREQUESTACKNOWLEDGE消息，包含目標(biāo)側(cè)側(cè)分配的eNBUES1APID，接納成功的EPS承載對應(yīng)的eNodeB側(cè)數(shù)據(jù)傳送的地址等參數(shù)。9)源eNB收到HANDOVERMAND，獲知接納成功的承載信息以及切換期間業(yè)務(wù)數(shù)據(jù)轉(zhuǎn)發(fā)的目標(biāo)側(cè)地址。10)源eNB向UE發(fā)送RRCConnectionReconfiguration消息，指示UE切換指定的小區(qū).11)源eNB通過eNBStatusTransfer消息，MME通過MMEStatusTransfer消息，將PDCP序號通過MME從源eNB傳遞到目標(biāo)eNB。目標(biāo)eNB收到UE發(fā)送的RRCConnectionReconfigurationplete消息，表明切換成功。12）目標(biāo)eNodeB向MME發(fā)送PATHSWITCHREQUEST消息請求，請求MME更新業(yè)務(wù)數(shù)據(jù)通道的節(jié)點地址，通知MME切換業(yè)務(wù)數(shù)據(jù)的接續(xù)路徑，從源eNB到目標(biāo)eNB，消息中包含原側(cè)側(cè)的MMEUES1APID、目標(biāo)側(cè)側(cè)分配的eNBUES1AP、EPS承載在目標(biāo)側(cè)將使用的下行地址；13)MME成功更新數(shù)據(jù)通道節(jié)點地址，向目標(biāo)eNodeB發(fā)送PATHSWITCHREQUESTACKNOWLEDGE消息，表示可以在新的SAEbearers上進(jìn)行業(yè)務(wù)通信；14）目標(biāo)側(cè)eNB發(fā)送HANDOVERNOTIFY消息，通知MME目標(biāo)側(cè)UE已經(jīng)成功接入。15）源ENB收到"UECONTE*TRELEASEMAND”消息后，開始進(jìn)入釋放資源的流程。切換定時器采樣點：本案例，切換準(zhǔn)備失敗的信令示意圖：四、解決方案我們把D2_YQ河莊村北fbsZLF_H（225049）S1鏈路的SCTPIP地址與周圍站點參數(shù)同步；參數(shù)修改如下：五、解決效果修改后D2_YQ河莊村ZLF_H-3切換入D2_YQ河莊村北fbsZLF_H（225049）成功率上升，周圍小區(qū)切入也恢復(fù)正常；開始時間[LTE]系統(tǒng)小區(qū)間切換出請求次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功次數(shù)(小區(qū)對)[LTE]系統(tǒng)小區(qū)間切換出成功率(小區(qū)對)8:00:003525.71%8:15:002827.14%8:30:00414204.83%8:45:00469377.89%9:00:0038513.16%9:15:00675111.63%9:30:003438.82%9:45:0071591.26%修改時間點22836.36%10:15:00375375100.00%10:30:00111090.91%10:45:0056100.00%11:00:00363363100.00%11:15:002828100.00%