SCTP偶聯(lián)中斷故障處理案例

1、SCTPf禺聯(lián)中斷故障處理故障現(xiàn)象：諾西端局CSGS4瑚單塊ESBfe故障，造成SCTR禺聯(lián)的主通路中斷，由丁現(xiàn) 網(wǎng)局問SCTR禺聯(lián)均配谿了雙通路，單塊ES哌故障并不會(huì)導(dǎo)致局問SCTPf禺聯(lián)中 斷。而實(shí)際情況是，CSGS4至中興局向部分SCTP（禺聯(lián)中斷，而到華為局向和其 他諾西局向的SCTR禺聯(lián)均正常，也就是說SCTP勺雙通路并未起到保護(hù)作用，對(duì) 此，我們進(jìn)行了分析，并排除了故障。原因分析：分析判斷可能原因：1、備用通路不通2、諾西端局硬件或配谿問題3、中興端局硬件或配谿問題原因排查:SCTP(STREAM CONTROL TRANSMISSION PROTOCO恢輸協(xié)議)能在兩 個(gè)端點(diǎn)之間

2、提供穩(wěn)定、有序的數(shù)據(jù)傳遞服務(wù)，在 SIGTRA町議的應(yīng)用中，SCTP 上層用戶是SCN信令的適配模塊(如 M2UA M3UA,下層是IP網(wǎng)。偶聯(lián)實(shí)際上 是在兩個(gè)SCT哪點(diǎn)之間建立的連接關(guān)系，任何時(shí)刻兩個(gè)SCTP®點(diǎn)之間能且僅能 建立一個(gè)偶聯(lián)。通路則是一個(gè)端點(diǎn)將 SCT吩組數(shù)據(jù)發(fā)送到對(duì)端端點(diǎn)特定傳送地 址的路由。在現(xiàn)網(wǎng)中，如下圖1所示，兩個(gè)端局之間配谿了 4個(gè)偶聯(lián)，每個(gè)偶聯(lián)具有主 備兩條通路，并采用了心跳機(jī)制，即當(dāng)某條通路空閑時(shí)，本端端點(diǎn)會(huì)生成相應(yīng)的 心跳消息并通過該空閑通路發(fā)送到對(duì)端端點(diǎn)，而對(duì)端端點(diǎn)收到消息后將立即發(fā)回 對(duì)應(yīng)的心跳確認(rèn)消息。該機(jī)制被用來隨時(shí)監(jiān)視偶聯(lián)通路的可用情況，當(dāng)某

3、一條通路故障時(shí)，數(shù)據(jù)傳送將立即切換到另一條通路上，以此來保持SCTPf禺聯(lián)的可靠性和穩(wěn)定性。圖2諾西端局偶聯(lián)配谿示意圖如上圖所示，諾西端局的偶聯(lián)建立在GISU板上，每一塊GISU板對(duì)應(yīng)一個(gè)偶 聯(lián)。每個(gè)偶聯(lián)的兩條通路分別通過兩塊 ES哌連接直IP承載網(wǎng)，進(jìn)而與對(duì)端局 相連。本次故障起因?yàn)镋SB1板故障，但單塊ESB板故障只會(huì)導(dǎo)致偶聯(lián)2條通路 中的1條通路中斷，根據(jù)偶聯(lián)的心跳機(jī)制，數(shù)據(jù)傳輸將立即切換到另一條通路上， 整個(gè)偶聯(lián)將不會(huì)受影響。而實(shí)際情況是 CSGS4雍中興局向部分SCTPf禺聯(lián)中斷， 而到華為局向和其他諾西局向的 SCTR禺聯(lián)均正常，也就是說SCTP勺雙通路并未 起到保護(hù)作用，對(duì)此，我

4、們進(jìn)行了如下分析。1、偶聯(lián)備用通路不通當(dāng)偶聯(lián)的主用通路中斷后，備用通路未起到作用，導(dǎo)致偶聯(lián)中斷。因此，首 先排查備用通路是連通。通過 ZOYI:A;命令查詢了偶聯(lián)對(duì)應(yīng)的IP地址如下。 ASSOCIATION SET NAME ASSOC SET ID SCTP USER ROLECSGS9BICC9 M3UASERVERASSOC.ASSOC IDPARAMETER SETINDUNITIN UNITNAMESTATE0GISU-2MSSBICCSCTP-DOWNSOURCE ADDRESS 1 : 8SOURCE ADDRESS 2 : 66SOU

5、RCE PORT: 2905PRIMARY DEST. ADDRESS . : 3/27SECONDARY DEST. ADDRESS 4/27DESTINATION PORT: 8071DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAMESTATE1 GISU-4 - MSSBICCSCTP-DOWNSOURCE ADDRESS 1 : 9SOURCE ADDRESS 2 : 67SOURCE PORT:

6、2905PRIMARY DEST. ADDRESS . : 3/27SECONDARY DEST. ADDRESS 4/27DESTINATION PORT: 8072DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAMESTATEGISU-5MSSBICCSCTP-DOWNSOURCE ADDRESS 1 : 0SOURCE ADDRESS 2 : 68SOURCE PORT: 2905PRIMARY DES

7、T. ADDRESS . : 3/27SECONDARY DEST. ADDRESS 4/27DESTINATION PORT: 8073DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAMESTATE3 GISU-84 MSSBICCASP-DOWNSOURCE ADDRESS 1 : 1SOURCE ADDRESS 2 : 69SOURCE PORT: 2905PRIMARY DEST. ADDRESS .

8、 : 3/27SECONDARY DEST. ADDRESS 4/27DESTINATION PORT: 8074DATA STREAM COUNT . . . . : 16SPECIFICATION VERSION . : 1.0 (RFC)TRAFFIC MODE: LOAD-SHAREASP MESSAGES: YESREGISTRATION REQUEST . . . : YESSSNM MESSAGES BROADCAST. : NONETWORK APPEARANCE . . . . : 4294967295ASP MESSAGES IN I

9、PSP . . . NOROUTING CONTEXT:-FIRST DATA STREAM NUMBER . : 1TACK:2 SECONDSM3UA HB.INTERVAL: 15 SECONDSACTIVATION DELAY: 0 SECONDS其中 SOURCE ADDRESSI1PRIMARY DEST. ADDRESS應(yīng)了主用通路的兩個(gè) 端點(diǎn)的 IP 地址，SOURCE ADDRESS2SECONDARY DEST. ADDRESS了備用通 路兩個(gè)端點(diǎn)的IP地址。利用ZQRF令，對(duì)每個(gè)偶聯(lián)的備用通路IP地址進(jìn)行了 PING測(cè)試，結(jié)果均能PING通，表明備用通路每個(gè)地址都是連通的

10、。< QRX:GISU,3:IP="4”,SRC="66”,;LOADING PROGRAM VERSION 24.18-0MSCi CSGS452013-01-21 17:23:36PING, SENDING UNIT: GISU-2PING 4 (4) from 66: 56 data bytes64 bytes from 4: icmp_seq=0 ttl=251 time=26.921 ms-4 ping statis

11、tics -1 packets transmitted, 1 packets received, 0% packet lossround-trip min/avg/max/stddev = 26.921/26.921/26.921/0.000 msCOMMAND EXECUTED2、諾西端局硬件或配谿問題諾西端局的偶聯(lián)是由GISU板負(fù)責(zé)的，首先通過ZUSI命令查詢各GISU板工 作狀態(tài)均正常，且無任何告警，證明硬件無問題。< ZUSI;LOADING PROGRAM VERSION 27.15-0EXECUTION STARTEDMSCi CSGS452013-01-21 17:13:3

12、2WORKING STATE OF UNITSUNITPHYS STATE LOCATIONINFOGISU-0003A SP-EX VMU-2IDLEGISU-1003B WO-EX VMU-2-GISU-2003C WO-EX VMU-3-GISU-3003D WO-EX VMU-3-GISU-4003E WO-EX VMU-4-GISU-5003F WO-EX VMU-5-GISU-60040 WO-EX VMU-6-GISU-70041 WO-EX VMU-7-GISU-80042 WO-EX VMU-8-GISU-90043 WO-EX VMU-9-GISU-100044 WO-EX

13、 VMU-10-GISU-110045 SP-EX VMU-10IDLE接下來查詢建立在同一塊 GISU板上，但到其它局向的偶聯(lián)狀態(tài)。如下所示, 標(biāo)黃的部分為到華為關(guān)口局 HYADS2勺偶聯(lián)，且開在GISU-2和GISU-4板上，這 與到中興CSGS洞的偶聯(lián)開在同一塊板件上。兩者采用相同配谿，到華為關(guān)口局 的偶聯(lián)正常，排除了因諾西端局配谿不當(dāng)導(dǎo)致偶聯(lián)中斷的因素。ASSOCIATION SET NAME ASSOC SET ID SCTP USER ROLEHYADS2BICC6 M3UASERVERASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAME

14、STATE 0 GISU-17 MSSBICCASP-ACTIVESOURCE ADDRESS 1 :6SOURCE ADDRESS 2 :64SOURCE PORT: 2905PRIMARY DEST. ADDRESS . : /27SECONDARY DEST. ADDRESS 30/27DESTINATION PORT: 2906DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETINDUNITIN UNIT NAMESTATE1 G

15、ISU-07 MSSBICCASP-ACTIVESOURCE ADDRESS 1 : 7SOURCE ADDRESS 2 : 65SOURCE PORT: 2905PRIMARY DEST. ADDRESS . : /27SECONDARY DEST. ADDRESS 31/27DESTINATION PORT: 2906DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAMESTATE2 GISU-26

16、 MSSBICCASP-ACTIVESOURCE ADDRESS 1 : 8SOURCE ADDRESS 2 : 66SOURCE PORT: 2905PRIMARY DEST. ADDRESS . : /27SECONDARY DEST. ADDRESS 30/27DESTINATION PORT: 2906DATA STREAM COUNT . . . . : 16ASSOC.ASSOC ID PARAMETER SETIND UNITIN UNIT NAMESTATE3 GISU-46 MSSBI

17、CCASP-ACTIVESOURCE ADDRESS 1 : 9SOURCE ADDRESS 2 : 67SOURCE PORT: 2905PRIMARY DEST. ADDRESS . : /27SECONDARY DEST. ADDRESS 31/27 DESTINATION PORT: 2906DATA STREAM COUNT . . . . : 16SPECIFICATION VERSION . : 1.0 (RFC)TRAFFIC MODE: LOAD-SHAREASP MESSAGES:

18、YESREGISTRATION REQUEST . . . : YESSSNM MESSAGES BROADCAST : NONETWORK APPEARANCE . . . . : 8ASP MESSAGES IN IPSP . . . NOROUTING CONTEXT:-FIRST DATA STREAM NUMBER . : 1TACK:2 SECONDSM3UA HB.INTERVAL: 15 SECONDSACTIVATION DELAY: 0 SECONDS3、中興端局硬件或配谿問題1）中興端局的偶聯(lián)是由SIPI板負(fù)責(zé)的，經(jīng)診斷2塊SIPI單板工作狀態(tài)均 正常，且無任何告警，證明

19、硬件無問題。2）查看中興交換機(jī)CSGS9 SCT隅聯(lián)配谿，數(shù)據(jù)配谿正確，如下：SCI'P數(shù)據(jù)配置S9-CSGS45） .tKt3）、查看 BFD （雙向轉(zhuǎn)發(fā)檢測(cè)：Bidirectional Forwarding Detection ）功 能是否開啟。BFD功能可在極短時(shí)間內(nèi)檢測(cè)到轉(zhuǎn)發(fā)路徑中的錯(cuò)誤，并觸發(fā)切 換到備用路由、接口甚至是整個(gè)網(wǎng)絡(luò)。通過中興CSGS此執(zhí)行SHOW BFD SESSION認(rèn)CSGS到CE之間開啟了 BFD功能且BFD犬態(tài)為UP狀態(tài)，正常。在中興交換機(jī) CSGS如執(zhí)行SHOW IP ROUT截取CSGS到CSGS45勺路 由配谿如下：IPv4 Rouxm-gDest

20、MaskGwInterfaceOwnerpHmetricbfdWeight10.15?,33.35255-255-255.255301:111110disable11197.32.38255-255.255x255ID-157.5.90lilDl11static2Qdisable110.157,32WS9233.255.255,253ID.157.S.901：1D111s -ac-ic10disable9255,255.255.25510,157 B 5B .13101:1411120disable2SS.255.255.25

21、8ID.157.5.13701； 11111static10disable：110,15*33,4025S.25S.2S5.2S5m,姑禮5,901:10111"取LU2012S55ID.157.5.9013 1D111static10disable110.1ST.32.41255.255.25S.2553-?01:1111stable20disable110.1ST.32.1662BB-25S.255x255ID-1B7.5TuBtiC10disable665510.157.S.901：1D111s -ac-lc20disable67255,255.255.25510.157-5.901:1011110disable6755ID.157.5.13701:14111stac-ic20disable1255.25S.2S5.2551C.157.5.13?01:111110dxsbl110.157.32u.