華為軟交換主備用SERVER倒換異常情況分析11

1、華為軟交換主備用SERVER倒換異常情況案例分析摘 要：本文結(jié)合xx分公司在華為軟交換主備用SERVER倒換前發(fā)現(xiàn)的VDB數(shù)據(jù)動態(tài)備份存在異步現(xiàn)象的問題，介紹了XX華為軟交換系統(tǒng)的組網(wǎng)方案，并通過案例分析，闡述了VDB數(shù)據(jù)動態(tài)備份的檢查方法以及出現(xiàn)異步問題時的解決辦法。關(guān)鍵字：華為軟交換 主備用SERVER 倒換引 文2009年6月底，xx分公司在華為軟交換設(shè)備初驗前安排的主備用SERVER倒換工作進行前期準備時，發(fā)現(xiàn)VDB數(shù)據(jù)動態(tài)備份存在問題，當即中止了主備倒換的工作。在華為公司研發(fā)的大力支撐下，3天后找出了問題所在并提出解決辦法，順利地完成了主備SERVER的倒換工作。1、XX華為軟交換組

2、網(wǎng)架構(gòu)2007年，在中國聯(lián)通江蘇分公司和中訊設(shè)計院的支持下，XX分公司制定核心網(wǎng)建設(shè)的三年規(guī)劃方案，并得以在2008年兩期GSM網(wǎng)絡(luò)建設(shè)時實施到位。目前，XX現(xiàn)網(wǎng)有三套軟交換設(shè)備，SERVER有三主兩備共5個，MGW共7個，按設(shè)計院和省公司要求的“同SERVER下的多個MGW置于不同機房、互備SERVER置于不同機房”的安全策略分別安裝在兩個機房，如下圖1所示。圖1：XX華為軟交換組網(wǎng)圖XX分公司在確定MGW設(shè)備的數(shù)量時，是根據(jù)五縣一市配置的，即每個縣由同一個MGW下掛的BSC覆蓋，市區(qū)分核心城區(qū)和外圍區(qū)域設(shè)置了兩個MGW。這樣設(shè)置是為了更好解決LAC區(qū)域劃分的問題以及統(tǒng)計各縣轄區(qū)內(nèi)開機用戶數(shù)

3、及話務(wù)量以提供給市場部門及縣分參考。2、SERVER備份方式在R4 組網(wǎng)構(gòu)架（控制與承載分離）下，一個MGW 從屬于兩個MSC Server，這就是軟交換系統(tǒng)中雙歸屬的概念。正常運行的情況下，MGW 只注冊到一個MSC Server 上，而當該MSC Server 發(fā)生故障時，MGW 可注冊到另一個MSC Server 上，繼續(xù)為此MGW 下管理的用戶提供業(yè)務(wù)。根據(jù)XX現(xiàn)狀，XX的軟交換采用了1+1備份和N+1備份兩種備份方式。1+1備份1+1備份就是兩個MSC Server以主備的方式工作，即一個MSC Server是激活的，另一個MSC Server完全處于備份狀態(tài)；XX的SZSS3A和S

4、ZSS3B就采用此備份方式，如圖2所示。圖 2：1+1備份N+1備份N+1備份方式的 “1”個備份MSC Server做為其它“N”個MSC Server冗余備份系統(tǒng)，N個MSC Server是激活的，另一個MSC Server完全出于備份狀態(tài)。SZSS1A、SZSS2A和SZSS1B就是采用此類備份方式，如圖3所示。圖 3：N+1備份3. 主備SERVER倒換說明主備用SERVER倒換的實現(xiàn)是通過命令將主用SERVER 置為未激活狀態(tài)，備用server置為激活狀態(tài).現(xiàn)以上圖3（N+1備份結(jié)構(gòu)）為例,將SZSS1A 倒換到 SZSS1B ，具體步驟：第一步：在SZSS1A上執(zhí)行命令：SET D

5、HWM: WM=ASSIST, SN=SZSS1A, SM=MANUAL, FS=DEACTIVE;第二步：在SZSS1B上執(zhí)行命令：SET DHWM: WM=ASSIST, SN=SZSS1B, SM=MANUAL, FS=ACTIVE;在一般情況下，主備用SERVER倒換將影響用戶的正常使用，不建議經(jīng)常進行倒換測試。但是，為了保障軟交換系統(tǒng)的可靠性與有效性，在工程驗收時必須安排主備用SERVER的倒換測試；若網(wǎng)絡(luò)結(jié)構(gòu)長期未變化，則建議每年在進行健康檢查時安排一次倒換測試。為確保倒換的順利進行，在主備SERVER倒換前，務(wù)必核查主備SERVER的數(shù)據(jù)。需查數(shù)據(jù)主要分為靜態(tài)數(shù)據(jù)與動態(tài)數(shù)據(jù)。靜態(tài)

6、數(shù)據(jù)主要指系統(tǒng)配置數(shù)據(jù)、局數(shù)據(jù)、小區(qū)數(shù)據(jù)，計費文件的相關(guān)配置文件等等，此類數(shù)據(jù)可借助華為M2000的主備校對工具；動態(tài)數(shù)據(jù)主要包括：至H局信令狀態(tài)、VDB用戶數(shù)據(jù)實時備份、主備SERVER之間的心跳狀態(tài)等等。在2008年XX分公司完成二期GSM網(wǎng)絡(luò)工程后，2009年初移動網(wǎng)又新增了10個RNC，網(wǎng)絡(luò)結(jié)構(gòu)發(fā)生了大的變化，因此在工程初驗時安排主備用SERVER倒換的工作。在8月5日白天做SZSS1A/ SZSS1B倒換的準備工作中發(fā)現(xiàn)SZSS1A的用戶數(shù)據(jù)沒有實時備份到SZSS1B，術(shù)語稱“VDB數(shù)據(jù)動態(tài)備份異步”。VDB ，也就是華為軟交換SERVER上的VLR數(shù)據(jù)庫板，用于存儲漫游在此SERV

7、ER下移動用戶的用戶數(shù)據(jù)。VDB數(shù)據(jù)動態(tài)備份就是主用SERVER實時地去同步備用SERVER上的用戶數(shù)據(jù)。當主備SERVER VDB數(shù)據(jù)不同步時進行倒換工作，可能會因為轄區(qū)內(nèi)的用戶在短時間內(nèi)發(fā)起群體位置更新請求，大大增加了SERVER至HLR的C/D口的負擔，嚴重時會導(dǎo)致HLR癱瘓。因此，為確保倒換順利進行，必須確保VDB數(shù)據(jù)同步正常。在每次主備倒換成功后，現(xiàn)場交換工程師應(yīng)該關(guān)注各項系統(tǒng)指標、來去話接通率，進行撥打測試和計費驗證等，同時也要安排無線路測工程師進行路測，確保下掛每個BSC和RNC下業(yè)務(wù)正常；當備用SERVER測試結(jié)束倒回主用SERVER后，也要作同樣的安排。4. 案例分析1）問題

8、現(xiàn)象2009年6月底，XXSZSS1A在進行主備用倒換前的前期檢查中，發(fā)現(xiàn)SZSS1A的VLR用戶數(shù)據(jù)沒有自動備份到SZSS1B的VLR中（指令報告中“備份用戶數(shù)”項為0），而SZSS2A可以成功備份到SZSS1B上；在三個SERVER上分別執(zhí)行狀態(tài)顯示指令，具體結(jié)果如下所示。指令：DSP DHBKSTAT在SZSS1A上顯示結(jié)果如下：Server名稱 Server狀態(tài) 總用戶數(shù) 備份用戶數(shù) 進度百分比 SZSS1 激活 406882 0 0.00% 在SZSS2A 執(zhí)行結(jié)果如下： Server名稱 Server狀態(tài) 總用戶數(shù) 備份用戶數(shù) 進度百分比SZSS2 激活 321869 321854

9、 100.00% 在SZSS1B上顯示結(jié)果如下： Server名稱 Server狀態(tài) 總用戶數(shù) 備份用戶數(shù) 進度百分比 SZSS1 去激活 NULL 0 NULL SZSS2 去激活 NULL 321873 NULL 2） 原因分析經(jīng)過數(shù)據(jù)配置排查、代碼走讀、內(nèi)存打印分析，最終定位為內(nèi)存停止備份標記標志位為停止備份，導(dǎo)致XXSS1A沒有把VLR用戶數(shù)據(jù)備份到備份SERVER。 打印了全局變量，查看可以正常進行備份的局點和不能正常備份的局點，主用SERVER的節(jié)點狀態(tài)，最后發(fā)現(xiàn)主用SERVER的內(nèi)存中“停止備份標記”對應(yīng)的BIT位為TRUE，導(dǎo)致主用SERVER無法同步備用SERVER。內(nèi)存數(shù)據(jù)

10、和關(guān)鍵BIT解析如下所示：D2 = 1101 0010,每個BIT對應(yīng)的含義為：節(jié)點互助狀態(tài) 1是否支持雙歸屬備份 1是否為本局互助節(jié)點 0server節(jié)點是否有效 1重新備份標記 0刪除備份用戶標記 0停止備份標記 1 （0：正常備份，1：停止備份）保留字段 0什么時情況下該BIT位會發(fā)生變化呢？華為公司給列舉兩種情況（但最終無法確認SZSS1A的故障原因）：l 節(jié)點雙歸屬狀態(tài)改變l 互助（備份）局發(fā)送停止備份請求3）解決方法在存在問題的SZSS1A（主用SERVER）上執(zhí)行命令：RST DHBKSTAT，目的是強制重備主用SERVER所有的用戶到備用SERVER。但是該操作也具有一定的風險

11、，執(zhí)行時將導(dǎo)致系統(tǒng)單板的CPU負荷上升，因此必須在話務(wù)閑時（0點以后）執(zhí)行。2009年7月初，XX分公司順利解決SZSS1A至SZSS1B的VDB數(shù)據(jù)動態(tài)備份異步問題后，次日晚上順利完成了SZSS1A至SZSS1B的主備用倒換測試工作。5、結(jié)束語針對XX聯(lián)通軟交換倒換異常情況的案例，建議在日常維護工作中，設(shè)備維護工程師應(yīng)定期使用指令DSP DHBKSTAT檢查主備SERVER的VLR用戶數(shù)據(jù)是否實時同步，將此網(wǎng)絡(luò)風險降低與消除在日常工作中。華為軟交換的雙歸屬組網(wǎng)結(jié)構(gòu)，提供了主備倒換的功能，可以有效地應(yīng)對突發(fā)性的核心網(wǎng)絡(luò)故障。但是，為了確保主備SERVER倒換功能的有效性，在交換網(wǎng)絡(luò)發(fā)生變動后，必須進行針對性的倒換測試。在日常維護工作中，設(shè)備維護工程師定期對SERVER進行健康檢查，以確保緊急情況下主備SERVER倒換萬無一失。此外，根據(jù)各地現(xiàn)狀，合理地制定軟交換網(wǎng)絡(luò)的組網(wǎng)方案