網(wǎng)絡應急預案

1、網(wǎng)絡應急預案TYYGROUP system office room TYYUA16H-TYY-TYYYUA8Q8-f / J Mi<黑龍江移動-鐵通網(wǎng)絡應急預案雞西應急日常準備1.1 網(wǎng)絡基本信息準備:1.2 工具和儀表準備：工具名稱用途光功率計用于測量光功率。光纖跳線用于替換故障尾纖。光纖綁扎帶用于捆扎替換后的故障尾纖。網(wǎng)線用于連接網(wǎng)元或局域網(wǎng)的網(wǎng)線。光譜分析儀用于查看光線路的光譜。萬用表用于測量各種電氣參數(shù)。防靜電腕帶防止人體靜電損壞敏感元器件。防靜電包裝袋保護需要防靜電的部件。防靜電服防止人體靜電損壞敏感元器件0十字螺絲刀用于拆裝設備螺絲。標簽紙用于標示設備或者線纜。SDH、ETH

2、業(yè)務分析儀用于測量業(yè)務信號。2應急恢復總體原則：以業(yè)務快速恢復為目標，優(yōu)先搶通業(yè)務，做好分工和解決方案的溝通，爭 取搶通和搶修并行。當故障業(yè)務條數(shù)小于等于2條時,，如初步判斷不能短期解決，優(yōu)先將重要業(yè)務倒換到保 護波道。2.1 事故信息收集（10分鐘）第一時間關鍵信息收集操作人員操作步驟具體動作備注網(wǎng)管人員故障基本信息收集1、故障發(fā)生時間：年"J/日時:分:秒2、影響業(yè)務信息：波數(shù)，業(yè)務級別（，10G, 40G. 100G）和承載的業(yè)務類 型（大客戶專線，移動回傳）及對接設備類型（可選）。3、故障前外部操作或環(huán)境變化：如掉電，機房溫度變化，光纜割接，網(wǎng) 絡拓撲調整（增刪節(jié)點，網(wǎng)絡改造

3、），客戶側業(yè)務割接調整等：4、故障后已做操作及結果：網(wǎng)管側操作：業(yè)務配置，人工保護倒換，M 位單板,環(huán)回等：現(xiàn)場操作：拔插光纖/電纜，物理環(huán)回，拔插單板， 更換單板，網(wǎng)元上下電：處理結果：中斷業(yè)務部分恢夏，中斷業(yè)務更 多，網(wǎng)元返回失敗，單板不開匚 等等網(wǎng)管人員網(wǎng)絡基本信息收集5、網(wǎng)絡拓撲：節(jié)點數(shù)、保護類型SDUk SNCP, OLP光線路1+1,客戶側1+1, ODUk Spring, ERPS,板內(nèi)1+1,無保護）、網(wǎng)絡層次（骨干,匯 聚，接入）、拓撲類型（鏈，環(huán)，環(huán)相切，環(huán)相交，環(huán)帶鏈）6、設備信息及運行情況：設備類型，網(wǎng)元版木、網(wǎng)元狀態(tài)網(wǎng)管人員查詢告警和性能信息根據(jù)承載業(yè)務中斷的具體時間

4、，查詢對應時間段是否存在關健告警或異常 狀態(tài)（如:光纖中斷RLOS、單.板更位、網(wǎng)元脫管、保護倒換告警、環(huán)回告 警、安裝態(tài)告警）7、在網(wǎng)管上先同步告警，然后查詢當前和歷史告警以及當前及歷史15m性 能°8、把設備、小板、線路的告警與業(yè)務中斷的時間進行一致性確認。9、建議檢查告警屏蔽狀態(tài)和通道非介入監(jiān)視狀態(tài)，確保告警正常上報c10、故障前后主通道光功率值（光放大板/OSC板）：（通過24H歷史性能查詢歷史值）網(wǎng)管人員查詢操作日志11、根據(jù)承載業(yè)務中斷的具體時間，查詢該時間段的關鍵操作日志。（關鍵步驟為：配置業(yè)務、豆位、環(huán)回、優(yōu)化、倒換等操作）網(wǎng)管人員初步判斷12、根據(jù)告警和操作日忐是否

5、能初步準確定位到關鍵設備和保護子網(wǎng)。采取相應預案。網(wǎng)管人員求助烽火工程師13、清第一時間電話烽火1：程師。有條件的可以取得客戶授權的情況下遠程接入：網(wǎng)管人員查詢業(yè)務中斷共同路由14、如果是多波中斷，查詢所有中斷波長所經(jīng)過的路徑，確認波長經(jīng)過的共同網(wǎng)元節(jié)點。網(wǎng)管人員通過環(huán)回功能定位到第 站15、選取一條中斷的路徑，點擊維護一環(huán)回，進入環(huán)回界面,采用二分法，從源端到宿端逐步環(huán)回。確認影響業(yè)務中斷具體設備，再根據(jù)該 設備的具體異常'，采取預案。避免在情況不明的情況下盲目操作，導致問題擴大化。處理過程中一定要作好故障記錄，保存好故障的原始數(shù)據(jù)©2.2 分析定界：（5分鐘）根據(jù)上述采集

6、的信息，判斷是否波分網(wǎng)絡的問題:信息分析定界步舞操作人員判斷和定位時間花費1網(wǎng)管人員中斷的業(yè)務只在波分系統(tǒng)上有共同的故障路由，則需要先排除波分側故障：5分鐘2網(wǎng)管人員波分設備OTU單板的波分側存在OTN_LOF/OTN_LOS/OTUk_SM_BIP8_SD/OTUk_SM_.BDI/OTUk_S5LBEIODUk.PM.AIS /ODCk_PM_BD：等告密，確認為疵分側問題：3網(wǎng)管人員中斷業(yè)務經(jīng)過的共同路由有明確的設備、小板等硬件故障告警（如：COMML-N.FAIL “EMP_OVER等），判斷為波分設備問題，并馬上啟動硬件備件響應：4網(wǎng)管人員波分設備OTU單板客戶側端口存在R_LOS、

7、R_LOF等告警，則需要先排查客戶側光口和對接 設備之間的故障。2.3 定位恢復：（50分鐘）場景一：單波業(yè)務中斷此處指無保護場景定位恢復步驟場景介紹A/B/C/D/E五個站點組 成一個96波波分環(huán)（左上圖），各站信 號流圖見右圖。 每個波道在中間站點 均 0MU48-0DU48 尾纖 直接穿通?，F(xiàn)發(fā)現(xiàn)A<-2之間的 單波道中斷,有相關 告警（OTN_LOS/OTN_LOF/ODUk.SM_BIP8_.SD/ODUk.PM.AIS） t 報。后施告警上報在D 站點，A站有對應的 BDI回告c步驟操作人員排除故障原因操作動作時間花費1網(wǎng) 管 &快速恢且動作在資源允許的情況下：將客戶

8、業(yè)務調至其它可用的波道或者備用波道：或 者客戶對接設備存在保護則可以通過關閉OTU單板激光器觸發(fā)倒換，或者聯(lián) 系對接設備維護人員手動倒換.30分鐘故障綜述：玳波故障絕大部份可以歸為兩類，一類為由于光功率異常導致（以下統(tǒng)一描述為光功率子場景），另一類y 板件、尾纖等異常導致（以下統(tǒng)一描述為非光功率子場景），關鍵在于定位到具體的故障點.采取相應措施解決。勺由于光功率問題子場景（D站點波分側直接報R_LOS的情況）處理步驟1網(wǎng)管&現(xiàn)場人員排除收端先掃描收端站點波長是否丟失，如果沒有丟失且光功率正常，則進一步排 查站點下波尾纖、光衰，嘗試遠程硬曳位單板,同時安排人現(xiàn)場使用光纖 環(huán)回OTU單板的

9、波分側，確定是否單板故障，如故障，則更換單板：10分鐘2網(wǎng) 管 &排除發(fā)端然后再掃描發(fā)端站點波長是否丟失，如果丟失，則排查上波尾纖和光衰、 嘗試遠程硬星位單板,同時安排人現(xiàn)場使用光纖環(huán)回確定是否單板故障， 如故障，則更換單板：5分 鐘3網(wǎng) 管 &定位中間站點如果發(fā)端波長沒有丟失，從發(fā)端A站點開始,按信號流方向逐站掃描波長是 否丟失，確認波長丟失站點，（通過光功率計測試方法：發(fā)端站點：OTU一 ->OMU48,收端站點：ODU48>OTU,中間穿通站點：ODU48->OMU48） 查找故障點，并通過清潔光口、更換尾纖、變換單板的方式解決c15分鐘備注：如果現(xiàn)場Z

10、 （波數(shù)很少的情方查c士有配置OPM也板，又無法調波，業(yè)務恢更時長很難控制，同時網(wǎng)管中心通過總光功率變化來粗略判斷故障點 匕比較有效，波數(shù)多則無法判斷），需要維護人員帶上光功率計、光譜分析儀、備件、尾纖等物料逐站排光功率問題子場景（非報R_LOS）處理步驟1檢查光功率是否下 降、是否有誤碼分別查詢A、D兩站OTC單板的收發(fā)光功率，并對比歷史24H性能值，確認是 否是光功率問題導致的故障（可通過與故障前的光功率數(shù)據(jù)（如歷史光功 率性能數(shù)據(jù)或定期刷新過的文檔）進行比較，以確定當前光功率值是否異 常。）此場景通常會伴旗存在誤碼、FEC糾錯等異常性能事件。3分 鐘2網(wǎng)管&現(xiàn)場人員排除硬件故障分

11、別對A、D站OTC單板使用光纖進行環(huán)回，確認是否單板故障，若單板故障 直接更換：（的光口板可以直接嘗試硬且位單板）10分鐘3排除波長漂移問題對發(fā)端OTU單.板（木例中為A站點）掃描波長，確認是否波長漂移，若漂移 則硬復位單板臨時恢復:5分 鐘4快速恢豆動作嘗試提高該單波的收光功率（不能超過過裁點）并觀察性能變化C 方法：從發(fā)端開始減少各站0MU48對應通道的衰減值。3分 鐘5快速恢且動作嘗試調整發(fā)端線路總光功率：變化，在不影響其他波長性能的前提下小量多次，調整幅度不超過3dB。5分 鐘6從發(fā)端A站點開始，按信號流方向逐站掃描波長，確認波長突變量較大的 點，（通過光功率計測試方法：發(fā)端站點：OT

12、C->OMV48,收端站點： 0DU48->OTU,中間穿通站點：0DU48>0MU48）查找故障點、并通過清 潔光口、更換尾纖、減小MOV衰減、更換的板的方式解決。15分鐘非光功率問題子場景處理步驟1確認為非光功率問題分別查詢A、D兩站OTC單板的收發(fā)光功率，并對比歷史24H性能值，確認是 非光功率問題導致的故障（可通過與故障前的光功率數(shù)據(jù)（如歷史光功率 性能數(shù)據(jù)或定期刷新過的文檔）進行比較，以確定當前光功率值是否異 常。）3分 鐘2排除硬件故障1、先硬更位發(fā)端單板，再硬旦位收端單板：2、如果硬豆位完成后，業(yè)務未恢且，分別對A、D站OTU單板進行軟件內(nèi)環(huán) 回、外環(huán)回，確認是

13、否單板故障：5分 鐘3排除硬件故障1、對收發(fā)端單板進行硬環(huán)回，確認故障單板。2、對故障單板進行更換。場景二：多波業(yè)務中斷此處指無保護場景定位恢復步驟場景介紹A/B/C/D/E五個站點組成一 個SO波波分環(huán)（左上 圖），每個站點均為背靠 背的OTM站，各站信號流圖 見左下圖。每個波道在中間站點均為 M40-D40尾纖直接穿通?，F(xiàn)發(fā)現(xiàn)環(huán)上大量波道出現(xiàn) 異常告警。多波中斷。步驟操作人員操作動作排除故障原因時間花費故障綜述：環(huán)路多波故障絕大部份都是由于主光路異?；蛘吆戏植ò?、光放板故障導致，在沒有光纖中斷的情況下，關鍵在于 定位出故障出現(xiàn)的站點。1排除光纜故障查詢環(huán)路上所有站點OSC冷板的輸入、輸出光

14、功率（對比的板當前和 歷史性能值），對比歷史記錄值，確認主光路是否存在光功率跌 落，如果有跌落：1、減少鏈路上可調衰減器件的衰減值（比如VOA等）：2、適當熠大光放板增益：通知客戶修夏主光路；5分鐘2也 網(wǎng)管現(xiàn)場人員排除光放板故障查詢環(huán)路上所有段落光放板的輸入、輸出光功率，對比歷史記錄值 （對比服板當前和歷史性能值），確認是否存在異常的光放板，如果異常：1、首先確認增益設置是否正確，不正確則修夏并確認故障是否恢V ：2、通過光功率確認光放板（如果是0A系列單板）內(nèi)部口衰耗是否 正常，不正常則更換尾纖（DCM模塊不動）：3、嘗試修改光放熠益，無效則硬且位光放，4、上述三步無法解決則更換光放大板；

15、5分鐘3也 網(wǎng)管現(xiàn)場人員排除 OMU48/OD U48故障查詢環(huán)路上所有站點OMU48/ODU48的輸入、輸出光功率，對比歷史記 錄值（對比小板當前和歷史性能值），如果有異常，則通過清潔光 口、更換相關尾纖，調整光裊的方法排除故障，如無法排除，則更 換單板。20分鐘4也 網(wǎng)管現(xiàn)場人員排除操作異常上述主光功率問題均排除的情況下，應重點r解現(xiàn)場人員故障前的 操作情況，是否存在DCX和光纜變化的情況，同時核查各站DCM配 置，分析路由，嘗試性增減、替換DCM來解決。25分鐘場景三：常見保護業(yè)務中斷此處常見保護包括：光線路保護、客戶側1+1保護、板內(nèi)1+1保護、ODUk SNCP保 護、SW SNCP

16、保護定位恢復步驟步驟操作人員操作動作快速恢夏步驟時間花費1網(wǎng)管人員檢查保護組狀態(tài)，確認是否存在保護組被強制/鎖定在非NORMAL的通道 上。如果是，解除強制/鎖定倒換查看業(yè)務是否恢夏，如業(yè)務未恢且，將 保護組強制倒換到另一通道上，查看業(yè)務是否恢更。強制倒換恢更32網(wǎng)管人員針對SNCP保護，可以嘗試去激活、激活保護組，業(yè)務無法恢更則再嘗試進 行強制倒換，看業(yè)務是否恢更。去激活/激活恢復33網(wǎng)管人員刪除保護組重新配置,查看業(yè)務是否恢豆：如果不恢豆，再進行強制倒 換，看業(yè)務是否恢更。重新配置保護組恢復54網(wǎng)管人員如果采取以上操作后都不恢豆,將保護組兩端強制到主通道，參照波分側 胞波故障、多波故障的方式恢更主用