機房重要信息系統(tǒng)應急預案

1、精品XXXXX）計算機機房應急預案一、 適用條件1 適用范圍本預案適用于 XXXXXX 計算機機房發(fā)生電力、火災、空調(diào)故障和水浸等突發(fā)事件的應急處置工作。1 適用場景電力事件：由于機房電力不可用引發(fā)的應急事件。以機房為參照物：第一種情況：機房輸入無電（大樓 突然停電；大樓有電，機房市電輸入無電） ；第二種 情況：機房本身供配電故障。火災事件：機房設施本身產(chǎn)生的火災以及外部火災威脅?？照{(diào)故障：有機房空調(diào)故障引發(fā)的機房溫度升高的應急事件。水浸事件：機房內(nèi)部遭到水患，影響或破壞機房正常運行?？删庉嫸?、應急處置流程機房突發(fā)事件處置總流程機房突發(fā)事件處置總流程指揮組執(zhí)行組停電事件處置流程機房停電事件應急

2、處置流程-1 （辦公大樓突然無電；辦公大樓有電，機房輸入無電）指揮組執(zhí)行組機房停電事件應急處置流程-2 （機房本身供配電故障）指揮組執(zhí)行組協(xié)調(diào)應急資源火災事件處置流程空調(diào)事件處置流程機房空調(diào)突發(fā)事件處置流程圖指揮組執(zhí)行組水浸事件處置流程機房水浸事件處置流程XXXXXX通信網(wǎng)絡應急預案、 適用條件1 適用范圍本預案適用于 XXXXXX 通信網(wǎng)絡類突發(fā)事件的應急處置工 作。2 場景描述1.網(wǎng)絡擁塞事件發(fā)生網(wǎng)絡通信故障， 或網(wǎng)絡負載超過了可用資源， 出現(xiàn)數(shù)據(jù) 包丟失， 導致傳輸時延增大， 網(wǎng)絡吞吐量下降甚至網(wǎng)絡完全癱瘓 等現(xiàn)象， 造成核心信息體統(tǒng)或核心業(yè)務系統(tǒng)無法處理業(yè)務， 必須 采取應急處置措施，

3、開展處置工作的突發(fā)事件。2.網(wǎng)絡中斷事件發(fā)生網(wǎng)絡線路中斷、 設備故障等事件， 導致通信網(wǎng)絡系統(tǒng)部 分或全部中斷，造成核心信息系統(tǒng)或核心業(yè)務系統(tǒng)無法處理業(yè) 務，必須采取應急處置措施開展處置工作的突發(fā)事件。、 應急處置流程1.通信網(wǎng)絡突發(fā)事件處置總流程2.通信網(wǎng)絡擁塞事件處置流程啟動擁塞事件處置流程領導小組事件分析和定位其他故障設備故障攻擊事件網(wǎng)絡管理員提 供備品支持聯(lián)系廠家維 修或者更換否是攻擊源是否在本地領導小組聯(lián)系中支科 技部負責人和數(shù)據(jù)中 心有關人員進行處置進行設備替換辦公室聯(lián)系攻擊 源單位，應急小 組成員采取有效 措施領導小組成員 采取有效措施 拒絕攻擊，聯(lián) 系中支科技部 門結(jié)束擁塞事件

4、處置流程k2.通信網(wǎng)絡擁塞事件處置流程啟動中斷事件處置流程應急小組事件分析否內(nèi)部線路否設備軟件否設備硬件否外部通信故障故障故障線路故障是T是1T是1是 匚網(wǎng)絡管理員網(wǎng)絡管理員網(wǎng)絡管理員外援機構(gòu)線路運營商線路故障定位分析軟件提供備品支持故障原因線路恢復服務系統(tǒng)集成商產(chǎn)外援機構(gòu)維保商品丿商提供備品支持軟件更新支持仃網(wǎng)絡管理員網(wǎng)絡管理員網(wǎng)絡管理員內(nèi)部線路恢復明確處置步驟設備替換中支科技科分析事件提 岀處置建議中支科技部門負責人指導處置工作領導小組成員明確處置步驟領導小組成員 開展處置工作結(jié)束中斷事件處置流程XXXXXX 計算機系統(tǒng)應急預案一、 適用條件1 適用范圍本預案適用于 XXXXXX 計算機系

5、統(tǒng)突發(fā)事件的應急處置工 作。2 場景描述1.系統(tǒng)崩潰事件 發(fā)生系統(tǒng)崩潰，出現(xiàn)藍屏，無法啟動，卡 XP 等情況造成無 法辦公，必須采取應急處置措施，開展處置工作的突發(fā)事件。2.系統(tǒng)中毒事件 發(fā)生系統(tǒng)中毒或者木馬入侵事件，導致系統(tǒng)速度變慢， IE 指向可疑，軟件無法使用，甚至殺毒軟件無法使用情況時，必須 采取應急處置措施，開展處置工作的突發(fā)事件。二、 應急處置流程1、計算機系統(tǒng)處置流程2.系統(tǒng)崩潰處置流程3、系統(tǒng)中毒處置流程XXXXXX信息科技系統(tǒng)應急操作手冊1、主線路故障： 故障現(xiàn)象：聯(lián)通協(xié)議轉(zhuǎn)換器故障燈報警。故障解決方法：聯(lián)通和電信兩條 2M SDH 線路，聯(lián)通線路為主線，電 信線路為備線，當

6、線路發(fā)生故障時在協(xié)議轉(zhuǎn)換器上會出現(xiàn)告 警信號，如 AIS 燈為紅色等信息。主線路發(fā)生故障時，備用 的電信線路會自動切換為主線路，代替聯(lián)通線路。在發(fā)現(xiàn)故 障后及時上報領導及通知聯(lián)通大客戶經(jīng)理進行故障解決。2、OA 線路故障故障現(xiàn)象：訪問數(shù)據(jù)中心 OA 協(xié)同辦公系統(tǒng)速度突然變慢或無法連 接。故障解決方法： 當線路出現(xiàn)故障時系統(tǒng)訪問速度變慢，通過查看設備狀 態(tài)指示燈判斷線路是否故障，及時通知聯(lián)通客戶經(jīng)理及數(shù)據(jù) 中心網(wǎng)絡中心，聯(lián)調(diào)解決問題。3、外聯(lián)線路故障故障現(xiàn)象：相對應的業(yè)務無法進行， 如：無法登錄人行 FTP 服務器， 無法登錄銀監(jiān)局 1104 報表系統(tǒng)等。故障解決方法： 我行現(xiàn)外聯(lián)單位主要有人民

7、銀行、銀監(jiān)局。當線路出現(xiàn) 故障時，應與運營商及時聯(lián)系，并通知相關使用部門。4、與數(shù)據(jù)中心連接相關設備故障 故障現(xiàn)象：支行所有柜員終端無法登錄，數(shù)據(jù)中心服務 器無法訪問可能出現(xiàn)故障的設備及處理方法：（1）銳捷路由器故障： 首先檢查銳捷路由器，查看是否有掉電現(xiàn)象，如果沒有 掉電則查看路由器是否出現(xiàn)硬件故障， （如查看路由器后面的 接口卡的狀態(tài)燈的顏色， 紅色為故障， 綠色為正常 ）。如果無 法在短時間內(nèi)修復則立刻啟用備用路由器代替原路由器，將 V35 線纜與內(nèi)網(wǎng)以太口網(wǎng)線正確接好后開機即可（注：備用 路由器配置已經(jīng)提前配好，與主路由器配置完全相同） 。（ 2 ）核心交換機故障： 檢查生產(chǎn)網(wǎng)交換機，

8、有無斷電情況，如果斷電將電源重 新接好。然后對交換機使用 PING 命令， PING 網(wǎng)關地址， 如果不通，則表示交換機自身故障或配置出現(xiàn)故障，此時立 刻更換備用交換機。具體操作步驟如下： 溫備設備切換：將主交換機上的所有連接線依次插拔 到備用交換機上，連接完成后使用 PING 命令， PING 數(shù)據(jù) 中心對端地址。查看是否可以 PING 通，如果 PING 通，則 問題解決。使用 quit 命令退出系統(tǒng)。 冷備設備切換： 首先使用 CONSOLE 連接到備用交換 機，進入交換機后首先使用 dis cu 命令查看交換機是否有配 置，輸入 sys 命令，在提示符為 shengchan-sw 狀態(tài)

9、下， 直接導入配置信息， 使用 save 命令進行存盤。 測試是否 ping 通數(shù)據(jù)中心端地址。如果 PING 通則故障排除。 冷備設備無法啟動： 使用替代設備替換， 使用命令 del config.cfg 刪除交換機中的配置信息，并重啟交換機，然后 再將備份配置信息導入設備的操作。使用 ping 命令測試數(shù) 據(jù)中心對端地址。如果 PING 通則故障排除。（3）前置服務器故障： 直接更換備用服務器，更換后查看服務器的狀態(tài)是否正常， 如光路診斷器是否有報警，硬盤燈是什么顏色，紅色代表故 障，綠色代表正常。 IP 地址是否與原生產(chǎn)設備配置相同，測 試業(yè)務是否正常處理，如能正常辦理，說明恢復成功。（

10、4）生產(chǎn)路由器故障：對路由器進行檢查， 使用內(nèi)網(wǎng)計算機， ping 數(shù)據(jù)中心 對 端地址。如果 PING 通則表示線路及廣域網(wǎng)路由設備沒有問 題，如果不通則表示廣域網(wǎng)路由設備出現(xiàn)故障，更換備機并 測試是否聯(lián)通。并與數(shù)據(jù)中心網(wǎng)絡中心聯(lián)系。（5）外連設備故障 故障現(xiàn)象：人民銀行或銀監(jiān)局 ftp 服務器無法訪問 可能出現(xiàn)故障的設備及處理方法： 外聯(lián)路由器故障：大小額前置服務器無法正常工作，ping 人民銀行對端地址， 如果不通則有兩種可能， 一為對端 設備故障，此時應與人民銀行及時聯(lián)系，二為線路故障，應 立刻將路由器以太口接到備用路由器上，再使用 PING 對端 的備用線路地址，如果 PING 通表

11、示線路正常，如果仍無法 訪問，則立刻上報領導及人民銀行。其它類似故障處理方法 參照此方法。 防火墻故障：當主防火墻出現(xiàn)故障時銀監(jiān)局及人民銀 行的網(wǎng)站或 FTP 無法訪問， 將線路連接到備用防火墻上， 測 試是否連通，連通則故障解決。如果經(jīng)過以上處理故障仍然存在，則立刻聯(lián)系人民銀行 及銀監(jiān)局相關業(yè)務部門，詢問是否是對方服務器故障。上報 行領導及數(shù)據(jù)中心科技部，并與對方單位人員保持聯(lián)系，直 至故障解決。（6）外網(wǎng)設備故障故障現(xiàn)象： NOTES 及 SameTime 辦公軟件無法登錄， 所有外網(wǎng)網(wǎng)站無法打開。可能出現(xiàn)故障的設備及處理方法：外網(wǎng) H3C 交換機故障：將線路切換到備用交換機上， 并使用

12、console 線連接到電腦， 使用超級終端對其進行配置 檢查，如配置正常則再將原有網(wǎng)線全部連接到備用交換機 上。數(shù)據(jù)中心服務器故障：數(shù)據(jù)中心服務器改造或升級引 起的暫時無法連接，應立刻與數(shù)據(jù)中心溝通，確認故障解決 時間，并上報相關領導。（ 7）大小額支付系統(tǒng)硬盤故障： 當單塊硬盤故障時，主機面板會報警，硬盤燈會閃爍， 機器會自動切換到備份硬盤上，此時做好切換到備用服務器 的準備，聯(lián)系設備供應商，反饋硬件故障信息，盡快排除故 障，若需要更換硬盤則盡快聯(lián)系生產(chǎn)商進行調(diào)換工作。并及 時向主管領導匯報故障信息和故障處理進度。（ 8）前置機軟件系統(tǒng)故障： 檢查前置備份應用程序與數(shù)據(jù)中心最新發(fā)布程序是否

13、 一致，如不一致則更新數(shù)據(jù)中心最新程序包文件，更新后測 試業(yè)務是否正常，業(yè)務正常則故障排除。如發(fā)現(xiàn)其他問題， 則判斷是否 SCOUNIX 操作系統(tǒng)問題， 如發(fā)現(xiàn)操作系統(tǒng)問題， 則將備機替換到生產(chǎn)環(huán)境。核對更新包是否數(shù)據(jù)中心發(fā)布最 新版本，是最新版本則通知業(yè)務部門測試業(yè)務是否正常。并 及時向主管領導及數(shù)據(jù)中心匯報故障處理進度。（ 9 ）其它故障現(xiàn)象及解決方案：交易不能正常處理：1、業(yè)務終端不能正常登陸： 檢測終端與前置機之間的線路物理連接是否正常，若線 路沒有問題則嘗試換一下故障終端的辮子插孔，重啟終端， 看是否排除故障；若仍存在故障，可嘗試重啟聯(lián)結(jié)終端的銳 捷路由器；如果是營業(yè)部及所有支行終端

14、全部故障，首先查 看前置服務器運行狀態(tài)，看是否能否 PING 通，若前置機工 作正常， 則往數(shù)據(jù)中心匯報， 咨詢數(shù)據(jù)中心服務器運行狀況， 判斷是否是全行故障，如果是全行故障，在數(shù)據(jù)中心數(shù)據(jù)中 心指導下排除。如果是我行前置機故障，參考前置機服務器 故障及前置機軟件故障解決。另外在排除故障過程中可以使 用殺毒軟件，檢測生產(chǎn)網(wǎng)絡是否存在 ARP 等攻擊病毒，導 致丟失正確的網(wǎng)關地址。如是病毒導致，則立即切斷收病毒 侵害的計算機網(wǎng)絡。如果是前置機系統(tǒng)故障，在短時間內(nèi)無 法解決，剛立即切換到備用前置機，切換成功后通知各支行 系統(tǒng)管理員重啟支行機房內(nèi)的生產(chǎn)網(wǎng)路由器，并進行終端的 業(yè)務測試，測試完成后整理問

15、題出現(xiàn)原因，并向上級領導進 行匯報。2 、密押服務器故障： 密押服務器目前采取熱備方式， 當主設備故障時，密押服務器會自動切換到備用設備。通過 密押服務器前面板燈觀察設備運轉(zhuǎn)狀態(tài)，若系統(tǒng)燈或告警燈 閃爍則說明設備出現(xiàn)故障， 使用 ROOT 用戶登陸大小額前置 機使用 vi 命令查看 /SJL10_TCTD 目錄下的 host_cfg.dat 文 件，查看配置文件中備用服務器的 ip 地址，如果備用 IP 在 前面，說明密押服務器已切換到備機運行，使用 PING 命令 檢查主密押服務器的線路是否聯(lián)通，如果是線路故障，檢查 物理連接是否正常，如果是系統(tǒng)故障，在非營業(yè)時間，重啟 主密押服務器并再次檢

16、查線路。在線路正常狀態(tài)下，運行支 付系統(tǒng)前置機 /SJL10_TCTD 目錄下 testPIN_clnt 程序，若 返回 return_code=0, 說明設備運轉(zhuǎn)恢復正常。斷開備用密 押服務器線路，運行大小額前置機/SJL10目錄下的 testMAC_clnt 程序，檢查配置文件 host_cfg.dat 是否恢復 初始設置，然后恢復備用機的網(wǎng)線。如果還有故障，則需要 聯(lián)系密押服務器的售后服務支持進行維修工作，并及時向主 管領導匯報故障信息以及處理進度。3、黑客攻擊應急處置 發(fā)現(xiàn)網(wǎng)絡或系統(tǒng)異常，由事業(yè)保障部網(wǎng)絡管理員和系統(tǒng)維護人員進行檢測，查明異常原因，確認為黑客攻擊的，經(jīng) 應急領導小組批準，切斷攻擊源的網(wǎng)絡連接，迅速向數(shù)據(jù)中 心級公安部門報告。4、停電故障應急處理營業(yè)網(wǎng)點停電后由 UPS 電池供電，應關閉與業(yè)務無關的 各類辦公設備，立即與供電部門聯(lián)系電力恢復事宜，確信停 電時間超過電池供電時間后，應準備好發(fā)電機，隨時準備啟 動使用，并檢查汽油存量，如不能滿足發(fā)現(xiàn)需要，應立即購買添加。5、防火應急處置機房發(fā)現(xiàn)異味（糊味） 、煙霧和初始火情，應根據(jù)警報 情況進行檢查，同時立即向行領導報告。機房管理人員在發(fā) 現(xiàn)起火點時應立即利用火場手持氣體滅火器進行撲救。在接 到火警報告后事業(yè)保障部負責人和本行應急領導小組相關 人員應盡快到達現(xiàn)場，組織滅火。對手持氣體滅火器