同城災(zāi)備中心建設(shè)情況及業(yè)務(wù)持續(xù)性演練方案匯報(bào)(39張)課件

1、同城災(zāi)備中心建設(shè)情況及業(yè)務(wù)持續(xù)性演練方案匯報(bào)匯報(bào)內(nèi)容同城災(zāi)備中心建設(shè)情況簡(jiǎn)介業(yè)務(wù)持續(xù)性計(jì)劃演練方案簡(jiǎn)介災(zāi)備體系建設(shè)的必要性滿足國(guó)家及行業(yè)監(jiān)管要求 重要信息系統(tǒng)災(zāi)難恢復(fù)指南GB/T 20988-2007 保險(xiǎn)業(yè)信息系統(tǒng)災(zāi)難恢復(fù)管理指引 2008年20號(hào)文公司業(yè)務(wù)及IT發(fā)展到一定階段的內(nèi)生性需求適應(yīng)保險(xiǎn)行業(yè)服務(wù)水平日益提高的要求應(yīng)對(duì)突發(fā)災(zāi)難的最后一道防線業(yè)內(nèi)主流的災(zāi)備復(fù)制技術(shù)的對(duì)比基于存儲(chǔ)盤陣的災(zāi)備復(fù)制技術(shù)基于數(shù)據(jù)庫的災(zāi)備復(fù)制技術(shù)網(wǎng)絡(luò)支持同步傳輸異步傳輸?shù)讓佑布仨毻瑯?gòu)支持異購產(chǎn)品目標(biāo)端不可用可用雙活狀態(tài)支持模式多對(duì)一一對(duì)多級(jí)聯(lián)雙向多對(duì)一一對(duì)多級(jí)聯(lián)雙向是否支持按需復(fù)制全量同步支持?jǐn)?shù)據(jù)丟失量零丟失分

2、鐘級(jí)CaptureReadExportImportPostCaptureQueueExportQueuePostQueueSQLRedo-Logs源系統(tǒng)目標(biāo)系統(tǒng)災(zāi)備軟件復(fù)制原理業(yè)務(wù)系統(tǒng)分類容災(zāi)A類業(yè)務(wù)系統(tǒng)B類支持支撐系統(tǒng)C類業(yè)務(wù)系統(tǒng) RTO=2小時(shí)，RPO=30分鐘 RTO=2小時(shí)，RPO=8小時(shí) RTO=24小時(shí)，RPO=8小時(shí)核心業(yè)務(wù)系統(tǒng)/銀?；ミB互通域控ADCALL CENTER系統(tǒng)財(cái)務(wù)系統(tǒng)/OFSA準(zhǔn)入系統(tǒng)EAD核心報(bào)表/MIS收付系統(tǒng)域名解析系統(tǒng)DNS稽核系統(tǒng)保險(xiǎn)卡系統(tǒng)企業(yè)服務(wù)總線ESB償付能力系統(tǒng)ILOG統(tǒng)一認(rèn)證中心AC保監(jiān)上報(bào)投資系統(tǒng)補(bǔ)丁分發(fā)系統(tǒng)WSUS反洗錢銀企直連防病毒系統(tǒng)審

3、計(jì)系統(tǒng)DM系統(tǒng)SVN系統(tǒng)工會(huì)系統(tǒng)網(wǎng)銷系統(tǒng)OA系統(tǒng)郵件代理理賠影像系統(tǒng)ITS人力資源系統(tǒng)自主查詢飛天誠信令牌認(rèn)證系統(tǒng)準(zhǔn)備金自助機(jī)A、B兩類系統(tǒng)為應(yīng)用級(jí)容災(zāi)，C類系統(tǒng)為數(shù)據(jù)級(jí)容災(zāi)我司同城災(zāi)備中心建設(shè)的方法論及路線圖我司災(zāi)備中心與國(guó)家標(biāo)準(zhǔn)對(duì)標(biāo)同城災(zāi)備中心建設(shè)情況簡(jiǎn)介業(yè)務(wù)持續(xù)性計(jì)劃演練方案簡(jiǎn)介監(jiān)管要求保監(jiān)會(huì)2008年第20號(hào)文第二十九條保險(xiǎn)機(jī)構(gòu)所制定的災(zāi)難恢復(fù)預(yù)案，應(yīng)按照由模擬到實(shí)際、從易到難、從局部到整體的原則進(jìn)行測(cè)試和演練，及時(shí)總結(jié)評(píng)估，完善災(zāi)難恢復(fù)預(yù)案，通過演練使得相關(guān)人員熟練災(zāi)難恢復(fù)操作及流程。 災(zāi)難恢復(fù)預(yù)案的演練包括但不限于桌面演練、模擬演練、實(shí)戰(zhàn)演練、部分演練和全面演練。保險(xiǎn)機(jī)構(gòu)應(yīng)定期組織

4、開展災(zāi)難恢復(fù)預(yù)案的演練工作。災(zāi)難恢復(fù)預(yù)案每年至少演練一次，演練類型可以是模擬演練、實(shí)戰(zhàn)演練、部分演練和全面演練。演練目的驗(yàn)證業(yè)務(wù)持續(xù)計(jì)劃的完整性、易用性、明確性、有效性和兼容性；驗(yàn)證災(zāi)難恢復(fù)管理組織架構(gòu)的領(lǐng)導(dǎo)、決策與指揮能力；驗(yàn)證公司災(zāi)難恢復(fù)管理組織架構(gòu)中各相關(guān)部門的協(xié)同工作能力；使災(zāi)難恢復(fù)相關(guān)的技術(shù)人員與業(yè)務(wù)人員能夠熟悉業(yè)務(wù)持續(xù)計(jì)劃，提高員工的 災(zāi)難備份和業(yè)務(wù)持續(xù)意識(shí)，提高恢復(fù)團(tuán)隊(duì)的實(shí)際操作技能；驗(yàn)證災(zāi)備技術(shù)的有效性，確認(rèn)災(zāi)難恢復(fù)水平是否滿足中銀保險(xiǎn)災(zāi)難恢復(fù)目 標(biāo)（RTO、RPO）的要求。本次演練的形式桌面演練桌面演練是所有參演人員根據(jù)預(yù)設(shè)的場(chǎng)景，采用會(huì)議的方式，以角色扮演為基礎(chǔ)，就應(yīng)急響應(yīng)

5、和恢復(fù)流程中的管理與指揮協(xié)調(diào)方面問題進(jìn)行桌面推演。模擬演練模擬演練（實(shí)際測(cè)試演練）是利用備用或測(cè)試系統(tǒng)進(jìn)行模擬的系統(tǒng)切換和進(jìn)行業(yè)務(wù)恢復(fù)操作，不涉及真實(shí)的業(yè)務(wù)交易，不影響生產(chǎn)正常運(yùn)行。實(shí)戰(zhàn)演練實(shí)戰(zhàn)演練是指對(duì)災(zāi)難備份系統(tǒng)進(jìn)行真實(shí)切換和真實(shí)業(yè)務(wù)交流，由于系統(tǒng)切換的復(fù)雜性，在進(jìn)行系統(tǒng)切換和業(yè)務(wù)恢復(fù)時(shí)，可能會(huì)存在一定的風(fēng)險(xiǎn)因素，并且?guī)矶虝r(shí)間的服務(wù)中斷。通過實(shí)戰(zhàn)演練，可以最大程度地檢驗(yàn)災(zāi)難備份系統(tǒng)和業(yè)務(wù)持續(xù)計(jì)劃的有效性和恢復(fù)能力。演練的范圍涉及的信息系統(tǒng)保險(xiǎn)卡系統(tǒng) 演練的時(shí)間六月二十一日參演機(jī)構(gòu)全轄保險(xiǎn)卡系統(tǒng)拓?fù)溲菥殞?duì)系統(tǒng)產(chǎn)生影響情況分析對(duì)前臺(tái)服務(wù)的影響用戶只能訪問前臺(tái)應(yīng)用首頁，不能進(jìn)行其他任何操作，與

6、其他系統(tǒng)的交互也就不能進(jìn)行了。短信數(shù)據(jù)提取不到，發(fā)送不了短信。保單不能傳送到后臺(tái)。對(duì)后臺(tái)服務(wù)的影響由于登錄調(diào)用的是AC的接口校驗(yàn)，所以用戶可以登錄系統(tǒng)，點(diǎn)擊左邊應(yīng)用菜單，但是不能進(jìn)行其他任何功能性的操作。對(duì)代理服務(wù)的影響由于登錄調(diào)用的是AC的接口校驗(yàn)，所以用戶可以登錄系統(tǒng)，點(diǎn)擊左邊應(yīng)用菜單，但是不能進(jìn)行其他任何功能性的操作，同時(shí)由于代理系統(tǒng)為銀保通系統(tǒng)提供了服務(wù)，代理系統(tǒng)不能進(jìn)行數(shù)據(jù)操作，銀保通系統(tǒng)也就不能進(jìn)行其他操作。對(duì)SFTP服務(wù)的影響數(shù)據(jù)不能正常提取、傳送。對(duì)電子簽章服務(wù)的影響由于電子簽章服務(wù)不連接數(shù)據(jù)庫，所以不會(huì)對(duì)該服務(wù)造成影響。AC系統(tǒng)使用的不是保險(xiǎn)卡的數(shù)據(jù)庫，所以保險(xiǎn)卡數(shù)據(jù)庫宕機(jī)不

7、會(huì)對(duì)AC造成影響。演練對(duì)系統(tǒng)產(chǎn)生的影響分析技術(shù)層指揮層決策層演練組織架構(gòu)相關(guān)職責(zé)災(zāi)難恢復(fù)領(lǐng)導(dǎo)組領(lǐng)導(dǎo)突發(fā)事件的應(yīng)急處置，負(fù)責(zé)應(yīng)急資源的協(xié)調(diào)和調(diào)度,對(duì)參與演習(xí)的各工作組進(jìn)行監(jiān)督管理和組織,并做出重大應(yīng)急處置的決策；災(zāi)難宣告,負(fù)責(zé)與董事會(huì)溝通等。災(zāi)難恢復(fù)指揮組現(xiàn)場(chǎng)指揮應(yīng)急處置、損害評(píng)估、災(zāi)難恢復(fù)；向演練領(lǐng)導(dǎo)小組匯報(bào)應(yīng)急處置情況、損害評(píng)估情況、提供處置決策建議；災(zāi)難預(yù)警；監(jiān)督、檢查和總結(jié)災(zāi)難恢復(fù)工作。技術(shù)恢復(fù)組在指揮組的指揮下實(shí)施應(yīng)急處置、災(zāi)難恢復(fù)操作；現(xiàn)場(chǎng)評(píng)估災(zāi)難損害程度；負(fù)責(zé)災(zāi)難恢復(fù)過程的記錄、報(bào)告和通訊聯(lián)絡(luò)；分析和總結(jié)災(zāi)難恢復(fù)工作。業(yè)務(wù)恢復(fù)組負(fù)責(zé)業(yè)務(wù)功能核查，追補(bǔ)數(shù)據(jù)等業(yè)務(wù)恢復(fù)職責(zé)；協(xié)助技術(shù)恢復(fù)

8、組進(jìn)行突發(fā)事件和災(zāi)難恢復(fù)的處置；完成業(yè)務(wù)測(cè)試案例；負(fù)責(zé)業(yè)務(wù)恢復(fù)確認(rèn)。相關(guān)職責(zé)后勤保障組負(fù)責(zé)突發(fā)事件的設(shè)備、場(chǎng)地、人員、工具、后勤等資源保障的管理和協(xié)調(diào)工作；負(fù)責(zé)保障人力、物力、電力、通訊、安全保衛(wèi)等工作；與分支機(jī)構(gòu)及合作伙伴通訊聯(lián)絡(luò)；負(fù)責(zé)突發(fā)事件前的資源統(tǒng)一準(zhǔn)備和事件后的資源回收；負(fù)責(zé)與總行、行業(yè)協(xié)會(huì)、監(jiān)管機(jī)構(gòu)等相關(guān)部門的溝通，確保信息通常，避免災(zāi)難的影響擴(kuò)大。廠商支持組根據(jù)雙方的約定提供災(zāi)難恢復(fù)所需設(shè)備等相關(guān)資源；根據(jù)雙方簽訂的服務(wù)合同、服務(wù)等級(jí)協(xié)議（SLA）、以及備忘錄等材料提供技術(shù)支持。客戶投訴支持組負(fù)責(zé)公司公共關(guān)系處理，包括對(duì)外的解釋、媒體公關(guān)等事宜，減少公司由于災(zāi)難帶來的負(fù)面影響。演

9、練場(chǎng)景約定本次演練的場(chǎng)景北京西單生產(chǎn)中心的保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫系統(tǒng)應(yīng)用和數(shù)據(jù)庫分別出現(xiàn)宕機(jī)北京亦莊的同城災(zāi)備中心啟動(dòng)對(duì)應(yīng)應(yīng)用和數(shù)據(jù)庫服務(wù)接管保險(xiǎn)卡系統(tǒng)后北京西單生產(chǎn)中心的保險(xiǎn)卡系統(tǒng)恢復(fù)正常，系統(tǒng)由亦莊災(zāi)備中心回切西單生產(chǎn)中心應(yīng)急、切換、回切的全過程本次演練涉及系統(tǒng)示意圖一（正常應(yīng)用）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池本次演練涉及系統(tǒng)示意圖二（應(yīng)用切換）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池場(chǎng)景一場(chǎng)景一步驟執(zhí)行人操作話述中午14點(diǎn)，監(jiān)控系統(tǒng)短信告警：保險(xiǎn)卡系統(tǒng)3臺(tái)應(yīng)

10、用服務(wù)器中的兩臺(tái)已經(jīng)宕機(jī)，無法對(duì)外提供服務(wù)。 匯報(bào)系統(tǒng)管理員看到告警短信后，向技術(shù)恢復(fù)組組長(zhǎng)匯報(bào)報(bào)告領(lǐng)導(dǎo)，目前保險(xiǎn)卡系統(tǒng)3臺(tái)應(yīng)用服務(wù)器中的兩臺(tái)停機(jī)對(duì)外提供服務(wù)，目前保險(xiǎn)卡系統(tǒng)仍可用，但服務(wù)響應(yīng)將會(huì)減慢，我們將會(huì)盡快修復(fù)，預(yù)計(jì)修復(fù)時(shí)間為30分鐘。匯報(bào)技術(shù)組組長(zhǎng)接到保險(xiǎn)卡系統(tǒng)兩臺(tái)應(yīng)用服務(wù)器停止服務(wù)報(bào)告后，向指揮組匯報(bào)報(bào)告領(lǐng)導(dǎo)，保險(xiǎn)卡系統(tǒng)3臺(tái)應(yīng)用服務(wù)器中的兩臺(tái)出現(xiàn)故障，無法對(duì)外提供服務(wù)，目前保險(xiǎn)卡系統(tǒng)仍有一臺(tái)應(yīng)用服務(wù)器可用，但服務(wù)響應(yīng)將會(huì)減慢。現(xiàn)在已經(jīng)組織人員進(jìn)行修復(fù)，預(yù)計(jì)修復(fù)時(shí)間為30分鐘。指示指揮組組長(zhǎng)收到報(bào)告后，進(jìn)行修復(fù)工作安排知道了，一定要盡快修復(fù)。另外，安排數(shù)據(jù)庫、網(wǎng)絡(luò)相關(guān)人員隨時(shí)監(jiān)控保險(xiǎn)

11、卡系統(tǒng)的業(yè)務(wù)，出現(xiàn)問題及時(shí)匯報(bào)。修復(fù)系統(tǒng)管理員系統(tǒng)管理員在緊急修復(fù)，進(jìn)展比較順利匯報(bào)系統(tǒng)管理員修復(fù)應(yīng)用服務(wù)器后，向技術(shù)恢復(fù)組組長(zhǎng)匯報(bào)報(bào)告，保險(xiǎn)卡系統(tǒng)停止服務(wù)的兩臺(tái)應(yīng)用服務(wù)器已經(jīng)修復(fù)，并開始對(duì)外提供服務(wù)匯報(bào)技術(shù)組組長(zhǎng)接到應(yīng)用服務(wù)器恢復(fù)正常報(bào)告后，向指揮組組長(zhǎng)匯報(bào)報(bào)告領(lǐng)導(dǎo)，目前保險(xiǎn)卡系統(tǒng)停止服務(wù)的兩臺(tái)應(yīng)用服務(wù)器已經(jīng)修復(fù)，并開始對(duì)外提供服務(wù)，保險(xiǎn)卡系統(tǒng)對(duì)外服務(wù)已經(jīng)恢復(fù)正常。本次演練涉及系統(tǒng)示意圖三（數(shù)據(jù)庫切換）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池場(chǎng)景二場(chǎng)景二步驟執(zhí)行人操作話述15點(diǎn)，監(jiān)控系統(tǒng)短信告警：保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器已經(jīng)宕機(jī)，

12、無法對(duì)外提供服務(wù)匯報(bào)系統(tǒng)管理員看到告警短信后，向技術(shù)恢復(fù)組組長(zhǎng)匯報(bào)報(bào)告，保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)故障，目前保險(xiǎn)卡系統(tǒng)不可用，我們將會(huì)盡快修復(fù)，預(yù)計(jì)修復(fù)時(shí)間為30分鐘。匯報(bào)技術(shù)組組長(zhǎng)接到保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器停止服務(wù)報(bào)告后，向指揮組組長(zhǎng)匯報(bào)報(bào)告領(lǐng)導(dǎo)，保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)故障，無法對(duì)外提供服務(wù)，目前保險(xiǎn)卡系統(tǒng)不可用?，F(xiàn)在已經(jīng)組織人員進(jìn)行修復(fù)，預(yù)計(jì)修復(fù)時(shí)間為30分鐘。指示指揮組組長(zhǎng)收到報(bào)告后，進(jìn)行修復(fù)工作安排知道了，一定要盡快修復(fù)。另外，安排數(shù)據(jù)庫、網(wǎng)絡(luò)相關(guān)人員隨時(shí)準(zhǔn)備，一旦系統(tǒng)啟動(dòng)，立刻恢復(fù)業(yè)務(wù)，出現(xiàn)問題及時(shí)匯報(bào)。修復(fù)系統(tǒng)管理員系統(tǒng)管理員在緊急修復(fù)，進(jìn)展不是很順利匯報(bào)系統(tǒng)管理員數(shù)據(jù)庫服務(wù)器

13、無法在預(yù)計(jì)時(shí)間內(nèi)進(jìn)行修復(fù)，后續(xù)修復(fù)時(shí)間預(yù)計(jì)為3小時(shí)，向技術(shù)恢復(fù)組組長(zhǎng)匯報(bào)報(bào)告，保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)硬件故障，需要向廠家調(diào)取備件后才能恢復(fù)，暫時(shí)無法恢復(fù)業(yè)務(wù)，預(yù)計(jì)備件到場(chǎng)時(shí)間為2小時(shí)，后續(xù)1小時(shí)進(jìn)行修復(fù)，因此建議啟動(dòng)災(zāi)難恢復(fù)預(yù)案。匯報(bào)技術(shù)組組長(zhǎng)接到數(shù)據(jù)庫服務(wù)器無法在RTO內(nèi)恢復(fù)正常報(bào)告后，向指揮組組長(zhǎng)匯報(bào)報(bào)告領(lǐng)導(dǎo)，保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器的修復(fù)預(yù)計(jì)還需要3小時(shí)，已經(jīng)超出了我們?cè)O(shè)計(jì)的RTO，后續(xù)該如何操作，請(qǐng)指示。指示指揮組組長(zhǎng)接到數(shù)據(jù)庫服務(wù)器無法在RTO內(nèi)恢復(fù)正常報(bào)告后進(jìn)行后續(xù)工作指示你們盡量在RTO規(guī)定時(shí)間內(nèi)恢復(fù)，同時(shí)我將請(qǐng)示災(zāi)難恢復(fù)領(lǐng)導(dǎo)組進(jìn)行災(zāi)難恢復(fù)準(zhǔn)備工作請(qǐng)示指揮組組長(zhǎng)向?yàn)?zāi)難恢復(fù)領(lǐng)導(dǎo)組

14、匯報(bào)報(bào)告領(lǐng)導(dǎo)，保險(xiǎn)卡系統(tǒng)數(shù)據(jù)庫服務(wù)器30分鐘前出現(xiàn)硬件故障，無法對(duì)外提供服務(wù)。備件到場(chǎng)及修復(fù)時(shí)間預(yù)計(jì)還需要3小時(shí)，超過RTO。已經(jīng)責(zé)成相關(guān)人員盡快修復(fù)，目前是否開始進(jìn)行災(zāi)難恢復(fù)準(zhǔn)備工作？指示領(lǐng)導(dǎo)組組長(zhǎng)可以。你先通知相關(guān)人員，進(jìn)行人員集結(jié)，開始進(jìn)行相關(guān)應(yīng)急指揮工作。場(chǎng)景三場(chǎng)景三步驟執(zhí)行人操作話述下午16點(diǎn)，應(yīng)急指揮中心成立、人員集結(jié)完畢應(yīng)急指揮準(zhǔn)備工作指揮組組長(zhǎng)開始災(zāi)難準(zhǔn)備工作請(qǐng)后勤保障組進(jìn)行后勤保障及危機(jī)公關(guān)工作，請(qǐng)客戶投訴支持組準(zhǔn)備問題應(yīng)答準(zhǔn)備，請(qǐng)技術(shù)恢復(fù)組和業(yè)務(wù)恢復(fù)組對(duì)此次事件可能造成的影響進(jìn)行初步評(píng)估 初步影響評(píng)估技術(shù)組組長(zhǎng)進(jìn)行初步影響評(píng)估，并向?yàn)?zāi)難恢復(fù)指揮組匯報(bào)報(bào)告領(lǐng)導(dǎo)，根據(jù)指示，技術(shù)

15、恢復(fù)組和業(yè)務(wù)恢復(fù)組人員已完成初步評(píng)估，數(shù)據(jù)庫服務(wù)器備件不到場(chǎng)，服務(wù)器無法恢復(fù)正常。根據(jù)與廠商的協(xié)調(diào)，備件已經(jīng)發(fā)出，但到場(chǎng)最快還需要半小時(shí)，另外修復(fù)的時(shí)間也需要最少半小時(shí)，且尚存在其他不可預(yù)估的風(fēng)險(xiǎn)，建議災(zāi)難預(yù)警。災(zāi)難預(yù)警指揮組組長(zhǎng)決定災(zāi)難預(yù)警立即向中金災(zāi)備中心預(yù)警，請(qǐng)技術(shù)組準(zhǔn)備好系統(tǒng)切換前的準(zhǔn)備工作進(jìn)行災(zāi)難預(yù)警技術(shù)組執(zhí)行人進(jìn)行災(zāi)難預(yù)警中金災(zāi)備中心，我是中銀保險(xiǎn)XXX，現(xiàn)通知你們進(jìn)入預(yù)警狀態(tài)，做好相應(yīng)的保障準(zhǔn)備工作技術(shù)組組長(zhǎng)匯報(bào)準(zhǔn)備工作進(jìn)展報(bào)告領(lǐng)導(dǎo)，現(xiàn)在一切技術(shù)準(zhǔn)備工作已經(jīng)就緒，災(zāi)備系統(tǒng)狀態(tài)正常，可以準(zhǔn)備進(jìn)行切換。損害及影響評(píng)估指揮組組長(zhǎng)再次進(jìn)行損害及影響評(píng)估請(qǐng)技術(shù)恢復(fù)組和業(yè)務(wù)恢復(fù)組再次進(jìn)行損害

16、及影響評(píng)估報(bào)告損害及影響評(píng)估結(jié)果指定的災(zāi)難評(píng)估人員填寫災(zāi)害評(píng)估表及災(zāi)難宣告表第一欄報(bào)告領(lǐng)導(dǎo)，與廠家聯(lián)系，由于道路擁堵，備件還在路上，具體恢復(fù)時(shí)間尚無法估計(jì)。損害評(píng)估表、災(zāi)難宣告表已經(jīng)填寫完畢，建議進(jìn)行災(zāi)難宣告，請(qǐng)指示向領(lǐng)導(dǎo)組匯報(bào)損害及影響評(píng)估結(jié)果指揮組組長(zhǎng)填寫災(zāi)難宣告表第二欄，向領(lǐng)導(dǎo)組報(bào)告損害評(píng)估結(jié)果，建議災(zāi)難宣告 報(bào)告領(lǐng)導(dǎo)，根據(jù)現(xiàn)損害及影響評(píng)估結(jié)果，由于備件具體到場(chǎng)時(shí)間無法估計(jì)，業(yè)務(wù)停止時(shí)間過長(zhǎng)，建議領(lǐng)導(dǎo)組進(jìn)行災(zāi)難宣告，另保險(xiǎn)卡系統(tǒng)切換時(shí)間為15分鐘，請(qǐng)指示。答復(fù)領(lǐng)導(dǎo)組組長(zhǎng)就災(zāi)難宣告事宜進(jìn)行答復(fù)領(lǐng)導(dǎo)組將認(rèn)真研究是否進(jìn)行災(zāi)難宣告，以及何時(shí)進(jìn)行宣告，研究結(jié)果會(huì)及時(shí)通知。同時(shí)請(qǐng)密切關(guān)注現(xiàn)場(chǎng)情況，有

17、進(jìn)展及時(shí)匯報(bào)。備件仍未到場(chǎng)，保險(xiǎn)卡系統(tǒng)無法在預(yù)定RTO內(nèi)恢復(fù)災(zāi)難宣告領(lǐng)導(dǎo)組組長(zhǎng)簽署災(zāi)難宣告表第三欄，同時(shí)進(jìn)行災(zāi)難宣告經(jīng)過領(lǐng)導(dǎo)組的研究，接受指揮組災(zāi)難宣告建議，對(duì)外進(jìn)行災(zāi)難宣告；請(qǐng)指揮組組織人員進(jìn)行切換工作，防范風(fēng)險(xiǎn)，務(wù)必保證在16點(diǎn)前恢復(fù)保險(xiǎn)卡系統(tǒng)的運(yùn)營(yíng)；請(qǐng)后勤保障組根據(jù)需要向上級(jí)主管部門、董事會(huì)及其他監(jiān)管部門進(jìn)行解釋，降低影響。災(zāi)備切換技術(shù)組進(jìn)行切換工作，將保險(xiǎn)卡生產(chǎn)系統(tǒng)切換到災(zāi)備中心運(yùn)行 系統(tǒng)切換進(jìn)展匯報(bào)技術(shù)組組長(zhǎng)向指揮組匯報(bào)報(bào)告，保險(xiǎn)卡系統(tǒng)已經(jīng)切換到災(zāi)備中心，數(shù)據(jù)庫運(yùn)行正常，業(yè)務(wù)恢復(fù)組可以開始業(yè)務(wù)驗(yàn)證與恢復(fù)工作災(zāi)備切換業(yè)務(wù)組業(yè)務(wù)驗(yàn)證與恢復(fù)業(yè)務(wù)恢復(fù)進(jìn)展匯報(bào)業(yè)務(wù)組組長(zhǎng)想指揮組匯報(bào)報(bào)告，經(jīng)驗(yàn)證

18、，業(yè)務(wù)已經(jīng)恢復(fù)正常，業(yè)務(wù)數(shù)據(jù)也恢復(fù)到停止服務(wù)的時(shí)間，可以正式對(duì)外提供服務(wù)業(yè)務(wù)恢復(fù)進(jìn)展匯報(bào)指揮組組長(zhǎng)向領(lǐng)導(dǎo)組匯報(bào)報(bào)告領(lǐng)導(dǎo)，保險(xiǎn)卡業(yè)務(wù)已經(jīng)恢復(fù)正常，并正式對(duì)外提供服務(wù)，災(zāi)難切換完成災(zāi)難切換進(jìn)展指示領(lǐng)導(dǎo)組組長(zhǎng)對(duì)災(zāi)難切換進(jìn)展進(jìn)行指示，安排后續(xù)工作很好。請(qǐng)指揮組繼續(xù)關(guān)注生產(chǎn)的恢復(fù)情況，并根據(jù)進(jìn)展安排時(shí)間恢復(fù)到生產(chǎn)環(huán)境。同時(shí)由于由災(zāi)備環(huán)境頂替生產(chǎn)，請(qǐng)隨時(shí)關(guān)注業(yè)務(wù)運(yùn)行情況，以防范風(fēng)險(xiǎn)。場(chǎng)景四場(chǎng)景四步驟執(zhí)行人操作話述下午17點(diǎn)，備件到場(chǎng)，保險(xiǎn)卡數(shù)據(jù)庫服務(wù)器恢復(fù)生產(chǎn)環(huán)境恢復(fù)匯報(bào)技術(shù)組組長(zhǎng)匯報(bào)生產(chǎn)環(huán)境恢復(fù)進(jìn)展報(bào)告，生產(chǎn)數(shù)據(jù)庫服務(wù)器備件已經(jīng)到場(chǎng)，數(shù)據(jù)庫環(huán)境恢復(fù)正常，可以進(jìn)行回切操作回切指示指揮組組長(zhǎng)針對(duì)生產(chǎn)恢復(fù)情況

19、進(jìn)行回切指示17點(diǎn)15分開始，請(qǐng)技術(shù)恢復(fù)組進(jìn)行回退操作，請(qǐng)業(yè)務(wù)恢復(fù)組進(jìn)行回退后的業(yè)務(wù)驗(yàn)證與數(shù)據(jù)恢復(fù)。有情況及時(shí)匯報(bào)回切技術(shù)組回切回切匯報(bào)技術(shù)組組長(zhǎng)針對(duì)回切情況向指揮組匯報(bào)報(bào)告領(lǐng)導(dǎo)，系統(tǒng)已經(jīng)回退到生產(chǎn)環(huán)境，數(shù)據(jù)庫恢復(fù)正常，網(wǎng)絡(luò)恢復(fù)正常，可以開始進(jìn)行業(yè)務(wù)驗(yàn)證與恢復(fù)?；厍袠I(yè)務(wù)組回切后業(yè)務(wù)情況驗(yàn)證回切匯報(bào)業(yè)務(wù)組組長(zhǎng)針對(duì)回切情況向指揮組匯報(bào)報(bào)告，經(jīng)驗(yàn)證，業(yè)務(wù)已經(jīng)回退到生產(chǎn)環(huán)境，業(yè)務(wù)數(shù)據(jù)恢復(fù)到回退前，可以對(duì)外提供服務(wù)回切匯報(bào)指揮組組長(zhǎng)針對(duì)回切業(yè)務(wù)恢復(fù)情況向領(lǐng)導(dǎo)組匯報(bào)報(bào)告，業(yè)務(wù)已經(jīng)回退到生產(chǎn)環(huán)境，業(yè)務(wù)數(shù)據(jù)恢復(fù)到回退前，現(xiàn)在已經(jīng)開始利用生產(chǎn)環(huán)境對(duì)外提供服務(wù)，整體災(zāi)難恢復(fù)已經(jīng)完成。指示領(lǐng)導(dǎo)組組長(zhǎng)很好，災(zāi)難恢復(fù)圓

20、滿完成。應(yīng)急指揮中心解散，請(qǐng)安排好后續(xù)的人員、匯報(bào)、總結(jié)等工作。本次災(zāi)難恢復(fù)到此結(jié)束實(shí)戰(zhàn)演練條件約定演練數(shù)據(jù)來源的約定演練數(shù)據(jù)來源于真實(shí)的生產(chǎn)數(shù)據(jù)演練數(shù)據(jù)去向的約定本次是實(shí)戰(zhàn)演練，演練數(shù)據(jù)將進(jìn)入生產(chǎn)演練系統(tǒng)的約定保險(xiǎn)卡災(zāi)備系統(tǒng)演練網(wǎng)絡(luò)的約定生產(chǎn)網(wǎng)絡(luò)數(shù)據(jù)安全的約定（出現(xiàn)接管失敗、數(shù)據(jù)丟失的恢復(fù)方案）與應(yīng)用系統(tǒng)日志進(jìn)行核對(duì)等演練前準(zhǔn)備工作確認(rèn)（一）序號(hào)系統(tǒng)自查內(nèi)容自查情況責(zé)任人1網(wǎng)絡(luò)生產(chǎn)中心至災(zāi)備中心專線是否正常吳震銘2生產(chǎn)中心內(nèi)部各個(gè)域之間的網(wǎng)絡(luò)是否暢通3災(zāi)備中心內(nèi)部各個(gè)域之間網(wǎng)絡(luò)是否暢通4參演機(jī)構(gòu)到兩個(gè)中心之間的網(wǎng)絡(luò)是否暢通5與短信網(wǎng)關(guān)等外圍系統(tǒng)的網(wǎng)絡(luò)暢通 胡小紅6服務(wù)器確認(rèn)源目標(biāo)主機(jī)可登陸7

21、確認(rèn)源目標(biāo)主機(jī)無硬件問題8確認(rèn)源目標(biāo)主機(jī)目錄空間可用9確認(rèn)源目標(biāo)主機(jī)操作系統(tǒng)版本一致10確認(rèn)監(jiān)控、管理平臺(tái)的保障11應(yīng)用確認(rèn)應(yīng)用對(duì)外提供服務(wù)正常薛建龍12確認(rèn)應(yīng)用系統(tǒng)滿足切換演練的條件 演練前準(zhǔn)備工作確認(rèn)（二）序號(hào)系統(tǒng)自查內(nèi)容自查情況責(zé)任人13數(shù)據(jù)庫確認(rèn)數(shù)據(jù)庫主備庫的硬件設(shè)備的正常運(yùn)行 宋國(guó)哲14確認(rèn)主機(jī)資源、存儲(chǔ)等參數(shù)滿足切換需求 15確認(rèn)主備庫之間的實(shí)時(shí)同步隊(duì)列正常進(jìn)行 16確認(rèn)源目標(biāo)數(shù)據(jù)庫版本17冗災(zāi)確認(rèn)同步復(fù)制軟件部署情況方航18確認(rèn)容災(zāi)切換流程可行性19相關(guān)人員資源的確認(rèn)20問題跟蹤解決情況21容災(zāi)系統(tǒng)維護(hù)方案及容災(zāi)切換流程的可行性22確認(rèn)保險(xiǎn)卡系統(tǒng)切換手冊(cè)為最新版本23應(yīng)急預(yù)案確認(rèn)

22、實(shí)戰(zhàn)演練流程（一）階段序號(hào)階段名稱操作小組序號(hào)工作事項(xiàng)負(fù)責(zé)人操作人復(fù)核人開始時(shí)間結(jié)束時(shí)間完成情況階段一演練準(zhǔn)備工作技術(shù)組1下發(fā)“中銀保險(xiǎn)業(yè)務(wù)持續(xù)性演練的通知”方航趙愛忠業(yè)務(wù)組2確認(rèn)演練所用的業(yè)務(wù)案例李哲峰甘正良技術(shù)組3確認(rèn)保險(xiǎn)卡系統(tǒng)切換手冊(cè)為最新版本宋國(guó)哲方航領(lǐng)導(dǎo)/指揮組4演練領(lǐng)導(dǎo)小組人員就位趙愛忠技術(shù)組5演練技術(shù)組廠商支持組人員就位方航業(yè)務(wù)組6演練參與人員就位并通知參演的機(jī)構(gòu)確認(rèn)準(zhǔn)備工作李哲峰甘正良技術(shù)組7確認(rèn)兩中心環(huán)境狀態(tài)是否正常宋國(guó)哲胡小紅吳震銘方航實(shí)戰(zhàn)演練流程（二）階段序號(hào)階段名稱操作小組序號(hào)工作事項(xiàng)負(fù)責(zé)人操作人復(fù)核人開始時(shí)間結(jié)束時(shí)間完成情況階段二演練正式開始技術(shù)組1向指揮組上報(bào)災(zāi)難發(fā)

23、生場(chǎng)景及災(zāi)難影響評(píng)估,填寫損害評(píng)估表,建議災(zāi)難宣告并進(jìn)行系統(tǒng)切換.方航領(lǐng)導(dǎo)/指揮組2災(zāi)難宣告指示系統(tǒng)切換趙愛忠技術(shù)組3配置好復(fù)制鏈路宋國(guó)哲方航技術(shù)組4源端shutdown abort數(shù)據(jù)庫宋國(guó)哲方航技術(shù)組5切換準(zhǔn)備,調(diào)整目標(biāo)庫的fkjobtrigger宋國(guó)哲方航技術(shù)組6停止export進(jìn)程宋國(guó)哲方航技術(shù)組7激活反向復(fù)制宋國(guó)哲方航技術(shù)組8應(yīng)用切換到目標(biāo)庫.宋國(guó)哲方航技術(shù)組9災(zāi)備中心系統(tǒng)就緒確認(rèn) 宋國(guó)哲方航技術(shù)組10通知參演人員開始業(yè)務(wù)操作宋國(guó)哲方航參演機(jī)構(gòu)11恢復(fù)原庫宋國(guó)哲方航技術(shù)組12調(diào)整原庫的fktriggerjob宋國(guó)哲方航技術(shù)組13啟動(dòng)目標(biāo)庫export宋國(guó)哲方航參演機(jī)構(gòu)14參演機(jī)構(gòu)以電

24、話及傳真方式通知業(yè)務(wù)組，完成交易測(cè)試。李哲峰甘正良業(yè)務(wù)組15生成報(bào)表，驗(yàn)證災(zāi)備中心業(yè)務(wù)數(shù)據(jù)于生產(chǎn)中心業(yè)務(wù)數(shù)據(jù)的一致性李哲峰甘正良技術(shù)組16通過數(shù)據(jù)庫技術(shù)驗(yàn)證災(zāi)備中心業(yè)務(wù)數(shù)據(jù)與生產(chǎn)中心業(yè)務(wù)數(shù)據(jù)的一致性宋國(guó)哲方航實(shí)戰(zhàn)演練流程（三）階段序號(hào)階段名稱操作小組序號(hào)工作事項(xiàng)負(fù)責(zé)人操作人復(fù)核人開始時(shí)間結(jié)束時(shí)間完成情況階段三災(zāi)備系統(tǒng)恢復(fù)技術(shù)組1向指揮組上報(bào)生產(chǎn)中心系統(tǒng)恢復(fù),請(qǐng)示回切方航領(lǐng)導(dǎo)/指揮組2演練領(lǐng)導(dǎo)小組下發(fā)恢復(fù)指令趙愛忠技術(shù)組3目標(biāo)庫停止應(yīng)用宋國(guó)哲方航技術(shù)組4修改原庫和目標(biāo)庫的fk/job/trigger宋國(guó)哲方航技術(shù)組5確認(rèn)原庫的sequence值比目標(biāo)庫大宋國(guó)哲方航技術(shù)組6停止目標(biāo)庫export宋

25、國(guó)哲方航技術(shù)組7切換應(yīng)用到原庫宋國(guó)哲方航技術(shù)組8檢查數(shù)據(jù)被復(fù)制到目標(biāo)庫宋國(guó)哲方航技術(shù)組9確認(rèn)生產(chǎn)環(huán)境數(shù)據(jù)庫狀態(tài)是否正常宋國(guó)哲方航技術(shù)組10確認(rèn)數(shù)據(jù)庫關(guān)聯(lián)的其他系統(tǒng)運(yùn)行是否正常宋國(guó)哲方航業(yè)務(wù)組11用業(yè)務(wù)手段確認(rèn)兩中心數(shù)據(jù)一致性李哲峰甘正良技術(shù)組12用技術(shù)手段確認(rèn)兩中心數(shù)據(jù)一致性宋國(guó)哲方航實(shí)戰(zhàn)演練流程（四）階段序號(hào)階段名稱操作小組序號(hào)工作事項(xiàng)負(fù)責(zé)人操作人復(fù)核人開始時(shí)間結(jié)束時(shí)間完成情況階段四演練總結(jié)領(lǐng)導(dǎo)/指揮組1收集“演練記錄表”及演練總結(jié)報(bào)告技術(shù)組2編寫演練總結(jié)報(bào)告方航業(yè)務(wù)組3編寫演練總結(jié)報(bào)告李哲峰甘正良技術(shù)角度數(shù)據(jù)一致性對(duì)比比較幾個(gè)關(guān)鍵業(yè)務(wù)表數(shù)據(jù)（首先是記錄數(shù)，然后是工具逐條比對(duì)）卡前后臺(tái)同名表

26、是否實(shí)現(xiàn)前后臺(tái)卡業(yè)務(wù)表card銷售單表sellsettledoc、sellsettleitem前臺(tái)保單信息表applicant、insurant業(yè)務(wù)角度功能點(diǎn)及數(shù)據(jù)一致性對(duì)比測(cè)試業(yè)務(wù)系統(tǒng)全流程功能點(diǎn)測(cè)試業(yè)務(wù)功能點(diǎn)數(shù)據(jù)一致性檢查實(shí)戰(zhàn)演練關(guān)鍵風(fēng)險(xiǎn)點(diǎn)評(píng)估切換前檢查1、檢查切換環(huán)境、切換腳本、測(cè)試用例、應(yīng)急方案的完備性根據(jù)切換前檢查報(bào)告，演練前1天上報(bào)決策層是否進(jìn)行應(yīng)急演練技術(shù)組、業(yè)務(wù)組2、檢查同步隊(duì)列是否正常3、檢查主、備數(shù)據(jù)庫是否正常4、檢查應(yīng)用進(jìn)程是否正常5、關(guān)注切換演練通知的反饋切換過程1、檢查系統(tǒng)標(biāo)記位是否正常切換根據(jù)檢查結(jié)果，若沒有達(dá)到預(yù)期結(jié)果，及時(shí)上報(bào)。技術(shù)組、領(lǐng)導(dǎo)指揮組2、檢查主庫同步

27、隊(duì)列是否有數(shù)據(jù)未完成同步切換后測(cè)試1、檢查切換后災(zāi)備數(shù)據(jù)庫是否正常接管業(yè)務(wù)若辦理業(yè)務(wù)失敗，或數(shù)據(jù)同步不正常，及時(shí)上報(bào)技術(shù)組、業(yè)務(wù)組2、檢查切換后業(yè)務(wù)是否能夠正常受理3、檢查切換后同步軟件是否反向同步回切生產(chǎn)1、 檢查是否能將數(shù)據(jù)方向切換回生產(chǎn)若通過正常手段無法回切生產(chǎn)或產(chǎn)生數(shù)據(jù)不一致，及時(shí)上報(bào)。技術(shù)組2、檢查主備數(shù)據(jù)庫數(shù)據(jù)一致性3、檢查回切后同步軟件是否正常同步4、檢查數(shù)據(jù)庫關(guān)聯(lián)的其他系統(tǒng)運(yùn)行情況演練流程演練方案的制定（業(yè)務(wù)持續(xù)性計(jì)劃）演練方案的審批演練方案的實(shí)施演練后評(píng)價(jià)業(yè)務(wù)持續(xù)計(jì)劃的有效性和可用性；演練結(jié)果與演練目標(biāo)的差距；演練過程中發(fā)現(xiàn)的問題；演練工作的組織；參演人員的應(yīng)急能力；應(yīng)急資源

28、的協(xié)調(diào)、保障能力。業(yè)務(wù)持續(xù)性計(jì)劃的生效和發(fā)布業(yè)務(wù)持續(xù)性計(jì)劃的定期演練和更新維護(hù)特此匯報(bào)，謝謝1、不是井里沒有水，而是你挖的不夠深。不是成功來得慢，而是你努力的不夠多。2、孤單一人的時(shí)間使自己變得優(yōu)秀，給來的人一個(gè)驚喜，也給自己一個(gè)好的交代。3、命運(yùn)給你一個(gè)比別人低的起點(diǎn)是想告訴你，讓你用你的一生去奮斗出一個(gè)絕地反擊的故事，所以有什么理由不努力!4、心中沒有過分的貪求，自然苦就少。口里不說多余的話，自然禍就少。腹內(nèi)的食物能減少，自然病就少。思緒中沒有過分欲，自然憂就少。大悲是無淚的，同樣大悟無言。緣來盡量要惜，緣盡就放。人生本來就空，對(duì)人家笑笑，對(duì)自己笑笑，笑著看天下，看日出日落，花謝花開，豈不自在，哪里來的塵埃!5、心情就像衣服，臟了就拿去洗洗，曬曬，陽光自然就會(huì)蔓延開來。陽光那么好，何必自尋煩惱，過好每一個(gè)當(dāng)下，一萬個(gè)美麗的未來抵不