業(yè)務(wù)連續(xù)性解決方案

1、從容災(zāi)談起從容災(zāi)談起業(yè)務(wù)連續(xù)性解決方案業(yè)務(wù)連續(xù)性解決方案為什么需要容災(zāi)系統(tǒng)？為什么需要容災(zāi)系統(tǒng)？ 各種災(zāi)難導(dǎo)致系統(tǒng)崩潰 軟件故障、黑客、人為破壞 火災(zāi)、水災(zāi) 地震、戰(zhàn)爭 區(qū)域電力中斷 重要信息丟失 服務(wù)中斷 導(dǎo)致社會影響 導(dǎo)致經(jīng)濟(jì)損失2日常工作中信息系統(tǒng)的災(zāi)難日常工作中信息系統(tǒng)的災(zāi)難 85% 的系統(tǒng)未進(jìn)行備份 53% 的故障是由硬件或軟件造成的 38% 的損失源于人為錯誤3并非只有發(fā)生重大災(zāi)難才需要進(jìn)行快速系統(tǒng)恢復(fù)。并非只有發(fā)生重大災(zāi)難才需要進(jìn)行快速系統(tǒng)恢復(fù)。日常操作也會致使系統(tǒng)發(fā)生故障。日常操作也會致使系統(tǒng)發(fā)生故障。什么是災(zāi)難恢復(fù)？什么是災(zāi)難恢復(fù)？4容災(zāi)，就是遠(yuǎn)程復(fù)制？容災(zāi)，就是遠(yuǎn)程復(fù)制？數(shù)

2、據(jù)實(shí)時復(fù)制數(shù)據(jù)實(shí)時復(fù)制5容災(zāi)，就是浪費(fèi)？容災(zāi)，就是浪費(fèi)？x26正本清源，從業(yè)務(wù)正本清源，從業(yè)務(wù)需求出發(fā)！需求出發(fā)！7業(yè)務(wù)連續(xù)性的基本核心指標(biāo)業(yè)務(wù)連續(xù)性的基本核心指標(biāo)Recovery Point Objective (RPO) 恢復(fù)目標(biāo)時間點(diǎn)數(shù)據(jù)Recovery Time Objective (RTO) 恢復(fù)花費(fèi)時間DaysMinsHrsWksSecsMinsDaysHrsSecsWks8信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范GB/T 20988-200791級-基本支持l每周至少做一次完全數(shù)據(jù)備份l制定介質(zhì)存取、驗(yàn)證和轉(zhuǎn)儲的管理制度l完整測試和演練的災(zāi)難恢復(fù)計劃2級-備用場地支持3級-電子傳

3、輸和 部分設(shè)備支持 4級-電子傳輸及 完整設(shè)備支持5級-實(shí)時數(shù)據(jù)傳輸 及完整設(shè)備支持6級-數(shù)據(jù)零丟失和 遠(yuǎn)程集群支持l預(yù)定時間調(diào)配數(shù)據(jù),通信線路和網(wǎng)絡(luò)設(shè)備l備用場地管理制度l設(shè)備及網(wǎng)絡(luò)緊急供貨協(xié)議l配置部分?jǐn)?shù)據(jù),通信線路和網(wǎng)絡(luò)設(shè)備l每天實(shí)現(xiàn)多次的數(shù)據(jù)電子傳輸l備用場地配置專職的運(yùn)行管理人員l配置所需要的全部數(shù)據(jù)和通訊線路及網(wǎng)絡(luò)設(shè)備，并處于就緒狀態(tài)l7*24 運(yùn)行;更高的技術(shù)支持和運(yùn)維管理l實(shí)現(xiàn)遠(yuǎn)程數(shù)據(jù)復(fù)制技術(shù)l備用網(wǎng)絡(luò)也具備自動或集中切換能力l實(shí)現(xiàn)遠(yuǎn)程數(shù)據(jù)實(shí)時備份，實(shí)現(xiàn)零丟失l應(yīng)用軟件可以實(shí)現(xiàn)實(shí)時無縫切換l遠(yuǎn)程集群系統(tǒng)的實(shí)時監(jiān)控和自動切換能力第一級：基本支持第一級：基本支持10至少一周一次全備

4、份備份介質(zhì)場外存放有符合介質(zhì)存放條件的場地 第二級：備用場地支持第二級：備用場地支持11至少一周一次全備份備份介質(zhì)場外存放有符合介質(zhì)存放條件的場地 配備災(zāi)難恢復(fù)所需的部分?jǐn)?shù)據(jù)處理設(shè)備 配備部分網(wǎng)絡(luò)設(shè)備 配備部分通訊設(shè)備 有恢復(fù)運(yùn)作的場地第三級第三級:電子傳輸和部分設(shè)備支持電子傳輸和部分設(shè)備支持12至少一天一次全備份備份介質(zhì)場外存放有符合介質(zhì)存放條件的場地 配備災(zāi)難恢復(fù)所需的部分?jǐn)?shù)據(jù)處理設(shè)備 配備部分網(wǎng)絡(luò)設(shè)備 配備部分通訊設(shè)備 有恢復(fù)運(yùn)作的場地每天多次利用通信網(wǎng)絡(luò)將關(guān)鍵數(shù)據(jù)定時批量傳送至備用場地第四級：電子傳輸及完整設(shè)備支持第四級：電子傳輸及完整設(shè)備支持13至少一天一次全備份備份介質(zhì)場外存放有符

5、合介質(zhì)存放條件的場地 配備災(zāi)難恢復(fù)所需的全部數(shù)據(jù)處理設(shè)備 配備網(wǎng)絡(luò)設(shè)備 配備通訊設(shè)備 有恢復(fù)運(yùn)作的場地每天多次利用通信網(wǎng)絡(luò)將關(guān)鍵數(shù)據(jù)定時批量傳送至備用場地就緒或運(yùn)行狀態(tài)7x24小時運(yùn)作 就緒狀態(tài) 第五級：實(shí)時數(shù)據(jù)傳輸及完整設(shè)備支持第五級：實(shí)時數(shù)據(jù)傳輸及完整設(shè)備支持14至少一天一次全備份備份介質(zhì)場外存放有符合介質(zhì)存放條件的場地 配備災(zāi)難恢復(fù)所需的全部數(shù)據(jù)處理設(shè)備 配備網(wǎng)絡(luò)設(shè)備 配備通訊設(shè)備 有恢復(fù)運(yùn)作的場地采用遠(yuǎn)程數(shù)據(jù)復(fù)制技術(shù)將關(guān)鍵數(shù)據(jù)實(shí)時復(fù)制到備用場地就緒或運(yùn)行狀態(tài)就緒狀態(tài) 7x24小時運(yùn)作 具備自動或集中切換能力第六級：數(shù)據(jù)零丟失和遠(yuǎn)程集群支持第六級：數(shù)據(jù)零丟失和遠(yuǎn)程集群支持15至少一天一次

6、全備份備份介質(zhì)場外存放有符合介質(zhì)存放條件的場地 數(shù)據(jù)處理設(shè)備與生產(chǎn)系統(tǒng)性能一致 與主系統(tǒng)同等級的網(wǎng)絡(luò)設(shè)備 與主系統(tǒng)同等級的通訊設(shè)備 有恢復(fù)運(yùn)作的場地遠(yuǎn)程實(shí)時備份，實(shí)現(xiàn)數(shù)據(jù)零丟失就緒或運(yùn)行狀態(tài)就緒狀態(tài) 7x24小時運(yùn)作 具備遠(yuǎn)程集群系統(tǒng)的實(shí)時監(jiān)控和自動切換能力議程議程16怎樣實(shí)現(xiàn)一個合乎標(biāo)準(zhǔn)的災(zāi)難恢復(fù)計劃（DRP）？3國標(biāo)國標(biāo)1、2級關(guān)鍵技術(shù)分析：級關(guān)鍵技術(shù)分析：運(yùn)輸介質(zhì)模式（工作原理）運(yùn)輸介質(zhì)模式（工作原理）17國標(biāo)國標(biāo)3、4級關(guān)鍵技術(shù)分析：級關(guān)鍵技術(shù)分析：鏈路傳輸模式（工作原理）鏈路傳輸模式（工作原理）通過電子鏈路定時備份通過電子鏈路定時備份災(zāi)備中心災(zāi)備中心生產(chǎn)中心生產(chǎn)中心磁盤磁盤磁帶磁帶以

7、太網(wǎng)以太網(wǎng)1819重復(fù)數(shù)據(jù)刪除技術(shù)重復(fù)數(shù)據(jù)刪除技術(shù)18刪除重復(fù)數(shù)據(jù)的磁盤資料庫，利用日常使用的磁盤主要價值：主要價值：使用：使用： 降低磁盤成本降低磁盤成本：利用標(biāo)準(zhǔn)磁盤顯著減少空間，允許備份在數(shù)月內(nèi)保持在線 降低災(zāi)難恢復(fù)降低災(zāi)難恢復(fù)/保險庫的成本：保險庫的成本：以經(jīng)濟(jì)有效的方式將數(shù)據(jù)復(fù)制到另一個數(shù)據(jù)中心，從而避免進(jìn)行磁帶發(fā)運(yùn)和存儲 集成解決方案：集成解決方案： 一個可伸縮的磁盤池適用于整個企業(yè)（數(shù)據(jù)中心、遠(yuǎn)程辦公室、臺式機(jī)/筆記本電腦） 通過任何連接（DAS、SAN、NAS、iSCSI）連接的任意磁盤 任何備份客戶端備份客戶端備份 SAN 客戶端生產(chǎn)中心 磁盤池介質(zhì)服務(wù)器WAN 鏈接遠(yuǎn)程磁盤

8、池PureDisk重復(fù)數(shù)據(jù)刪除：全備份重復(fù)數(shù)據(jù)刪除：全備份WANContent Router(s)MetaBase Server + EnginesC:Documents and SettingsAAAAAAMy DocumentsPureDiskBudget_2006.xlsPureDiskBudget_2006.xls 920 KB920 KB05/05/200505/05/2005ContentContentContentC:Documents and SettingsCCCCCCMy DocumentsPureDiskBudget_2006.xlsPureDiskBudget_2006

9、.xls 920 KB920 KB06/20/200506/20/2005C:Documents and SettingsBBBBBBMy DocumentsPureDisk_2006_Wim.xlsPureDisk_2006_Wim.xls920 KB920 KB06/10/200506/10/2005A00101B00011C10101D11001E11100F00010G11111H011FP1101011C:Documents and SettingsAAAMy DocumentsPureDiskBudget_2006.xls920 KB05/05/2005FP1ABCDEFG HFP

10、1C:Documents and SettingsBBBMy DocumentsPureDisk_2006_Wim.xls 920 KB 06/10/2005FP1C:Documents and SettingsCCCMy DocumentsPureDiskBudget_2006.xls 920 KB 06/20/2005FP1A00101B00011C10101D11001E11100F00010G11111H011FP1101011A00101B00011C10101D11001E11100F00010G11111H011FP11010110%Stored data volume afte

11、r global SIS:Protected data volume on source:0 KB0 KB920 KB460 KB50%1,840 KB75%2,760 KB83%SIS SavingsPureDisk Storage Pool20PureDisk重復(fù)數(shù)據(jù)刪除：增量備份重復(fù)數(shù)據(jù)刪除：增量備份PD SavingsWANContent Router(s)MetaBase Server + EnginesContentC:Documents and SettingsBBBMy DocumentsPureDisk_2006_Wim.xls 920 KB 06/10/2005C:Docu

12、ments and SettingsCCCMy DocumentsPureDiskBudget_2006.xls 920 KB 06/20/2005C:Documents and SettingsAAAMy DocumentsPureDiskBudget_2006.xls920 KB05/05/2005C:Documents and SettingsAAAMy DocumentsPureDiskBudget_2006.xls920 KB05/06/2005ContentContentC:Documents and SettingsCCCMy DocumentsPureDiskBudget_20

13、06.xls920 KB06/20/2005C:Documents and SettingsBBBMy DocumentsPureDisk_2006_Wim.xls920 KB06/10/2005FP1FP1ABCDEFG HFP1FP1FP2011011C:Documents and SettingsBBBMy DocumentsPureDisk_2006_Wim_v2.xlsPureDisk_2006_Wim_v2.xls 970 KB970 KB06/21/200506/21/2005Updated ContentO01011P1101OPFP2C:Documents and Setti

14、ngsBBBMy DocumentsPureDisk_2006_Wim_v2.xls 970 KB 06/21/2005PureDisk_2006_Wim_v2.xls 970 KB 06/21/2005FP2A00101B00011C10101D11001F00010G11111O01011P11010%Stored data volume after global SIS:Protected data volume on source:920 KB460 KB460 KB2,760 KB83%588 KB3,680 KB87%4,650 KB89%5,570 KBPureDisk Stor

15、age Pool21國標(biāo)國標(biāo)1、2、3、4級關(guān)鍵技術(shù)分析：級關(guān)鍵技術(shù)分析：系統(tǒng)快速恢復(fù)系統(tǒng)快速恢復(fù)Bare Metal RestoreStep3.2.1.Step9.8.7.6.5.4.3.2.1.Traditional RecoveryRebootRebootRebootRebootLoad tape(s) and restoreReload OSReload backup softwareCollect all mediaRepair hardwareServer Recovery TimeBare Metal Restore FasterRestoresRebootClick “Prep

16、are to Restore”Repair hardware 自動化完成系統(tǒng)恢復(fù)所需的手工自動化完成系統(tǒng)恢復(fù)所需的手工勞動勞動 自動安裝、自動配置、自動修復(fù) 廣泛支持業(yè)界主流廣泛支持業(yè)界主流OS平臺平臺 異機(jī)恢復(fù)異機(jī)恢復(fù) 支持虛擬化技術(shù)支持虛擬化技術(shù)22國標(biāo)國標(biāo)5、6級關(guān)鍵技術(shù)分析級關(guān)鍵技術(shù)分析基于卷復(fù)制技術(shù)基于卷復(fù)制技術(shù)什么是卷復(fù)制什么是卷復(fù)制卷復(fù)制軟件工作在主機(jī)上，延伸Storage Foundation 的功能，使其在IP網(wǎng)絡(luò)（WAN)上異步的傳送數(shù)據(jù)特點(diǎn)特點(diǎn)任何情況下不降低應(yīng)用性能VVR 一直監(jiān)視傳輸鏈路，自動快速同步保證任何情況下的數(shù)據(jù)一致性節(jié)省空間的存儲快照用于DR測試沒有距離限制

17、23生產(chǎn)中心生產(chǎn)中心容災(zāi)中心容災(zāi)中心RVGSRLRVGSRLStorageFoundationIP NetworkVolumeReplicatorStorageFoundationVolumeReplicatorRLinkRLink國標(biāo)國標(biāo)5、6級關(guān)鍵技術(shù)分析級關(guān)鍵技術(shù)分析基于卷鏡像實(shí)現(xiàn)容災(zāi)基于卷鏡像實(shí)現(xiàn)容災(zāi)24卷鏡像定義 SAN上的同步數(shù)據(jù)復(fù)制上的同步數(shù)據(jù)復(fù)制好處 靈活 當(dāng)具備存儲光纖連接時，仍然使用SF軟件 只對重要的數(shù)據(jù)卷容災(zāi) 省錢 鏡像數(shù)據(jù)走光纖通道 兩邊的陣列可以任意型號 管理性 本地存儲管理和容災(zāi)管理采用同一套管理技術(shù) 零停機(jī)，數(shù)據(jù)零丟失SAN FabricStorageFound

18、ation檔案局檔案局?jǐn)?shù)據(jù)中心數(shù)據(jù)中心應(yīng)用的應(yīng)用的0停機(jī)，數(shù)據(jù)的停機(jī)，數(shù)據(jù)的0丟失的要求丟失的要求25主陣列故障主陣列故障26異地陣列故障或線路故障異地陣列故障或線路故障27基于卷的容災(zāi)解決方案基于卷的容災(zāi)解決方案 特點(diǎn) 0丟失，0停機(jī) 突破平臺限制，實(shí)現(xiàn)存儲標(biāo)準(zhǔn)化 集成的應(yīng)用級容災(zāi)解決方案 提供強(qiáng)大的在線管理功能，減少計劃內(nèi)停機(jī)時間28國標(biāo)國標(biāo)5、6級關(guān)鍵技術(shù)分析：級關(guān)鍵技術(shù)分析：實(shí)時數(shù)據(jù)復(fù)制技術(shù)和實(shí)時數(shù)據(jù)復(fù)制技術(shù)和集群技術(shù)集群技術(shù) 為什么需要集群技術(shù) 僅靠數(shù)據(jù)復(fù)制并不能始終提供數(shù)據(jù)的簡單訪問和恢復(fù)，希望關(guān)鍵數(shù)據(jù)、系統(tǒng)和應(yīng)用達(dá)到最高可用性的企業(yè)通常會為復(fù)制解決方案添加集群軟件。這樣，當(dāng)災(zāi)難發(fā)

19、生時，他們就能夠迅速從中斷中恢復(fù)過來。集群能夠?qū)崿F(xiàn)存儲、服務(wù)器和應(yīng)用流程的自動化，在中斷和災(zāi)難事件中，它能將客戶端重新引導(dǎo)到備用數(shù)據(jù)集合，從而避免冗長的、代價高昂的停機(jī)。29什什么是么是N:130Presentation Identifier Goes Here31 可用的處理能力可用的處理能力: 50% 83%Symantec VCS 集群方案：集群方案：N+1架構(gòu)，減少服務(wù)架構(gòu)，減少服務(wù)器成本器成本一臺備份服務(wù)器，減少成本每個集群可以多至 32 nodes 一個集群里可以混合不同檔次的服務(wù)器3個應(yīng)用原來需要個應(yīng)用原來需要6服務(wù)器，現(xiàn)在只需要服務(wù)器，現(xiàn)在只需要4臺，節(jié)省臺，節(jié)省33%(電力、

20、空間）電力、空間）什什么是么是N:132什么是什么是N+133Presentation Identifier Goes Here34切換策略：一次切換切換策略：一次切換任何服務(wù)器可以變?yōu)閭溆梅?wù)器，減少停機(jī)時間要求所有服務(wù)器在SAN架構(gòu)上，能夠存取同樣的存儲資源APP1 SGsybaseAPP2 SGsybaseAPP3 SGsybase議程議程35容災(zāi)建設(shè)的常見問題4容災(zāi)系統(tǒng)的挑戰(zhàn)容災(zāi)系統(tǒng)的挑戰(zhàn) 容災(zāi)站點(diǎn)投資巨大，而且平時不能使用，造成浪費(fèi)； 購買了很多硬件，但在關(guān)鍵時刻需要大量手工勞動進(jìn)行容災(zāi)切換，切換時間過長，而且容易出錯； 容災(zāi)系統(tǒng)建成以后，從未進(jìn)行任何測試，潛在風(fēng)險無法估計和排除；

21、數(shù)據(jù)量增長超出預(yù)期，原來的容災(zāi)設(shè)計中估計的帶寬已經(jīng)不夠用，是擴(kuò)容還是妥協(xié)？36議程議程37Symantec完整的業(yè)務(wù)連續(xù)性解決方案5Symantec業(yè)務(wù)連續(xù)性方案業(yè)務(wù)連續(xù)性方案 解決三大問題： 數(shù)據(jù)傳輸； 業(yè)務(wù)切換； 容災(zāi)演練； 準(zhǔn)確對應(yīng)國標(biāo)16級要求 完整、經(jīng)濟(jì)、自動地實(shí)現(xiàn)標(biāo)準(zhǔn)化的災(zāi)難恢復(fù)計劃38數(shù)據(jù)傳輸數(shù)據(jù)傳輸39關(guān)鍵業(yè)務(wù)數(shù)據(jù)同城同步鏡像（關(guān)鍵業(yè)務(wù)數(shù)據(jù)同城同步鏡像（RPO=0）100 km reach*SAN Fabric40關(guān)鍵業(yè)務(wù)數(shù)據(jù)遠(yuǎn)程異步復(fù)制（關(guān)鍵業(yè)務(wù)數(shù)據(jù)遠(yuǎn)程異步復(fù)制（RPO接近接近0）41CSCSSMVERITAS VRVERITAS VRSM42同步、異步容災(zāi)的完美結(jié)合同步、異

22、步容災(zāi)的完美結(jié)合* 掩體站點(diǎn)僅存儲差異部分的數(shù)據(jù)掩體站點(diǎn)僅存儲差異部分的數(shù)據(jù)掩體站點(diǎn)掩體站點(diǎn)*主站點(diǎn)主站點(diǎn)容災(zāi)站點(diǎn)容災(zāi)站點(diǎn)asynchronous over IPsynchronous業(yè)務(wù)切換業(yè)務(wù)切換43集群和集群和DR的結(jié)合的結(jié)合44VCSVM/VVRVCSVM/VVRVCSVM/VVRVCSVM/VVR數(shù)據(jù)鏡象數(shù)據(jù)鏡象切換切換節(jié)點(diǎn)遷移節(jié)點(diǎn)遷移完整恢復(fù)一臺服務(wù)器完整恢復(fù)一臺服務(wù)器恢復(fù)一恢復(fù)一個系個系統(tǒng)統(tǒng). 十幾分鐘內(nèi) 不是幾個小時或幾天 恢復(fù)到完全不同的硬件 對遠(yuǎn)程系統(tǒng)恢復(fù) 恢復(fù)到虛擬環(huán)境中做調(diào)整 每次都可靠45系統(tǒng)快速、異機(jī)恢復(fù)系統(tǒng)快速、異機(jī)恢復(fù)46存儲恢復(fù)點(diǎn)存儲恢復(fù)點(diǎn)Dell Power

23、Edge1Restore Anyware選件拿到恢復(fù)點(diǎn)文件如果系統(tǒng)出現(xiàn)失敗，恢復(fù)點(diǎn)文件可以被恢復(fù)到不同的硬件 (新HAL, 存儲,網(wǎng)絡(luò),等.).23恢復(fù)光盤包含了恢復(fù)到不同的系統(tǒng)所需要的驅(qū)動. 如果需要額外的驅(qū)動，會顯示提示信息4系統(tǒng)可以被快速，容易，可靠的恢復(fù)到不同的硬件 SCSI PCI 單處理器 SATA PCIx 雙處理器IBM eServer容災(zāi)演練容災(zāi)演練47容災(zāi)系統(tǒng)需要演練容災(zāi)系統(tǒng)需要演練 企業(yè)不敢切換容災(zāi)系統(tǒng)的六個原因 一不敢：容災(zāi)組織建設(shè)不健全 二不敢：日常管理不到位 三不敢：預(yù)警流程缺乏 四不敢：沒有容災(zāi)演習(xí) 五不敢：沒有做容災(zāi)測試 六不敢：沒有做好容災(zāi)培訓(xùn)48什么是業(yè)務(wù)連

24、續(xù)性計劃演練什么是業(yè)務(wù)連續(xù)性計劃演練信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范GB/T 20988-2007中指出:為訓(xùn)練人員和提高災(zāi)難恢復(fù)能力而根據(jù)業(yè)務(wù)連續(xù)性計劃進(jìn)行活動的過程。包括桌面演練、模擬演練、重點(diǎn)演練和完整演練等。49傳統(tǒng)的業(yè)務(wù)連續(xù)性計劃演練的方式傳統(tǒng)的業(yè)務(wù)連續(xù)性計劃演練的方式桌面演練桌面演練 桌面演練是以討論會的方式，通過虛擬災(zāi)難情景的推演和應(yīng)對策略的討論，在完全不影響 生產(chǎn)系統(tǒng)的情況下對災(zāi)難恢復(fù)計劃進(jìn)行演練優(yōu)點(diǎn)：優(yōu)點(diǎn)：工作量小，易于開展思路寬廣，可模擬任何場景缺點(diǎn)：缺點(diǎn)：演練結(jié)果可靠性未經(jīng)完全驗(yàn)證對潛在的風(fēng)險和問題難以充分估計 現(xiàn)場演練現(xiàn)場演練 現(xiàn)場演練是在實(shí)際環(huán)境中，模擬事先設(shè)定的場景，進(jìn)行的現(xiàn)場操作的演練。優(yōu)點(diǎn)：優(yōu)點(diǎn)：場景真實(shí)，確保演練結(jié)果的可靠性可通過實(shí)際演練發(fā)現(xiàn)潛在問題缺點(diǎn)：缺點(diǎn)：現(xiàn)場演練本身存在一定的項(xiàng)目實(shí)施風(fēng)險對生產(chǎn)系統(tǒng)影響大對業(yè)務(wù)可能造成一定影響需要資源較多，協(xié)調(diào)難度大50仿真切換演練仿真切換演練對業(yè)務(wù)產(chǎn)生中斷可能產(chǎn)生無法預(yù)測的問題耗時、耗力、耗資源如何做?78%從未測試過流程預(yù)案無需中斷業(yè)務(wù)存儲需求量小容災(zāi)演習(xí)技術(shù)容