OpenStack數(shù)據(jù)保護(hù)項(xiàng)目Karbor介紹

1、KarborOpenStack數(shù)據(jù)保護(hù)服務(wù)引擎為什么需要數(shù)據(jù)保護(hù)？Power outageHardware faultNetwork issueHuman errorNatural disaster什么是數(shù)據(jù)保護(hù)?l數(shù)據(jù)保護(hù)是以確保數(shù)據(jù)可靠地可恢復(fù)的一組措施。l保證業(yè)務(wù)連續(xù)性和制定災(zāi)難恢復(fù)計(jì)劃是數(shù)據(jù)保護(hù)的關(guān)鍵部分。l數(shù)據(jù)保護(hù)度量的關(guān)鍵指標(biāo)： RPO (Recovery Point Objective)：反映恢復(fù)數(shù)據(jù)完整性的指標(biāo)，表示新恢復(fù)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)損失量。 RTO (Recovery Time Objective)：反映業(yè)務(wù)恢復(fù)及時(shí)性的指標(biāo)，表示業(yè)務(wù)從中斷到恢復(fù)正常所需時(shí)間。Protect

2、Restore beginsRestore endsProtectRPORTO云環(huán)境數(shù)據(jù)保護(hù)服務(wù)挑戰(zhàn)和目標(biāo)挑戰(zhàn)：l云環(huán)境下業(yè)務(wù)連續(xù)性要求更高。l云環(huán)境IT基礎(chǔ)設(shè)施資源按需分配。l云環(huán)境數(shù)據(jù)保護(hù)服務(wù)的用戶(hù)非管理員。目標(biāo)：l針對(duì)業(yè)務(wù)的不同特點(diǎn)，提供不同服務(wù)等級(jí)能力的數(shù)據(jù)保護(hù)服務(wù)。l類(lèi)似IT資源的供給方式，數(shù)據(jù)保護(hù)服務(wù)按需提供。l面向租戶(hù)的數(shù)據(jù)保護(hù)和恢復(fù)，實(shí)現(xiàn)自動(dòng)化，去專(zhuān)業(yè)化。Karbor是澳大利亞樹(shù)袋熊koala的原生名字，koala又是kolla項(xiàng)目的吉祥物。Patches submitted by Caowei：/#/q/kolla+kar

3、borKarbor是什么Karbor曾用名SmaugOpenStack數(shù)據(jù)保護(hù)項(xiàng)目Smaug在2016年7月經(jīng)過(guò)OpenStack技術(shù)委員會(huì)同意正式更名為Karbor。巴塞羅那峰會(huì)社區(qū)調(diào)查數(shù)據(jù)核數(shù)負(fù)載選擇OpenStack理由標(biāo)準(zhǔn)API是用戶(hù)選擇的OpenStack關(guān)鍵。公司規(guī)模為什么需要Karbor數(shù)據(jù)保護(hù)服務(wù)化標(biāo)準(zhǔn)開(kāi)放：通過(guò)標(biāo)準(zhǔn)化南向接口，集成不同的廠商方案簡(jiǎn)單：提供標(biāo)準(zhǔn)的北向接口，統(tǒng)一發(fā)放數(shù)據(jù)保護(hù)服務(wù)OpenStack CloudKarborBackup Softwares現(xiàn)狀KarborOpenStack場(chǎng)景下業(yè)務(wù)系統(tǒng)有數(shù)據(jù)保護(hù)的需求各廠商的備份軟件無(wú)法以統(tǒng)一的方式接入OpenStac

4、k 保護(hù)云上原生的各種資源各業(yè)務(wù)核心數(shù)據(jù)的保護(hù)需求差異明顯，管理復(fù)雜NovaCinderManila 提供數(shù)據(jù)保護(hù)即服務(wù) 提供不同的服務(wù)等級(jí) 更好地利用現(xiàn)有的備份/復(fù)制產(chǎn)品 保護(hù)所有的資源 為資源組選擇匹配的保護(hù)方案 所有系統(tǒng)的一致性保護(hù)和恢復(fù) 使用Karbor輕松集成現(xiàn)有或新的解決方案 快速推向市場(chǎng) 輕松適應(yīng)OpenStack云環(huán)境運(yùn)營(yíng)商用戶(hù)供應(yīng)商Karbor能為您做什么Karbor組件簡(jiǎn)介如何保護(hù)？保護(hù)什么？數(shù)據(jù)保護(hù)到哪里？曾經(jīng)保護(hù)過(guò)哪些資源？保護(hù)提供者何時(shí)保護(hù)?如何恢復(fù)?誰(shuí)來(lái)保護(hù)？(保護(hù)提供者)調(diào)度服務(wù)保護(hù)服務(wù)BankVault資源保護(hù)插件編排ProtectionPlanProtecta

5、bleCheckpoint Protection Plugins & Bank (Admin)ScheduledOperationsRestorationv vProtection ServiceProtection ServiceDBDBOperation Engine ServiceOperation Engine ServiceTrigger Trigger Engine Engine Bank PluginBank PluginOperationOperationWorkflow Workflow TimeTimeEvent Event RPC ScheduledOperati

6、onProvidersProvidersManager Manager RPC Providers RPCRPCRPC Checkpoints ProtectableProtectableResource Type Resource Type RPC ProtectableCheckpoCheckpoi intntRestoreRestoreRPC Restoration API ServiceAPI ServicePlan Plan API API Protectable Protectable API Scheduled Scheduled OperationOperationAPI AP

7、I Providers Providers API CheckpointCheckpointAPI RestorationRestorationAPI TriggerTriggerAPI API RPC TriggersCheckpoints Workflow EngineResource Plugin Resource Plugin Protection PluginProtection PluginKarbor架構(gòu)BankKarbor工作流Protection PlanCheckpointRestoreProtectOperationRestoreOperationProviderProv

8、iderResourcesResources(Protectables)(Protectables)ParametersParametersBank pluginProtection plugins保護(hù)資源插件Protectable PluginProtectable Plugin定義“what can be protected”，本質(zhì)上定義一種Karbor能保護(hù)的資源，通常是一種OpenStack資源。l How to find resources of this typel Dependency on other protectables例如: Image, Volume, Server,

9、 Network, Share保護(hù)插件Protection PluginProtection Plugin用來(lái)執(zhí)行一種資源的保護(hù)和恢復(fù)流程。定義“how to protect and restore a resource”l Actual implementation of protect and restore例如: backup an image into the bank (Swift, for example)Bank插件Bank PluginBank Plugin通常使用對(duì)象存儲(chǔ)。定義“where to protect”l Storing metadata and possibly

10、data例如: OpenStack Swift, Ceph, Amazon S3Protection ProviderRequired PluginsRequired PluginsCinder:VolumeGlance:ImageNova:ServerNeutron:NetworkKeystone:ProjectBankReference ProviderReference ProviderVolume pluginImage pluginServer pluginNetwork pluginProject pluginSwift Bank pluginVendor ProviderVend

11、or ProviderVendor Volume pluginVendor Image pluginVendor Server pluginNetwork pluginProject pluginS3 Bank pluginVolume pluginsImage pluginsNetwork pluginsServer pluginsProject pluginsBank pluginsAvailable PluginsAvailable Plugins3. 配置保護(hù)插件廠商怎么對(duì)接Karbor保護(hù)插件如何保護(hù)&保護(hù)到哪里負(fù)責(zé)：如何查詢(xún)這類(lèi)資源依賴(lài)其他保護(hù)示例：鏡像，卷，服務(wù)器，網(wǎng)絡(luò)，

12、共享，應(yīng)用程序負(fù)責(zé)：實(shí)施保護(hù)和恢復(fù)。 示例：將廠商的備份軟件接入Karbor來(lái)保護(hù)數(shù)據(jù)庫(kù)。保護(hù)資源插件哪些可以保護(hù)1. 開(kāi)發(fā)保護(hù)資源插件2. 開(kāi)發(fā)保護(hù)插件FreezerKarbor與FreezerKarbor APIKarbor保護(hù)服務(wù)Freezer保護(hù)插件Bank插件SwiftFreezer Scheduler&Freezer AgentFreezer API12435 Freezer保護(hù)插件在Swift中創(chuàng)建Checkpoint Freezer保護(hù)插件調(diào)用Freezer API創(chuàng)建Backup Job Freezer Scheduler定期從Freezer API獲取Backup

13、Job,并調(diào)用Freezer Agent執(zhí)行job將備份數(shù)據(jù)寫(xiě)到Swift Freezer保護(hù)插件定時(shí)調(diào)用Freezer API查詢(xún)Job狀態(tài) Freezer保護(hù)插件將資源備份狀態(tài)更新到Checkpoint5000PB巴塞羅那峰會(huì)Multi-Cloud5000PB/ 2 Days100000PB/km * 7 days數(shù)據(jù)爆發(fā)式增長(zhǎng)，未來(lái)世界屬于multi-cloud。電信數(shù)據(jù)中心規(guī)模是德克薩斯一個(gè)牧場(chǎng)的5倍大歐洲在過(guò)去12-18個(gè)月歐洲有12個(gè)公有云涉及20個(gè)regionKarbor Cross Site RecoveryProtection ServiceProtection Servic

14、eCheckpointBankSite ASite BOrchestratorAPI ServiceKarbor Cross Site RecoveryProtection ServiceProtection ServiceCheckpointBankSite ASite BOrchestratorAPI ServiceRestoreKarbor Cross Site RecoveryCheckpointBankSite AProtection ServiceSite BOrchestratorAPI ServiceProtection ServiceDemoKarbor交流渠道Wiki： /wiki/KarborCode Review：/#/q/project:openstack/karborLaunchpad：https:/ Channel：#opens