OpenStack數(shù)據(jù)保護項目Karbor介紹

1、KarborOpenStack數(shù)據(jù)保護服務(wù)引擎為什么需要數(shù)據(jù)保護？Power outageHardware faultNetwork issueHuman errorNatural disaster什么是數(shù)據(jù)保護?l數(shù)據(jù)保護是以確保數(shù)據(jù)可靠地可恢復(fù)的一組措施。l保證業(yè)務(wù)連續(xù)性和制定災(zāi)難恢復(fù)計劃是數(shù)據(jù)保護的關(guān)鍵部分。l數(shù)據(jù)保護度量的關(guān)鍵指標： RPO (Recovery Point Objective)：反映恢復(fù)數(shù)據(jù)完整性的指標，表示新恢復(fù)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)損失量。 RTO (Recovery Time Objective)：反映業(yè)務(wù)恢復(fù)及時性的指標，表示業(yè)務(wù)從中斷到恢復(fù)正常所需時間。Protect

2、Restore beginsRestore endsProtectRPORTO云環(huán)境數(shù)據(jù)保護服務(wù)挑戰(zhàn)和目標挑戰(zhàn)：l云環(huán)境下業(yè)務(wù)連續(xù)性要求更高。l云環(huán)境IT基礎(chǔ)設(shè)施資源按需分配。l云環(huán)境數(shù)據(jù)保護服務(wù)的用戶非管理員。目標：l針對業(yè)務(wù)的不同特點，提供不同服務(wù)等級能力的數(shù)據(jù)保護服務(wù)。l類似IT資源的供給方式，數(shù)據(jù)保護服務(wù)按需提供。l面向租戶的數(shù)據(jù)保護和恢復(fù)，實現(xiàn)自動化，去專業(yè)化。Karbor是澳大利亞樹袋熊koala的原生名字，koala又是kolla項目的吉祥物。Patches submitted by Caowei：/#/q/kolla+kar

3、borKarbor是什么Karbor曾用名SmaugOpenStack數(shù)據(jù)保護項目Smaug在2016年7月經(jīng)過OpenStack技術(shù)委員會同意正式更名為Karbor。巴塞羅那峰會社區(qū)調(diào)查數(shù)據(jù)核數(shù)負載選擇OpenStack理由標準API是用戶選擇的OpenStack關(guān)鍵。公司規(guī)模為什么需要Karbor數(shù)據(jù)保護服務(wù)化標準開放：通過標準化南向接口，集成不同的廠商方案簡單：提供標準的北向接口，統(tǒng)一發(fā)放數(shù)據(jù)保護服務(wù)OpenStack CloudKarborBackup Softwares現(xiàn)狀KarborOpenStack場景下業(yè)務(wù)系統(tǒng)有數(shù)據(jù)保護的需求各廠商的備份軟件無法以統(tǒng)一的方式接入OpenStac

4、k 保護云上原生的各種資源各業(yè)務(wù)核心數(shù)據(jù)的保護需求差異明顯，管理復(fù)雜NovaCinderManila 提供數(shù)據(jù)保護即服務(wù) 提供不同的服務(wù)等級 更好地利用現(xiàn)有的備份/復(fù)制產(chǎn)品 保護所有的資源 為資源組選擇匹配的保護方案 所有系統(tǒng)的一致性保護和恢復(fù) 使用Karbor輕松集成現(xiàn)有或新的解決方案 快速推向市場 輕松適應(yīng)OpenStack云環(huán)境運營商用戶供應(yīng)商Karbor能為您做什么Karbor組件簡介如何保護？保護什么？數(shù)據(jù)保護到哪里？曾經(jīng)保護過哪些資源？保護提供者何時保護?如何恢復(fù)?誰來保護？(保護提供者)調(diào)度服務(wù)保護服務(wù)BankVault資源保護插件編排ProtectionPlanProtecta

5、bleCheckpoint Protection Plugins & Bank (Admin)ScheduledOperationsRestorationv vProtection ServiceProtection ServiceDBDBOperation Engine ServiceOperation Engine ServiceTrigger Trigger Engine Engine Bank PluginBank PluginOperationOperationWorkflow Workflow TimeTimeEvent Event RPC ScheduledOperati

6、onProvidersProvidersManager Manager RPC Providers RPCRPCRPC Checkpoints ProtectableProtectableResource Type Resource Type RPC ProtectableCheckpoCheckpoi intntRestoreRestoreRPC Restoration API ServiceAPI ServicePlan Plan API API Protectable Protectable API Scheduled Scheduled OperationOperationAPI AP

7、I Providers Providers API CheckpointCheckpointAPI RestorationRestorationAPI TriggerTriggerAPI API RPC TriggersCheckpoints Workflow EngineResource Plugin Resource Plugin Protection PluginProtection PluginKarbor架構(gòu)BankKarbor工作流Protection PlanCheckpointRestoreProtectOperationRestoreOperationProviderProv

8、iderResourcesResources(Protectables)(Protectables)ParametersParametersBank pluginProtection plugins保護資源插件Protectable PluginProtectable Plugin定義“what can be protected”，本質(zhì)上定義一種Karbor能保護的資源，通常是一種OpenStack資源。l How to find resources of this typel Dependency on other protectables例如: Image, Volume, Server,

9、 Network, Share保護插件Protection PluginProtection Plugin用來執(zhí)行一種資源的保護和恢復(fù)流程。定義“how to protect and restore a resource”l Actual implementation of protect and restore例如: backup an image into the bank (Swift, for example)Bank插件Bank PluginBank Plugin通常使用對象存儲。定義“where to protect”l Storing metadata and possibly

10、data例如: OpenStack Swift, Ceph, Amazon S3Protection ProviderRequired PluginsRequired PluginsCinder:VolumeGlance:ImageNova:ServerNeutron:NetworkKeystone:ProjectBankReference ProviderReference ProviderVolume pluginImage pluginServer pluginNetwork pluginProject pluginSwift Bank pluginVendor ProviderVend

11、or ProviderVendor Volume pluginVendor Image pluginVendor Server pluginNetwork pluginProject pluginS3 Bank pluginVolume pluginsImage pluginsNetwork pluginsServer pluginsProject pluginsBank pluginsAvailable PluginsAvailable Plugins3. 配置保護插件廠商怎么對接Karbor保護插件如何保護&保護到哪里負責(zé)：如何查詢這類資源依賴其他保護示例：鏡像，卷，服務(wù)器，網(wǎng)絡(luò)，

12、共享，應(yīng)用程序負責(zé)：實施保護和恢復(fù)。 示例：將廠商的備份軟件接入Karbor來保護數(shù)據(jù)庫。保護資源插件哪些可以保護1. 開發(fā)保護資源插件2. 開發(fā)保護插件FreezerKarbor與FreezerKarbor APIKarbor保護服務(wù)Freezer保護插件Bank插件SwiftFreezer Scheduler&Freezer AgentFreezer API12435 Freezer保護插件在Swift中創(chuàng)建Checkpoint Freezer保護插件調(diào)用Freezer API創(chuàng)建Backup Job Freezer Scheduler定期從Freezer API獲取Backup

13、Job,并調(diào)用Freezer Agent執(zhí)行job將備份數(shù)據(jù)寫到Swift Freezer保護插件定時調(diào)用Freezer API查詢Job狀態(tài) Freezer保護插件將資源備份狀態(tài)更新到Checkpoint5000PB巴塞羅那峰會Multi-Cloud5000PB/ 2 Days100000PB/km * 7 days數(shù)據(jù)爆發(fā)式增長，未來世界屬于multi-cloud。電信數(shù)據(jù)中心規(guī)模是德克薩斯一個牧場的5倍大歐洲在過去12-18個月歐洲有12個公有云涉及20個regionKarbor Cross Site RecoveryProtection ServiceProtection Servic

14、eCheckpointBankSite ASite BOrchestratorAPI ServiceKarbor Cross Site RecoveryProtection ServiceProtection ServiceCheckpointBankSite ASite BOrchestratorAPI ServiceRestoreKarbor Cross Site RecoveryCheckpointBankSite AProtection ServiceSite BOrchestratorAPI ServiceProtection ServiceDemoKarbor交流渠道Wiki： /wiki/KarborCode Review：/#/q/project:openstack/karborLaunchpad：https:/ Channel：#opens