CommVault數(shù)據(jù)備份---技術(shù).課件

1、CommVault數(shù)據(jù)備份及恢復之技術(shù)實現(xiàn)內(nèi)容 數(shù)據(jù)保護的挑戰(zhàn) CommVault解決之道 CommVault技術(shù)創(chuàng)新 CommVault數(shù)據(jù)備份和恢復數(shù)據(jù)備份及恢復的挑戰(zhàn)備份/恢復真相備份/恢復作業(yè)的平均成功率只有70%左右超過80%的請求是要恢復48小時內(nèi)丟失的數(shù)據(jù)主要的恢復需求是單個文件和單個表空間恢復單個文件至少要花1個小時, 有時要接近1天災難事件引起的數(shù)據(jù)丟失少于3%備份/恢復的工作量占整個存儲管理的60%-70%如果備份作業(yè)失敗，備份管理員要花4-6小時用于 診斷和解決存儲管理員15%的時間用來數(shù)據(jù)恢復備份/恢復系統(tǒng)中, 最大的開銷是磁帶介質(zhì)Source: META Group,

2、 Proactive Data Protection, April 2004介質(zhì)管理判斷備份/恢復成功困難需要手工干預恢復時間太長備份時間太長Source: ESG, The Evolution of Enterprise Data Protection, December 2003備份方案存在的問題總結(jié)：數(shù)據(jù)備份的挑戰(zhàn)備份/恢復成功率低備份時間長(備份窗口不夠)恢復時間長(很難實現(xiàn)恢復)大量手工操作離場保護困難管理工具缺乏缺乏驗證手段造成困境的原因數(shù)據(jù)增長太快！備份軟件發(fā)展滯后起源于20年前的IT環(huán)境體系架構(gòu)陳舊對新技術(shù)支持不夠(磁盤技術(shù)等)Galaxy備份/恢復軟件CommVault與數(shù)據(jù)

3、備份1988-1996：AT&T貝爾實驗室, 數(shù)據(jù)事業(yè)部為AT&T內(nèi)部UNIX系統(tǒng)開發(fā)并管理數(shù)據(jù)備份軟件ABARS 1996：從AT&T獨立1996-1998：銷售備份產(chǎn)品-Vault98 (ABARS)1998: 放棄Vault98, 重新開發(fā)新的數(shù)據(jù)備份系統(tǒng)2000：推出Galaxy備份/恢復軟件全新的系統(tǒng)結(jié)構(gòu) - 數(shù)據(jù)索引，介質(zhì)管理，策略管理2002：推出QiNetix統(tǒng)一數(shù)據(jù)管理套件實現(xiàn)全方位的數(shù)據(jù)保護2007：推出Simpana一體化信息管理套件內(nèi)容查找提高可靠性的技術(shù)手段CommVault解決之道避免備份恢復錯誤減少人工干預成功率低 圖形化操作，無需腳本 系統(tǒng)預檢和分析 介質(zhì)壽命預

4、警 合理分配存儲資源采用冗余的數(shù)據(jù)訪問路徑 采用冗余的介質(zhì)存儲方式 離場和離線的數(shù)據(jù)存放健全容錯機制CommVault解決之道減少備份次數(shù)減少備份的數(shù)據(jù)量備份時間長提高備份速度縮短備份時間的技術(shù)手段 數(shù)據(jù)遷移減少對靜態(tài)數(shù)據(jù)的重復備份 數(shù)據(jù)分類不同的數(shù)據(jù)，不同的備份策略 數(shù)據(jù)過濾過濾掉不需要的備份數(shù)據(jù) 合成全備份 斷點續(xù)傳 備份到磁盤，而不僅僅是磁帶 采用智能磁盤技術(shù)：快照，復制 減少備份掃描時間縮短恢復時間的技術(shù)手段CommVault解決之道減少恢復次數(shù)提高恢復速度減少恢復的數(shù)據(jù) 小顆?；謴臀臋n級恢復，單郵件恢復數(shù)據(jù)庫表級恢復，AD記錄級恢復 一次過恢復消除數(shù)據(jù)重復多次恢復 斷點續(xù)傳恢復中斷后

5、無需重新開始恢復 減少數(shù)據(jù)恢復的介質(zhì)定位時間 從磁盤恢復，而不僅僅是磁帶 采用智能磁盤技術(shù)：快照，復制恢復時間長監(jiān)控管理狀態(tài)監(jiān)控定制報表報警機制監(jiān)控管理的技術(shù)手段 報警機制當錯誤發(fā)生的時候，發(fā)出錯誤警報 狀態(tài)監(jiān)控方便的觀察和監(jiān)控整個系統(tǒng)運行的狀態(tài) 定制報表操作統(tǒng)計歷史數(shù)據(jù)分析，趨勢預測分析錯誤原因分析CommVault解決之道審計管理人員審計數(shù)據(jù)操作審計事件審計審計管理的技術(shù)手段 事件審計 （傳統(tǒng)軟件沒有）查詢和尋找針對系統(tǒng)某個特定或者孤立事件的內(nèi)容，例如：設備故障，人員操作等等。 人員審計 （傳統(tǒng)軟件作的比較弱）能夠針對操作人員做的任何操作，記錄并且查詢。例如：登陸，退出，修改配置等等。 數(shù)

6、據(jù)操作審計 （傳統(tǒng)軟件只有部分功能）某個應用數(shù)據(jù)作的任何操作，進行記錄并且查詢。例如：某個應用是否在需要的時間進行了備份，備份是否成功，具體情況如何。CommVault解決之道安全管理數(shù)據(jù)加密密鑰管理身份管理CommVault解決之道安全管理的技術(shù)手段 身份權(quán)限管理不同的操作員具有不同的權(quán)限，能正對不同的應用系統(tǒng)把備份、恢復、瀏覽權(quán)限分開。SSO集成 數(shù)據(jù)加密多種加密算法支持一級和二級數(shù)據(jù)加密 密鑰管理內(nèi)置密鑰管理功能支持多種密鑰管理手段：集中管理、分散管理、綁定管理CommVault解決之道驗證演練自動校驗數(shù)據(jù)副本方便演練和驗證自動檢查介質(zhì)狀態(tài)驗證演練的技術(shù)手段 自動檢查介質(zhì)狀態(tài)自動檢查介質(zhì)

7、的狀態(tài)，預防介質(zhì)失效。 自動校驗數(shù)據(jù)副本讀取副本數(shù)據(jù)，并進行校驗，確保數(shù)據(jù)可讀取。 方便演練和驗證異機恢復按計劃恢復CommVault備份軟件的創(chuàng)新分布式索引技術(shù)超大的索引容量 對大規(guī)模系統(tǒng)的統(tǒng)一備份管理分布式部署 遠距離集中管理精細的索引粒度 小顆?；謴蛿?shù)據(jù)位置索引 快速定位要恢復的數(shù)據(jù) 容錯機制 錯誤切換，斷點續(xù)傳一體化體系結(jié)構(gòu)利用“快照/復制”技術(shù)提高備份/恢復速度利用“數(shù)據(jù)分類”技術(shù)，“遷移/歸檔”技術(shù)減少備份數(shù)據(jù)量利用“數(shù)據(jù)查找”技術(shù)改變恢復的方式數(shù)據(jù)壓縮技術(shù) 單實例存儲文件級/數(shù)據(jù)塊級基于磁盤/基于磁帶介質(zhì)管理備份設備虛擬化 磁盤, 磁帶, VTL, DVD, USB存儲100%共

8、享智能化管理層次化策略管理用戶權(quán)限管理 能與AD結(jié)合系統(tǒng)就緒檢測 能事先檢測要做的備份能不能成功新一代的體系結(jié)構(gòu)QiNetix Common Technology EngineMediaAgentData IndexData MoverMedia ManagerMediaAgentData IndexData MoverMedia Manager備份工作原理介質(zhì)管理客戶端iDA介質(zhì)服務器MA備份管理二級索引管理備份數(shù)據(jù)備份發(fā)起在線數(shù)據(jù)CommServe主控服務器備份存儲設備一級備份索引數(shù)據(jù)索引分布式索引,由主控服務器，備份服務器二級管理一級索引由備份服務器管理; 二級索引由主控服務器管理一級索

9、引與備份數(shù)據(jù)一起存放在同一備份介質(zhì)中沒有必要對一級索引進行專門備份; 索引重建非常快速備份服務器維持一個索引Cache對一級索引進行管理一級索引中包含有備份數(shù)據(jù)在介質(zhì)中存放的位置信息實現(xiàn)磁帶的”隨機”讀寫備份/恢復顆粒小二級索引由數(shù)據(jù)庫管理, 便于檢索, 備份/恢復提高結(jié)構(gòu)的靈活性CSEnterprise CommCell AiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa1,000個客戶端: AIX, Solaris, Windows350

10、MediaAgent SAN Disk & Tape每晚20Tb的增量備份多個軟件堆棧多個數(shù)據(jù)和操作視圖所謂的靈活只能是增加管理域 更多資金、資源和硬件沒有集中控制和管理CommVault 更靈活、更容易擴展競爭對手 只能增加備份域備份到磁盤的優(yōu)點：靈活的備份策略：- 先把數(shù)據(jù)備份到磁盤，再轉(zhuǎn)存到磁帶- 每天把增量備份到磁盤，周末把全備份寫到磁帶非常快的備份和恢復速度，并可提高備份系統(tǒng)的可靠性?？蓽p少磁帶的使用量。能改變數(shù)據(jù)在磁帶上存儲狀況，把相同性質(zhì)的數(shù)據(jù)放在相鄰的地方，可加快恢復速度同時減少磁帶的磨損。N層存儲架構(gòu)Storage policyStorage policyUNIXWindow

11、sNAS采用虛擬化存儲管理數(shù)據(jù)能在多層存儲之間復制輔助拷貝(Aux Copy)利用備份數(shù)據(jù)制作數(shù)據(jù)副本(沒有備份窗口限制)電子化離場保護LAN/WANSAN備份服務器生產(chǎn)系統(tǒng)備份服務器生產(chǎn)數(shù)據(jù)備份服務器磁帶庫磁帶庫靈活的實現(xiàn)方式1:N1:1級聯(lián)N:1利用“一次過”恢復技術(shù)減少恢復次數(shù)Single Pass Restore傳統(tǒng)利用增量的恢復方式IncrementalsFull1234567891035363524IncrementalsFull1234567891093331112445666781010101251034678“一次過”增量恢復方式在傳統(tǒng)的恢復方法中，恢復目標需要恢復多次，而“

12、一次過”只需要恢復一次，恢復速度更快！Operations Resume開始備份100GB在80GB時中斷從80GB標記處再繼續(xù)備份完成z操作再繼續(xù)適合： 備份-文件、數(shù)據(jù)庫、應用 恢復-文件、數(shù)據(jù)庫、應用 輔助復制-復制備份數(shù)據(jù)該功能允許備份、恢復、復制數(shù)據(jù)的時候，發(fā)生網(wǎng)絡或者備份設備故障的時候，從故障點繼續(xù)往下備份或者復制數(shù)據(jù)。通過該功能，可以在備份，恢復，復制數(shù)據(jù)發(fā)生故障的時候，不需要從頭開始。減少了數(shù)據(jù)傳送的窗口，提高了備份的成功率。采用“斷點續(xù)傳”技術(shù)提高成功率Tape Library 1Tape Library 2Tape Library 3Drive 2Drive 3Drive

13、1SANMAServeriDA ClientMAServerMAServerDrive 2Drive 3Drive 1Drive 2Drive 3Drive 1StorageArrayDataDataData數(shù)據(jù)傳輸可通過備用路徑到相同的驅(qū)動器或備用的驅(qū)動器提高備份和恢復的可靠性和效率能重定位出錯的驅(qū)動器、設備、網(wǎng)絡和服務器采用“路徑冗余”技術(shù)提高系統(tǒng)可靠性利用“SIS”技術(shù)提高備份介質(zhì)利用率對文件和附件的單實例存儲能跨越備份和歸檔副本能用較少的存儲來儲存更多的數(shù)據(jù)具有在線和后處理選項對數(shù)據(jù)訪問、恢復和攜帶進行優(yōu)化能使用任何磁盤能與數(shù)據(jù)加密及壓縮一起使用可免費使用消除重復數(shù)據(jù)設備用更好的方式來

14、存儲數(shù)據(jù)SIDB備份或歸檔邏輯副本集合Week1SIS CopyWeek2Week3在數(shù)據(jù)路徑中的物理目標副本數(shù)字對象簽名數(shù)據(jù)中心新的離線、后處理加密對生產(chǎn)系統(tǒng)零影響提供靈活的加密策略僅在網(wǎng)絡上加密遍及所有副本僅對離線副本對選擇的副本加密安全跟蹤數(shù)據(jù)生命周期完善的密鑰管理AES-256, Blowfish 以及其他流行的標準支持LTO-4 加密及密鑰管理利用“加密”技術(shù)提高備份數(shù)據(jù)安全更好的方式來 管理數(shù)據(jù)安全D2DD2T操作界面?zhèn)鹘y(tǒng)產(chǎn)品: 面向備份操作Galaxy: 面向數(shù)據(jù)恢復用戶不需要了解備份的介質(zhì)集合，只要選擇相應的備份內(nèi)容和時間簡單可靠的恢復操作能夠一次恢復多個版本簡單可靠的恢復操作

15、能夠方便的查找數(shù)據(jù)并恢復簡單可靠的恢復操作圖形化操作，不需要寫任何腳本方便完善的Oracle備份和恢復采用“系統(tǒng)預檢”提高備份成功率 備份“系統(tǒng)預檢”功能：允許在備份前檢查所有需要的網(wǎng)絡，備份設備和介質(zhì)資源，確保晚上備份成功。對于用戶的意義：由于備份都是在晚上做的，所以有了預檢機制能夠預先了解晚上的備份是否能夠成功，所需要的資源是否足夠（主要是磁帶介質(zhì)）。提高了備份成功率。數(shù)據(jù)庫文件系統(tǒng)Email磁盤帶庫定期檢測確保備份數(shù)據(jù)的可靠性360全方位的操作狀態(tài)監(jiān)控容易確定和校驗你要達到的目標狀況能進行深層次優(yōu)化、錯誤根源查找流暢的審計功能 (SOX)，自動生成用戶制定的報告DataArchiverD

16、ataMigratorCDRCommCell Policy ManagerQuickRecovery Galaxy策略化、自動化操作CommCell BrowserQNetService Manager跟蹤，計劃，報告QSMStorage Resource Manager分析, 監(jiān)控完善的報表系統(tǒng)完善的出錯信息方便排錯中文出錯信息用戶單擊該出錯代碼，會自動連接CommVault維護網(wǎng)站，查詢并且顯示相關(guān)錯誤的所有情況和解決方法完善的操作權(quán)限管理(MSDS)Novell DirectoryService (NDS)(OpenLDAP)Lightweight DirectoryAccess Protocol(LDAP)操作對象Active Directory用戶組CommCell用戶組CommCell擴展域組CommCell用戶功能權(quán)限能與AD的SSO相集成