統(tǒng)一數(shù)據(jù)管理-200800701

統(tǒng)一數(shù)據(jù)管理

美國慷孚系統(tǒng)公司資深工程師孫春杰CommVault簡介專業(yè)數(shù)據(jù)管理軟件廠商總部:美國新澤西州,Oceanport1996年從AT&T分立出來1998年完成產(chǎn)品架構(gòu)的設(shè)計2000年推出第一個產(chǎn)品2006年9月在NASDAQ上市福布斯2007年全球增長最快的高科技企業(yè)位列第17位倡導(dǎo)“一體化信息管理”理念單一產(chǎn)品實現(xiàn)對數(shù)據(jù)保護(hù),歸檔及復(fù)制的一體化管理在業(yè)界處領(lǐng)導(dǎo)者地位AbilitytoExecute執(zhí)行力CompletenessofVision前瞻性NichePlayers觀望者Visionaries觀望者Challengers挑戰(zhàn)者Leaders領(lǐng)導(dǎo)者Figure1.MagicQuadrantforEnterprisesBackup/RecoverySoftware,July2004andJuly2005.MovementindicateschangefromJuly2004toJuly2005.EnterpriseBackup/RecoverySoftwareGartnerMagicQuadrant2004-20052006年業(yè)界最受肯定的企業(yè)2008年蟬聯(lián)業(yè)界最受肯定的企業(yè)超過8,000用戶地區(qū)行業(yè)軟件業(yè)零售制造業(yè)交通能源亞太區(qū)服務(wù)業(yè)InterpublicGroup金融政府電信娛樂高科技?xì)W洲法律北美GovernmentOfCanada中國典型客戶電信遼寧移動浙江聯(lián)通貴州聯(lián)通金融中國建設(shè)銀行民生人壽總部渣打銀行杭州商行企業(yè)上汽集團(tuán)桑塔納銷售總公司蘇州佳能南京鹽業(yè)集團(tuán)新東方學(xué)校吉林煙草廣西煙草一汽大眾H3CMaersk船務(wù)公司政府商務(wù)部文化部國土資源部上海海關(guān)內(nèi)蒙公安杭州市交警廣東省人大浙江省檔案館上海市及各區(qū)的城建檔案館電力大唐發(fā)電吉林電力浙江省能源集團(tuán)互聯(lián)網(wǎng)騰訊（QQ）易趣網(wǎng)第九城市百度企業(yè)數(shù)據(jù)現(xiàn)狀數(shù)據(jù)量急速增長100TINFORMIXFILEExchangeSAP……一、數(shù)據(jù)類型和總量呈現(xiàn)高速雙增長，昂貴的存儲系統(tǒng)充斥著大量不必要的重復(fù)數(shù)據(jù)二、數(shù)據(jù)由簡單的兩層(原始數(shù)據(jù)/應(yīng)用數(shù)據(jù))向多層數(shù)據(jù)發(fā)展，數(shù)據(jù)分布趨向復(fù)雜，存儲由一級走向分級存儲原始數(shù)據(jù)應(yīng)用數(shù)據(jù)原始數(shù)據(jù)VTL盤陣拷貝(快照)拷貝復(fù)制(異地)帶庫主機(jī)衍生數(shù)據(jù)傳輸網(wǎng)管話務(wù)網(wǎng)管原始話單……..系統(tǒng)備份遷移快照管理者復(fù)制規(guī)劃優(yōu)化投資策略歸檔報告報告報告報告三、數(shù)據(jù)保護(hù)停留在管理員層面，人工干預(yù)較多；管理員操作企業(yè)最關(guān)鍵的資產(chǎn)－數(shù)據(jù)，權(quán)責(zé)不對等；管理層不能及時直觀的對數(shù)據(jù)進(jìn)行管理NORMALDATABASE

SECONDARYDATABASE

DBDBDBDBIMPORTANTDATABASE

DB

DBBACKUPSNAPSHOT

四、沒有數(shù)據(jù)分級標(biāo)準(zhǔn)，數(shù)據(jù)保護(hù)缺乏統(tǒng)一的策略統(tǒng)一數(shù)據(jù)管理策略管理資產(chǎn)管理審計管理配置管理故障知識管理通知管理數(shù)據(jù)分析統(tǒng)一數(shù)據(jù)管理SIM

SIM－統(tǒng)一數(shù)據(jù)管理功能身份管理統(tǒng)一數(shù)據(jù)管理的各個組成部分用戶的問題資產(chǎn)管理現(xiàn)在的數(shù)據(jù)占用了多少存儲，成本如何？哪些部門或者用戶占用了多少存儲，成本如何？不同類型的數(shù)據(jù)占用了多少存儲，成本如何？哪些數(shù)據(jù)是不經(jīng)常使用的，或者是無用的，這些數(shù)據(jù)占用了多少存儲，成本如何？哪些數(shù)據(jù)操作占用了多少存儲，成本如何？針對應(yīng)用或者業(yè)務(wù)，不同類型數(shù)據(jù)占用的存儲空間和相應(yīng)的成本？針對不同的數(shù)據(jù)存儲，如何規(guī)劃我的數(shù)據(jù)存放？CommVault的資產(chǎn)管理只針對數(shù)據(jù)和存儲而言：全局的存儲資產(chǎn)管理方案資產(chǎn)管理能夠按照不同的應(yīng)用，部門或者用戶，收集信息能夠按照不同的數(shù)據(jù)類型，介質(zhì)或者設(shè)備，收集信息能夠按照不同的數(shù)據(jù)存放性質(zhì)，收集信息（在線，近線，離線）能夠按照以上的分類，賦予不同類型的數(shù)據(jù)，介質(zhì)，設(shè)備不同的成本能夠按照用戶的需求，給出各種資產(chǎn)管理的分析報表CommVault能做到的事：常用報表資產(chǎn)管理報表舉例-按照部門分類不同記帳部門的成本每個記帳部門的詳細(xì)成本常用報表資產(chǎn)管理報表舉例-按照數(shù)據(jù)分類次級存儲的存儲數(shù)據(jù)，可以關(guān)聯(lián)相應(yīng)的成本預(yù)算規(guī)劃資產(chǎn)管理報表舉例-預(yù)算規(guī)劃CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以查看整個數(shù)據(jù)管理系統(tǒng)的狀態(tài)你可以選擇查看該系統(tǒng)的摘要信息或其它信息CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以去查看該系統(tǒng)中某個管理節(jié)點的信息你也可以清晰的看到某個管理節(jié)點的狀態(tài)信息你也可以看到該管理節(jié)點的內(nèi)容信息CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以查看某個設(shè)備的狀態(tài)你可以查看該設(shè)備是如何使用的數(shù)據(jù)遷移-釋放空間，提高效率，降低成本釋放在線存儲的大小，改進(jìn)應(yīng)用、備份和恢復(fù)的性能遷移數(shù)據(jù)可用來達(dá)到保存的目的（文件歸檔）解決容量配額問題

End-users&AppsTransparentin-placeaccessOutlookSearch&Browse數(shù)據(jù)遷移集1,000Gb之前Staticdata按周進(jìn)行94數(shù)據(jù)保護(hù)集700Gb300Gb釋放

300Gb之后66空間利用率增加30%備份減少30%自動回調(diào)遷移策略Itemsover365daysoldandbiggerthan10K解決大量數(shù)據(jù)占用存儲空間的方法事實上有多少數(shù)據(jù)屬于生產(chǎn)存儲層？4.15%在生產(chǎn)層上有85%的數(shù)據(jù)不曾使用或者很少使用。只有5-15%的數(shù)據(jù)才是日常生產(chǎn)必須的。CommVault如何來做遷移資產(chǎn)數(shù)據(jù)保護(hù)方案－備份DBDataSPData網(wǎng)絡(luò)備份SAN備份異地備份ServerFree備份數(shù)據(jù)資產(chǎn)安全的最后一道防線CommVault的策略管理方案策略管理CommVault系統(tǒng)中策略的含義：在傳統(tǒng)的數(shù)據(jù)管理系統(tǒng)中，最重要的管理策略是2類：1類是計劃策略的管理，說明了哪些數(shù)據(jù)在什么時間作哪種類型的數(shù)據(jù)操作；另外1類是管理數(shù)據(jù)保留方式的管理，說明了哪些數(shù)據(jù)在什么時間存放在哪種介質(zhì)上（數(shù)據(jù)保留方式管理），這個定義了數(shù)據(jù)生命周期的管理方式。CommVault提供了針對這2種類型的策略管理，提供的是計劃策略管理存儲策略管理CommVault計劃策略管理特點策略管理CommVault系統(tǒng)中計劃策略管理方式的特點：CommVault提供了1個單一全局視圖，用戶可以在1個界面上設(shè)置，查看，修改包括：管理計劃，保護(hù)計劃，恢復(fù)計劃，其它輔助計劃等各種計劃策略。CommVault也可以提供計劃策略模板，關(guān)聯(lián)多個管理單元，從而降低計劃管理的復(fù)雜度。用戶也可以制定觸發(fā)器，來觸發(fā)某一個動作，實現(xiàn)非計劃或者事件觸發(fā)的操作。CommVault存儲策略管理特點策略管理CommVault系統(tǒng)中存儲策略管理方式的特點：CommVault的存儲策略管理，完成了數(shù)據(jù)保留方式的管理。CommVault的存儲策略管理，提供了N級別的存儲管理方式，從而能夠真正實現(xiàn)數(shù)據(jù)生命周期管理。CommVault的存儲策略管理，跨越了多個應(yīng)用層次，能夠把備份，歸檔結(jié)合在一起，實現(xiàn)全局的近線，離線數(shù)據(jù)的存放管理。備份歸檔存儲策略原理示意圖每個數(shù)據(jù)副本可以指向不同的設(shè)備每個數(shù)據(jù)副本可以設(shè)置不同的保留時間以實現(xiàn)ILM存儲策略中含有多個數(shù)據(jù)副本計劃策略管理說明策略管理可以以日歷的方式管理計劃策略CommVault的身份管理特點身份管理CommVault的身份管理包括2個方面：區(qū)域管理：說明該用戶對哪些區(qū)域或者部門的服務(wù)器有管理權(quán)限角色管理：說明該用戶有哪些操作權(quán)限1個用戶的權(quán)限是上面2個內(nèi)容的交集為了方便用戶的權(quán)限管理，CommVault采用了類式WINDOWSAD的管理模式，利用安全組的方式來設(shè)置管理；同時，還能將AD的權(quán)限引入CommVault系統(tǒng)，并且和CommVault系統(tǒng)的權(quán)限關(guān)聯(lián)，從而實現(xiàn)SSO功能。CommVault權(quán)限管理的結(jié)構(gòu)圖身份管理(MSDS)NovellDirectoryService(NDS)(OpenLDAP)LightweightDirectoryAccessProtocol(LDDAP)操作區(qū)域?qū)ο驛ctiveDirectory用戶組CommCell用戶組CommCell擴(kuò)展域組CommCell用戶功能權(quán)限CommVault介質(zhì)預(yù)防故障功能特點故障處理說明CommVault數(shù)據(jù)預(yù)防-校驗功能特點故障處理說明CommVault的通知和報警通知和報警CommVault的通知和報警管理是通過3個功能來具體實現(xiàn)的。一個是報警功能，另外一個是報表功能，還有狀態(tài)顯示功能。通過這3個功能，利用GUI，WEB，文件，郵件，SNMP，事件查看器，電子傳呼機(jī)等方式，將已經(jīng)發(fā)生或者將要發(fā)生的事件或者錯誤傳送給管理人員，從而避免，減少，分析，預(yù)防操作錯誤。CommVault報警功能特點報警管理你可以為該報警采用各種通知方式你也可以修改報警的內(nèi)容你還可以添加報警的標(biāo)簽定義CommVault報表功能特點報表管理用戶可以制定報表的呈現(xiàn)方式你可以通過郵件發(fā)送給管理人員你也可以把它保存到文件或者WEB服務(wù)器上，供管理人員查詢CommVault審計管理的內(nèi)容審計管理針對突發(fā)事件的審計能夠查詢和尋找針對系統(tǒng)某個事件的內(nèi)容，例如：設(shè)備故障，人員操作等等。針對人員的審計能夠針對操作人員做的任何操作，記錄并且查詢。例如：登陸，退出，修改配置等等。針對數(shù)據(jù)操作的審計能夠針對某個應(yīng)用數(shù)據(jù)作的任何操作，進(jìn)行記錄并且查詢。例如：某個應(yīng)用是否在需要的時間進(jìn)行了備份，備份是否成功，具體情況如何。針對事件的審計管理審計管理CommVault將系統(tǒng)運行期間所有發(fā)生的事件都存放在數(shù)據(jù)庫中，你可以通過事件瀏覽器查看，也可以通過報表工具查看。數(shù)據(jù)分析能夠降低成本，提高效率數(shù)據(jù)分析ESI存儲數(shù)據(jù)增加迅速效率下降成本上升主存成本增高應(yīng)用效率下降備份時間增長備份成本增高數(shù)據(jù)分析1年以上的文檔沒有訪問有些文檔的用戶并不重要某類文檔不重要如MP3,AVI等采用分級存儲的技術(shù)手段控制主存成本不影響效率減少備份成本減少備份時間數(shù)據(jù)分析能夠控制預(yù)算數(shù)據(jù)分析存儲數(shù)據(jù)增加應(yīng)用類型增加企業(yè)業(yè)務(wù)增長無法精確預(yù)測數(shù)據(jù)的發(fā)展預(yù)算不可控預(yù)算過少滿足不了需求預(yù)算過多造成資源浪費成本上升數(shù)據(jù)分析知道不同應(yīng)用的數(shù)據(jù)發(fā)展趨勢知道不同性質(zhì)的數(shù)據(jù)發(fā)展趨勢知道不同設(shè)備的數(shù)據(jù)發(fā)展趨勢精確預(yù)測數(shù)據(jù)的發(fā)展精確計劃未來的預(yù)算數(shù)據(jù)分析使用舉例－分級存儲數(shù)據(jù)分析按訪問時間的數(shù)據(jù)分析按文檔類型的數(shù)據(jù)分析按文檔擁有者的數(shù)據(jù)分析歸檔操作設(shè)置界面歸檔操作后的結(jié)果可以得到歸檔后的成本核算數(shù)據(jù)分析使用舉例－法規(guī)查詢需求數(shù)據(jù)分析技術(shù)特點體系結(jié)構(gòu)上的優(yōu)勢CSEnterpriseCommCellAiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa6258個客戶端:AIX,Solaris,Windows827MediaAgent–SANDisk&Tape每周2000TB的增量備份CommVault–更靈活、更容易擴(kuò)展競爭對手–只能增加管理域統(tǒng)一的邏輯目錄，分布式架構(gòu)–-整個管理域只有一個視圖優(yōu)化的索引引擎具有極大的靈活性、數(shù)據(jù)完整性和性能分布式架構(gòu)為跨區(qū)域集中管理打下了堅實基礎(chǔ)合成全備份IncrementalsFull123456789103536352412345678910273383610IncrementalsSynthFull12345678910SynthFullForExchange,LotusDomino,AllFileSystems，ImageLevelSIS是怎樣工作的:WeeklyFullBackupABCDAEFGAHIJAWeeklyFullBackupAB’’C’D’AE’FG’AH’IJ’’AArchiveADEFI同樣的文件跨越不同的客戶端，如：Windows文件系統(tǒng)和應(yīng)用IncrBackupB’C’G’相同的文件不需要再次重復(fù)寫入IncrBackupB’’H’J’Da