中亞聯(lián)邦私有云存儲系統(tǒng)課件

中亞聯(lián)邦私有云存儲系統(tǒng)Fedstore中亞聯(lián)邦私有云存儲系統(tǒng)中亞聯(lián)邦私有云存儲系統(tǒng)目錄發(fā)展歷程企業(yè)網盤集群存儲中亞聯(lián)邦私有云存儲系統(tǒng)私有云業(yè)務發(fā)展歷程個人快盤企業(yè)網盤系統(tǒng)通用集群存儲存儲+網盤新模式2010201120122014數(shù)據(jù)服務平臺中亞聯(lián)邦私有云存儲系統(tǒng)中亞聯(lián)邦私有云存儲系統(tǒng)目錄發(fā)展歷程企業(yè)網盤集群存儲中亞聯(lián)邦私有云存儲系統(tǒng)用戶需求在企業(yè)內部，根據(jù)實際情況，最為迫切解決以下幾個實際需求：數(shù)據(jù)可以共享，共同編輯維護，提高效率需要使用的數(shù)據(jù)，能立即從客戶端提取，快捷方便訪問的數(shù)據(jù)需要配置管理，避免信息泄漏產生的數(shù)據(jù)要盡快集中到服務端存儲，保障數(shù)據(jù)安全協(xié)同能力數(shù)據(jù)分發(fā)能力權限控制集中化中亞聯(lián)邦私有云存儲系統(tǒng)建設目標1通過云端存儲文件、網盤客戶端、安全審計、多倍鏡像等安全機制，保障用戶文件安全2通過自動向服務器同步、外鏈分享、群組應用、歷史版本管理等功能，實現(xiàn)多終端辦公、移動辦公、文件分享與歷史版本找回，保障用戶辦公的方便快捷3Fedstore中亞聯(lián)邦云私有云作為新一代文件服務平臺，將單位文件資源集中在云端，并為其他應用平臺提供開放的API接口，實現(xiàn)一體化的云存儲應用與服務中亞聯(lián)邦私有云存儲系統(tǒng)系統(tǒng)架構中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：獨特的網盤模式本地應用透明無同步高峰終端數(shù)據(jù)安全不占本地空間中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：完善的權限控制

定制預留強制格式限制文件級權限控制文件內容合規(guī)控制

空間管理

可限制任意文件夾大小

多種權限控制

列表只讀

編輯

管理

對象控制針對人員與部門

權限獨立不限目錄層級數(shù)量

下級文件夾不受上級權限范圍限制中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：完善的審計功能審計系統(tǒng)會詳細記錄包括用戶登錄、用戶權限操作、文件操作等38項詳細的用戶行為審計功能可追述某項操作的人員、行為、操作的文件路徑（僅限文件、文件夾操作）、時間、IP、終端類型、操作結果等多項信息相關管理人員可以在線篩選、查詢用戶的某項操作，支持按人員、行為、時間等關鍵信息的篩選搜索，便于未來的審計操作信息記錄審計類別審計查詢中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：三員管理模式用戶行為審計審計結果導出第三方審計系統(tǒng)對接安全員用戶管理部門管理群組管理外鏈管理鎖定管理系統(tǒng)管理員管理員行為審計安全員行為審計審計員AdminSafetyAudit中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：移動辦公在線預覽省流量外鏈分享密鑰有效期便簽功能文檔圖片音頻移動編輯wps移動版中亞聯(lián)邦私有云存儲系統(tǒng)特色功能：可定制化完整開放API體系，適用于客戶的其他系統(tǒng)開發(fā)，方便其他產品與私有云整合。核心規(guī)則引擎與用戶定制層分離，將定制版本對產品升級的影響最小化。核心引擎插件層客戶端中亞聯(lián)邦私有云存儲系統(tǒng)目錄發(fā)展歷程企業(yè)網盤集群存儲中亞聯(lián)邦私有云存儲系統(tǒng)Fedstore中亞聯(lián)邦安全集群存儲系統(tǒng)介紹BigDataStorage

Fedstore中亞聯(lián)邦安全集群存儲系統(tǒng)是一款面向大數(shù)據(jù)存儲的產品，采用自主研發(fā)的分布式文件系統(tǒng)，面向應用提供通用的存儲接口。優(yōu)勢：它具有高性能、高可靠性、高擴展性、高兼容性、易管理等優(yōu)勢；重點行業(yè)：主要針對大型企業(yè)、廣電、金融、科研、勘探、氣象等重點行業(yè)；應用領域：能夠滿足醫(yī)學影像、媒體娛樂、基因測序、衛(wèi)星圖像、地震勘探、產品研發(fā)和企業(yè)IT（大規(guī)模主目錄、歸檔、虛擬化、分析）等多種大數(shù)據(jù)業(yè)務應用的需要。中亞聯(lián)邦私有云存儲系統(tǒng)系負載均衡聚合帶寬簡化存儲結構全局冗余備份真正的全局共享文件切片分布式儲存系統(tǒng)設計目標單點管理流程自動化互備獨立元數(shù)據(jù)服務器不停業(yè)務在線擴容自動故障檢測和恢復統(tǒng)鍵關的術技中亞聯(lián)邦私有云存儲系統(tǒng)客戶應用架構圖…元數(shù)據(jù)服務器集群智能存儲服務器集群千兆/萬兆以太網/InfiniBand應用服務器集群……大于20000節(jié)點并發(fā)訪問2000億以上文件快速定位與檢索單文件系統(tǒng)超過300PB存儲容量與數(shù)百GB/S的聚合帶寬中亞聯(lián)邦私有云存儲系統(tǒng)系統(tǒng)邏輯架構圖節(jié)點通訊狀態(tài)監(jiān)控、性能監(jiān)控、調度管理、維護升級X86存儲服務器集群緩存管理數(shù)據(jù)均衡動態(tài)遷移權限控制網絡重構安全 性能 接口 集群負載均衡系統(tǒng)、分布式文件系統(tǒng)協(xié)同管理流量統(tǒng)計用戶端 管理端 自動報警容量限制應用層功能層核心層基礎層存儲層數(shù)據(jù)多副本字節(jié)鎖故障容錯快速恢復聚合帶寬元數(shù)據(jù)管理并發(fā)控制索引管理POSIX模塊接口WindowsLinuxMacWindows/linux中亞聯(lián)邦私有云存儲系統(tǒng)客戶端工作流程……應用服務器元數(shù)據(jù)服務器存儲服務器文件A1.Requestfor元數(shù)據(jù)信息2.Returnwith文件切片

元數(shù)據(jù)和數(shù)據(jù)通道分離數(shù)據(jù)條帶化存儲在不同的存儲服務器上，實現(xiàn)并行讀寫負載均衡機制中亞聯(lián)邦私有云存儲系統(tǒng)系統(tǒng)優(yōu)勢高性能高可靠性高擴展性易管理高兼容性自身優(yōu)勢中亞聯(lián)邦私有云存儲系統(tǒng)高性能：高聚合帶寬FedStore集群存儲系統(tǒng)高速網絡聚合帶寬文件切片分布式存儲……中亞聯(lián)邦私有云存儲系統(tǒng)高性能：聚合帶寬測試環(huán)境網絡環(huán)境：Infiniband網絡硬件環(huán)境：20臺存儲服務器（12塊SATA盤），20臺客戶端性能測試實施效果中亞聯(lián)邦私有云存儲系統(tǒng)高性能：近線性增長聚合帶寬隨著存儲集群規(guī)模的擴大而線性增長；充分發(fā)揮硬件性能，如網卡性能利用率高于80%；擴展到數(shù)百GB/S以上的聚合性能；單目錄下高達千萬級的文件，單一文件系統(tǒng)文件數(shù)量支持超過兩千億；單個共享文件系統(tǒng)支持300PB級；提供高達數(shù)百GB/S的IO帶寬和高效文件檢索效率；中亞聯(lián)邦私有云存儲系統(tǒng)高可靠性：無單點故障為不同目錄的數(shù)據(jù)設置不同的冗余度自動故障探測與恢復設備恢復速度是RAID的5倍，

3TBSATA盤恢復時間20分鐘內元數(shù)據(jù)服務器每兩臺互備，無單點故障…存儲服務器文件

ASegment1Segment2校驗數(shù)據(jù)…恢復數(shù)據(jù)損壞的磁盤自動被剔除出系統(tǒng)中亞聯(lián)邦私有云存儲系統(tǒng)高可靠性：無單點故障元數(shù)據(jù)采用集群架構存儲系統(tǒng)中的索引由各臺元數(shù)據(jù)獨立管理存儲系統(tǒng)索引層中亞聯(lián)邦私有云存儲系統(tǒng)高可靠性：后端存儲池高效數(shù)據(jù)保護應用服務器千兆/萬兆以太網FedStore共享存儲池存儲服務器集群元數(shù)據(jù)服務器集群…………OK！磁盤損壞存儲服務器宕機網絡中斷元數(shù)據(jù)服務器宕機中亞聯(lián)邦私有云存儲系統(tǒng)高擴展性：不停業(yè)務擴展容量通過手動數(shù)據(jù)恢復以及負載均衡功能，完全可實現(xiàn)在線更換存儲系統(tǒng)中所有老舊設備、在線快速擴展系統(tǒng)容量、在線擴展IO帶寬；中亞聯(lián)邦私有云存儲系統(tǒng)高擴展性：橫向擴展容量與性能用戶組C用戶組D用戶組A……用戶組KFS共享存儲池存儲池整體聚合帶寬用戶組B…………應用增加，存儲容量與性能需求提升應用再次增加完全在線擴展，按需增加存儲容量和訪問帶寬，有效降低初期投入成本中亞聯(lián)邦私有云存儲系統(tǒng)高擴展性：支撐文件數(shù)量與檢索效率我的存儲系統(tǒng)也可以存放海量文件，我打開給你看看結果：半小時過去了，文件夾依然沒有打開文件檢索效率已成為存儲系統(tǒng)的重要考量標準保證每臺元數(shù)據(jù)每秒fopen2萬文件大文件小文件存儲海量文件數(shù)量橫向擴展檢索能力中亞聯(lián)邦私有云存儲系統(tǒng)分級存儲機制高性能應用在線應用備份應用高速硬盤組企業(yè)硬盤組備份硬盤組分級存儲機制，將內部存儲介質按需分組，為不同性能需求的業(yè)務提供存儲服務中亞聯(lián)邦私有云存儲系統(tǒng)易管理：單點配置管理單點實現(xiàn)所有管理配置功能內置各種自動處理流程，減少人為參與中亞聯(lián)邦私有云存儲系統(tǒng)系統(tǒng)優(yōu)勢對比優(yōu)勢與SAN解決方案對比與SAN方案測試結果對比與集群NAS方案對比中亞聯(lián)邦私有云存儲系統(tǒng)與集群NAS方案對比應用服務器

磁盤陣列

NAS控制器

潛在熱點應用服務器存儲服務器

集群NASFedstore中亞聯(lián)邦安全元數(shù)據(jù)服務器

集群NAS的文件一致性靠NAS控制節(jié)點來保證，所以要不間斷的同步NAS控制器，致使控制器存在數(shù)量限制Fedstore中亞聯(lián)邦安全靠元數(shù)據(jù)來保持文件的一致性的，所以元數(shù)據(jù)的同步對存儲系統(tǒng)的容量和整體性能無影響中亞聯(lián)邦私有云存儲系統(tǒng)與SAN解決方案對比高速IP網絡存儲服務器集群元數(shù)據(jù)服務器集群SAN解決方案Fedstore中亞聯(lián)邦安全解決方案…VS高性能集群計算節(jié)點FC網絡

高速IP網絡MDC磁盤陣列I/O服務器高性能集群計算節(jié)點中亞聯(lián)邦私有云存儲系統(tǒng)與SAN方案測試結果對比方案SAN+SANFSFedstore中亞聯(lián)邦安全硬件配置32個高端8GBFC控制器器；512塊FC磁盤；267塊SATA磁盤寫性能1.87GB/s4.67GB/s讀性能2.42GB/s4.24GB/s備注：測試環(huán)境超過500個計算節(jié)點中亞聯(lián)邦私有云存儲系統(tǒng)特色總結企業(yè)網盤網盤客戶端權限控制行為審計三員管理在線預覽版本控制外鏈分享鎖定編輯移動辦公可定制化......集群存儲可提供數(shù)百GB/s的聚合帶寬總空間可擴容至300PB以上文件數(shù)量總量可支持2000億以上高速恢復低運維量線性擴容增長支持分級存儲各應用冗余數(shù)量可調完全基于POSIX接口開發(fā)，無需二次開發(fā)