曙光ParaStor云存儲系統(tǒng)_第1頁
曙光ParaStor云存儲系統(tǒng)_第2頁
曙光ParaStor云存儲系統(tǒng)_第3頁
曙光ParaStor云存儲系統(tǒng)_第4頁
曙光ParaStor云存儲系統(tǒng)_第5頁
已閱讀5頁,還剩51頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認(rèn)領(lǐng)

文檔簡介

1、曙光ParaStor云存儲系統(tǒng)1234市場地位產(chǎn)品規(guī)格產(chǎn)品特性應(yīng)用場景5競爭分析存儲市場變化2015年,全球存儲市場緩慢增長(2.2%)2015年中國大陸增長率14.8%,全球市場份額7.8%國有廠商市場增長率為43.3%,目前市場份額達(dá)56.9%集群NAS市場蓬勃發(fā)展全球市場Scale-out NAS穩(wěn)步增長(19.9%)中國市場Scale-out集群架構(gòu)存儲市場份額已達(dá)45.8%存儲市場發(fā)展趨勢49%20%3%4%9%15%12%26%16%11%11%25%2010年單一系統(tǒng)16PB2013年中國區(qū)NAS IDC排名第32014年中國區(qū)NASIDC排名第2015年中國區(qū) NASIDC排名

2、第1截至2015年1100+用戶成功應(yīng)用累計銷售容量260+PBParaStor存儲系統(tǒng)市場地位LustreLoongStorStornextParastorN9000GlusterFSMPFSMooseFSHDFSIsilonBWStorCephFastDFSPanaFS商業(yè)系統(tǒng)開源系統(tǒng)常見分布式文件系統(tǒng)GPFSDASNASSAN傳統(tǒng)存儲架構(gòu)分布式存儲分布式文件系統(tǒng)分布式存儲分布式塊存儲提供文件系統(tǒng)服務(wù),通常支持 POSIX接口和NAS提供服務(wù)兼具分布式系統(tǒng)的并行化、可伸縮等特點Parastor、CephFS、Lustre、 OceanStor9000、GPFS、藍(lán)鯨 BWFS. 提供比塊存

3、儲更豐富的接口,考 慮目錄、文件屬性的支持、非結(jié) 構(gòu)化數(shù)據(jù)海量存儲需求通常以QEMU driver或kernelModule的形式存在Ceph RBD、AWS EBS、 Sheepdog、阿里云盤古、華為 FusionStorage 延遲要求高,提供通用需求,能應(yīng) 付大/小文件讀寫,提供VM、數(shù)據(jù) 庫服務(wù)對儲鍵值存儲,非樹形結(jié)構(gòu),通過REST(get/put/delete)接口實現(xiàn)文件訪問,支持上傳下載、不支持文件的打開/修改swift、S3、以及各種網(wǎng)盤,通常用于大文件高帶寬應(yīng)用分布式文件系統(tǒng)產(chǎn)品分類后端存儲訪問層協(xié)作管理層前端數(shù)據(jù)訪問層 串行訪問:串行地從一個節(jié)點讀寫數(shù)據(jù) 并行訪問:并行地

4、從多個節(jié)點同時讀取數(shù)據(jù) 對稱性:集群內(nèi)所有節(jié)點均能處理元數(shù)據(jù)和數(shù)據(jù) 非對稱性:元數(shù)據(jù)節(jié)點、數(shù)據(jù)節(jié)點相互獨立 共享式:集群中的每個節(jié)點都能訪問到相同的底層存儲介質(zhì) 分布式:每個節(jié)點只能訪問到連接至本地的存儲介質(zhì),并獨占該介質(zhì)的 訪問;訪問其他節(jié)點數(shù)據(jù)需要通過網(wǎng)絡(luò)傳輸集群文件系統(tǒng)架構(gòu)中,關(guān)注和討論的主要焦點在于對稱性/非對稱性、共享式/分布式的區(qū)別常見產(chǎn)品分類產(chǎn)品名稱后端數(shù)據(jù)訪問方式協(xié)作管理角色曙光ParaStor分布式非對稱性EMC Isilon分布式對稱性華為OceanStor9000分布式對稱性Intel LustreSAN共享式非對稱性Ceph分布式對稱性AS13000(Ceph)分布式對

5、稱性LoongStore分布式非對稱性聯(lián)想LeoStor(LoogStore)分布式非對稱性IBM SONAS(GPFS)SAN共享式對稱性DDNSAN共享式非對稱性藍(lán)鯨BWFSSAN共享式非對稱性云創(chuàng)科技分布式非對稱性Panasas ActiveStor分布式非對稱性Gluster分布式對稱性Moosefs分布式非對稱性昆騰StorNext SNFSSAN共享式非對稱性HDS HNAS(BlueArc)SAN共享式對稱性架構(gòu)區(qū)別-分布式vs.SAN共享式SAN共享式系統(tǒng)基于對象的分布式系統(tǒng)優(yōu)勢1. 客戶端直接訪問后端塊設(shè)備,IO延遲較低2. 單客戶端性能較高1. 擴展性好,受硬件限制較小。2

6、. 并發(fā)IO支持能力高,高聚合IO帶寬劣勢1. 容量擴展性受SAN系統(tǒng)擴展能力的影響2. 所有客戶端都必須在SAN環(huán)境中,特別是在FC-SAN環(huán)境中,客戶端 數(shù)量受限架構(gòu)區(qū)別-全對稱式vs.非對稱式全對稱式非對稱式優(yōu)勢1.所有節(jié)點功能對等,元數(shù)據(jù)服務(wù)、數(shù)據(jù)服務(wù) 能力同等擴展2.容量要求較小時,節(jié)點配置數(shù)量較少,成本 更有優(yōu)勢1.元數(shù)據(jù)和數(shù)據(jù)節(jié)點互相不受影響,各自服務(wù)能 力較高2.部分非對稱存儲支持元數(shù)據(jù)節(jié)點的橫向擴展3.故障相互隔離,系統(tǒng)健壯性更好劣勢1.同一節(jié)點元數(shù)據(jù)和數(shù)據(jù)進程容易爭搶資源, 影響彼此性能,尤其數(shù)據(jù)重構(gòu)時,節(jié)點間的數(shù)據(jù)交互壓力很大,更容易 影響系統(tǒng)的整體 性能2.單臺節(jié)點故障

7、,同時影響元數(shù)據(jù)和數(shù)據(jù)服務(wù)3.節(jié)點數(shù)據(jù)不易太多,隨著節(jié)點數(shù)量增加,信 息同步復(fù)雜度呈幾何指數(shù)增長1.元數(shù)據(jù)服務(wù)器成為系統(tǒng)擴展的瓶頸;2.即使容量要求較小,元數(shù)據(jù)節(jié)點必須配置,在 小規(guī)模系統(tǒng)中,成本不具優(yōu)勢1234市場地位產(chǎn)品規(guī)格產(chǎn)品特性應(yīng)用場景5典型案例產(chǎn)品概述分布式存儲架構(gòu)Scale-Out集群NAS形態(tài)非結(jié)構(gòu)化數(shù)據(jù)存儲完全自主研發(fā)海量空間,彈性擴展可構(gòu)建EB級單一存儲空間No.12015 IDC國內(nèi)NAS市場排名第一No.1 EB級,經(jīng)過驗證的國內(nèi)最大存儲系統(tǒng)TOP3連續(xù)4年IDC國內(nèi)NAS市場前三海量非結(jié)構(gòu)化數(shù)據(jù)云存儲系統(tǒng) ParaStor高性能高可靠易管理 數(shù)據(jù)管理協(xié)議引擎存儲高級功能

8、WebUI管理POSIXNFSCIFSFTPHTTPHDFS管理節(jié)點索引節(jié)點數(shù)據(jù)節(jié)點 數(shù)據(jù)保護ParaStor分布式文件系統(tǒng)應(yīng)用協(xié)議層數(shù)據(jù)處理層硬件節(jié)點層邏輯架構(gòu)體系架構(gòu)數(shù)據(jù)控制器數(shù)據(jù)控制器數(shù)據(jù)控制器索引控制器索引控制器索引控制器索引控制器數(shù)據(jù)控制器數(shù)據(jù)控制器數(shù)據(jù)控制器管理控制器管理控制器客戶端管理網(wǎng)數(shù)據(jù)歸檔并發(fā)讀寫并發(fā)讀寫并發(fā)讀寫數(shù)據(jù)遷移元數(shù)據(jù)讀寫WindowsUNIX/LINUXMAC數(shù)據(jù)遷移ParaStor 云存儲系統(tǒng)通用產(chǎn)品形態(tài),索引控制器支持2128個,數(shù)據(jù)控制器支持34096個數(shù)據(jù)控制器硬件規(guī)格支持2U24、4U24、4U36、5U86盤位等4種索引控制器高可靠雙活架構(gòu);數(shù)據(jù)冗余支

9、持多副本、糾刪碼兩種方式雙節(jié)點對稱存儲架構(gòu),不支持?jǐn)U容硬件規(guī)格支持2U12、4U36盤位等2種2016年10月新推出,單路服務(wù)器,4U24、4U36盤位僅用于視頻監(jiān)控領(lǐng)域,成本優(yōu)勢明顯ParaStor 雙節(jié)點系統(tǒng)ParaStor 視頻監(jiān)控專用存儲系統(tǒng)2U24Bay4U24Bay4U36Bay5U86Bay2U12Bay4U36Bay產(chǎn)品形態(tài)雙節(jié)點對稱硬件規(guī)格軟件特性雙節(jié)點對稱架構(gòu)2U12、4U36盤位2U12包含8塊數(shù)據(jù)盤4U36包含24塊數(shù)據(jù)盤數(shù)據(jù)盤最大4TB不支持節(jié)點擴容內(nèi)嵌ParaStor組件及軟件POSIX/NFS/CIFS/FTP接口RESTful接口雙副本(推薦)、2+2:1權(quán)限管

10、理、配額、WORM適合容量小、大文件存儲場景適用于金融票據(jù)、醫(yī)療PACS等市場小文件存儲、有擴容要求不建議推薦ParaStor雙節(jié)點存儲系統(tǒng)視頻監(jiān)控專用存儲系統(tǒng)硬件主推場景 推廣“死區(qū)”視頻監(jiān)控專用存儲系統(tǒng)98000974單路服務(wù)器4U24、4U36盤位 32GB Cache/3.5”HDD1GbE/10GbE視頻監(jiān)控對成本要求較為嚴(yán)格 僅作為存儲資源池,節(jié)點與視頻業(yè)務(wù)無復(fù)用需求存儲節(jié)點上需要運行視頻業(yè)務(wù)軟件對性能要求較高 1234市場地位產(chǎn)品規(guī)格產(chǎn)品特性應(yīng)用場景5典型案例產(chǎn)品特性高性能單節(jié)點/聚合帶寬元數(shù)據(jù)性能線性增加小文件聚合高可靠冗余架構(gòu)多副本/糾刪碼磁盤分組節(jié)點分區(qū)數(shù)據(jù)快速修復(fù)易擴展可

11、擴展至EB級在線擴容自動數(shù)據(jù)均衡多功能訪問接口多樣集群NAS功能豐富用戶管理權(quán)限管理易管理圖形化界面統(tǒng)一管理監(jiān)控告警及時運維簡單存儲策略分級存儲配額管理目錄分片自動精簡配置數(shù)據(jù)保護遠(yuǎn)程同步數(shù)據(jù)歸檔WORM行業(yè)優(yōu)化QoS自動功耗控制并行集群架構(gòu)設(shè)計滿足高并發(fā)IO需求條帶優(yōu)化提供高單流IO帶寬聚合帶寬等于數(shù)據(jù)控制器帶寬線性疊加,隨容量線性增長全Active索引集群提升海量小文件處理能力卓越性能 線性增長以太網(wǎng)交換機1以太網(wǎng)交換機2索引控制器索引控制器/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_ar

12、chitecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpg/home/appl/data/web/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_architecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpg 邏輯層0123456789101101234567891011abcdefghijklabcdefghijklABCDEFGHIJKLAB

13、CDEFGHIJKL02ABC 物理層1數(shù)據(jù)冗余 安全可靠/home/appl/data/web/important_big_spreadsheet.xls數(shù)據(jù)冗余 多副本 vs. 糾刪碼Node1DDNode2DDNode3DNodeN-1DNodeNDDDD數(shù)據(jù)分段對象存儲多副本N+M糾刪碼D1D2D3DnD11D12D1mD21D22D2mD31D32D3mD31D32D3m數(shù)據(jù)復(fù)制空間利用率:1/(1+M)D1D2D3DnErasure Code算法P1P2P3Pm空間利用率:N/(N+M)糾刪碼冗余 N+M:bN+M的理解N:數(shù)據(jù)對象個數(shù)M:校驗對象個數(shù)D1N=8,M=2M:允許故障

14、的磁盤數(shù)目b的理解允許故障的節(jié)點數(shù)8+2:1Node1D1Node2D2Node3D3D7D8P1D2D3D4D5D6D7D8P1P2D1D2D3D4D5D6D7D8P1P2Node4D4Node5D5Node6D6P2D1D7N+M:b數(shù)據(jù)節(jié)點最小數(shù)量空間利用率4+2:1466.7%4+2:2866.7%8+2:1680%8+2:21280%10+2:1783.3%10+2:21483.3%16+1:11894.1%16+4:21280%16+4:42480%b(N+M)/M+b常見的N+M:b 模式節(jié)點分區(qū)與磁盤分組同樣采用8+2:1,劃分多個分區(qū),縮小節(jié)點故障域ostor01ostor0

15、7ostor02ostor08ostor03ostor09ostor04ostor10ostor05ostor11ostor06ostor12ostor13ostor14ostor15ostor16ostor17ostor18ostor19ostor20ostor21ostor22ostor23ostor24同樣采用8+2:1,劃分多個分組,縮小磁盤故障域0807060504030201ostor010807060504030201ostor020807060504030201ostor030807060504030201ostor040807060504030201ostor05080706

16、0504030201ostor06LAN123412341234數(shù)據(jù)控制器數(shù)據(jù)控制器初始狀態(tài)并行數(shù)據(jù)I/O數(shù)據(jù)控制器數(shù)據(jù)控制器數(shù)據(jù)控制器123412341234數(shù)據(jù)控制器數(shù)據(jù)控制器數(shù)據(jù)控制器擴展后并行數(shù)據(jù)I/O增加數(shù)據(jù)控制器按策略自動數(shù)據(jù)遷移數(shù)據(jù)控制器海量空間 彈性擴展訪問接口專有Linux、Windows內(nèi)核態(tài)訪問接口POSIX APINFS/CIFS/FTP接口RESTful編程接口HDFS 接口SNMP接口網(wǎng)絡(luò)接口40/56/100Gb IB10Gb/1Gb以太網(wǎng)RDMA支持負(fù)載均衡和冗余ParaStor文件系統(tǒng)應(yīng)用節(jié)點 私有接口應(yīng)用模式(并行存儲)支持Linux和WindowsNFS/

17、CIFS訪問模式(集群NAS形態(tài))應(yīng)用節(jié)點應(yīng)用節(jié)點I/O 節(jié)點I/O 節(jié)點I/O 節(jié)點oAppVFSoAppVFSoAppWinFS存儲系統(tǒng)組成存儲系統(tǒng)組成應(yīng)用服務(wù)器FTP等文件存儲服務(wù)器Windows服務(wù)器NFS、CIFS、FTP、REST、HDFS VFS接口豐富 應(yīng)用多樣RESTful協(xié)議 RESTful接口,HTTP協(xié)議傳輸RESTful接口標(biāo)準(zhǔn)HTTP方式CAS(固定內(nèi)容尋址存儲)OpenStack Swift對象存儲接口對象存儲服務(wù)數(shù)據(jù)服務(wù)數(shù)據(jù)節(jié)點對象存儲服務(wù)數(shù)據(jù)服務(wù)數(shù)據(jù)節(jié)點Web引擎數(shù)據(jù)服務(wù)數(shù)據(jù)節(jié)點Web引擎數(shù)據(jù)服務(wù)數(shù)據(jù)節(jié)點對象存儲客戶端Web客戶端認(rèn)證服務(wù)器訪問方式主要包含上傳

18、、下載、更新、刪除等非實時讀寫,不可直接進行編輯和操作CAS存儲,Key-Value方式,適合一寫多讀的場景兼容OpenStack Swift接口,訪問之前需要通過KeyStone認(rèn)證HDFS文件系統(tǒng)內(nèi)存計算引擎流處理引擎并行數(shù)據(jù)庫中間件批處理引擎關(guān)系型數(shù)據(jù)庫曙光ETL工具集分布式云存儲(HDFS)數(shù)據(jù)訪問接口(SQL+/JDBC/CLI)分析挖掘庫曙光大數(shù)據(jù)平臺管理軟件行為分析輿情分析個性化推薦多維度展示大數(shù)據(jù)安全體系大數(shù)據(jù)標(biāo)準(zhǔn)體系ParaStor分布式文件系統(tǒng)提供HFDS通用接口可作為Hadoop大數(shù)據(jù)分析軟件的底層存儲空間目前僅支持曙光Xdata產(chǎn)品產(chǎn)品形態(tài)優(yōu)勢ParaStor-Xdat

19、a 融合系統(tǒng)ParaStor 的數(shù)據(jù)節(jié)點安裝Xdata 的軟件Xdata 的管理節(jié)點單獨部署 完全自主研發(fā),可做深度應(yīng)用優(yōu)化ParaStor 較之開源HDFS的優(yōu)勢空間利用率高、性能優(yōu)越、冗余度高融合系統(tǒng)成本優(yōu)勢明顯 ParaStor云存儲管理系統(tǒng)包括監(jiān)控、管理、高級三大模塊,簡潔直觀,統(tǒng)一管理,智能監(jiān)控,及時告警統(tǒng)一管理 運維簡單分級存儲 熱數(shù)據(jù)區(qū)冷數(shù)據(jù)區(qū)新建文件創(chuàng)建時間長訪問頻度低訪問頻度高節(jié)點1SSD/10K SAS + SATA節(jié)點2SSD/10K SAS + SATA節(jié)點內(nèi)分級在線存儲區(qū)高性能存儲節(jié)點SSD/10K SAS近線/離線存儲區(qū)大容量存儲節(jié)點 SATA節(jié)點間分級FILE1F

20、ILE2FILE3FILE4FILE5FILE6配額管理存儲池FS2FS1Group2Group1user1user2user3user4多粒度多層次配額設(shè)置基于文件系統(tǒng)基于目錄基于用戶組基于用戶300TB40TB60TB50TBdir1dir2dir3dir450TB100TB40TB60TB50TB50TB100TB200TB200TB軟硬閾值限定文件數(shù)量軟閾值容量軟閾值文件數(shù)量硬閾值容量硬閾值 給出告警 可以繼續(xù)寫入 無法寫入SSD緩存加速數(shù)據(jù)文件應(yīng)用服務(wù)器HDD數(shù)據(jù)節(jié)點1數(shù)據(jù)節(jié)點2數(shù)據(jù)節(jié)點NSSD讀緩存數(shù)據(jù)節(jié)點上配置一定數(shù)量的SSD訪問頻度高的隨機數(shù)據(jù)存入到SSD中,再次讀取時直接訪問

21、SSD智能識別連續(xù)/隨機IO,自動過濾連續(xù)數(shù)據(jù)訪問,最大發(fā)揮SSD作用隨機、小塊數(shù)據(jù)、讀密集型(一定幾率重讀)的場景,IOPS讀性能提升明顯單塊SATA SSD 8K隨機讀IOPS,實際測試值20000SSD緩存讀數(shù)據(jù)流程-1客戶端索引節(jié)點內(nèi)存SSDHDD數(shù)據(jù)節(jié)點N內(nèi)存SSDHDD數(shù)據(jù)節(jié)點M讀緩存命中客戶端向索引節(jié)點請求文件的位置索引節(jié)點返回訪問位置客戶端計算得到文件存放的數(shù)據(jù)節(jié)點位置,并向數(shù)據(jù)節(jié)點發(fā)送讀請求,首先訪問內(nèi)存數(shù)據(jù)未在內(nèi)存中,繼續(xù)向本節(jié)點的SSD發(fā)送請求SSD緩存命中后,發(fā)送讀SSD的請求,數(shù)據(jù)由SSD讀取到內(nèi)存由內(nèi)存將讀取到的數(shù)據(jù)返回給客戶端SSD緩存讀數(shù)據(jù)流程-2客戶端索引節(jié)點

22、內(nèi)存SSDHDD數(shù)據(jù)節(jié)點N內(nèi)存SSDHDD數(shù)據(jù)節(jié)點M讀緩存未命中客戶端向索引節(jié)點請求文件的位置索引節(jié)點返回訪問位置客戶端訪問數(shù)據(jù)節(jié)點的內(nèi)存內(nèi)存未命中,繼續(xù)向本節(jié)點的SSD發(fā)送請求SSD緩存未命中,返回給內(nèi)存內(nèi)存下發(fā)IO請求至機械硬盤HDDHDD將數(shù)據(jù)返回給內(nèi)存內(nèi)存將數(shù)據(jù)寫入到SSD(作為熱點數(shù)據(jù)緩存)內(nèi)存將數(shù)據(jù)返回給客戶端*WORM(Write Once Read Many) 全局WORM時鐘,確保WORM時間不受硬件時鐘影響,且不受篡改 支持手動將寫入數(shù)據(jù)置于WORM狀態(tài) 支持設(shè)置自動將寫入數(shù)據(jù)置于WORM狀態(tài)的時間 支持對WORM文件內(nèi)容進行追加寫入操作 支持設(shè)置WORM文件的過期時間 支

23、持WORM日志,記錄存儲系統(tǒng)中的WORM行為。Client寫設(shè)置WORM后,文件只讀讀WORM小文件聚合數(shù)據(jù)修復(fù)基于對象實現(xiàn)海量小文件系統(tǒng)(上億個KB級別)修復(fù)速度緩慢將若干個小文件“聚合”成大文件修復(fù)基本原理開啟聚合功能后,數(shù)據(jù)修復(fù)性能提升20倍以上寫性能有一定程度的提升實測性能一寫多讀的場景海量小文件系統(tǒng):專利局、GIS、衛(wèi)星遙感、生物基因等適用場景遠(yuǎn)程復(fù)制兩套ParaStor系統(tǒng)之間,數(shù)據(jù)從源端(主存儲)復(fù)制到目標(biāo)端(備份存儲)目標(biāo)端數(shù)據(jù)可以根據(jù)策略恢復(fù)至源端異步方式,非實時復(fù)制專用復(fù)制網(wǎng)絡(luò),TCP/IP協(xié)議,建議萬兆以太網(wǎng)實現(xiàn)功能HPC類客戶文件數(shù)據(jù)備份,重要文件有數(shù)據(jù)恢復(fù)的需求虛擬機

24、快照形成的鏡像文件視頻文件存儲備份適用場景遠(yuǎn)程異步復(fù)制存儲系統(tǒng)高可靠性是數(shù)據(jù)安全的第一屏障,但無法避免自然災(zāi)害的損壞遠(yuǎn)程容災(zāi)方案可以保證數(shù)據(jù)存取的持續(xù)性、可恢復(fù)性和高可用性遠(yuǎn)程復(fù)制是容災(zāi)方案的關(guān)鍵技術(shù)之一遠(yuǎn)程復(fù)制原理主要流程建立遠(yuǎn)程復(fù)制關(guān)系,確定主存儲、備份存儲,每臺數(shù)據(jù)節(jié)點啟動復(fù)制進程設(shè)置復(fù)制策略,包括周期(備份窗口期)、目錄/文件、全復(fù)制/增量復(fù)制等主存儲數(shù)據(jù)一次性全復(fù)制到備份存儲,即初始同步。過程中修改的數(shù)據(jù)僅做記錄,下次備份周期內(nèi)再復(fù)制若是全備份,數(shù)據(jù)全部復(fù)制到備份系統(tǒng)若是增量復(fù)制,兩地的存儲根據(jù)記錄,依次比對得到發(fā)生變化的數(shù)據(jù)塊,并傳輸至備份存儲復(fù)制過程中故障導(dǎo)致中斷,則故障消除后,

25、尚未復(fù)制的數(shù)據(jù)繼續(xù)傳輸,即支持?jǐn)帱c續(xù)傳專用復(fù)制網(wǎng)絡(luò)采用雙萬兆以太網(wǎng),且鏈路帶寬不是瓶頸的情況下,單臺數(shù)據(jù)節(jié)點MB級文件的性能實測可達(dá)800MB/s數(shù)據(jù)歸檔活躍數(shù)據(jù)主存儲在線存儲 非活躍數(shù)據(jù)活躍數(shù)據(jù)長期保存近線/離線存儲 磁帶磁盤光盤歸檔 & 長期保存keep生產(chǎn)系統(tǒng)數(shù)據(jù)在線存儲專用于活躍數(shù)據(jù)的訪問遷移非活躍、不常用的數(shù)據(jù)到近線/離線存儲,降低成本,長期保存歸檔系統(tǒng)分類磁帶庫歸檔磁盤介質(zhì)歸檔(ParaStor 實現(xiàn)方式)光盤庫歸檔歸檔控制器離線系統(tǒng)ParaStor專用歸檔控制器(2U12,雙節(jié)點對稱系統(tǒng))或內(nèi)嵌到歸檔系統(tǒng)節(jié)點源端系統(tǒng):支持NAS協(xié)議歸檔系統(tǒng):ParaStor 存儲方案架構(gòu)手動或自

26、動執(zhí)行支持文件名特征、訪問時間、文件大小等策略指定任務(wù)優(yōu)先級及執(zhí)行時間段離線文件檢索查詢歸檔/回遷策略石油能源衛(wèi)星遙感視頻監(jiān)控應(yīng)用場景單節(jié)點歸檔/回遷性能(1.5GB/s以上)任務(wù)并發(fā)執(zhí)行,支持?jǐn)帱c執(zhí)行離線數(shù)據(jù)巡檢,保證文件一致性分區(qū)自動上下電,降低功耗優(yōu)勢QoS(Quality of Service)多個業(yè)務(wù)(數(shù)據(jù)流)共用網(wǎng)絡(luò)網(wǎng)絡(luò)過載或擁塞時,若干業(yè)務(wù)等待或被丟棄關(guān)鍵業(yè)務(wù)或高實時性的業(yè)務(wù)有可能中斷QoS 為指定數(shù)據(jù)流(網(wǎng)絡(luò))提供更好的服務(wù)質(zhì)量,確保重要業(yè)務(wù)不受延遲或丟棄關(guān)鍵業(yè)務(wù)ParaStor 實現(xiàn)功能適用場景保證特定業(yè)務(wù)的性能要求單流/極限帶寬IOPS及時延磁盤/網(wǎng)絡(luò)/節(jié)點故障時,業(yè)務(wù)切換

27、限定在特定時間內(nèi) 廣媒非線編多客戶端穩(wěn)定帶寬持續(xù)讀寫+時延平滑無丟幀視頻監(jiān)控穩(wěn)定帶寬持續(xù)寫入自動功耗控制 活躍區(qū)休眠區(qū)休眠區(qū)客戶端WindowsUNIX/LINUXMAC數(shù)據(jù)節(jié)點按分區(qū)使用, 分為活躍區(qū)和休眠區(qū) 活躍區(qū)提供讀寫訪問 活躍區(qū)故障,切換活躍區(qū) 待訪問數(shù)據(jù)位于休眠區(qū),自動切換 為活躍區(qū) 活躍區(qū)到達(dá)容量閾值,切換活躍區(qū) 在視頻監(jiān)控、衛(wèi)星遙感等海量離線存儲應(yīng)用中,可以顯著降低系統(tǒng)功耗休眠區(qū)活躍區(qū)活躍區(qū)1234市場地位產(chǎn)品規(guī)格產(chǎn)品特性應(yīng)用場景5競爭分析典型應(yīng)用場景 石油/地震 基因/制藥 非線編/媒資 衛(wèi)星/遙感 數(shù)字圖書館氣象/環(huán)保 醫(yī)療影像 視頻監(jiān)控 測繪/地圖 金融票據(jù) 高性能計算

28、生命科學(xué) 音視頻 天文地理 資料圖片 幾百TB以上數(shù)據(jù)的應(yīng)用場景基本都適合中小型互聯(lián)網(wǎng)存儲支撐、航天航空設(shè)計數(shù)據(jù)儲存、共享文件庫海量數(shù)據(jù)備份歸檔的應(yīng)用場景基本都可取代磁帶庫檔案、圖書、試驗數(shù)據(jù)1234市場地位產(chǎn)品規(guī)格產(chǎn)品特性應(yīng)用場景5競爭分析華為OceanStor9000應(yīng)用層數(shù)據(jù)處理層媒體娛樂 視頻監(jiān)控 HPC文件存儲備份、歸檔軟件備份、歸檔商業(yè)推廣FTP NFS CIFS數(shù)據(jù)分析與Hadoop生 精準(zhǔn)營銷態(tài)系統(tǒng)對接HDFSNDMP對象存儲服務(wù)重刪多租戶Https傳輸加密NAS存儲服務(wù)HDFSInfoTier(動態(tài)分級)InfoAllocator(配額)InfoLocker(WORM)Inf

29、oReplicator(遠(yuǎn)程復(fù)制)InfoStamper(快照)InfoRevive(視頻圖像修復(fù))InfoEqualizer(負(fù)載均衡)管 理 系 統(tǒng)InfoTurbo(性能加速)Swift/S3 HttpsInfoScanner(防病毒)InfoMigrator(數(shù)據(jù)遷移)對象存儲網(wǎng)盤資源池OceanStor DFS硬件節(jié)點層P系列節(jié)點C系列節(jié)點 P系列節(jié)點:性能型,包括P12、P25、P36 C系列節(jié)點:容量型,包括C36、C72除C72節(jié)點為Intel Atom CPU以外,其余均是Intel E5-2620V2 CPUSugon vs. HuaweiParaStor 架構(gòu) 非對稱式,

30、128個元數(shù)據(jù)節(jié)點&4096個數(shù)據(jù)節(jié)點 訪問協(xié)議NFS/CIFS/FTPPOSIXHDFSSwift(測試中) 功能差異 自研數(shù)據(jù)歸檔功能 自動功耗控制 小文件聚合 回收站OceanStor9000 架構(gòu) 全對稱式,288個節(jié)點(C72是144個) 訪問協(xié)議NFS/CIFS/FTP POSIX(專為應(yīng)對曙光開發(fā),不太成熟)HDFS(對接華為FusionInsight HadoopV100R002C50、Cloudera Hadoop 5.4.1)Swift/S3 功能差異 全局緩存、防病毒掃描 快照、NDMP備份、掉電保護(NVDIMM/CBU) 視頻圖像修復(fù)EMC IsilonSugon vs. EMCParaStor 架構(gòu) 非對稱式,128個元數(shù)據(jù)節(jié) 點&4096個數(shù)據(jù)節(jié)點 訪問協(xié)議NFS/CIFS/FTPPOSIXHDFSSwift(測試中)

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論