聯(lián)想LeoStor分布式存儲系統(tǒng)介紹

1、聯(lián)想軟件定義存儲解決方案 LeoStor分布式存儲系統(tǒng)持續(xù)爆炸性增長的“數(shù)據(jù)”全球存儲市場格局發(fā)生巨變今天5年后10年后2014年Wikibon報告揭示企業(yè)軟件定義存儲（SDS）是未來發(fā)展方向。企業(yè)存儲市場正從傳統(tǒng)企業(yè)存儲向SDS加速過度。未來10年，傳統(tǒng)企業(yè)存儲降幅達16.7%，與之形成鮮明對比的是SDS平均YoY以40%的速度飛速增長。SDS將在未來5年，在市場收入追平傳統(tǒng)企業(yè)存儲；并進一步持續(xù)增長。預計10年后，SDS將成為企業(yè)存儲市場主流，收入占比超60%；而傳統(tǒng)企業(yè)存儲將萎縮到不足10%。中國分布式存儲發(fā)展趨勢政府行業(yè)占比第一位。除了氣象與地震局，公安行業(yè)因集中視頻存儲項目也表現(xiàn)出積

2、極的增長。媒體排名第二并且增長非常好的原因，主要來自于新媒體視頻播放和視頻網(wǎng)站的采購。金融行業(yè)下降主要源自基于控制器的外置分布式存儲的減少。制造業(yè)開始嘗試超融合解決方案。2015年與2014年相比，基于控制器的外置存儲（ExternalController-Based）增長率為負25.8%，而基于服務器的分布式存儲（Server Storage）增長率為67.8%軟件定義存儲正在深入各行各業(yè)廣電多媒體平安城市智慧城市能源勘探數(shù)字醫(yī)療測量測繪金融影像視頻編輯視頻播出治安監(jiān)控數(shù)字執(zhí)法電子政務民生數(shù)據(jù)波譜分析勘探數(shù)據(jù)PACS影像三維重建衛(wèi)星數(shù)據(jù)GIS信息視頻監(jiān)控電子票據(jù) 提供敏捷化配置、高性能、高效

3、（簡化）運維管理的存儲解決方案軟件定義存儲的特質：敏捷化配置：借助軟件引擎的多元性和通用x86服務器的配置靈活性、高可擴展性的特質，滿足客戶數(shù)據(jù)中心的多種數(shù)據(jù)管理需求；高性能：存儲軟件引擎在存儲中處于一個核心的地位，并借助先進的Scale-Out架構和底層為更高性能的x86服務器；高效（簡化）運維管理：對資源和數(shù)據(jù)實現(xiàn)高效、整體上的有效管理，簡化運維；介質層什么是軟件定義存儲Software Defined Storage？傳統(tǒng)存儲無法承受海量非結構化數(shù)據(jù)激增的挑戰(zhàn)P770P770 x86 poolSAN/NAS“Shark”存儲規(guī)模更大Scale Up垂直擴展模式“脖子效應”控制器“脖子效應

4、”控制器P770P770 x86 pool性能海量并發(fā)IO時，容易產生“脖子效應”Raid故障恢復時間長，業(yè)務影響較大（“脆弱期”容易造成“二次傷害”）擴展性垂直擴展性受限，無法性能與容量線性增長TCO購買價格昂貴（存非結構化數(shù)據(jù)性價比差），周期長擴容升級采購周期長、價格高，服務成本昂貴運維管理數(shù)據(jù)信息資源孤島，分散管理難度擴容操作困難（經常性數(shù)據(jù)遷移）軟件定義分布式存儲海量非結構化數(shù)據(jù)存儲利器P770P770 x86 pool性能數(shù)據(jù)切片均勻分布在所有節(jié)點上，所有節(jié)點并行參與數(shù)據(jù)讀寫，有效提升I/O效率專門針對海量數(shù)據(jù)設計的數(shù)據(jù)恢復功能（6TB/小時），有效減小“脆弱期”，業(yè)務“零”影響擴展

5、性橫向擴展性，輕松支持上千節(jié)點、百PB級數(shù)據(jù)管理性能與容量成線性增長TCO通用x86服務器平臺+專用存儲引擎軟件構成的存儲系統(tǒng)，提供超高性價比（傳統(tǒng)存儲50%成本）僅需購買通用x86服務器和相應容量軟件license，即可實現(xiàn)擴容，周期短，硬件無綁定風險運維管理單一文件系統(tǒng)支持上億文件，百PB容量，有效數(shù)據(jù)管理可實現(xiàn)業(yè)務無感知擴容，數(shù)據(jù)自動節(jié)點間容量均衡軟件存儲引擎小步快跑式革新，而非徹底替換-現(xiàn)階段集中式存儲和軟件定義存儲互為補充關鍵應用高IOPS，低延遲交易型數(shù)據(jù)庫虛擬化資源池負載較低的非關鍵應用數(shù)據(jù)庫內容存儲文件存儲分析型應用后臺存儲歸檔、備份等離線數(shù)據(jù)存儲集中式存儲SDS塊存儲SDS文

6、件存儲SDS對象存儲存儲架構重定義數(shù)據(jù)中心里面的分布式存儲應用場景ERP/BIMailDBFileSANNASCIFS / NFSiSCSIFCNFSFCoEExchangeNotesOracleDB2SQLInformixMAXDBSAPOracleSiebelHana GreenplumElec-MaterialVideoCCTVArchiveTier 3Tier 2Tier 1NetAPPEMC IsilonIBMHDS HNAS華為 OceanStor浪潮數(shù)據(jù)中心里面的分布式存儲應用場景ERP/BIMailDBFileSANNASCIFS / NFSiSCSIFCNFSFCoEExch

7、angeNotesOracleDB2SQLInformixMAXDBSAPOracleSiebelHana GreenplumElec-MaterialVideoCCTVArchiveTier 3Tier 2Tier 1Scale-Out (SDS)SSDSASSATAiSCSI/FC/NFS/Pricate Protocol聯(lián)想LeoStor，是SDS解決方案的理想技術和產品選擇硬件層系統(tǒng)層接口層應用層LeoStor分布式存儲系統(tǒng)LenoFSHDFSCinderISCSINFSLenovo serverLenoSANFTPHTTPCIFSLenoSync非編/媒資網(wǎng)盤數(shù)據(jù)挖掘HPC高性能計算

8、視頻監(jiān)控.衛(wèi)星數(shù)據(jù)豐富產品家族，滿足企業(yè)存儲的不同需求家族清單F10000全閃磁盤，適用4K高清類、單數(shù)據(jù)流600MB/s1.2GB/s，高IO低延遲場景P3000適用于高IO負載復雜應用場景，單節(jié)點IO帶寬可達1.5GB/s。C3000實現(xiàn)性能和容量的有效平衡，靈活支持千兆/萬兆網(wǎng)絡，2U空間實現(xiàn)700TB容量的同時，可達800MB/S的IO帶寬。C2000實現(xiàn)入門級軟件定義存儲解決方案，可選千兆網(wǎng)絡，可選融合節(jié)點模式，單節(jié)點IO帶寬可達600MB/sC4000適用于海量、高密度數(shù)據(jù)管理需求，實現(xiàn)1PB到100PB間容量擴展，單節(jié)點IO帶寬可達1.4GB/sA60004U60高密度存儲，適用

9、冷數(shù)據(jù)存儲、歸檔類存儲、與其他系列存儲配合做分層數(shù)據(jù)管理場景F：Flash - 全閃陣列P：Performance 高I/OC：Capacity 大容量高帶寬A：Archive 冷數(shù)據(jù)歸檔聯(lián)想LeoStor分布式存儲系統(tǒng)全家福非編/媒資網(wǎng)盤數(shù)據(jù)挖掘HPC高性能計算視頻監(jiān)控衛(wèi)星數(shù)據(jù)OSS存儲節(jié)點：承載海量數(shù)據(jù)的存儲功能。最小三個，按需擴展，最大對4000個支持NL-SAS、SAS、SSD硬盤混插可通過掛接方式實現(xiàn)原有服務器或IP-SAN、FC-SAN、NAS等存儲陣列存儲利舊MDS管理節(jié)點：部署軟件引擎、存放元數(shù)據(jù)。最小兩個，成對擴展，最大128對雙Active，元數(shù)據(jù)實時同步智能元數(shù)據(jù)負載均衡

10、技術數(shù)據(jù)交換網(wǎng)絡：用于應用系統(tǒng)與存儲、存儲內部的數(shù)據(jù)交換。萬兆網(wǎng)絡交換機，Lenovo BNT8124或BNT8272（依據(jù)連接數(shù)）雙萬兆交換設備實現(xiàn)冗余鏈路保證LeoStor SoftWare軟件引擎：管理整個存儲陣列。系統(tǒng)健康情況監(jiān)控；磁盤空間配置、更改；Leostor 分布式存儲系統(tǒng)組件LeoStor優(yōu)勢點一覽多種數(shù)據(jù)保護模式更低的擁有成本與OpenStack無縫對接快速響應支持服務Scale-Out橫向擴展基因100PB數(shù)據(jù)存儲支持靈活的軟件定義配置全面數(shù)據(jù)生命周期管理一套系統(tǒng)支持塊、文件、對象存儲更強的數(shù)據(jù)處理能力統(tǒng)一存儲產品功能概述無限擴容無單點故障統(tǒng)一管理/監(jiān)控業(yè)務無感知在線軟硬

11、件升級硬件自檢/報警機制可做現(xiàn)有環(huán)境利舊系統(tǒng)特性文件快照克隆原生網(wǎng)盤支持容災套件自動精簡配置WORM（Write Once Read Many）高級功能接口支持文件支持:LeoFS/CIFS/NFS塊存儲支持:LeoSAN；iSCSI對象存儲支持：SwiftOpenStack支持：CinderHadoop支持：HDFSLeoStor分布式存儲系統(tǒng)架構LeoStor 分布式文件系統(tǒng)S3/SwiftLeoFS/NFS/CIFSLeoSAN/iSCSIKVMXENHyperVESXiLinuxwindowsUnixLinux 操作系統(tǒng)LeoStor GUILinux OS物理機或者虛擬機控制指令網(wǎng)絡

12、IE，Chrome，F(xiàn)irefox數(shù)據(jù)庫中間件CRM其他OSDHDDSSDOSDHDDSSDOSDHDDSSDMDSSSDSSDMDSSSDSSD協(xié)議接口層LeoStor分布式架構的優(yōu)勢開放架構基于標準化服務器構建的存儲集群成本低廉以100TB存儲需求計算，在5年內投入成本基于軟件定義存儲相比中端集中式存儲可以節(jié)省52% *并行處理智能化存儲管理軟件可以把數(shù)據(jù)存儲和訪問均衡分布到集群的所有節(jié)點統(tǒng)一管理和策略控制自動分布，可用性管理，數(shù)據(jù)冗余高可擴展性容量和性能線性擴展LeoStor支持兩副本和三副本兩種模式副本模式適用于小文件類型應用小于1MB的文件應用，使用副本模式副本模式LeoStor支持

13、2+1和4+1兩種糾刪碼保護模式LeoRAID適用于大文件類型應用大于等于1MB的文件應用，使用LeoRAID模式LeoRAID模式LeoStor DFSCOPYCOPYCOPYREPLIDATED POOLOBJECTLeoStor DFS1ERASURE CODED POOLOBJECT234PLeoStor數(shù)據(jù)高可用性數(shù)據(jù)遠程容災技術可通過存儲容災技術，保證數(shù)據(jù)完整性。節(jié)點間可實現(xiàn)模式：“一對一” “多對一”“一對多” 的數(shù)據(jù)復制。總分分WAN(專線)LeoStor高彈性提供靈活、業(yè)務無感知升級GroupLANLANOpenStack支持通過與OpenStack中的Cinder塊存儲管理

14、模塊相配合，為Nova中的計算資源提供存儲空間；可實現(xiàn)通過運管平臺進行數(shù)據(jù)空間的“創(chuàng)建卷”、“刪除卷”、“修改卷”等管理工作。支持Cinder的VolumeType功能Glance也可以利用LeoFS的存儲容量OpenStack支持BigData支持用LeoFS替代HDFS，通過實現(xiàn)Hadoop的文件接口使LeoFS文件系統(tǒng)支持Hadoop。在文件讀取效率，存儲利用率上明顯優(yōu)于HDFS。MapReduce方面，通過自有接口獲取塊分布信息，實現(xiàn)計算節(jié)點的數(shù)據(jù)本地化。BigData支持BigData Application(大數(shù)據(jù)應用)Zookeeper(分布式協(xié)作服務)Hbase(分布式數(shù)據(jù)庫)

15、Hive(數(shù)據(jù)倉庫)MapReduce(分布式計算框架)LeoStor(分布式文件存儲)Pig(數(shù)據(jù)流處理)可信易用的管理API支持通過HTTP服務對外提供簡單易用的類RESTful管理API；支持配置HTTPS，提供高可信通訊。內置OAUTH2標準化認證流程，和可配的三員權限支持，保證了接口訪問的安全可靠。提供完善的系統(tǒng)管理和監(jiān)控API，可實現(xiàn)監(jiān)控平臺運行數(shù)據(jù)，管理和維護平臺運轉。API支持API請求示例:https:/ip/oauth/token?grant_type=password&client_id=mobie&client_secret=123456&username=admin&

16、password=adminAPI應答示例: value: 3985eaec-d3d4-4493-8358-4960be667890, expiration: 2016-04-01T18:24:09+08:00, tokenType: bearer無限文件快照ROW方式的快照，沒有寫放大對數(shù)據(jù)寫入性能沒有影響支持大量快照并存基于切片的快照，快照顆粒度小，空間占用小。無限文件快照A1B1C1D1原文件P1文件切片無快照R/WA1B1C1D1文件P1執(zhí)行快照快照R/WA1B1C1D1修改后文件P1文件更新快照D2P2R/W增強型權限管理用戶權限應用端訪問權限操作系統(tǒng)訪問權限存儲系統(tǒng)自帶用戶管理機制，實現(xiàn)多平臺統(tǒng)一用戶管理的同時，控制用戶訪問權限，保證數(shù)據(jù)安全性；windows通過AD域控結合保證系統(tǒng)