DDN SFA并行存儲(chǔ)系統(tǒng)方案

1、DDN SFA并行存儲(chǔ)系統(tǒng)方案DataDirect Networks (DDN)的方案是用戶提供一套存儲(chǔ)系統(tǒng)主要服務(wù)于大容量和高帶寬應(yīng)用，它可以在業(yè)務(wù)需求改變時(shí)，線性地或者獨(dú)立地?cái)U(kuò)展性能和容量，不僅能夠降低橫向擴(kuò)容存儲(chǔ)的復(fù)雜性，還能夠通過(guò)移除存儲(chǔ)群集的延遲元素，以提高存儲(chǔ)的響應(yīng)性，以最大限度的靈活性，應(yīng)對(duì)其大數(shù)據(jù)對(duì)系統(tǒng)架構(gòu)海量數(shù)據(jù)的規(guī)模和吞吐量需求。設(shè)備名稱DataDirect Networks SFA7700， 該方案使用有一套SFA7700（數(shù)據(jù)存儲(chǔ)）和一臺(tái)DDN EF3015存儲(chǔ)系統(tǒng)（元數(shù)據(jù)存儲(chǔ)）組成一套高性能并行存儲(chǔ)系統(tǒng)（1.36PB=228塊7200轉(zhuǎn)6TB SAS + 12塊150

2、00轉(zhuǎn)600GB SAS）。 技術(shù)性能實(shí)測(cè)的每套SFA7700的最大讀性能為12GB/s，寫(xiě)為10.2GB/s。提案使用的SFA7700，其讀寫(xiě)吞吐量（帶寬）可達(dá)10 GB/s以上.規(guī)格容量為1.36PB（可擴(kuò)充至2376TB）的配備, 4U的機(jī)箱容納60塊盤，配有一對(duì)主動(dòng)/主動(dòng)控制器，帶有32GB 的高速電池保護(hù)存儲(chǔ)緩存，SFA7700存儲(chǔ)系統(tǒng)， 配有2個(gè)容納84塊盤的SS8460擴(kuò)展柜，其技術(shù)數(shù)據(jù)為：1）一對(duì)主動(dòng)/主動(dòng)控制器2）支持RAID級(jí)別：RAID1，RAID5，RAID63）存儲(chǔ)主端口：4個(gè)56Gb的FDR Infiniband對(duì)外接口或選用4個(gè)16Gb的光纖對(duì)外接口，8個(gè)8Gb的

3、光纖對(duì)外接口或選用4個(gè)40 GbE的以太網(wǎng)絡(luò)的對(duì)外接口4）兩個(gè)擴(kuò)展柜，每柜可容納84塊盤 最多可增加4個(gè)擴(kuò)展柜5) ExaScaler并行文件系統(tǒng)先進(jìn)性和特色DataDirect Networks (DDN) 在解決極端存儲(chǔ)挑戰(zhàn)方面有著為行業(yè)所認(rèn)可的豐富的經(jīng)驗(yàn)。DDN 存儲(chǔ)在高性能計(jì)算和富媒體處于霸主地位，被用于全球最大型網(wǎng)站、存檔設(shè)備、數(shù)百處全球最大的超級(jí)計(jì)算機(jī)和超過(guò) 600 家媒體，在石油行業(yè)有廣泛的客戶。DataDirect Networks 存儲(chǔ)融合架構(gòu)將今日最先進(jìn)的處理器技術(shù)、總線技術(shù)和內(nèi)存架構(gòu)技術(shù)融為一體，并搭配最優(yōu)化的RAID 引擎與數(shù)據(jù)管理算法。DataDirect Netwo

4、rks 存儲(chǔ)融合架構(gòu)將今日最先進(jìn)的處理器技術(shù)、總線技術(shù)和內(nèi)存架構(gòu)技術(shù)融為一體，并搭配最優(yōu)化的RAID 引擎與數(shù)據(jù)管理算法。整體多線程存儲(chǔ)處理能力：多線程存儲(chǔ)處理架構(gòu)保證了主輸入輸出端口和后臺(tái)數(shù)據(jù)管理功能均能以最高的速度全速運(yùn)作。平衡的存儲(chǔ)性能：讀和寫(xiě)幾乎相同的性能，可達(dá)10 GB/s易于擴(kuò)展：從容應(yīng)對(duì)信息爆炸，只要增加SFA的數(shù)目或增加硬盤即可擴(kuò)所需容量大容量緩存加速輸入輸出的讀取和寫(xiě)入無(wú)可匹敵的存儲(chǔ)密度：一個(gè)標(biāo)準(zhǔn)機(jī)架的4U可達(dá)336TB智能平行寫(xiě)入技術(shù)：使其在處理小文件時(shí)同樣具有優(yōu)異性能，達(dá)到最優(yōu)化存儲(chǔ)帶寬效率存儲(chǔ)設(shè)備層疊設(shè)計(jì)：在一個(gè)單一的4U機(jī)柜中可任意比例使用SSD，SAS和SATA硬盤

5、建設(shè)方案方案建議使用Datadirect Networks (DDN)的一組SFA7700組成一套高性能并存儲(chǔ)系統(tǒng)，其容量裸容量為1.36PB（使用228塊6TB SAS盤）,可用容量為1PB，配有ExaScaler 并行文件系統(tǒng)。該方案的存儲(chǔ)系統(tǒng)可提供高達(dá)10GB/s讀或?qū)憥?。方案配置?.36PB容量PRODUCTQTYDESCRIPTIONSFA7700-4IBFP1SFA7700 Active/Active Redundant Block Appliance, with 60 drive slots, 4x 56Gb/s FDR IB ports, 64 GB memory, dua

6、l power-fail protection modules, power cables and rail kit.SS8K-SBOD2SS8460 84-slot 6Gb/s SAS/SATA/SSD enclosure. Includes 2x I/O modules, redundant power supplies, power cables, rail kit for rack mounting and cable management arms.SFA-7K7-OS2011SFA7700 SFAOS license for each set of up to 20 drives.

7、H07C0600135NH18606TB 7,200 RPM 6Gb/s SAS drive module for SS7000 enclosureH08C0600135NH181686TB 7,200 RPM 6Gb/s SAS drive module for SS8460 enclosureKIT-CBL7K8SEP1SFA7700/SS8460 cable kit - 4x 3M HD mSAS/mSAS cables connect SS8460 enclosure to SFA7700KIT-CBL7K8SEE1SFA7700 SS8460 Daisychain cable kit

8、 - 2x 3M HD mSAS/HD mSAS cables to daisychain SS8460 to SS8460 enclosureRK42-9900EU-R142U Rack with four PDUs for Europe - 9.9kW MaxES-2OSS-3YR1EXAScaler support, up to 2 OSSes, 3 yearSER20-2S-3PCIE22U DDN Server - Dual 2.0GHz Intel E5-2620 (6 core), 64GB (upgradeable to 192GB max), 2x 300GB SAS, qu

9、ad port 1GigE, 7x Empty PCIe3 Slots, No OS. RHEL subscription or evidence of site subscription required if RHEL is to be installedI-239-2NFC82QLogic QLE2562 8Gbps dual-channel multi-mode optical PCI-Express HBA, LC connector - includes 2x HSR-807-SFPMHQH39B-XTR2ConnectX-3 VPI adapter card, dual-port

10、 QSFP, FDR IB (56Gb/s) / 40GigE, PCIe 3.0 x8 8GT/s, tall bracketHAIBGE-2QD10QG24ConnectX-2 IB/10GE HCA, PCI-e2.0(x8), Dual-Port QSFP QDR (40Gb/s) IB/10GbE-PORT, 5GT/s, Tall Bracket. FOR 10GE, USE CBL-QSFPP-XX or ADPT-CX2-SFPP TO CONVERT FROM QSFP to SFP+EF3015-12X600-2112x 600GB SAS 15K EF3015 RAID

11、System with dual active/active RAID Controllers, 4G Cache, 4x FC 8Gb Host Ports and SFPs, SuperCap-Backed Cache, 22.5 - 31 Rackmount Kit詳細(xì)模塊說(shuō)明1）SFA7700組成每套含有一對(duì)主動(dòng)/主動(dòng)控制器，存儲(chǔ)系統(tǒng)的核心控制模塊，帶有32GB的具有后備電源的鏡像緩存2）SFA7700基本單元可安裝60塊磁盤，帶有2個(gè)可容納84塊磁盤的擴(kuò)展柜最多可以增加4個(gè)擴(kuò)展柜，每套最多可容納的磁盤數(shù)目可達(dá)396塊。3）方案中6TB SAS硬盤是業(yè)內(nèi)首款可以經(jīng)濟(jì)高效地進(jìn)行量產(chǎn)的氦氣

12、密封式硬盤，具有低功耗，高可靠性4）每套帶有4個(gè)56Gb的Infiniband對(duì)外接口提供存儲(chǔ)和外部網(wǎng)絡(luò)的高速通道5) IB卡，10GbE卡6）2個(gè)I/O服務(wù)器，每臺(tái)帶有FDR（56Gb）的IB接口，2個(gè)雙端口10GbE接口7）ExaScaler并行文件系統(tǒng)SFA7700性能參數(shù)DDN SFA7700NTAP e5460DenseStakEMC VNX 5500-F System TypeSANSANSANScalability (Total # of Disks)396360250System Throughput12GB/s Read10GB/s Write (cache mirrored

13、)5GB/s Read3GB/s Write (cache mirrored)6.4GB/s Read/WriteSystem IOPS450,000 (SSD)300,000 (SSD)178,000 (SSD)Flash IntegrationYesNoYes but no Application Level IntegrationActive/Active Failover W/Out ReplicationYesYesYes實(shí)施測(cè)試方案：設(shè)備到貨清點(diǎn)確認(rèn)后，詳細(xì)安裝步驟如下：設(shè)備安裝步驟：設(shè)備上架安裝從機(jī)架滑軌拆下機(jī)箱導(dǎo)軌：安裝固定機(jī)箱導(dǎo)軌：準(zhǔn)備機(jī)架導(dǎo)軌：固定導(dǎo)軌到機(jī)柜：前視圖：后視圖

14、：將線纜插入導(dǎo)線槽存儲(chǔ)設(shè)備上架固定導(dǎo)線槽DDN SFA7700存儲(chǔ)系統(tǒng)設(shè)備線纜連接SFA7700機(jī)柜后視圖：管理網(wǎng)：SFA7700兩個(gè)控制器分別通過(guò)兩個(gè)RJ45管理網(wǎng)口與管理網(wǎng)交換機(jī)相連，配置管理網(wǎng)絡(luò)地址。IB SAN網(wǎng)絡(luò)：SFA7700兩個(gè)控制分別出兩條FQR Infiniband網(wǎng)絡(luò)與IO服務(wù)器節(jié)點(diǎn)相連。存儲(chǔ)SAS級(jí)聯(lián)存儲(chǔ)SFA7700與2個(gè)副盤柜SFA8640直接通過(guò)SAS線纜連接，連線方式如下圖所示：電源線纜連接：每個(gè)存儲(chǔ)柜出兩根16A電源線纜與存儲(chǔ)所在機(jī)柜PDU相連。DDN EF3015 存儲(chǔ)系統(tǒng)線纜連接：DDN EF3015用作整個(gè)文件系統(tǒng)元數(shù)據(jù)存儲(chǔ)單元。管理網(wǎng)：DDN EF301

15、5通過(guò)一個(gè)RJ45端口與管理網(wǎng)交換機(jī)相連，配置管理網(wǎng)絡(luò)地址。存儲(chǔ)SAN網(wǎng)絡(luò)：DDN EF3015存儲(chǔ)系統(tǒng)每個(gè)控制器通過(guò)兩根8Gb LC-LC光線線纜與IO 服務(wù)器節(jié)點(diǎn)相連。IO服務(wù)器節(jié)點(diǎn)線纜連接：管理網(wǎng)絡(luò)：每個(gè)IO服務(wù)器節(jié)點(diǎn)通過(guò)RJ45端口與管理網(wǎng)交換機(jī)相連，配置管理網(wǎng)絡(luò)地址。IPMI網(wǎng)絡(luò)：IPMI用于IO服務(wù)器直接管理，與管理網(wǎng)端口、線纜復(fù)用，配置IPMI網(wǎng)絡(luò)地址。SAN網(wǎng)絡(luò)：4根56Gb FQR Inifiniband線纜與DDN SFA存儲(chǔ)機(jī)柜相連；4根8Gb FC-FC光纖線纜與DDN EF3015存儲(chǔ)相連，作為元數(shù)據(jù)存儲(chǔ)網(wǎng)絡(luò)。業(yè)務(wù)網(wǎng)絡(luò)：2個(gè)IO服務(wù)器節(jié)點(diǎn)分別有4條10Bb萬(wàn)兆與業(yè)務(wù)網(wǎng)交換機(jī)相連，配置萬(wàn)兆網(wǎng)絡(luò)地址。設(shè)備安裝完畢。測(cè)試步驟：使用存儲(chǔ)標(biāo)準(zhǔn)測(cè)試工具IOzone軟件進(jìn)行測(cè)試，測(cè)試使用多臺(tái)Client端對(duì)文件系統(tǒng)進(jìn)行讀寫(xiě)測(cè)試，測(cè)試命令示例如下：./iozone -+m list_3 -r 1M -C -s 10g -+n -i 0 -i 1 -t 16測(cè)試結(jié)果分別測(cè)試1，2，4，8，16 節(jié)點(diǎn)當(dāng)?shù)木酆献x、寫(xiě)聚合帶寬。Power, Nominal