Mellanox4036QDR交換機(jī)白皮書

1、實(shí)用標(biāo)準(zhǔn)文案Mellanox GD4036 高性能 QDR InfiniBand 交換機(jī)Mellanox公司是全球網(wǎng)格骨干解決方案的領(lǐng)導(dǎo)者，致力于為下一代數(shù)據(jù)中心網(wǎng)絡(luò)化 計(jì)算提供最為全面的解決方案。Mellanox公司的產(chǎn)品涵蓋了從服務(wù)器到網(wǎng)絡(luò)交換到存儲(chǔ) 互聯(lián)的各個(gè)領(lǐng)域，憑借先進(jìn)的架構(gòu)設(shè)計(jì)以及嚴(yán)謹(jǐn)?shù)馁|(zhì)量控制，Mellanox公司的軟硬件產(chǎn)品在全球用戶市場(chǎng)獲得了廣泛的好評(píng)，通過(guò)舊M、HR SGI、NEC SUN合作伙伴建立了OEM&作關(guān)系，Mellanox公司的產(chǎn)品以及解決方案正在被部署在各行各業(yè)。作為業(yè)高性能InfiniBand交換解決方案，Mellanox GD4036為高性能計(jì)算集群和網(wǎng)格

2、 提供了水平空前的性能和擴(kuò)展性。GD403皎換機(jī)能使高性能應(yīng)用運(yùn)行在分布式的服務(wù) 器、存儲(chǔ)和網(wǎng)絡(luò)資源上。Mellanox GD4036對(duì)單個(gè)機(jī)箱中的36個(gè)節(jié)點(diǎn)精心設(shè)計(jì)并提供了 QDRK格的40Gb/s通訊帶寬，多臺(tái)GD403城者與Mellanox其他產(chǎn)品配合，我們可以搭 建更大規(guī)模的集群運(yùn)算系統(tǒng)，可配置的節(jié)點(diǎn)數(shù)量范圍從十幾個(gè)到幾千個(gè)，內(nèi)部無(wú)阻塞的交 換設(shè)計(jì)最大限度的為集群運(yùn)算系統(tǒng)提供了可靠高效的通訊環(huán)境文檔大全實(shí)用標(biāo)準(zhǔn)文案一、Mellanox GD4036 模塊介紹Mellanox GD4036主要由主機(jī)箱、sPSU電源模塊以及相應(yīng)的系統(tǒng)散熱模塊構(gòu)成，整機(jī) 采用模塊化設(shè)計(jì)、無(wú)線纜接插件緊密連接

3、結(jié)構(gòu)，大大提高了設(shè)備的可靠性，同時(shí)方便了系 統(tǒng)安裝以及以后的維護(hù)工作。GD4036機(jī)箱及相關(guān)部件Mellanox GD4036機(jī)箱采用工業(yè)標(biāo)準(zhǔn)設(shè)計(jì)完全符合 19英寸機(jī)柜的安裝，支持網(wǎng)絡(luò)機(jī) 柜和服務(wù)器機(jī)柜安裝使用；高度為1U,在一個(gè)標(biāo)準(zhǔn)42U機(jī)柜中可以輕松部署多臺(tái)Mellanox GD4036; Mellanox GD4036提供了機(jī)架導(dǎo)軌,更方便機(jī)箱的機(jī)柜安裝；.對(duì)外端口Mellanox GD4036機(jī)箱提供了 36個(gè)QDR 40Gb/圜口，總計(jì)可以提供 2.88Tb/s吞吐量;文檔大全實(shí)用標(biāo)準(zhǔn)文案.管理模塊Mellanox GD4036內(nèi)置了子網(wǎng)管理器，無(wú)須在服務(wù)器上安裝子網(wǎng)管理器軟件；管理

4、模 塊提供了標(biāo)準(zhǔn)的DB9串口以及以太網(wǎng)連接接口提供遠(yuǎn)程管理。同時(shí)還提供了一個(gè)標(biāo)準(zhǔn)的 USBg 口用于軟件及微碼的升級(jí)。GD403除了標(biāo)準(zhǔn)的36端口交換芯片外，還設(shè)計(jì)有由一個(gè)低功耗的 CPUW及相應(yīng)的緩 存組成的板載監(jiān)控系統(tǒng)，通過(guò)搭載相應(yīng)的固件，可以實(shí)時(shí)監(jiān)控電源模塊、風(fēng)扇散熱工作狀 況以及系統(tǒng)工作溫度等詳細(xì)信息；對(duì)于交換機(jī)端口可以實(shí)現(xiàn)啟用、禁用以及速率調(diào)整等功 能；.風(fēng)扇模塊Mellanox GD4036機(jī)箱標(biāo)準(zhǔn)配置了一個(gè)散熱模塊，內(nèi)部包含兩個(gè)冗余風(fēng)扇，支持熱 插拔更換維護(hù)，提高了高可用性和可維護(hù)性。文檔大全實(shí)用標(biāo)準(zhǔn)文案CaptiveFastener?.電源模塊隨機(jī)箱配置2個(gè)最大功率為350Wa

5、tt的電源模塊，確保系統(tǒng)能夠?qū)崿F(xiàn) N+1,N+N電源 供電，每個(gè)電源模塊提供對(duì)機(jī)箱內(nèi)所有模塊的供電，用戶不必?fù)?dān)心出現(xiàn)競(jìng)爭(zhēng)友商產(chǎn)品中的 分區(qū)供電故障問(wèn)題。所有電源模塊均位于機(jī)箱兩側(cè)支持熱插拔更換，并且與外部線纜連接 模塊不在同側(cè)，這樣的設(shè)計(jì)充分考慮了線纜布線對(duì)未來(lái)電源系統(tǒng)維護(hù)帶來(lái)的挑戰(zhàn)，大大方 便系統(tǒng)維護(hù)。匚a1二、Mellanox GD4036 可靠性Mellanox GD4036全部采用模塊化設(shè)計(jì)，部件連接均采用先進(jìn)可靠的連接模塊來(lái)實(shí)現(xiàn)，從根本上保證了系統(tǒng)內(nèi)部通訊鏈路的可靠性；在管理方面，Mellanox GD4036內(nèi)置子網(wǎng)管理器、集成 Device Manager ,可實(shí)現(xiàn)設(shè)備 硬件監(jiān)控

6、功能、完全支持 Unified Fabric Manager (UFM軟件管理；文檔大全實(shí)用標(biāo)準(zhǔn)文案在系統(tǒng)供電方面，Mellanox GD4036支持N+1以及N+N的冗余供電配置，所有電源模 塊均提供對(duì)整個(gè)機(jī)箱供電，平均負(fù)擔(dān)整機(jī)負(fù)載，電源模塊支持熱插拔更換維護(hù)，確保整個(gè) 系統(tǒng)不間斷運(yùn)行；Mellanox GD4036提供了一個(gè)散熱模塊，散熱模塊具備兩個(gè)散熱風(fēng)扇，兩路散熱風(fēng)扇 互為備份；同時(shí)，先進(jìn)的機(jī)箱模塊設(shè)計(jì)使得系統(tǒng)散熱效率最大化；Mellanox GD4036通過(guò)了國(guó)際FCG UL、CB VCCI等多項(xiàng)認(rèn)證，在產(chǎn)品設(shè)計(jì)、運(yùn)行可 靠性、電磁穩(wěn)定性等多方面獲得權(quán)威機(jī)構(gòu)的認(rèn)可！三、Mellano

7、x GD4036 性能Mellanox GD4036采用全互連無(wú)阻塞架構(gòu)，總計(jì)提供 2.88Tbps的吞吐率，同一個(gè)內(nèi)部交換模塊的兩個(gè)端口之間的延遲小于 100納秒；四、Mellanox GD4036 管理Mellanox GD4036提供了命令行管理方式以及先進(jìn)的 UFMt理軟件，借助 Mellanox UFMt理軟件，InfiniBand 網(wǎng)絡(luò)不再是個(gè)神秘的黑盒子，整個(gè)網(wǎng)絡(luò)的監(jiān)控與管理將變得透 明化、系統(tǒng)化。文檔大全實(shí)用標(biāo)準(zhǔn)文案1口 Fabnc Manager. Mellanox UFM 核心特點(diǎn)以應(yīng)用軟件為中心的網(wǎng)絡(luò)管理；無(wú)限可擴(kuò)展性提供對(duì)應(yīng)用軟件、數(shù)據(jù)庫(kù)以及存儲(chǔ)系統(tǒng)的無(wú)縫支持；直觀的展

8、現(xiàn)網(wǎng)絡(luò)交通以及設(shè)備運(yùn)行狀況，確保用戶清晰并深度掌握網(wǎng)絡(luò)工作 先進(jìn)的網(wǎng)絡(luò)阻塞狀況發(fā)現(xiàn)與分析優(yōu)化處理功能；基于應(yīng)用軟件工作流以及網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)的通訊路由優(yōu)化功能；可設(shè)定與調(diào)節(jié)的故障預(yù)警機(jī)制，使用戶對(duì)網(wǎng)絡(luò)通訊狀況了如指掌； 提供網(wǎng)絡(luò)分區(qū)以及多服務(wù)等級(jí)的分區(qū)功能，方便用戶設(shè)定與調(diào)整； 提供在一個(gè)共享的網(wǎng)絡(luò)中實(shí)現(xiàn)多個(gè)基于應(yīng)用軟件的獨(dú)立通訊區(qū)域設(shè)定； 集中化的InfiniBand網(wǎng)絡(luò)設(shè)備管理使得大型網(wǎng)絡(luò)中設(shè)備管理更為便捷； 安全可靠的H即構(gòu)設(shè)計(jì)確保UF幡理系統(tǒng)的高可用性；文檔大全實(shí)用標(biāo)準(zhǔn)文案提供API接口，方便用戶將UFMT理納入現(xiàn)有的綜合管理系統(tǒng)中。. Mellanox UFM 網(wǎng)絡(luò)狀況發(fā)現(xiàn)與控制Mell

9、anox UFM集成了先進(jìn)的網(wǎng)絡(luò)監(jiān)控引擎，對(duì)InfiniBand 網(wǎng)絡(luò)交換機(jī)以及連接到 InfiniBand 網(wǎng)絡(luò)的主機(jī)提供實(shí)時(shí)的監(jiān)控。Mellanox UFM提供了一個(gè)可自行設(shè)定的公告牌界面，可以提供網(wǎng)絡(luò)健康狀況以及 主機(jī)CPU內(nèi)存、磁盤等資源的使用狀況，通過(guò)公告牌界面，我們可以方便的看到服務(wù)器 中網(wǎng)絡(luò)通訊帶寬開銷最大的Top10 （數(shù)量可以自行設(shè)定），網(wǎng)絡(luò)中阻塞最多的Top10,網(wǎng)絡(luò)中故障報(bào)警的實(shí)時(shí)列表，網(wǎng)絡(luò)中阻塞問(wèn)題的熱點(diǎn)出現(xiàn)在哪里等等，ILL文檔大全實(shí)用標(biāo)準(zhǔn)文案.網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)自動(dòng)發(fā)現(xiàn)，網(wǎng)絡(luò)瓶頸實(shí)時(shí)顯示Mellanox UFM能夠自動(dòng)監(jiān)測(cè)網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)并自動(dòng)繪制出相應(yīng)的拓?fù)浣Y(jié)構(gòu)圖，同 時(shí)，

10、通過(guò)實(shí)時(shí)的通訊鏈路監(jiān)控， Mellanox UFM能夠自動(dòng)發(fā)現(xiàn)網(wǎng)路擁塞的熱點(diǎn)區(qū)域并通過(guò) 圖表方式顯示給用戶，此功能可以幫助用戶精確的定位網(wǎng)絡(luò)通訊的阻塞狀況，為下一步性 能優(yōu)化提供參考數(shù)據(jù)。.網(wǎng)絡(luò)分區(qū)優(yōu)化與路由通訊優(yōu)化Mellanox UFM提供先進(jìn)的網(wǎng)絡(luò)通訊優(yōu)化功能，針對(duì)不同需求的計(jì)算群組（低延 遲、高帶寬等等）可以創(chuàng)建相應(yīng)的邏輯計(jì)算機(jī)資源組，在同一個(gè)組內(nèi)的計(jì)算節(jié)點(diǎn)之間通訊 會(huì)自動(dòng)根據(jù)所設(shè)定的網(wǎng)絡(luò)需求類型進(jìn)行優(yōu)化，確保網(wǎng)絡(luò)通訊能夠分層進(jìn)行，大大提高網(wǎng)絡(luò) 通訊效率；文檔大全實(shí)用標(biāo)準(zhǔn)文案Low LatencyNetworkSLO (High Priority VL)Law LatencyAppli

11、cationHigh Throughput Network SL1 (Low Priority VL)CMUa，GauNQSBCiF1Hhi 工(eg MPI)Juii IPC Iradfic：4Nefi*1皿I 劉IRC t Slorige usi 1b iuriQ CoSQ0恤摑 rsIPC t Slorige Kparra CoS41Um加 $因ib 11: Ff1tTnxK4 irpxiHrHil uang cte ec4iIhiF4b botW 4 feWcWR同時(shí)，Mellanox UFM還提供了獨(dú)有的Traffic Optimized Routing (TOR) 路由算法，經(jīng)過(guò)優(yōu)

12、化后，網(wǎng)絡(luò)中的阻塞熱點(diǎn)會(huì)自動(dòng)被均衡再分配，大大降低網(wǎng)絡(luò)帶寬資源爭(zhēng)搶所造成的整體計(jì)算效率下降的問(wèn)題文檔大全實(shí)用標(biāo)準(zhǔn)文案5,全網(wǎng)絡(luò)通訊日志收集與保存Mellanox UFM會(huì)自動(dòng)收集并保存整個(gè)網(wǎng)絡(luò)（包括交換機(jī)端、計(jì)算節(jié)點(diǎn)I/O節(jié)點(diǎn)端）的通訊日志，為系統(tǒng)通訊狀況分析以及故障排查提供強(qiáng)有力的資源支持。amg國(guó)場(chǎng)格+F 3tti砒MMi FMJ潮IWMIOML JlttM? IIN3M9g國(guó) 帕+21+T旦眼梆4，朝國(guó)同口M 皿田和碑ONEJII般:在IJW維6 博 瓶恰妙:% ruugjp第3KKM, iFftiilW 山!而MiBOiqa 1&信妙 4HgeI葡必|:huiH第川 嶼(鼠I口懶i悚嫻

13、寓 iffliici54-r*fw*gi zm-u-ia 1 氏皿仃:Nvh nil EM! iriildfFlJMfllbXni(nne. ifTorrm I)jJMW-O6-M lfc4J:*T MalGndJ#AI :l*ail itatalitiiTlZUIbMOIEnCO, H+OZc4HxvTVigl zm-os-id /此。UMGnd ：Nm nudirubKid+iJuibaaaiaaaa, iiinzc irniEI：iamgm 博珞仃 3HGrid4*-si*l ：rt：wi TXBjn lEWIbMWiffliX IffWWmWEgl MHgl打白將卡受嘲addjWJtl

14、El陋加 swW詞liWIgMMXL IHWviSS 所由巾維HHK國(guó) 帕+21+T旦期*:!安心河Jlteb/ci單|*叁1卅國(guó)H陽(yáng)聯(lián)翼I期UTO瓦枳&*由前 曲的由ifclSlT SuiM.Watl ：叫 小也第 g策網(wǎng)Olhawu(H.加晶工4用fW處g向1也壯M NHGJzWMI加到 Ej ikfclnH口州I取加值陪 MM中汕*1-M ZXR-CM-ll 偈g45 HiiSdhMl :Hvi rcul -vjp tnitjfFl JMlbnaiim. lilKEKd |JH* 伍任祠:Kfcail g4i tatalidiPnuibHKCOCO, ll+iLk45dCMvTWigl1

15、axHair I也此帖:Hm mil ijov inMfFlJUItmiani, IIIDGr-m |Md：iM中國(guó) Ifr+X I* 威HSeEFiwI.gWW0*wM*wdJiwcimlMlg3MH-fflrifl g+* g*18dMiE!wj(*項(xiàng)1er(5耳 加nw 時(shí)第妨國(guó) 用他四仃3皿曲詞4期川 心*安衍曰心斷他trim2W9-Oei-L81氏1)&1(曰日前對(duì)工鵬田口刖口心，時(shí)4司刊-04-1, &，興Emicrnrril*1 JjtkL):tW lEm-inJ(inf4)JSXn-06-13 ：1 氏，生3 LcdfeisvilErih-|.U5i*i-vial :bcd3a

16、-w iabMd Jmcuid S-iw 由6Hd * henunt IciaadCHI 20H-a&-lfl 僻+* I9 1rrwtEMVriiaidrrTil | ;LondM* SiUASiHhiHi lenwiuli：*amXW-l? Ifr+S IB MOWi W* rQT期 IfWSM9gM g他22 6婀 ffelwt 口信不H料:wmMMcil堂的強(qiáng)四 抵格陞34期必EfR-j電通即口M處地的心由 1&11： M；Si4 *tbvjf kWWWr4M/ 山/H用44:：I：IzhtolgnMi tfefanHtlZNnbcnnan ll3c4*EhiNaSivtiiy國(guó)網(wǎng)rr

17、mm附州第審即tigMdHU第第gig依位守卜0491T41晅附誣力Kideiu謝事1府10；!。(由 l.rUK4lXi3rrvWH g tiMvJ總V1*ii mital ndxmEwi&iE%1FibiE F-MbcriETiHeadikkrtKlUhla占a3XH-M-IJ IM 47FhE 11Hbeb-tawrKidri*dHrMwrdrgXKH-OS-ld 1LMHTbmhcjriETiNoiri 伊mfi十 H4KKXHXKIHIHHTrift喧nm他陽(yáng)皿。gjp rir4MinM._ 5“下 11 ilC i-3 4-ri1iiTEm4.k HL_Fjr liaxi i -jwrI1 Jbn 口,上通口電文檔大全實(shí)用標(biāo)準(zhǔn)文案6. Mellanox UFM 支持的InfiniBand網(wǎng)絡(luò)設(shè)備以及主機(jī)平臺(tái)Mellanox UFM支持的硬件交換機(jī)平臺(tái)：Mellanox GD2004/2012 系列Mellanox Vantage 系歹!JMellanox GD4000系歹 UMellanox IS5000系列M