FusionCube+6.0+網(wǎng)絡(luò)架構(gòu)與配置+01

FusionCube6.0

網(wǎng)絡(luò)架構(gòu)與配置FusionCube作為實(shí)現(xiàn)企業(yè)信息一體化的云平臺(tái)，定位于面向中、高端企業(yè)的信息化，以“軟硬件垂直深度集成和調(diào)優(yōu)”、“快速部署”、“統(tǒng)一管理”的理念，提供基于云計(jì)算技術(shù)的“基礎(chǔ)架構(gòu)一體機(jī)”，提升核心業(yè)務(wù)運(yùn)作效率。FusionCube基礎(chǔ)設(shè)施，為計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)合一的設(shè)備，基于存儲(chǔ)型服務(wù)器和分布式存儲(chǔ)FusionStorage軟件，具有性能高，擴(kuò)展靈活以及交付簡單的特點(diǎn)。本章詳細(xì)介紹FusionCube的網(wǎng)絡(luò)組成，包括：物理組網(wǎng)，邏輯組網(wǎng)以及網(wǎng)絡(luò)配置。學(xué)完本課程后，您應(yīng)該能：了解和掌握FusionCube的網(wǎng)絡(luò)組成；了解和掌握FusionCube的物理組網(wǎng)形態(tài)；了解和掌握FusionCube的邏輯網(wǎng)絡(luò)劃分；了解和掌握FusionCube的網(wǎng)絡(luò)配置；FusionCube物理組網(wǎng)FusionCube邏輯組網(wǎng)FusionCube基本網(wǎng)絡(luò)技術(shù)和應(yīng)用FusionCube網(wǎng)絡(luò)配置FusionCube網(wǎng)絡(luò)設(shè)備簡介FusionCube超融合基礎(chǔ)設(shè)施硬件平臺(tái)分E9000V5、X6800V5、X6000V5、2288HV5、1288HV5、2488V5、TaiShan2280V2。這些平臺(tái)用到的網(wǎng)絡(luò)設(shè)備稍有不同，如下表：交換機(jī)硬件平臺(tái)網(wǎng)卡說明E900010GE網(wǎng)卡：MZ310(2*10GE)/MZ312(4*10GE)必配，默認(rèn)配置MZ310/MZ312IB網(wǎng)卡：MZ620(2*100G,PCIE3.0X16)在高性能虛擬化和數(shù)據(jù)庫場景中使用

機(jī)架PCIE網(wǎng)卡：2*GE/4*GE在機(jī)架數(shù)據(jù)庫組網(wǎng)場景中使用X6800/2288H/1288H/24882*10GE/4*10GE/6*10GE10GE組網(wǎng)場景E9000/機(jī)架2*100Gbps網(wǎng)卡IB組網(wǎng)場景CE6855-48T6Q-HICX320交換板CE5855-48T4S2Q-EICE6851-48S6Q-HISB7800:36口IB交換機(jī)CX621交換板CE6881-48S6Q-HIE9000框內(nèi)網(wǎng)絡(luò)物理連接示意圖(1/2)40GE10GEIBGESlotnMz620(Mezz2)BMCGESwitchMMIBFDRSwitchIB(1E)BMC10GESwitch10GE(2X)BMCGESwitchMMIBFDRSwitchIB(4E)BMC10GESwitch10GE(3X)BMCSlotn+8MZ312(Mezz1)123412MZ312(Mezz1)1234Mz620(Mezz2)12BMC18181616MGMTSTACKMGMTSTACKE9000框內(nèi)網(wǎng)絡(luò)物理連接示意圖(2/2)E9000網(wǎng)絡(luò)物理上分為BMC平面、10GE網(wǎng)絡(luò)平面和IB網(wǎng)絡(luò)平面；BMC統(tǒng)一通過SMM板上的GESwitch進(jìn)行交換，除對(duì)外提供接口外，還可以跟10GE網(wǎng)路互通。10GE通過2X和3X上的CX320進(jìn)行交換；對(duì)應(yīng)的網(wǎng)卡最大支持4*10GE接口，10GE交換板是必配的。IB通過1E和4E槽位的CX621進(jìn)行交換。IB交換根據(jù)實(shí)際情況進(jìn)行選配。圖中的Slotn/Slotn+8為半寬槽位，如果為全寬槽位，最大支持4個(gè)網(wǎng)卡。虛擬化物理組網(wǎng)(E9000-10GE)(1/2)E9000_2CX320CX320MM1MM2E9000_3CX320CX320MM1MM2E9000_32CX320CX320MM1MM2E9000_1CX320CX320MM1MM248x10GE-148x10GE-2堆疊Eth-trunk4x10GEEth-trunk4x10GEEth-trunk4x10GEEth-trunk4x10GE14/8x10GE/GE11111E9000_0基本框CX320CX32018x56Gb18x56GbMM1MM2單框配置場景堆疊業(yè)務(wù)上行Eth-trunk設(shè)備管理上行10GE光纖虛擬化物理組網(wǎng)(E9000-10GE)(2/2)每個(gè)E9000插框使用CX320交換板，所有機(jī)框通過外置交換機(jī)級(jí)聯(lián)?？蜷g使用4*10GE互聯(lián)。最大支持32框，框內(nèi)兩塊交換板通過40G接口堆疊；外置交換機(jī)上行8/4個(gè)10GE/GE或者4*40GE，管理和業(yè)務(wù)上行；數(shù)據(jù)庫物理組網(wǎng)(E9000)(1/2)堆疊業(yè)務(wù)上行Eth-trunk100GbIB線纜設(shè)備管理上行10GE光纖E9000_0管理+4計(jì)算+3存儲(chǔ)CX320CX320CX621CX621MM1MM2單框配置場景28x10GEE9000_28SNACX320CX320CX621CX621MM1MM2E9000_88SNACX320CX320CX621CX621MM1MM2E9000_11管理+7DBNCX320CX320CX621CX621MM1MM248x10GE-148x10GE-2堆疊4x10GE2x10GE2x10GEIBSwitch-1IBSwitch-244222222114/8x10GE4422數(shù)據(jù)庫物理組網(wǎng)(E9000)(2/2)10GE網(wǎng)絡(luò)：每個(gè)E9000插框使用CX320交換板，每個(gè)計(jì)算框通過8*10GE與外置10GE交換機(jī)互聯(lián)，每個(gè)存儲(chǔ)框通過2*10GE與外置10GE交換機(jī)互聯(lián)，用于管理和業(yè)務(wù)平面通信。IB網(wǎng)絡(luò)：每個(gè)E9000機(jī)框使用CX621交換板，每個(gè)計(jì)算框通過16*IB與外置IB交換機(jī)互聯(lián)，每個(gè)存儲(chǔ)框通過8*IB與外置IB交換機(jī)互聯(lián)，用于存儲(chǔ)平面通信。（單框時(shí)兩塊IB交換板通過2*100GIB互聯(lián)）。原則上DB節(jié)點(diǎn)都配置在同一個(gè)E9000機(jī)框，所有機(jī)框通過外置交換機(jī)級(jí)聯(lián)，最大支持32框。外置10GE交換機(jī)上行8/4個(gè)10GE/GE或者4*40GE，管理和業(yè)務(wù)上行。數(shù)據(jù)庫物理組網(wǎng)(機(jī)架)(1/3)上行10GEBMC網(wǎng)線Eth-trunk/bond100GbIB線纜設(shè)備管理上行堆疊內(nèi)部管理網(wǎng)線BMCSNA2xGE2xIBMCNA2xGEBMC2x10GEBMC2xGEDBN2xIB堆疊2x10GE/GE客戶管理匯聚客戶業(yè)務(wù)匯聚2xGE2xGE2xGE4IBSwitch-1IBSwitch-248xGE-248xGE-111111111112x10GE機(jī)架式數(shù)據(jù)庫支持的服務(wù)器：MCNA：1288HV5/2288HV5/2280V2DBN：1288HV5/2288HV5/2488HV5SNA：2288HV5/2280V2數(shù)據(jù)庫物理組網(wǎng)(機(jī)架)(2/3)組網(wǎng)說明：每節(jié)點(diǎn)的2個(gè)GE網(wǎng)口和BMC網(wǎng)口分別連接到2個(gè)外置GE交換機(jī)（堆疊），IB交換機(jī)的管理接口連接到GE交換機(jī)堆疊GE交換機(jī)向客戶管理網(wǎng)絡(luò)提供2xGE的上行業(yè)務(wù)默認(rèn)直接上行到客戶的業(yè)務(wù)網(wǎng)絡(luò)，如果需要匯聚，則另增加1對(duì)10GE交換機(jī)連接即可。每個(gè)計(jì)算和存儲(chǔ)節(jié)點(diǎn)的IB接口分別連接到外置1對(duì)IB交換機(jī)上，2個(gè)IB交換機(jī)之間4根IB線互連（只有1對(duì)IB交換機(jī)時(shí)）每1個(gè)機(jī)柜配置1對(duì)IB交換機(jī)，當(dāng)部署規(guī)模大于2機(jī)柜時(shí)，每機(jī)柜增加1臺(tái)IB匯聚交換機(jī)，支持平滑擴(kuò)容數(shù)據(jù)庫物理組網(wǎng)(機(jī)架)(3/3)機(jī)柜間平滑擴(kuò)容方案：每機(jī)柜配置1對(duì)IBLeaf交換機(jī)部署單機(jī)柜時(shí)，配置1對(duì)IB交換機(jī)作為Leaf交換機(jī)，IB交換機(jī)之間連接4條IB線纜，IB交換機(jī)連接SNA和計(jì)算節(jié)點(diǎn)單機(jī)柜擴(kuò)容機(jī)柜時(shí)，每機(jī)柜增加1臺(tái)IB交換機(jī)作為Spine交換機(jī)，原1對(duì)IBLeaf交換機(jī)使用16條IB線纜連接到新增加的IBSpine交換機(jī)，并且拆除原1對(duì)IB交換機(jī)之間互連的4條IB線纜4機(jī)柜內(nèi)，每IBLeaf交換機(jī)與每IBSpine交換機(jī)之間采用4根IB線纜連接，5和6柜時(shí)，每IBLeaf交換機(jī)與每IBSpine交換機(jī)之間采用3根IB線纜連接，7和8柜時(shí)，每IBLeaf交換機(jī)與每IBSpine交換機(jī)之間采用2根IB線纜連接服務(wù)器規(guī)模大于8柜時(shí)，每6個(gè)機(jī)柜1組，柜內(nèi)的IBLeaf交換機(jī)與本柜及其它5個(gè)柜的IBSpine交換機(jī)用2根IB線纜連接，每個(gè)IBSpine交換機(jī)與上層每個(gè)IBSpine交換機(jī)之間用2根IB線纜連接虛擬化物理組網(wǎng)(X6800-10GE小規(guī)模)(1/2)X6800-02x10GE堆疊48x10GE-148x10GE-22x10GE2x10GE2x10GEHMMMCNA1MCNA2SCNASCNA2x10GE2x10GE2x10GEX6800-32x10GE2x10GE2x10GE2x10GEHMMSCNASCNASCNASCNA2x10GE2x10GE2x10GE2x10GE…2x10GE10GEGE上行10GE設(shè)備管理上行Eth-trunk/bond堆疊虛擬化物理組網(wǎng)(X6800-10GE小規(guī)模)(2/2)說明：小規(guī)模場景，節(jié)點(diǎn)數(shù)小于16臺(tái)情況下，每個(gè)節(jié)點(diǎn)可配置1個(gè)2*10GE端口的網(wǎng)卡；配置1對(duì)CE6851交換機(jī)（也可以使用客戶交換機(jī)），兩個(gè)交換機(jī)之間通過2*40GE堆疊；1對(duì)CE6851交換機(jī)，最大支持4框X6800虛擬化物理組網(wǎng)(X6800-10GE大規(guī)模)(1/2)X6800-04x10GE堆疊48x10GE-148x10GE-24x10GE4x10GE4x10GEHMMMCNA1MCNA2SCNASCNA2*bond2x10GE2*bond2x10GE2*bond2x10GE…2*bond2x10GEX6800-34x10GE4x10GE4x10GE4x10GEHMMSCNASCNASCNASCNA2*bond2x10GE2*bond2x10GE2*bond2x10GE2*bond2x10GE10GEGE上行10GE設(shè)備管理上行Eth-trunk/bond堆疊虛擬化物理組網(wǎng)(X6800-10GE大規(guī)模)(2/2)說明：兩塊MCNA節(jié)點(diǎn)部署在同一個(gè)X6800中，每個(gè)節(jié)點(diǎn)配置兩張2x10GE網(wǎng)卡，即每節(jié)點(diǎn)4*10GE。CE6851交換機(jī)使用堆疊。并對(duì)外提供4*10GE/GE接口；1對(duì)LSW支持3框X6800。多柜情況下，每4框X6800增加1對(duì)CE6851。每對(duì)LSW之間也通過8*10GE互聯(lián)。按照1柜4框X6800，最大支持10柜40框。柜間互聯(lián)(X6800-10GE)(1/2)10GEGE上行10GE設(shè)備管理上行Eth-trunk/bond堆疊機(jī)柜1機(jī)柜2機(jī)柜1648x10GE48x10GE8x10GE8x10GE4/8x10GE48x10GE48x10GEX6800(2)4x10GEHMM4x10GE4x10GE4x10GEX6800(4)4x10GEHMM4x10GE4x10GE4x10GE2x40GEX6800(1)4x10GEHMM4x10GE4x10GE4x10GE48x10GE48x10GEX6800(2)4x10GEHMM4x10GE4x10GE4x10GEX6800(4)4x10GEHMM4x10GE4x10GE4x10GE2x40GEX6800(1)4x10GEHMM4x10GE4x10GE4x10GE48x10GE48x10GEX6800(2)4x10GEHMM4x10GE4x10GE4x10GEX6800(4)4x10GEHMM4x10GE4x10GE4x10GE2x40GEX6800(1)4x10GEHMM4x10GE4x10GE4x10GE堆疊柜間互聯(lián)(X6800-10GE)(2/2)大規(guī)模組網(wǎng)使用48口10GE交換機(jī)，系統(tǒng)通過第一對(duì)LSW統(tǒng)一匯聚上行。最大支持64框X6800。10GE小規(guī)模組網(wǎng)和GE組網(wǎng)情況下，僅使用1對(duì)LSW，不涉及柜間互聯(lián)。虛擬化物理組網(wǎng)(X6000-2*10GE)(1/2)10GEGE上行10GEEth-trunk/bond堆疊堆疊48x10GE_148x10GE_2X6000-02x10GEMgmtMCNA12xGE2x10GEMgmtMCNA22xGE2x10GEMgmtSCNA2xGE2x10GEMgmtSCNA2xGEX6000-32x10GEMgmtSCNA2xGE2x10GEMgmtSCNA2xGE2x10GEMgmtCNA2xGE2x10GEMgmtCNA2xGE2x10GE2x10GE2xGE2x10GE2x10GE2x10GE2x10GE2x10GE2x10GE2xGE2xGE2xGE2xGE2xGE2xGE2xGE4*10GE/GE虛擬化物理組網(wǎng)(X6000-2*10GE)(2/2)兩塊MCNA節(jié)點(diǎn)部署在同一個(gè)X6000機(jī)箱中，每個(gè)節(jié)點(diǎn)配置2x10GE網(wǎng)卡，每個(gè)節(jié)點(diǎn)配置1個(gè)bond，管理平面、存儲(chǔ)和業(yè)務(wù)平面使用10GEbond每節(jié)點(diǎn)的BMC通過網(wǎng)線連接到交換機(jī)，交換機(jī)對(duì)應(yīng)接口配置GE電口模塊。10GE交換機(jī)使用堆疊。并對(duì)外提供4*10GE/GE接口；1對(duì)交換機(jī)支持4框X6000。單柜最大支持16節(jié)點(diǎn)（4框）。虛擬化物理組網(wǎng)(X6000-4*10GE)(1/2)48x10GE_148x10GE_2X6000-04x10GEMgmtMCNA12xGE4x10GEMgmtMCNA22xGE4x10GEMgmtSCNA2xGE4x10GEMgmtSCNA2xGEX6000-34x10GEMgmtSCNA2xGE4x10GEMgmtSCNA2xGE4x10GEMgmtCNA2xGE4x10GEMgmtCNA2xGE2*2x10GE2*2x10GE2xGE2*2x10GE2*2x10GE2*2x10GE2*2x10GE2*2x10GE2*2x10GE2xGE2xGE2xGE2xGE2xGE2xGE2xGE4*10GE/GE10GEGE上行10GEEth-trunk/bond堆疊堆疊虛擬化物理組網(wǎng)(X6000-4*10GE)(2/2)兩塊MCNA節(jié)點(diǎn)部署在同一個(gè)X6000中，每個(gè)節(jié)點(diǎn)配置4x10GE網(wǎng)卡，每個(gè)節(jié)點(diǎn)配置2個(gè)bond，管理平面和業(yè)務(wù)平面使用1個(gè)10GEbond，存儲(chǔ)平面使用1個(gè)10GEbond每節(jié)點(diǎn)的BMC通過網(wǎng)線連接到交換機(jī)，交換機(jī)對(duì)應(yīng)接口配置GE電口模塊。10GE交換機(jī)使用堆疊。并對(duì)外提供4*10GE/GE接口；1對(duì)交換機(jī)支持4框X6000。單柜最大支持16節(jié)點(diǎn)（4框）。虛擬化物理組網(wǎng)(機(jī)架-10GE)10GE堆疊設(shè)備管理上行2GEbond服務(wù)器BMC業(yè)務(wù)上行10GE堆疊48x10GE-148x10GE-22x10GE2x10GE1114x10GE12x10GEBMCMCNA1&22x10GE2x10GEBMCSCNA2x10GE2x10GE2x10GE1111每臺(tái)服務(wù)器配置4x10GE網(wǎng)卡，兩個(gè)主備bond；每節(jié)點(diǎn)的BMC通過網(wǎng)線連接到交換機(jī)，交換機(jī)對(duì)應(yīng)接口配置GE電口模塊；1對(duì)10GE交換機(jī)之間通過堆疊，對(duì)外提供4x10GE/GE接口；虛擬化場景大于1柜時(shí)配置1對(duì)獨(dú)立匯聚交換機(jī)，用于匯聚所有機(jī)柜柜間組網(wǎng)(機(jī)架)(1/2)機(jī)柜1機(jī)柜2機(jī)柜1610GEGE上行10GE設(shè)備管理上行Eth-trunk/bond堆疊RackServer(16)2x10GEMgmt48x10GE48x10GERackServer(2)2x10GEMgmtRackServer(1)2x10GEMgmt2x10GE2x10GE2x10GE48x10GE48x10GE8x10GE8x10GERackServer(16)2x10GEMgmt48x10GE48x10GERackServer(2)2x10GEMgmtRackServer(1)2x10GEMgmt2x10GE2x10GE2x10GERackServer(16)2x10GEMgmt48x10GE48x10GERackServer(2)2x10GEMgmtRackServer(1)2x10GEMgmt2x10GE2x10GE2x10GE單柜RackServer(16)2x10GEMgmt48x10GE48x10GERackServer(2)2x10GEMgmtRackServer(1)2x10GEMgmt2x10GE2x10GE2x10GE堆疊柜間組網(wǎng)(機(jī)架)(2/2)單柜部署時(shí)，管理和業(yè)務(wù)平面直接對(duì)接客戶網(wǎng)絡(luò)當(dāng)部署規(guī)模超過1柜時(shí)，建議配置1對(duì)10GE匯聚交換機(jī)，用來匯聚所有機(jī)柜的管理和業(yè)務(wù)上行，并對(duì)客戶提供統(tǒng)一的上行每機(jī)柜部署1對(duì)48x10GE交換機(jī)，用于機(jī)柜內(nèi)部服務(wù)器的接入單獨(dú)使用1對(duì)48x10GE交換機(jī)做柜間匯聚，最大規(guī)模16柜FusionCube的網(wǎng)絡(luò)設(shè)備有哪些，分別有什么作用；E9000物理上劃分為哪幾個(gè)網(wǎng)絡(luò)；X6800物理上分為哪兩種組網(wǎng)方式；

FusionCube物理組網(wǎng)FusionCube邏輯組網(wǎng)FusionCube基本網(wǎng)絡(luò)技術(shù)和應(yīng)用FusionCube網(wǎng)絡(luò)配置FusionCube網(wǎng)絡(luò)邏輯劃分(1/2)FusionCube網(wǎng)絡(luò)從邏輯上劃分，分為BMC、管理、存儲(chǔ)以及業(yè)務(wù)四種網(wǎng)絡(luò)平面。場景網(wǎng)絡(luò)平面對(duì)應(yīng)的物理網(wǎng)絡(luò)說明虛擬化9000（10GE組網(wǎng)）BMCSMMGE網(wǎng)絡(luò)BMC平面最終通過CX320匯聚上行；每個(gè)節(jié)點(diǎn)配置4*10GE接口，存儲(chǔ)平面使用2*10GE，管理和業(yè)務(wù)共用2*10GE；管理CX32010GE網(wǎng)絡(luò)存儲(chǔ)CX32010GE網(wǎng)絡(luò)業(yè)務(wù)CX32010GE網(wǎng)絡(luò)數(shù)據(jù)庫E9000（10GE+IB組網(wǎng)）BMCSMMGE網(wǎng)絡(luò)BMC平面最終通過CX320匯聚上行；存儲(chǔ)平面單獨(dú)使用2*100GIB接口；管理平面使用2*10GE接口；管理CX32010GE網(wǎng)絡(luò)存儲(chǔ)CX621IB網(wǎng)絡(luò)業(yè)務(wù)CX32010GE網(wǎng)絡(luò)虛擬化X6800（10GE組網(wǎng)）BMCGE網(wǎng)絡(luò)BMC平面通過MM版匯聚上行，并在10GE交換機(jī)進(jìn)行交換；每個(gè)節(jié)點(diǎn)配置4*10GE接口，存儲(chǔ)平面使用2*10GE，管理和業(yè)務(wù)共用2*10GE；管理10GE網(wǎng)絡(luò)存儲(chǔ)10GE網(wǎng)絡(luò)業(yè)務(wù)10GE網(wǎng)絡(luò)FusionCube網(wǎng)絡(luò)邏輯劃分(2/2)FusionCube網(wǎng)絡(luò)從邏輯上劃分，分為BMC、管理、存儲(chǔ)以及業(yè)務(wù)四種網(wǎng)絡(luò)平面。場景網(wǎng)絡(luò)平面對(duì)應(yīng)的物理網(wǎng)絡(luò)說明數(shù)據(jù)庫場景（機(jī)架）BMCGE網(wǎng)絡(luò)BMC和管理平面通過CE5855交換機(jī)互連，并提供管理上行存儲(chǔ)平面單獨(dú)使用2個(gè)100GIB接口；計(jì)算節(jié)和存儲(chǔ)節(jié)點(diǎn)管理平面使用2*GE接口；業(yè)務(wù)平面使用4*10GE接口，直接上行到客戶的業(yè)務(wù)網(wǎng)絡(luò)管理存儲(chǔ)SB7800IB網(wǎng)絡(luò)業(yè)務(wù)10GE網(wǎng)絡(luò)虛擬化場景（機(jī)架）10GE組網(wǎng)BMC10GE網(wǎng)絡(luò)BMC、管理、存儲(chǔ)、業(yè)務(wù)四個(gè)平面全部連接到10GE交換機(jī)，并統(tǒng)一提供BMC、管理、業(yè)務(wù)上行接口2*10GE組網(wǎng)時(shí)，管理、存儲(chǔ)、業(yè)務(wù)三個(gè)平面共用一塊網(wǎng)卡，4*10GE組網(wǎng)時(shí)，管理、業(yè)務(wù)二個(gè)平面共用一塊網(wǎng)卡，存儲(chǔ)平面獨(dú)立占用一塊網(wǎng)卡管理存儲(chǔ)業(yè)務(wù)虛擬化X6000（10GE組網(wǎng)）BMC10GE網(wǎng)絡(luò)BMC、管理、存儲(chǔ)、業(yè)務(wù)四個(gè)平面全部連接到10GE交換機(jī)，并統(tǒng)一提供BMC、管理、業(yè)務(wù)上行接口2*10GE組網(wǎng)，管理、業(yè)務(wù)和存儲(chǔ)三個(gè)平面共用2*10GE網(wǎng)卡管理存儲(chǔ)業(yè)務(wù)虛擬化邏輯組網(wǎng)圖(FusionSphere)MMVRMVMFMVMCNAuserVMuserVM…MCNAFCM/FSMVMFSABMCCNAuserVM…SCNAFSABMCuserVMuserVMCNAuserVM…CNAFSABMCuserVMuserVM管理平面存儲(chǔ)平面業(yè)務(wù)平面BMC平面MGMTportStorageportServiceportMGMTportStorageportServiceportMGMTportStorageportServiceportMMDBDBNFSABMC管理平面為一體機(jī)的設(shè)備管理平面，而BMC平面為服務(wù)器硬件管理平面。管理平面和BMC平面可以共用網(wǎng)段，也可以采用不同的網(wǎng)段；存儲(chǔ)平面為FusionStorage內(nèi)部通信平面。業(yè)務(wù)平面指的是除BMC/管理、存儲(chǔ)平面外的通信平面，跟業(yè)務(wù)相關(guān)，可由客戶根據(jù)業(yè)務(wù)情況劃分單個(gè)或者多個(gè)網(wǎng)絡(luò)。數(shù)據(jù)庫邏輯組網(wǎng)圖(數(shù)據(jù)庫基礎(chǔ)設(shè)施)管理平面為一體機(jī)的設(shè)備管理平面，而BMC平面為服務(wù)器硬件管理平面。管理平面和BMC平面可以共用網(wǎng)段，也可以采用不同的網(wǎng)段；存儲(chǔ)平面為FusionStorage內(nèi)部通信的平面，存儲(chǔ)平面使用專用的IB網(wǎng)絡(luò)。業(yè)務(wù)平面指跟數(shù)據(jù)庫業(yè)務(wù)相關(guān)的通信平面，比如備份、數(shù)據(jù)加載等，可由客戶根據(jù)業(yè)務(wù)情況劃分單個(gè)或者多個(gè)網(wǎng)絡(luò)。管理平面存儲(chǔ)平面業(yè)務(wù)平面BMC平面MCNAFCC/FSMBMCDBDBNFSABMCDBDBNFSABMCSNAFSABMCSNAFSABMCMMMMFusionCube的網(wǎng)絡(luò)邏輯上劃為哪幾個(gè)平面？虛擬化場景，F(xiàn)usionSphere場景和Vmware場景網(wǎng)絡(luò)上有哪些差異？數(shù)據(jù)庫場景，存儲(chǔ)平面對(duì)應(yīng)的物理網(wǎng)絡(luò)是什么？

FusionCube物理組網(wǎng)FusionCube邏輯組網(wǎng)FusionCube基本網(wǎng)絡(luò)技術(shù)和應(yīng)用以太網(wǎng)基礎(chǔ)及應(yīng)用Infiniband基礎(chǔ)及應(yīng)用FusionCube網(wǎng)絡(luò)配置交換機(jī)堆疊(1/2)E9000_0基本框CX320CX32018x56Gb18x56GbMM1MM2E9000_1擴(kuò)展框CX320CX32018x56Gb18x56GbMM1MM2E9000_2擴(kuò)展框CX320CX32018x56Gb18x56GbMM1MM2堆疊的定義：通過堆疊線纜將多臺(tái)物理交換機(jī)連接，構(gòu)成邏輯上的堆疊交換機(jī)系統(tǒng)。FusionCube應(yīng)用：1）E9000框中的CX320交換板通過背板的40GE通道堆疊；2）跟同一臺(tái)X6800互聯(lián)的LSW通過2*40GE線纜或者專用堆疊線纜堆疊；交換機(jī)堆疊(2/2)兩臺(tái)物理交換機(jī)堆疊成一臺(tái)邏輯交換機(jī)：簡化運(yùn)維：作為一臺(tái)交換機(jī)來管理；可靠性高：堆疊內(nèi)的其中一臺(tái)物理交換機(jī)故障，另外一臺(tái)可以接管轉(zhuǎn)發(fā)，避免單點(diǎn)故障；無環(huán)網(wǎng)絡(luò)：堆疊后跨設(shè)備鏈路聚合可避免環(huán)路出現(xiàn)。鏈路均衡：跨設(shè)備的鏈路ECMP，網(wǎng)絡(luò)鏈路和帶寬利用率可達(dá)100%。鏈路聚合—交換機(jī)之間E9000_0基本框CX320CX32018x56Gb18x56GbMM1MM2E9000_1擴(kuò)展框CX320CX32018x56Gb18x56GbMM1MM2E9000_2擴(kuò)展框CX320CX32018x56Gb18x56GbMM1MM2Eth-Trunk鏈路聚合（

link-Aggregation）:把多條物理鏈路聚合成一條邏輯鏈路（Eth-Trunk）。目的：增加帶寬和增加可靠性場景硬件類型聚合端口數(shù)虛擬化E90004*10GE2288H4*10GEX60004*10GEX68004*10GE數(shù)據(jù)庫E90002*10GE鏈路聚合—服務(wù)器側(cè)組BOND(1/2)鏈路聚合（

link-Aggregation）在服務(wù)器側(cè)的應(yīng)用，即組bond。場景硬件類型網(wǎng)卡配置BONDBOND模式網(wǎng)絡(luò)平面說明虛擬化E90002*10GEebond0(eth0,eth1)主備管理/存儲(chǔ)/業(yè)務(wù)1）管理平面所在的bond固定為主備模式。2）存儲(chǔ)平面若為2*10GE，則bond模式為主備，4*GE則bond為負(fù)荷分擔(dān)模式。3）業(yè)務(wù)平面默認(rèn)為主備模式，客戶可根據(jù)實(shí)際情況調(diào)整bond模式。4）E9000實(shí)現(xiàn)跨網(wǎng)卡組bond，以提高可靠性。5）2288H/X6800/X6000按各自網(wǎng)卡組bond4*10GEebond0(eth0,eth3)ebond1(eth1,eth2)主備管理/業(yè)務(wù)(ebond0)存儲(chǔ)(ebond1)2*IBIbond(ib0,ib1)主備存儲(chǔ)X68004*10GEebond0(eth0,eth1)ebond1(eth2,eth3)主備管理/業(yè)務(wù)(ebond0)存儲(chǔ)(ebond1)6*GEebond0(eth0,eth1)ebond1(eth2~eth5)主備負(fù)荷分擔(dān)管理/業(yè)務(wù)(ebond0)存儲(chǔ)(ebond1)2288H2*10GEebond0(eth0,eth1)主備管理/存儲(chǔ)/業(yè)務(wù)4*10GEebond0(eth0,eth3)ebond1(eth1,eth2)主備管理/業(yè)務(wù)(ebond0)存儲(chǔ)(ebond1)X60002*GE+2*10GEebond0(eth0,eth3)ebond1(eth1,eth2)主備管理/業(yè)務(wù)(ebond0)存儲(chǔ)(ebond1)鏈路聚合—服務(wù)器側(cè)組BOND(2/2)場景硬件類型網(wǎng)卡配置BONDBOND模式網(wǎng)絡(luò)平面說明數(shù)據(jù)庫E90004*10GEebond0(eth0,eth3)ebond1(eth1,eth2)主備管理(ebond0)業(yè)務(wù)(ebond1)1）管理平面所在的bond固定為主備模式。2）存儲(chǔ)平面若為2*10GE，則bond模式為主備，4*GE則bond為負(fù)荷分擔(dān)模式。3）業(yè)務(wù)平面默認(rèn)為主備模式，客戶可根據(jù)實(shí)際情況調(diào)整bond模式。4）E9000實(shí)現(xiàn)跨網(wǎng)卡組bond，以提高可靠性。2*10GEebond0(eth0,eth1)主備管理/業(yè)務(wù)(ebond0)Ibond(ib0,ib3)主備存儲(chǔ)2*IBIbond(ib0,ib1)主備存儲(chǔ)機(jī)架2*GE4*10GEebond0(eth0,eth1)ebond1(eth2,eth3)Ebond2(eth4,eth5)主備管理(ebond0)業(yè)務(wù)1(ebond1)業(yè)務(wù)2(ebond2)2*GEebond0(eth0,eth1)主備管理4*IBIbond(ib0,ib3)主備存儲(chǔ)2*IBIbond(ib0,ib1)主備存儲(chǔ)鏈路聚合（

link-Aggregation）在服務(wù)器側(cè)的應(yīng)用，即組bond。VLAN基礎(chǔ)虛擬局域網(wǎng)（VLAN——VirtualLocalAreaNetwork）邏輯上把網(wǎng)絡(luò)資源和網(wǎng)絡(luò)用戶按照一定的原則進(jìn)行劃分，把一個(gè)物理上實(shí)際的網(wǎng)絡(luò)劃分成多個(gè)小的邏輯的網(wǎng)絡(luò)。VLAN的作用：隔離廣播域，抑制廣播報(bào)文。減少物理網(wǎng)絡(luò)移動(dòng)和改變的代價(jià)，增強(qiáng)通訊的安全性和健壯性。VLAN有4中劃分方式：基于端口、MAC、協(xié)議和子網(wǎng)進(jìn)行劃分。交換機(jī)端口分類：Access、Trunk、Hybrid三種端口：Access端口：一般用于接用戶計(jì)算機(jī)的端口，

只能以u(píng)ntag方式從屬于唯一一個(gè)vlan。Trunk端口：一般用于交換機(jī)之間連接的端口，

能以tag方式屬于多個(gè)vlan，

以u(píng)ntag方式屬于一個(gè)vlan（PVID對(duì)應(yīng)的vlan）。Hybrid端口：可以用于交換機(jī)之間連接，

也可以用于接用戶的計(jì)算機(jī)。

分別能以tag和untag方式屬于多個(gè)vlan，但PVID只有一個(gè)。VLAN-1VLAN-2VLAN-1VLAN-2SWASWBVLAN2FusionCubeVLAN應(yīng)用FusionCube默認(rèn)使用的VLAN為子網(wǎng)VLAN。如下表網(wǎng)絡(luò)平面默認(rèn)VLAN默認(rèn)IP段默認(rèn)網(wǎng)關(guān)說明管理平面VLAN1/24如果要更改VLAN，需要手工配置交換機(jī)。如果BMC和管理平面合并時(shí)，BMC平面使用VLAN1，網(wǎng)段跟管理平面相同。BMC平面VLAN4030/24如果BMC和管理平面分離時(shí)，BMC平面默認(rèn)為VLAN4030。安裝或者初始化時(shí)可修改。存儲(chǔ)平面VLAN4050/24安裝或者初始化時(shí)可修改。業(yè)務(wù)平面VLANN自定義自定義客戶自定義，需要手工配置交換機(jī)。IP地址分配FusionCube在安裝/初始化過程中默認(rèn)自動(dòng)分配IP地址，IP地址從小到大分配，并遵循以下原則：1）優(yōu)先分配管理VM：FusionCubeCenterFusionComputerFusionManager，優(yōu)先分配浮動(dòng)IP地址，然后是主備IP。2）按照插框劃分，優(yōu)先分配Hypervisor的管理IP，然后是控制VM的管理IP，然后是BMCIP（BMC和管理平面合并情況）。3）最后分配MM版的管理IP。4）Vmware場景，存儲(chǔ)IP則優(yōu)先分配hypervisor的存儲(chǔ)IP，然后控制VM的存儲(chǔ)IP。FusionCube物理組網(wǎng)FusionCube邏輯組網(wǎng)FusionCube基本網(wǎng)絡(luò)技術(shù)和應(yīng)用以太網(wǎng)基礎(chǔ)及應(yīng)用Infiniband基礎(chǔ)及應(yīng)用FusionCube網(wǎng)絡(luò)配置IB網(wǎng)絡(luò)簡介1）以太網(wǎng)的可用性問題：廣播風(fēng)暴，大量的帶寬占用；2）以太網(wǎng)的效率問題：對(duì)此內(nèi)存拷貝，增加時(shí)延和CPU消耗；3）多網(wǎng)融合問題：計(jì)算網(wǎng)絡(luò)(IP)無法和存儲(chǔ)網(wǎng)絡(luò)(FC)融合；4）新型高速網(wǎng)絡(luò)需求：小型機(jī)單機(jī)性能存在極限，而X86機(jī)群易擴(kuò)展，成本低，但以太網(wǎng)無法發(fā)揮其整體性能；IB網(wǎng)絡(luò)可以很好的解決以上問題。InfiniBand技術(shù)不是用于一般網(wǎng)絡(luò)連接的，它的主要設(shè)計(jì)目的是針對(duì)服務(wù)器端的連接問題的。InfiniBand網(wǎng)絡(luò)的特點(diǎn)：高帶寬、低時(shí)延IB組網(wǎng)InfiniBand網(wǎng)絡(luò)典型的網(wǎng)絡(luò)拓補(bǔ)如下圖所示。1）主機(jī)通道適配器（HCA）：終結(jié)IB鏈路的設(shè)備，實(shí)現(xiàn)傳輸層功能；2）交換機(jī)：在一個(gè)子網(wǎng)內(nèi)實(shí)現(xiàn)包轉(zhuǎn)發(fā)的設(shè)備；其中交換機(jī)分為葉子交換機(jī)（leafSwitch）和主干交換機(jī)（SpineSwitch）。IBHCALeafSwitchSpineSwitchIB子網(wǎng)管理簡介InfiniBand是一個(gè)功能完善的通信網(wǎng)絡(luò)，使用簡單。IB網(wǎng)絡(luò)可以自動(dòng)發(fā)現(xiàn)網(wǎng)絡(luò)拓補(bǔ)、自動(dòng)配置。其子網(wǎng)管理具有以下功能：1）物理子網(wǎng)建立2）子網(wǎng)發(fā)現(xiàn)3）信息收集4）LID分發(fā)5）建立通道6）端口配置7）交換機(jī)配置8）啟動(dòng)子網(wǎng)OpenSM部署FusionCube系統(tǒng)中IB網(wǎng)絡(luò)的子網(wǎng)管理器使用的是OpenSM，整個(gè)系統(tǒng)最大部署4個(gè)（單框情況下部署3個(gè)），保證單個(gè)InfiniBand端口、Blade服務(wù)器，InfiniBand交換機(jī)和機(jī)框故障情況下，系統(tǒng)在還有opensm可以提供服務(wù)，保證IB網(wǎng)絡(luò)正常通信。CX621Bladesever0Bladesever1Bladesever2Bladesever…CX621E9000-0CX621Bladesever0Bladesever1Bladesever2Bladesever…CX621E9000-1opensm0opensm1opensm2opensm3IB鏈路自動(dòng)遷移正常情況下Server1與Server2之間通信鏈路為A和C、B和D，而A和D、B和C之間無通信鏈路。當(dāng)服務(wù)器單網(wǎng)口A故障或者相連的IB交換板故障時(shí)，A和C之間就無通信鏈路，B和D正常，而B和C之間也無通信鏈路。此時(shí)帶寬為正常時(shí)的一半。CX621CX621CX621CX621CX621CX621ABServer1CDServer2CX621CX621CX621CX621CX621CX621ABServer1CDServer2XCUD1XCUD2CX621CX621CX621CX621ABServer1CDServer2當(dāng)兩服務(wù)器對(duì)角網(wǎng)口A、D故障或者相連的IB交換板故障時(shí)，才會(huì)有B和C之間建立通信鏈路。此時(shí)帶寬為正常時(shí)的一半。FusionCube的以太網(wǎng)路使用到哪些技術(shù)？交換機(jī)堆疊有哪些好處？一體機(jī)網(wǎng)絡(luò)默認(rèn)的VLAN號(hào)和IP段有哪些？IB網(wǎng)絡(luò)具有什么特點(diǎn)？有什么優(yōu)點(diǎn)？舉例說明一體機(jī)單框場景IB鏈路自動(dòng)遷移？

FusionCube物理組網(wǎng)FusionCube邏輯組網(wǎng)FusionCube基本網(wǎng)絡(luò)技術(shù)和應(yīng)用FusionCube網(wǎng)絡(luò)配置網(wǎng)絡(luò)配置總體流程開始交換機(jī)基礎(chǔ)配置安裝過程中的網(wǎng)絡(luò)配置初始化過程中的網(wǎng)絡(luò)配置上行接口配置業(yè)務(wù)平面配置網(wǎng)絡(luò)規(guī)劃結(jié)束級(jí)聯(lián)網(wǎng)絡(luò)配置開局前收集網(wǎng)絡(luò)相關(guān)數(shù)據(jù)（

IP地址段和VLAN信息）并根據(jù)組網(wǎng)方案做好規(guī)劃。產(chǎn)品提供相應(yīng)的集成設(shè)計(jì)工具。加載交換機(jī)初始配置腳本（出廠已經(jīng)預(yù)置）。如果是CE6851/CE6855交換機(jī)，則需要配置交換機(jī)堆疊、管理IP和存儲(chǔ)VLAN。安裝過程中根據(jù)網(wǎng)絡(luò)規(guī)劃輸入相關(guān)的IP地址段和VLAN信息，安裝工具即自動(dòng)按照輸入的信息進(jìn)行安裝和配置。初始化過程中也可以進(jìn)行網(wǎng)絡(luò)配置。預(yù)裝場景，根據(jù)網(wǎng)絡(luò)規(guī)劃輸入相關(guān)的IP地址段和VLAN信息，安裝工具即自動(dòng)按照輸入的信息進(jìn)行安裝和配置?，F(xiàn)場安裝場景，可進(jìn)行IP地址修改。配置級(jí)聯(lián)（每對(duì)交換機(jī)之間）接口Eth-Trunk。上行接口配置。業(yè)務(wù)平面網(wǎng)絡(luò)相關(guān)的配置（不在一體機(jī)的交付范圍）。CE6851交換機(jī)基礎(chǔ)配置(1/2)<HUAWEI>system-view[~HUAWEI]stack[~HUAWEI-stack]stackmember1renumber2Warning:ThestackconfigurationofmemberID1willbeinheritedtomemberID2afterthedeviceresets.Continue?[Y/N]:y[*HUAWEI-stack]quit[*HUAWEI]commit[~HUAWEI]quit<HUAWEI>rebootfast1）設(shè)置交換機(jī)堆疊ID。注意：每對(duì)交換機(jī)中的只配置其中一個(gè)交換機(jī)堆疊ID。命令如下：3）設(shè)置堆疊交換機(jī)的管理IP地址，命令如下：<HUAWEI>system[~HUAWEI]vlanbatch4030[*HUAWEI]interfacevlanif4030[*HUAWEI-Vlanif4030]ipaddress324[*HUAWEI-Vlanif4030]quit[*HUAWEI]commit2）導(dǎo)入交換機(jī)堆疊配置文件，堆疊交換機(jī)。CE6851交換機(jī)基礎(chǔ)配置(2/2)3）配置存儲(chǔ)VLAN：[~HUAWEI]vlanbatch4050[*HUAWEI]interface10GE1/0/12[*HUAWEI-10GE1/0/12]portlink-typehybrid[*HUAWEI-10GE1/0/12]porthybridtaggedvlan4050[*HUAWEI-10GE1/0/12]quit[*HUAWEI]interface10GE2/0/12[*HUAWEI-10GE2/0/12]portlink-typehybrid[*HUAWEI-10GE2/0/12]porthybridtaggedvlan4050[*HUAWEI-10GE2/0/12]quit[*HUAWEI]commit[~HUAWEI]quit<HUAWEI>save軟件安裝過程中的網(wǎng)絡(luò)配置1）在FCB界面配置參數(shù)頁面中的配置網(wǎng)絡(luò)參數(shù)（下圖紅框）中輸入相應(yīng)的網(wǎng)絡(luò)配置信息，主要是各網(wǎng)絡(luò)平面IP地址段信息和VLAN信息。2）FCB則自動(dòng)分配IP。如果分配IP不符合規(guī)劃要求，可手工修改（下圖藍(lán)框中的相關(guān)內(nèi)容）。初始化過程中的網(wǎng)絡(luò)配置安裝后若需要對(duì)網(wǎng)絡(luò)信息進(jìn)行調(diào)整，可在初始化階段進(jìn)行修改。在FusionCubeCenter的網(wǎng)絡(luò)配置界面輸入相關(guān)的信息。虛擬化FusionSphere場景，出廠時(shí)默認(rèn)按照管理網(wǎng)段為/24設(shè)置了管理VM。如跟規(guī)劃不符則可進(jìn)行修改。下圖紅框的參數(shù)（其中FusionCubeCenter的IP不能在界面中修改）?，F(xiàn)場安裝場景，可進(jìn)行IP地址修改。初始化成功后，IP地址將不支持自動(dòng)修改。E9000框間級(jí)聯(lián)配置舉例：虛擬化場景，E9000框間通過4*10GE進(jìn)行互聯(lián)，即從框E9000通過2/17/1、3/17/1、2/17/2和3/17/2與主框2/17/3、3/17/3、2/17/4和3/17/4對(duì)接。從框E9000（堆疊后交換板管理IP為0）配置如下：ssh0<HUAWEI>system[HUAWEI]interfaceeth-trunk20[HUAWEI-Eth-Trunk20]quit[HUAWEI]interface10GE2/17/1[HUAWEI-10GE2/17/1]eth-trunk20[HUAWEI-10GE2/17/1]quit[HUAWEI]interface10GE3/17/1[HUAWEI-10GE3/17/1]eth-trunk20[HUAWEI-10GE3/17/1]quit[HUAWEI]interface10GE2/17/2[HUAWEI-10GE2/17/2]eth-trunk20[HUAWEI-10GE2/17/2]quit[HUAWEI]interface10GE3/17/2[HUAWEI-10GE3/17/2]eth-trunk20[HUAWEI-10GE3/17/2]quit[HUAWEI]commit[HUAWEI]quitCE6851交換機(jī)級(jí)聯(lián)配置舉例：虛擬化場景，X6800形態(tài)交換機(jī)間通過4*10GE進(jìn)行互聯(lián)。即接入交換機(jī)通過1/0/1、1/0/2、2/0/1和2/0/2與匯聚交換機(jī)1/0/35、1/0/36、2/0/35和2/0/36對(duì)接。ssh90<HUAWEI>system[~HUAWEI]interfaceeth-trunk20[*H