惠普超融合系統(tǒng)-POC測(cè)試報(bào)告

1、 惠普超融合系統(tǒng)POC測(cè)試報(bào)告目錄 TOC o 1-3 目錄 PAGEREF _Toc494320046 h 21前言 PAGEREF _Toc494320047 h 41.1測(cè)試背景 PAGEREF _Toc494320048 h 41.2測(cè)試目的 PAGEREF _Toc494320049 h 41.3測(cè)試環(huán)境 PAGEREF _Toc494320050 h 41.4測(cè)試項(xiàng)目概述 PAGEREF _Toc494320051 h 61.5測(cè)試小結(jié) PAGEREF _Toc494320052 h 62綜合功能測(cè)試 PAGEREF _Toc494320053 h 102.1簡(jiǎn)易安裝部署 PAGE

2、REF _Toc494320054 h 102.1.1基于Oneview instant on的配置和安裝 PAGEREF _Toc494320055 h 112.1.2基于oneview以及vcenter插件管理工具的快速初始化配置 PAGEREF _Toc494320056 h 122.2Oneview 統(tǒng)一管理運(yùn)維工具 PAGEREF _Toc494320057 h 122.2.1Oneview管理概覽 PAGEREF _Toc494320058 h 122.2.2系統(tǒng)健康檢查 PAGEREF _Toc494320059 h 132.2.3硬件狀態(tài)檢查 PAGEREF _Toc49432

3、0060 h 142.2.4基于Lun的快照 PAGEREF _Toc494320061 h 152.3高可用性測(cè)試 PAGEREF _Toc494320062 h 162.3.1基于節(jié)點(diǎn)故障的高可用性測(cè)試 PAGEREF _Toc494320063 h 162.3.2基于單/多節(jié)點(diǎn)硬盤故障的可用性測(cè)試 PAGEREF _Toc494320064 h 172.3.3基于單個(gè)電源故障的可用性測(cè)試 PAGEREF _Toc494320065 h 182.3.4基于站點(diǎn)的容災(zāi)測(cè)試（可選） PAGEREF _Toc494320066 h 182.3.5擴(kuò)展測(cè)試（可選） PAGEREF _Toc4943

4、20067 h 182.4小結(jié) PAGEREF _Toc494320068 h 193HC 250 平臺(tái)性能測(cè)試 PAGEREF _Toc494320069 h 203.1硬件配置(單節(jié)點(diǎn)配置) PAGEREF _Toc494320070 h 203.1.1HP HC250 PAGEREF _Toc494320071 h 203.1.2Storage存儲(chǔ) PAGEREF _Toc494320072 h 203.1.3Network網(wǎng)絡(luò) PAGEREF _Toc494320073 h 203.2基本I/O性能測(cè)試（可選） PAGEREF _Toc494320074 h 203.2.1最大IOPS

5、性能測(cè)試 PAGEREF _Toc494320075 h 203.2.24k 75%讀25%寫 30%隨機(jī)性能測(cè)試 PAGEREF _Toc494320076 h 223.2.38k 70%讀30%寫 60%隨機(jī)性能測(cè)試 PAGEREF _Toc494320077 h 253.2.41024k連續(xù)100%讀性能測(cè)試 PAGEREF _Toc494320078 h 273.2.51024k連續(xù)100%寫性能測(cè)試 PAGEREF _Toc494320079 h 293.3實(shí)際應(yīng)用場(chǎng)景性能測(cè)試 PAGEREF _Toc494320080 h 323.4小結(jié) PAGEREF _Toc494320081

6、 h 32前言測(cè)試背景虛擬化技術(shù)是云計(jì)算的關(guān)鍵技術(shù)之一，隨著云計(jì)算技術(shù)的逐步推廣， 虛擬化環(huán)境下傳統(tǒng)集中存儲(chǔ)架構(gòu)被越來(lái)越多地詬病，超融合架構(gòu)越來(lái)越多地成為虛擬化環(huán)境中的首選基礎(chǔ)架構(gòu)。由于其橫向擴(kuò)展、快速部署、易管理、節(jié)省機(jī)柜空間和耗電等，已在制造、金融、電信、電力等行業(yè)的數(shù)據(jù)中心領(lǐng)域得到部署和應(yīng)用?；萜掌髽I(yè)作為業(yè)界領(lǐng)先的超融合虛擬化平臺(tái)廠商，能夠更加快速、高效、穩(wěn)定的支撐起眾多企業(yè)的虛擬化環(huán)境。在多年前就在其分公司開始使用惠普軟件定義存儲(chǔ)軟件VSA運(yùn)行于VMware平臺(tái)，隨著當(dāng)今SSD和萬(wàn)兆網(wǎng)絡(luò)的應(yīng)用、VSA的不斷改進(jìn)，HP的融合系統(tǒng)在性能和功能上都有了極大的改進(jìn)。測(cè)試目的此次測(cè)試需要達(dá)到以下

7、目的：驗(yàn)證超融合架構(gòu)的綜合功能驗(yàn)證基于oneview管理軟件結(jié)合VCenter的管理功能特性驗(yàn)證融合架構(gòu)的可靠性及冗余特性驗(yàn)證在系統(tǒng)應(yīng)用的性能表現(xiàn)測(cè)試環(huán)境融合虛擬化平臺(tái)配置:型號(hào)每節(jié)點(diǎn)（共16個(gè)節(jié)點(diǎn)）CPU內(nèi)存硬盤網(wǎng)絡(luò)HyperConverged HC250E5-2640 V3 *2256GB480GBSSD*2 + 1.2TB SAS 10Gb SFP網(wǎng)絡(luò)拓?fù)浼暗刂沸畔ⅲ好總€(gè)節(jié)點(diǎn)有2個(gè)萬(wàn)兆端口，連接2臺(tái)萬(wàn)兆交換機(jī)，并且使用trunk口上聯(lián)到用戶環(huán)境。每個(gè)節(jié)點(diǎn)管理端口連接一臺(tái)千兆交換機(jī)，并上連到環(huán)境中帶外管理的VLAN端口，地址信息如下：節(jié)點(diǎn)VSA IP(VLAN:)ESX IP(VLAN:)

8、iLO IP(VLAN:)Node-A1Node-A2Node-A3Node-A4Node-B1Node-B2Node-B3Node-B4Node-C1Node-C2Node-C3Node-C4Node-D1Node-D2Node-D3Node-D4GatewayDNSNTP虛擬化環(huán)境用戶名口令：root/hpcs200HC!用戶名口令連接方式VSAadminadminCMCiLOadminadminRJ-45VCenteradministratorhpcs200hc!WEB/Vi-client ESXroothpcs200hcVcenter測(cè)試項(xiàng)目概述本POC詳細(xì)涵蓋功能測(cè)試、虛擬化管理程序

9、測(cè)試、冗余測(cè)試及性能測(cè)試等多項(xiàng)測(cè)試點(diǎn)和功能項(xiàng)，以驗(yàn)證平臺(tái)可靠性、易用性及優(yōu)于傳統(tǒng)架構(gòu)的性能和擴(kuò)展性。測(cè)試小結(jié)可管理/易于使用 整套系統(tǒng)從上電到可以正常使用，操作過(guò)程是否繁瑣，是否提供中文界面？是否支持郵件報(bào)警？是否可以實(shí)現(xiàn)遠(yuǎn)程開關(guān)機(jī)等IPMI功能？結(jié)果：整套系統(tǒng)從上電、配置IP，到可以正常使用，耗時(shí)不到1小時(shí)，操作過(guò)程簡(jiǎn)單，Vcenter及CMC都提供中文界面，ILO可以實(shí)現(xiàn)包括遠(yuǎn)程開關(guān)機(jī)在內(nèi)的多種帶外管理功能冗余性測(cè)試：整套設(shè)備故障模擬 斷開一個(gè)節(jié)點(diǎn)的網(wǎng)線或關(guān)閉一個(gè)節(jié)點(diǎn)的電源，觀察整個(gè)VSA虛擬化池中的容錯(cuò)Lun資源是否不受影響結(jié)果： 斷開節(jié)點(diǎn)網(wǎng)線或關(guān)閉節(jié)點(diǎn)電源，整個(gè)VSA虛擬化池中的Lun

10、不受影響物理磁盤故障模擬 在單節(jié)點(diǎn)上拔出一塊SSD和一塊SAS，觀察整個(gè)虛擬化池中的容錯(cuò)Lun資源是否不受影響，在4個(gè)節(jié)點(diǎn)上最多可以支持幾塊磁盤同時(shí)損壞？拔出HC250的一根電源線，4個(gè)節(jié)點(diǎn)是否仍然正常工作？ 結(jié)果： 單節(jié)點(diǎn)拔出一塊SSD和一塊SAS，均不影響虛擬化池中的Lun，4節(jié)點(diǎn)最多支持同時(shí)損壞8塊硬盤（每節(jié)點(diǎn)1塊SSD+1塊SAS）。拔出HC250機(jī)箱的任意一根電源線，4個(gè)節(jié)點(diǎn)均可正常工作。 性能測(cè)試 由于業(yè)務(wù)需要，需重點(diǎn)關(guān)注在高IO環(huán)境下的響應(yīng)時(shí)間及CPU占用率，詳細(xì)測(cè)試方法見(jiàn)后文綜合功能測(cè)試在本章范圍中，我們將進(jìn)行以下測(cè)試以驗(yàn)證超融合系統(tǒng)的基本特性：測(cè)試場(chǎng)景測(cè)試點(diǎn)測(cè)試目標(biāo)測(cè)試條目/

11、步驟結(jié)果簡(jiǎn)易安裝部署 基于Oneview instant on的配置和安裝15分鐘啟動(dòng)安裝及配置設(shè)備，安裝vCeneter(在用戶網(wǎng)絡(luò)及機(jī)房換進(jìn)完全Ready的情況下)利用onvew instant on 啟動(dòng)配置界面， 系統(tǒng)自檢方便、完成配置相關(guān)IP地址（VSA, VM以及管理 IP 地址， DNS, mail server方便、完成配置 共享存儲(chǔ)，配置vCenter，管理及監(jiān)控界面。功能概述系統(tǒng)配置及監(jiān)控創(chuàng)建虛擬機(jī)克隆虛擬機(jī)存儲(chǔ)部署及分層方便、完成Oneview 以及oneview for vCenter 統(tǒng)一管理界面oneview以及vcventer插件管理工具功能一覽實(shí)現(xiàn)物理以及虛擬資

12、源的統(tǒng)一管理通過(guò)oneview管理軟件集中管理全部物存儲(chǔ)簡(jiǎn)潔、完成 在vcenter的管理界面中通過(guò)oneview的集成管理模塊，集中監(jiān)控及管理全部物理以及虛擬資源完成VSA 管理功能測(cè)試虛擬化存儲(chǔ)管理功能測(cè)試共享存儲(chǔ)卷設(shè)置及冗余級(jí)別調(diào)整，兩地異步容災(zāi)測(cè)試(可選)把本地硬盤容量設(shè)置成共享存儲(chǔ)完成多節(jié)點(diǎn)存儲(chǔ)間可選多種冗余方式完成兩地容災(zāi)測(cè)試（WAN連接）未測(cè)試簡(jiǎn)易安裝部署基于Oneview instant on的配置和安裝基于oneview以及vcenter插件管理工具的快速初始化配置通過(guò)集群配置工具完成集群配置：創(chuàng)建存儲(chǔ)資源創(chuàng)建vm Oneview 統(tǒng)一管理運(yùn)維工具Oneview管理概覽One

13、view 以及oneview for vcenter 插件不僅可以提供所有服務(wù)器、存儲(chǔ)等基礎(chǔ)架構(gòu)硬件的管理，還可以管理所有虛擬機(jī)，完成虛擬機(jī)的日常監(jiān)控維護(hù)。使用方便，用戶不在需要在多個(gè)管理界面之間進(jìn)行切換，從而實(shí)現(xiàn)統(tǒng)一管理，降低日常管理維護(hù)成本。系統(tǒng)健康檢查可對(duì)系統(tǒng)總體運(yùn)行情況做到一目了然，及時(shí)掌握系統(tǒng)健康度信息：硬件狀態(tài)檢查通過(guò)硬件狀態(tài)頁(yè)查看當(dāng)前硬件版本、配置及運(yùn)行情況基于Lun的快照通過(guò)VSA 管理工具實(shí)現(xiàn)數(shù)據(jù)的快照 創(chuàng)建調(diào)度計(jì)劃，根據(jù)實(shí)際需求調(diào)整快照的時(shí)間（最小15分鐘）， 并保留最新的多份快照數(shù)據(jù)。高可用性測(cè)試基于節(jié)點(diǎn)故障的高可用性測(cè)試根據(jù)Lun實(shí)際的容錯(cuò)級(jí)別（例如NR10容錯(cuò)2節(jié)點(diǎn)，

14、NR5容錯(cuò)1節(jié)點(diǎn)），進(jìn)行基于節(jié)點(diǎn)的高可用故障測(cè)試，關(guān)閉相應(yīng)數(shù)量的節(jié)點(diǎn)（關(guān)閉電源，或拔出網(wǎng)線），檢測(cè)Lun及所承載業(yè)務(wù)的的可用性基于單/多節(jié)點(diǎn)硬盤故障的可用性測(cè)試在單（多）節(jié)點(diǎn)上，手工拔出一塊硬盤，查看節(jié)點(diǎn)及其上承載的應(yīng)用是否受影響基于單個(gè)電源故障的可用性測(cè)試手工拔出單電源（線），查看單機(jī)箱內(nèi)的節(jié)點(diǎn)（4節(jié)點(diǎn)）是否工作正常?；谡军c(diǎn)的容災(zāi)測(cè)試（可選）擴(kuò)展測(cè)試（可選）增加新的節(jié)點(diǎn)或新的設(shè)備到現(xiàn)有管理組（可選）， 集群的基本擴(kuò)展小結(jié)HP HC 250 系列產(chǎn)品融合計(jì)算與存儲(chǔ)，管理運(yùn)維簡(jiǎn)單，數(shù)據(jù)集中存儲(chǔ)安全、快速部署、擴(kuò)展方便，具有高性能， 高可靠性以及高可用性等特點(diǎn)。 產(chǎn)品基于全球領(lǐng)先的工業(yè)標(biāo)準(zhǔn)服務(wù)器

15、平臺(tái)， 據(jù)有全球范圍內(nèi)的服務(wù)質(zhì)量保證。HPE快速部署的特性，可以在45分鐘內(nèi)完成節(jié)點(diǎn)初始化和配置工作，用戶隨即可以開始部署虛擬機(jī)；統(tǒng)一的vCenter管理界面,不會(huì)更改用戶的使用習(xí)慣。允許用戶在單個(gè)界面中管理所有服務(wù)器、存儲(chǔ)等基礎(chǔ)架構(gòu)和所有虛擬機(jī)，實(shí)現(xiàn)日常性能監(jiān)控和維護(hù)操作?；诨贚un的快照技術(shù)，通過(guò)簡(jiǎn)單易用的備份和恢復(fù)界面可以讓用戶快速針對(duì)每個(gè)虛擬機(jī)設(shè)置快照策略，粒度可精細(xì)化到30分鐘，并且不影響虛擬機(jī)性能，同時(shí)快照可以發(fā)送到遠(yuǎn)程站點(diǎn)實(shí)現(xiàn)數(shù)據(jù)中心容災(zāi)；HPE集群管理所有基礎(chǔ)架構(gòu)和虛擬機(jī)，并且可以監(jiān)控包括CPU、內(nèi)存、磁盤空間、IOPS、吞吐帶寬、讀寫延遲等多項(xiàng)指標(biāo)，不會(huì)額外增加用戶監(jiān)控復(fù)

16、雜度；HC 250 平臺(tái)性能測(cè)試性能測(cè)試將涵蓋兩部分內(nèi)容，一是基于IOmeter的基本I/O性能測(cè)試，另一部分是針對(duì)特定實(shí)際應(yīng)用場(chǎng)景的測(cè)試。硬件配置(單節(jié)點(diǎn)配置)HP HC250X CPU cores X GHz each256GB memoryStorage存儲(chǔ)4 x 1.2TB SAS2 x 480GB SSDNetwork網(wǎng)絡(luò)2 x 10Gb SFP modules 2萬(wàn)兆交換機(jī)基本I/O性能測(cè)試（可選）注：此部分測(cè)試數(shù)值僅供參考，由于IOMeter是十多年前的測(cè)試工具，在針對(duì)SSD固態(tài)盤配置以及SSD+SAS混合存儲(chǔ)配置中存在ISSUE，間歇性的緩存過(guò)載會(huì)導(dǎo)致性能測(cè)試數(shù)據(jù)偏離值過(guò)高（正

17、偏離及負(fù)偏離），所以在配置了全閃存及混合存儲(chǔ)的機(jī)型中，IOMeter測(cè)試值僅供參考，機(jī)型的真實(shí)性能需要在真實(shí)環(huán)境中體現(xiàn)。最大IOPS性能測(cè)試配置前提：1 VM/Node1 IOmeter/VM4 Worker/IOmeterIOmeter: # of outstanding I/Os: 32IOmeter: Access Spec Transfer Request Size: 512 BytesIOmeter: Access Spec Percent Random/Sequential Distribution: 100% SequentialIOmeter: Access Spec Perc

18、ent Read/Write Distribution: 100% Read配置說(shuō)明：每個(gè)節(jié)點(diǎn)上建一個(gè)Windows虛機(jī)，每個(gè)虛機(jī)里運(yùn)行一個(gè)IOmeter，每個(gè)IOmeter中跑4個(gè)Worker。測(cè)試的I/O大小為512字節(jié)，順序100%讀。測(cè)試過(guò)程：一個(gè)節(jié)點(diǎn)的iometer為服務(wù)端，另三個(gè)節(jié)點(diǎn)的iometer為壓力端，通過(guò)dynamo命令行連接，同時(shí)向四個(gè)節(jié)點(diǎn)發(fā)IO壓力，數(shù)據(jù)穩(wěn)定后記錄IOPS、MBPS、響應(yīng)時(shí)間、CPU占用率4k 75%讀25%寫 30%隨機(jī)性能測(cè)試本測(cè)試模擬數(shù)據(jù)庫(kù)實(shí)際運(yùn)行的I/O特性，來(lái)評(píng)測(cè)數(shù)據(jù)庫(kù)讀寫的性能。配置前提：1 VM/Node1 IOmeter/VM4 Work

19、er/IOmeterIOmeter: # of outstanding I/Os: 32IOmeter: Access Spec Transfer Request Size: 4 KBIOmeter: Access Spec Percent Random/Sequential Distribution: 30% RandomIOmeter: Access Spec Percent Read/Write Distribution: 75%Read 25%Write配置說(shuō)明：每個(gè)節(jié)點(diǎn)上建一個(gè)Windows虛機(jī)，每個(gè)虛機(jī)里運(yùn)行一個(gè)IOmeter，每個(gè)IOmeter中跑4個(gè)Worker。除此以外，測(cè)試

20、的I/O大小為4KB，30%隨機(jī)75%讀25%寫。測(cè)試過(guò)程：一個(gè)節(jié)點(diǎn)的iometer為服務(wù)端，另三個(gè)節(jié)點(diǎn)的iometer為壓力端，通過(guò)dynamo命令行連接，同時(shí)向四個(gè)節(jié)點(diǎn)發(fā)IO壓力，數(shù)據(jù)穩(wěn)定后記錄IOPS、MBPS、響應(yīng)時(shí)間、CPU占用率8k 70%讀30%寫 60%隨機(jī)性能測(cè)試本測(cè)試模擬數(shù)據(jù)庫(kù)實(shí)際運(yùn)行的I/O特性，來(lái)評(píng)測(cè)數(shù)據(jù)庫(kù)讀寫的性能。配置前提：1 VM/Node1 IOmeter/VM4 Worker/IOmeterIOmeter: # of outstanding I/Os: 32IOmeter: Access Spec Transfer Request Size: 8 KBIOme

21、ter: Access Spec Percent Random/Sequential Distribution: 60% RandomIOmeter: Access Spec Percent Read/Write Distribution: 70%Read 30%Write配置說(shuō)明：每個(gè)節(jié)點(diǎn)上建一個(gè)Windows虛機(jī)，每個(gè)虛機(jī)里運(yùn)行一個(gè)IOmeter，每個(gè)IOmeter中跑4個(gè)Worker。除此以外，測(cè)試的I/O大小為8KB，全隨機(jī)70%讀30%寫。測(cè)試過(guò)程：一個(gè)節(jié)點(diǎn)的iometer為服務(wù)端，另三個(gè)節(jié)點(diǎn)的iometer為壓力端，通過(guò)dynamo命令行連接，同時(shí)向四個(gè)節(jié)點(diǎn)發(fā)IO壓力，數(shù)據(jù)穩(wěn)定后記

22、錄IOPS、MBPS、響應(yīng)時(shí)間、CPU占用率 1024k連續(xù)100%讀性能測(cè)試配置前提：1 VM/Node1 IOmeter/VM4 Worker/IOmeterIOmeter: # of outstanding I/Os: 4IOmeter: Access Spec Transfer Request Size: 512 KBIOmeter: Access Spec Percent Random/Sequential Distribution: 100% SequentialIOmeter: Access Spec Percent Read/Write Distribution: 100%Re

23、ad配置說(shuō)明：每個(gè)節(jié)點(diǎn)上建一個(gè)Windows虛機(jī)，每個(gè)虛機(jī)里運(yùn)行一個(gè)IOmeter，每個(gè)IOmeter中跑4個(gè)Worker。除此以外，測(cè)試的I/O大小為512KB，全隨機(jī)100%讀。測(cè)試過(guò)程：一個(gè)節(jié)點(diǎn)的iometer為服務(wù)端，另三個(gè)節(jié)點(diǎn)的iometer為壓力端，通過(guò)dynamo命令行連接，同時(shí)向四個(gè)節(jié)點(diǎn)發(fā)IO壓力，數(shù)據(jù)穩(wěn)定后記錄IOPS、MBPS、響應(yīng)時(shí)間、CPU占用率 1024k連續(xù)100%寫性能測(cè)試配置前提：1 VM/Node1 IOmeter/VM4 Worker/IOmeterIOmeter: # of outstanding I/Os: 32IOmeter: Access Spec Transfer Request Size: 512 KBIOmeter: Access Spec Percent Random/Sequential Distribution: 100% SequentialIOmeter: Access Spec Percent Read/Write Distribution: 100%Write配置說(shuō)明：每個(gè)節(jié)點(diǎn)上建