版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
聯(lián)想超融合方案2016年9月Agenda2聯(lián)想超融合解決方案What?1超融合的發(fā)展背景Why?3聯(lián)想超融合競(jìng)爭(zhēng)對(duì)比分析4聯(lián)想超融合的優(yōu)勢(shì)與案例超融合的發(fā)展背景
-為什么超融合?IT基礎(chǔ)架構(gòu)如何演進(jìn)?Web-ScaleIT獨(dú)立服務(wù)器大機(jī)時(shí)代虛擬化價(jià)格昂貴極其復(fù)雜高度孤立設(shè)備數(shù)量增多資源利用不均存在單點(diǎn)故障VM擴(kuò)張需要集中存儲(chǔ)計(jì)算和存儲(chǔ)仍然分離存儲(chǔ)管理愈發(fā)復(fù)雜高RAS特性更高的靈活性通過網(wǎng)絡(luò)訪問計(jì)算資源池化動(dòng)態(tài)工作負(fù)載計(jì)算與存儲(chǔ)融合軟件定義智能分布式自治系統(tǒng)移動(dòng)、社交網(wǎng)絡(luò)、云計(jì)算、大數(shù)據(jù)分析,驅(qū)動(dòng)IT變革數(shù)據(jù)中心如今站在當(dāng)今業(yè)務(wù)的最前線。數(shù)據(jù)量爆炸性增長(zhǎng)客戶體驗(yàn)無(wú)比重要IT成為增長(zhǎng)引擎?zhèn)鹘y(tǒng)基礎(chǔ)設(shè)施不是隱形的1.內(nèi)在復(fù)雜性2.低效的孤島3.叉車式擴(kuò)展x86計(jì)算和存儲(chǔ)融合的力量縱向擴(kuò)展的存儲(chǔ)網(wǎng)絡(luò)SAN橫向擴(kuò)展服務(wù)器為業(yè)務(wù)應(yīng)用環(huán)境融合計(jì)算與存儲(chǔ)能力,提供更加簡(jiǎn)單管理方式,實(shí)現(xiàn)互聯(lián)網(wǎng)模式的彈性擴(kuò)展,使得數(shù)據(jù)中心真正走向云計(jì)算。超融合技術(shù)把SAN變?yōu)殡[形HX7500HX5500HX3500超融合一體機(jī)超融合:簡(jiǎn)化IT基礎(chǔ)架構(gòu)Cisco、Brocade、IntelEMC、NetApp、HP、HDSCisco、BrocadeHP、Dell、Cisco、LenovoVMware、Microsoft、Linux…Cisco、Brocade、IntelVMware、Microsoft、KVM…超融合系統(tǒng)傳統(tǒng)架構(gòu)計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)分層獨(dú)立采購(gòu)EMC、IBM、HP、NetApp超融合架構(gòu)2.0計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)融合與虛擬化平臺(tái)完整融合Nutanix、EVO:RAIL、SimpliVity天然融合:計(jì)算、網(wǎng)絡(luò)和存儲(chǔ)組件耦合,標(biāo)準(zhǔn)服務(wù)器硬件兩種或兩種以上的元素融合NoSAN:無(wú)需專門的SAN/NAS存儲(chǔ)軟硬結(jié)合:軟件與硬件緊密結(jié)合實(shí)現(xiàn)資源整合、統(tǒng)一管理與調(diào)配,可以很容易的橫向擴(kuò)展提供存儲(chǔ)功能(快照、重刪和壓縮、復(fù)制等)虛擬化與Hypervisor虛擬化層緊密結(jié)合計(jì)算虛擬化、存儲(chǔ)虛擬化、網(wǎng)絡(luò)虛擬化超融合-HCIHyper-ConvergedInfrastructure傳統(tǒng)架構(gòu)VS.超融合架構(gòu)
超融合一體機(jī)以某地稅局VDI項(xiàng)目為例,支撐相同用戶數(shù)傳統(tǒng)架構(gòu)占用兩個(gè)機(jī)柜,超融合只要四節(jié)點(diǎn)超融合對(duì)能耗和UPS要求,遠(yuǎn)低于傳統(tǒng)架構(gòu)傳統(tǒng)架構(gòu)要求運(yùn)維人員具備跨領(lǐng)域?qū)I(yè)技能隨用戶數(shù)增多,超融合擴(kuò)展只需要增加節(jié)點(diǎn)傳統(tǒng)架構(gòu)VS.超融合架構(gòu)傳統(tǒng)數(shù)據(jù)中心服務(wù)器,交換機(jī),SAN,NAS超融合數(shù)據(jù)中心通用硬件,按需購(gòu)買,靈活擴(kuò)展簡(jiǎn)化IT基礎(chǔ)架構(gòu)降低總體擁有成本,縮短價(jià)值實(shí)現(xiàn)時(shí)間實(shí)現(xiàn)更高的可靠性、擴(kuò)展性超融合:破壞性創(chuàng)新技術(shù)(簡(jiǎn)單、方便、靈活)ServerSANPhase2ServerSANPhase1ServerSANPhase3ServerSAN增長(zhǎng)迅速,5年后超過傳統(tǒng)存儲(chǔ),成為市場(chǎng)主流ServerSAN10年后將占據(jù)90%份額,傳統(tǒng)存儲(chǔ)僅10%份額HCI:2015年中國(guó)區(qū)市場(chǎng)預(yù)計(jì)$64M,2016年預(yù)計(jì)增長(zhǎng)率117%未來(lái)四年HCI平均增長(zhǎng)率66%,2019年中國(guó)區(qū)市場(chǎng)達(dá)$547M聯(lián)想超融合解決方案
-聯(lián)想的超融合是什么?聯(lián)想超融合戰(zhàn)略塑造新的格局提供行業(yè)最佳的IT基礎(chǔ)架構(gòu)—包括內(nèi)部和外部超融合產(chǎn)品超融合云一體機(jī)快速交付客戶業(yè)務(wù)全部虛擬化領(lǐng)先的云基礎(chǔ)設(shè)施極具可靠性的解決方案私有云、超融合經(jīng)驗(yàn)轉(zhuǎn)移傳統(tǒng)IT架構(gòu)徹底云化復(fù)雜度?可擴(kuò)展性?性能?成本?技術(shù)創(chuàng)新?EntAppsVDIBigDataNDFS易使用
V可擴(kuò)展V性能提升V成本優(yōu)V技術(shù)創(chuàng)新V聯(lián)想HX超融合方案標(biāo)準(zhǔn)場(chǎng)景:服務(wù)器虛擬化桌面虛擬化企業(yè)分支機(jī)構(gòu)大數(shù)據(jù)處理災(zāi)難恢復(fù)DR傳統(tǒng)IT架構(gòu)計(jì)算資源(KVM,vSphere,Hyper-V)NDFS分布式存儲(chǔ)系統(tǒng)
多副本,性能,消重壓縮,容災(zāi)復(fù)制一體化安裝/運(yùn)維管理,云平臺(tái)(Prism+xClarity)資源線性擴(kuò)展,容量、性能SSDHDDHypervisor(vSphere,KVM,Hyper-V)CVMVMVMVMVMCPUMemSSDHDDHypervisor(vSphere,KVM,Hyper-V)CVMVMVMVMVMCPUMemSSDHDDHypervisor(vSphere,KVM,Hyper-V)CVMVMVMVMVMCPUMemHX集群架構(gòu)拋棄SAN/NAS的架構(gòu)和陣列Tier1工作負(fù)載
(運(yùn)行在所有節(jié)點(diǎn)上)ControllerVM
(運(yùn)行在每一個(gè)節(jié)點(diǎn)上)Node2VMVMVMCVMX86NodeNVMVMVMCVMX86Node1VMVMVMCVMX86本地+遠(yuǎn)程
(SSD+HDD)分布式存儲(chǔ)架構(gòu)智能分層,以虛擬機(jī)為中心化的管理機(jī)制…快照克隆壓縮去重ESXiAcropolisAppMobilityFabricAHV/KVMHyper-VESXiAHV/KVMHyper-VESXiAHV/KVMHyper-V動(dòng)態(tài)的工作負(fù)載分配和多種Hypervisor選擇本地讀寫分層容災(zāi)自我恢復(fù)SingleStoragePool聯(lián)想HX超融合云平臺(tái)分布式存儲(chǔ)結(jié)構(gòu)網(wǎng)絡(luò)規(guī)模核心|壓縮|重復(fù)數(shù)據(jù)刪除|分層|彈性|數(shù)據(jù)保護(hù)應(yīng)用移動(dòng)性結(jié)構(gòu)工作負(fù)載移動(dòng)性|可擴(kuò)展性|無(wú)鎖定|持續(xù)運(yùn)行|APIAzureESXiHyper-VAWSAcropolis一鍵式基礎(chǔ)設(shè)施管理(自服務(wù))一鍵式洞悉基礎(chǔ)架構(gòu)一鍵式系統(tǒng)修復(fù)PrismAcropolis虛擬機(jī)監(jiān)控程序兩大產(chǎn)品模塊Acropolis和Prism極致的超融合云平臺(tái)HX系列1.計(jì)算、存儲(chǔ)和虛擬化一站式解決方案2.毫不妥協(xié)的企業(yè)級(jí)存儲(chǔ)功能性能加速容量效率災(zāi)難恢復(fù)數(shù)據(jù)保護(hù)安全性3.集中運(yùn)維管理云平臺(tái)聯(lián)想HX超融合平臺(tái)HX支持所有工作負(fù)載HX單一架構(gòu)可支持所有工作負(fù)載ASEDB2虛擬化應(yīng)用裸機(jī)ABS服務(wù)非結(jié)構(gòu)化AFS文件服務(wù)關(guān)鍵應(yīng)用容器ACS服務(wù)廣泛的客戶使用場(chǎng)景VDI分支機(jī)構(gòu)數(shù)據(jù)保護(hù)與災(zāi)難恢復(fù)私有云和混合云互聯(lián)網(wǎng)應(yīng)用大數(shù)據(jù)企業(yè)應(yīng)用將計(jì)算和存儲(chǔ)資源融合在一起軟件定義的基礎(chǔ)架構(gòu)分布式架構(gòu),性能優(yōu)化自我恢復(fù)的系統(tǒng)基于互聯(lián)網(wǎng)基因的超融合基礎(chǔ)架構(gòu)自動(dòng)化運(yùn)維和深度分析基于互聯(lián)網(wǎng)模式的線性擴(kuò)展能力2x8-coreCPU128GBRAM2x400GBSSD4x1TBHDD2x10Gbe25k/17kR/WIOPSNDFS資源池CPU= 48-CoreRAM= 384GBSSD= 2.4TBHDD= 12TBIOPs= 75k/50kNote:SSD&HDDUsablesizesarehalfofRAWw/RF:2CPU= 64-CoreRAM= 512GBSSD= 3.2TBHDD= 16TBIOPs= 100k/70kCPU= 80-CoreRAM= 640GBSSD= 4TBHDD= 20TBIOPs= 125k/87kCPU= 128-CoreRAM= 1TBSSD= 6.4TBHDD= 32TBIOPs= 200k/140kNDFS單節(jié)點(diǎn)處理能力將計(jì)算和存儲(chǔ)資源融合在一起軟件定義的基礎(chǔ)架構(gòu)分布式架構(gòu),性能優(yōu)化自我恢復(fù)的系統(tǒng)基于互聯(lián)網(wǎng)基因的超融合基礎(chǔ)架構(gòu)自動(dòng)化運(yùn)維和深度分析HX節(jié)點(diǎn)架構(gòu)分布式存儲(chǔ)軟件平臺(tái)存儲(chǔ)池(StoragePool)是分布式存儲(chǔ)硬件設(shè)備(SSD和HDD)管理的集合。容器(Container)是分布式存儲(chǔ)的一個(gè)子集,用來(lái)實(shí)現(xiàn)具體的存儲(chǔ)策略和管理。StoragePoolContainerContainerContainer將計(jì)算和存儲(chǔ)資源融合在一起軟件定義的基礎(chǔ)架構(gòu)分布式架構(gòu),性能優(yōu)化自我恢復(fù)的系統(tǒng)基于互聯(lián)網(wǎng)基因的超融合基礎(chǔ)架構(gòu)自動(dòng)化運(yùn)維和深度分析基于互聯(lián)網(wǎng)模式的分布式架構(gòu)分布式的存儲(chǔ)、元數(shù)據(jù)和服務(wù)+永遠(yuǎn)在線運(yùn)行企業(yè)級(jí)存儲(chǔ)快照、克隆、去重、壓縮、本地化、分層、緩存、平衡數(shù)據(jù)保護(hù)融合本地備份、遠(yuǎn)程備份+多地容災(zāi)、云備份、持續(xù)可用
安全性安全性開發(fā)周期、定制的安全技術(shù)實(shí)施指南、靜態(tài)數(shù)據(jù)加密、
雙重認(rèn)證彈性數(shù)據(jù)路徑冗余、靈活冗余選擇、可用域、數(shù)據(jù)完整性檢查分布式架構(gòu):提升運(yùn)行性能,高效使用容量
數(shù)據(jù)本地化數(shù)據(jù)平衡數(shù)據(jù)分層全閃存去重壓縮糾刪碼提升性能高效使用容量分布式架構(gòu),性能優(yōu)化,提高資源利用率
數(shù)據(jù)本地化虛擬機(jī)ABCABCABC虛擬機(jī)ABCDDB數(shù)據(jù)本地化對(duì)于集群和虛擬機(jī)I/O性能而言至關(guān)重要虛擬機(jī)在同一節(jié)點(diǎn)訪問和運(yùn)行數(shù)據(jù)數(shù)據(jù)隨虛擬機(jī)遷移,但不訪問不遷移讀寫I/O操作始終在本地?cái)?shù)據(jù)分層:性能優(yōu)化利用整個(gè)集群的存儲(chǔ)分層能力在數(shù)據(jù)存入HDD之前,加快集群的SSD存儲(chǔ)速度,輸入輸出優(yōu)先在HDD層和SSD層自動(dòng)完成數(shù)據(jù)分布,實(shí)現(xiàn)最優(yōu)性能
SSDHDD熱冷數(shù)據(jù)平衡:消除熱點(diǎn)磁盤容量平衡技術(shù)將移動(dòng)最冷的數(shù)據(jù)到其他節(jié)點(diǎn),以保證每個(gè)節(jié)點(diǎn)的利用率基本一致新增節(jié)點(diǎn),按照使用率自動(dòng)再平衡和分配,磁盤容量平衡自動(dòng)在后臺(tái)運(yùn)行15%15%15%15%全閃存模式
將虛擬機(jī)/虛擬磁盤數(shù)據(jù)存入集群的SSD層,保持性能一致在集群環(huán)境中,運(yùn)行需要高服務(wù)質(zhì)量的虛擬機(jī),例如某個(gè)應(yīng)用的數(shù)據(jù)庫(kù)層
在整個(gè)集群范圍內(nèi)利用SSD容量SSDSSD熱冷重復(fù)數(shù)據(jù)刪除準(zhǔn)實(shí)時(shí)應(yīng)用相應(yīng)時(shí)間最高可達(dá)10倍去重比,為更多虛機(jī)服務(wù)針對(duì)虛擬桌面基礎(chǔ)架構(gòu)、主數(shù)據(jù)目錄、開發(fā)和測(cè)試環(huán)境、生產(chǎn)環(huán)境等多種場(chǎng)景RAM和Flash實(shí)時(shí)刪重100%軟件驅(qū)動(dòng)為橫向擴(kuò)展而設(shè)計(jì)可延展到所有存儲(chǔ)包括硬盤數(shù)據(jù)壓縮線內(nèi)壓縮寫數(shù)據(jù)時(shí)同步壓縮歸檔數(shù)據(jù)的理想應(yīng)用對(duì)批量型數(shù)據(jù)負(fù)荷提供高性能
后處理壓縮數(shù)據(jù)變“冷”后遷移到SATA盤之后壓縮在數(shù)據(jù)和計(jì)算資源空閑時(shí)進(jìn)行對(duì)正常IO沒有影響隨機(jī)數(shù)據(jù)的理想應(yīng)用專為虛擬化設(shè)計(jì)提高所有存儲(chǔ)層的可用空間壓縮策略與虛機(jī)工作類型配合利用Snappy算法最大化壓縮/解壓性能可用分配數(shù)據(jù)塊壓縮,提高效率
用數(shù)據(jù)塊存儲(chǔ)二進(jìn)制級(jí)別冗余的工作負(fù)載,節(jié)省高達(dá)90%的容量:Hadoop、數(shù)據(jù)庫(kù)、文本文件、電子郵件等VMCentricEC-X:糾刪碼RAW可用的RF2可用的EC-XErasureCoding既能實(shí)現(xiàn)數(shù)據(jù)彈性,又節(jié)省容量,與副本因子(RF)相比,存儲(chǔ)各種工作負(fù)載的可用容量提高了75%在存儲(chǔ)效率與重建性能之間取得平衡:RF2用于熱數(shù)據(jù)
EC-X用于冷數(shù)據(jù)對(duì)性能的影響微不足道甚至毫無(wú)影響(EC-X在后臺(tái)運(yùn)行)重建速度更快(接近于RF重建)獨(dú)有的專利算法保持?jǐn)?shù)據(jù)本地化,功能默認(rèn)開啟在集群內(nèi)跨節(jié)點(diǎn)的ErasureCoding將計(jì)算和存儲(chǔ)資源融合在一起軟件定義的基礎(chǔ)架構(gòu)分布式架構(gòu),性能優(yōu)化自我恢復(fù)的系統(tǒng)基于互聯(lián)網(wǎng)基因的超融合基礎(chǔ)架構(gòu)自動(dòng)化運(yùn)維和深度分析應(yīng)用和數(shù)據(jù)的自恢復(fù)能力數(shù)據(jù)路徑冗余數(shù)據(jù)冗余本地備份健全的系統(tǒng)設(shè)計(jì)能夠迅速探測(cè)、隔離、修復(fù)故障,確保運(yùn)行始終在線容災(zāi)應(yīng)用可用性數(shù)據(jù)可用性高可用在線遷移高可用-針對(duì)節(jié)點(diǎn)失效在線遷移-針對(duì)計(jì)劃內(nèi)遷移數(shù)據(jù)路徑冗余-針對(duì)CVM失效數(shù)據(jù)冗余:靈活定義RF2/RF3數(shù)據(jù)保護(hù)通過軟件定義實(shí)現(xiàn)RF-3可以實(shí)現(xiàn)當(dāng)出現(xiàn)雙點(diǎn)失效時(shí)數(shù)據(jù)依然可以訪問可隨時(shí)更改RF的配置在Container中進(jìn)行配置在同一個(gè)集群中,按照應(yīng)用對(duì)于數(shù)據(jù)可靠性要求不同,定義不同的RF值。RF-2ContainerRF-3Container在主集群融合本地快照和時(shí)間流一鍵式恢復(fù)和狀態(tài)復(fù)原廣域網(wǎng)優(yōu)化的備份和遠(yuǎn)程容災(zāi)復(fù)制將本地?cái)?shù)據(jù)向公有云備份,支持亞馬遜AWS和微軟Azure
安排、管理和利用本地和遠(yuǎn)程快照和復(fù)制,獲取Prism備份和容災(zāi)虛擬磁盤本地快照遠(yuǎn)程快照容災(zāi)集群主集群本地集群外備份外部介質(zhì)完整的數(shù)據(jù)保護(hù)公共云VMWareHA數(shù)據(jù)中心A數(shù)據(jù)中心B集群_A集群_B同城容災(zāi):MetroAvailabilityDatastore_A(active)Datastore_A(standby)Datastore_B(active)Datastore_B(standby)數(shù)據(jù)實(shí)時(shí)復(fù)制網(wǎng)絡(luò)條件:IP網(wǎng)絡(luò)RTT<=5ms將計(jì)算和存儲(chǔ)資源融合在一起軟件定義的基礎(chǔ)架構(gòu)分布式架構(gòu),性能優(yōu)化自我恢復(fù)的系統(tǒng)基于互聯(lián)網(wǎng)基因的超融合基礎(chǔ)架構(gòu)自動(dòng)化運(yùn)維和深度分析備份和容災(zāi)管理物理硬件管理存儲(chǔ)–服務(wù)器-網(wǎng)絡(luò)虛擬化管理虛擬化運(yùn)行管理
IT運(yùn)行管理NetAppMetroClusterEMCVPLEX,RecoverPoint眾多備份解決方案
OnCommandUniSphereUCSmanagervCenterSystemCenterVirtualMachineManagervRealizeOperationsSystemCenterOperationsManagerIBMTivoliHPOpenViewBMCITOMSNetIQServiceNowCA,Solarwinds,Zenoss,ManageEngine,Nagios,ZabixxPrism:一鍵式的極簡(jiǎn)一鍵式
運(yùn)行分析一鍵式
基礎(chǔ)架構(gòu)
管理一鍵式
解決問題統(tǒng)一監(jiān)控和管理界面配置信息健康檢查風(fēng)險(xiǎn)管控效率分析彈性的集群自我發(fā)現(xiàn)自動(dòng)檢測(cè)新節(jié)點(diǎn)的增加增加節(jié)點(diǎn),兩次點(diǎn)擊在集群內(nèi),零宕機(jī)時(shí)間分鐘級(jí)別延伸集群,不是小時(shí)或天動(dòng)態(tài)的集群延伸一鍵升級(jí),無(wú)需停機(jī)升級(jí)過程一鍵完成,減少管理人員的介入服務(wù)不中斷動(dòng)態(tài)的平衡每一個(gè)控制器的負(fù)載數(shù)據(jù)照常還是可以訪問不影晌到最終用戶簡(jiǎn)單.升級(jí)軟件
不需要停機(jī)即使是大型的集群聯(lián)想超融合競(jìng)爭(zhēng)對(duì)比分析超融合市場(chǎng)格局企業(yè)級(jí)市場(chǎng)老兵:主推融合架構(gòu)初創(chuàng)廠商:聚焦超融合,彎道超車VCEVBlockVSPEXFlexPodExadataFusionCubeUCSUISFusionStorageStorVirtual傳統(tǒng)存儲(chǔ)廠商:借力超融合概念領(lǐng)導(dǎo)者跟隨者關(guān)于超融合的幾個(gè)迷思架構(gòu)的先進(jìn)性技術(shù)的成熟度功能的豐富度超融合適合所有應(yīng)用嗎?超融合能幫我解決問題嗎?超融合有很多優(yōu)勢(shì),但絕不是萬(wàn)能靈藥業(yè)界各家超融合方案,都大同小異嗎?領(lǐng)導(dǎo)者Vs.跟隨者、商用Vs.開源對(duì)于一個(gè)新興技術(shù),如何評(píng)估價(jià)格與價(jià)值?同樣的硬件比價(jià)格,忽略了軟件才是關(guān)鍵;自研黨、原廠黨所不愿意談的……軟件+硬件+服務(wù)=方案體驗(yàn)衡量超融合的基本原則真正超融合架構(gòu)?還是傳統(tǒng)存儲(chǔ)與虛擬化整合?產(chǎn)品定位技術(shù)來(lái)源是否以虛擬機(jī)為中心設(shè)計(jì)?體現(xiàn)在何處?VM-Centric設(shè)計(jì)支持哪些虛擬化平臺(tái)?Hypervisor兼容性性能優(yōu)化如何?數(shù)據(jù)效率提升?I/O優(yōu)化數(shù)據(jù)效率高可用災(zāi)難恢復(fù)連續(xù)性保護(hù)備份、容災(zāi)業(yè)務(wù)連續(xù)性管理是否便利擴(kuò)展有無(wú)限制可擴(kuò)展性可管理性架構(gòu):以虛擬機(jī)為中心的全新設(shè)計(jì)這兩種車都能載客站在乘客的角度哪一個(gè)會(huì)更舒適?超融合就應(yīng)該讓虛擬機(jī)運(yùn)行的更爽!以虛擬機(jī)為中心而全新設(shè)計(jì)的架構(gòu)資源管理的維度是虛擬機(jī)虛擬機(jī)的數(shù)據(jù)優(yōu)先本地存儲(chǔ)、訪問,最佳性能快照、復(fù)制、容災(zāi)基于虛擬機(jī)進(jìn)行將分布式存儲(chǔ)與虛擬化平臺(tái)簡(jiǎn)單集成資源管理的維度仍然是傳統(tǒng)的存儲(chǔ)卷虛擬機(jī)的數(shù)據(jù)經(jīng)常要跨節(jié)點(diǎn)存儲(chǔ)、訪問快照、復(fù)制、容災(zāi)基于存儲(chǔ)卷進(jìn)行HuaweiFusionStorageHPEHyperConverged380適用:廣泛的Hypervisor虛擬化平臺(tái)兼容性支持VMwarevSphere、Hyper-V、KVM自帶AHV虛擬化平臺(tái)(基于KVM,有原廠技術(shù)支持)支持異構(gòu)虛擬化平臺(tái)統(tǒng)一管理、一鍵轉(zhuǎn)換、容災(zāi)VSAN(VxRAIL)、CiscoSpringPath、HPE
StoreVirtual僅支持VMware深信服僅支持KVM華為不支持Hyper-V是可以應(yīng)付混合工作環(huán)境的瑞士軍刀?還是一把簡(jiǎn)單的水果刀?在數(shù)據(jù)中心中,多虛擬化平臺(tái)是趨勢(shì)超融合需要實(shí)現(xiàn):廣泛的Hypervisor支持提供自己的Hypervisor性能:獨(dú)有的數(shù)據(jù)本地化特性哪一個(gè)速度更快?是暢通無(wú)阻的高速公路?還是路口眾多的城市街區(qū)?超融合HX系列借助數(shù)據(jù)本地化和SSD超越中端存儲(chǔ)的性能!VM的數(shù)據(jù)都存放在VM所在的本地節(jié)點(diǎn)上VM訪問數(shù)據(jù)通過內(nèi)部高速通道,無(wú)需跨節(jié)點(diǎn)VM的數(shù)據(jù)優(yōu)先存放在SSD上,保證最高性能VM讀取數(shù)據(jù)時(shí),優(yōu)先訪問本地,更快的響應(yīng)數(shù)據(jù)被打散分布在所有的節(jié)點(diǎn)上VM訪問數(shù)據(jù)時(shí)必須跨節(jié)點(diǎn)進(jìn)行,影響性能SSD只能用于熱數(shù)據(jù)緩存,不能存儲(chǔ)數(shù)據(jù)每一次IO操作,都要跨越節(jié)點(diǎn)來(lái)進(jìn)行HuaweiFusionStorage、VSANHPEHyperConverged380優(yōu)化:存儲(chǔ)效率提升的大殺器是什么讓超融合HX系列大肚能容?神奇的“四次元”口袋奧秘何在?你買到的不止是存儲(chǔ)容量更有豐富的數(shù)據(jù)存儲(chǔ)功能支持糾刪碼、重刪、壓縮等存儲(chǔ)優(yōu)化技術(shù)針對(duì)內(nèi)存、SSD、HDD均可實(shí)現(xiàn)效率提升支持在線、后處理重刪和壓縮技術(shù)可跨集群節(jié)點(diǎn)對(duì)HDD的冷數(shù)據(jù)進(jìn)行重刪、壓縮不能提供、或僅能提供部分功能僅支持全閃存,不支持硬盤的重刪和壓縮僅支持在線重刪和壓縮,不支持后處理僅支持本節(jié)點(diǎn)的數(shù)據(jù),不支持跨節(jié)點(diǎn)VSAN、Huawei簡(jiǎn)化:從復(fù)雜到簡(jiǎn)單,容災(zāi)也能“Smart”!談到容災(zāi)、雙活,你想到什么?穩(wěn)健、可靠?昂貴、復(fù)雜?傳統(tǒng)架構(gòu)的容災(zāi)方案自有其價(jià)值超融合架構(gòu)的容災(zāi)又有何特點(diǎn)?計(jì)算和存儲(chǔ)融合為一個(gè)資源池,資源移動(dòng)更敏捷以虛擬機(jī)為中心的復(fù)制技術(shù),方案實(shí)現(xiàn)更簡(jiǎn)單內(nèi)置一對(duì)多、多對(duì)一、同步、異步復(fù)制功能適合新建數(shù)據(jù)中心,RPO=0,RTO≠0的業(yè)務(wù)投資較低計(jì)算資源池和存儲(chǔ)資源池分離,需要協(xié)調(diào)一致基于存儲(chǔ)卷復(fù)制的傳統(tǒng)容災(zāi),架構(gòu)非常復(fù)雜需要采用VPLEX、SVC等專用虛擬化設(shè)備適合核心業(yè)務(wù)系統(tǒng)、RTO/RPO=0的客戶投資高昂彈性:無(wú)限制的節(jié)點(diǎn)擴(kuò)展和組合集群內(nèi)節(jié)點(diǎn)數(shù)量無(wú)限制已有實(shí)際案例部署節(jié)點(diǎn)上千個(gè)集群擴(kuò)展時(shí),支持單個(gè)節(jié)點(diǎn)或多個(gè)節(jié)點(diǎn)加入集群內(nèi)允許不同硬件配置的節(jié)點(diǎn)共存HX3500、HX5500、HX7500可共存于一個(gè)集群集群內(nèi)節(jié)點(diǎn)數(shù)量受限,如VSAN最大僅64個(gè)VxRAIL擴(kuò)展時(shí),必須以4個(gè)節(jié)點(diǎn)為基數(shù)進(jìn)行集群內(nèi)節(jié)點(diǎn)配置必須一致,VxRAIL、Huawei解脫:極其便利的管理和運(yùn)維有一種驚艷,叫別人家的機(jī)房!如何從繁重的運(yùn)維工作中解脫出來(lái)?時(shí)間應(yīng)該用在更具創(chuàng)新的工作上!統(tǒng)一監(jiān)控和管理界面:計(jì)算+存儲(chǔ)+虛擬化一鍵升級(jí),無(wú)需停機(jī),服務(wù)不中斷動(dòng)態(tài)的集群延伸,自動(dòng)檢測(cè)一鍵式的極簡(jiǎn):基礎(chǔ)架構(gòu)管理、運(yùn)行分析、問題解決跨計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)、虛擬化多個(gè)平臺(tái)升級(jí)、擴(kuò)展極其復(fù)雜,牽一發(fā)動(dòng)全身對(duì)IT運(yùn)維人員的專業(yè)技能要求極高僅為保證系統(tǒng)正常運(yùn)行便已筋疲力盡傳統(tǒng)三層架構(gòu)VMwareVirtualSAN:極其簡(jiǎn)單的存儲(chǔ)專為VMWare虛擬機(jī)設(shè)計(jì)的虛擬化分布式存儲(chǔ)vSphere+VirtualSAN…高效利用資源的虛擬化分布式存儲(chǔ)解決方案標(biāo)準(zhǔn)x86服務(wù)器上的企業(yè)級(jí)可用性、可擴(kuò)展性和性能與VMware產(chǎn)品體系深度集成,無(wú)法支持除vSphere
之外的虛擬化(如KVM,Hyper-v)全閃存和混合配置(SSD只作為Cache使用)從2個(gè)節(jié)點(diǎn)擴(kuò)展到64個(gè)基于策略的SLA自動(dòng)化概述硬盤SSD硬盤SSD硬盤SSDVirtualSAN數(shù)據(jù)存儲(chǔ)vSAN是vSphere核心組件,緊密融合在vSphereKernel中,合并的計(jì)算和存儲(chǔ)故障域,使得整個(gè)平臺(tái)在IO負(fù)載較大的情況下可能發(fā)生連鎖崩潰,從而影響平臺(tái)穩(wěn)定性當(dāng)SSD故障,SSD所在的磁盤組均不可用,重建需要花費(fèi)更長(zhǎng)時(shí)間。集群內(nèi)只能擴(kuò)展同型號(hào)節(jié)點(diǎn),配置型號(hào)是固定的2015LenovoInternal.Allrightsreserved.V-SAN方案配置兩種構(gòu)建VirtualSAN節(jié)點(diǎn)的方法軟件模塊:1.服務(wù)器虛擬化場(chǎng)景VMWarevSphereVMWarevCenterVMwareVirtualSANforCPU2.桌面虛擬化場(chǎng)景VMWareHorizonView(STD)VMwareVirtualSANforDesktop10PackVirtualSAN6授權(quán)模式VirtualSAN標(biāo)準(zhǔn)版VirtualSAN高級(jí)版VirtualSANForROBO按CPU數(shù)量定價(jià)按席位數(shù)量(VDI)或按虛擬機(jī)數(shù)量定價(jià)按席位數(shù)量按席位數(shù)量按虛擬機(jī)數(shù)量功能特性基于存儲(chǔ)策略的管理讀/寫SSD緩存分布式RAIDVirtualDistributedSwitchVirtualSAN快照和克隆機(jī)架感知vROps管理包VirtualSAN復(fù)制(RPO為5分鐘)延伸集群全閃存VirtualSAN6.1的新功能特性v6.0中的現(xiàn)有功能特性全新全新HX超融合集群架構(gòu)拋棄SAN/NAS的架構(gòu)和陣列Tier1工作負(fù)載
(運(yùn)行在所有節(jié)點(diǎn)上)ControllerVM
(運(yùn)行在每一個(gè)節(jié)點(diǎn)上)Node2VMVMVMCVMX86NodeNVMVMVMCVMX86Node1VMVMVMCVMX86本地+遠(yuǎn)程
(SSD+HDD)分布式存儲(chǔ)架構(gòu)智能分層,以虛擬機(jī)為中心化的管理機(jī)制…快照克隆壓縮去重ESXiAcropolisAppMobilityFabricAHV/KVMHyper-VESXiAHV/KVMHyper-VESXiAHV/KVMHyper-V動(dòng)態(tài)的工作負(fù)載分配和多種Hypervisor選擇本地讀寫分層容災(zāi)自我恢復(fù)存儲(chǔ)資源池聯(lián)想HX節(jié)點(diǎn)架構(gòu)支持多種虛擬化平臺(tái),并實(shí)現(xiàn)虛擬機(jī)版本自動(dòng)轉(zhuǎn)換獨(dú)立于虛擬化軟件的分布式存儲(chǔ)平臺(tái)提供軟硬件一體化的部署、運(yùn)維管理和私有云服務(wù)平臺(tái)數(shù)據(jù)保護(hù):vSAN延伸集群63vSphere+VirtualSAN站點(diǎn)AvSphere+VirtualSAN站點(diǎn)BVirtualSAN延伸集群支持跨站點(diǎn)的vMotion
和HA提供零RPO支持災(zāi)難規(guī)避和災(zāi)難恢復(fù)延伸集群可保護(hù)您的關(guān)鍵數(shù)據(jù)中心應(yīng)用不受站點(diǎn)范圍內(nèi)故障的影響針對(duì)不同的虛擬機(jī)采用不同的保護(hù)策略HDDSSDHDDSSD6.1版新功能
特性優(yōu)勢(shì):整體集群的數(shù)據(jù)分布和復(fù)制,雙活劣勢(shì):?jiǎn)蝹€(gè)節(jié)點(diǎn)故障或磁盤故障,需要進(jìn)行全部網(wǎng)絡(luò)Raid重建,時(shí)間較慢虛擬機(jī)保護(hù)策略設(shè)置復(fù)雜,無(wú)法自動(dòng)遷移數(shù)據(jù)保護(hù):HX
MetroAvailability站點(diǎn)A部分故障,采用本地雙副本策略進(jìn)行修復(fù),不依賴于網(wǎng)絡(luò)復(fù)制站點(diǎn)A全部Down,集群自動(dòng)拉起站點(diǎn)B的Standby存儲(chǔ)卷VMWareHA數(shù)據(jù)中心A數(shù)據(jù)中心B集群_A集群_BDatastore_A(active)Datastore_A(standby)Datastore_B(active)Datastore_B(standby)數(shù)據(jù)實(shí)時(shí)復(fù)制網(wǎng)絡(luò)條件:IP網(wǎng)絡(luò)RTT<=5ms型號(hào)CPU內(nèi)存SSDHDD10GbNutanixSWNodeHX5510E5-2650v4*2256GB800GB*24TB*610Gb*4NutanixPro6Nodes2015LenovoInternal.Allrightsreserved.方案架構(gòu)對(duì)比對(duì)比項(xiàng)目傳統(tǒng)架構(gòu)vSphere+vSANLenovoHX硬件設(shè)備X86服務(wù)器*3SAN交換機(jī)*2SAN存儲(chǔ)*1X86服務(wù)器(vSANReady)*3HX服務(wù)器節(jié)點(diǎn)*3虛擬化軟件vSpherevSphereAHV(KVM)、vSphere、Hyper-v運(yùn)維管理硬件(服務(wù)器、存儲(chǔ)、SAN)監(jiān)控平臺(tái)vCenter硬件監(jiān)控平臺(tái)(采購(gòu))vCenterPrism(自帶)云管理平臺(tái)Openstack,CloudMgr(etc)vRealizeSuitePrism(自帶)容災(zāi)備份存儲(chǔ)數(shù)據(jù)容災(zāi)SRMHX存儲(chǔ)復(fù)制(自帶)空間能耗16U6U6U聯(lián)想HX超融合和EMCVxRail的比較EMC&VMware與2016年才推出的超融合產(chǎn)品數(shù)據(jù)服務(wù)高級(jí)功能(去重,壓縮)需要全要閃存配置虛擬化平臺(tái)軟件支持有限,只支持vSphere,集群64節(jié)點(diǎn)StretchedCluster對(duì)站點(diǎn)之間的網(wǎng)絡(luò)帶寬要求非常高Nutanix
&Systemx聯(lián)合最前沿的超融合產(chǎn)品企業(yè)級(jí)分布式存儲(chǔ),數(shù)據(jù)服務(wù)高級(jí)功能(去重,壓縮)跨虛擬化平臺(tái)軟件支持,支持vSphere,Hyperv,KVM統(tǒng)一Prism云管理平臺(tái),集成更多一體化功能聯(lián)想HX超融合相對(duì)于VMWareVSAN的優(yōu)勢(shì)對(duì)比項(xiàng)VSAN6.2LenovoNutanix架構(gòu)虛擬化軟件內(nèi)核的模塊獨(dú)立的控制虛擬機(jī)數(shù)據(jù)的本地化不支持,需要經(jīng)??缇W(wǎng)絡(luò)讀取,延遲高支持智能分布式數(shù)據(jù)分層不支持支持寫緩存(最大)600GB(VSAN6.2全閃存)無(wú)限制對(duì)vSphere集群的依賴性必須依賴且只支持vsphere無(wú)依賴,支持多種虛擬化平臺(tái)KVM,hyper-V,KVM數(shù)據(jù)恢復(fù)時(shí)間Rebuildstarttime=60min(如果無(wú)法判斷節(jié)點(diǎn)狀態(tài))馬上執(zhí)行在線重復(fù)數(shù)據(jù)刪除和MapReduce重刪要求全閃存配置才支持支持壓縮(在線和MapReduce壓縮)、糾刪碼特性要求全閃存配置才支持支持原生云備份、遷移不支持支持備份遷移到微軟和AWS平臺(tái)不中斷升級(jí)不依賴VCenter依賴不依賴一鍵軟件升級(jí)、一鍵硬件升級(jí)、一鍵虛擬化軟件升級(jí)不支持支持集群擴(kuò)展性和網(wǎng)絡(luò)要求64節(jié)點(diǎn)(支持組播)無(wú)限制(不需要組播)一個(gè)界面多集群、多虛擬化平臺(tái)、多數(shù)據(jù)中心管理,云平臺(tái)自服務(wù)與自動(dòng)化管理功能需要很多昂貴組件-vCloud支持,包含所有健康檢查一目了然(含集群、硬件、虛擬機(jī)、數(shù)據(jù)安全性)2015LenovoInternal.Allrightsreserved.LenovoHX超融合與Nutanix
超融合的對(duì)比比較內(nèi)容聯(lián)想HX版本Nutanix
原廠版本產(chǎn)品功能基于LenovoSystemX+Nutanix軟件+XClarity軟件聯(lián)合開發(fā)硬件采用Systemx
的業(yè)界一流品質(zhì),以及聯(lián)合開發(fā)的軟硬件一體化平臺(tái)
軟件平臺(tái)包括Nutanix最新版本的全部功能,同時(shí)聯(lián)合開發(fā)提供了Lenovo本地化的附加功能。包括:硬件級(jí)全監(jiān)控,本地化國(guó)產(chǎn)化支持。
★★★★★基于超微服務(wù)器
+Nutanix軟件提供的一體機(jī)硬件產(chǎn)品品質(zhì)和本地化國(guó)產(chǎn)化方面,具備劣勢(shì)★★★★產(chǎn)品升級(jí)服務(wù)提供維保周期內(nèi)的產(chǎn)品升級(jí)服務(wù)。軟件產(chǎn)品的生命周期與原廠功能版本同步。
安裝升級(jí)的服務(wù)由聯(lián)想超融合專家完成,更具中國(guó)本地化優(yōu)勢(shì)和性價(jià)比。且包括了聯(lián)想與Nutanix合作研發(fā)的技術(shù)優(yōu)勢(shì)
★★★★★提供維保周期內(nèi)的產(chǎn)品升級(jí)服務(wù)。
官方發(fā)布產(chǎn)品的生命周期。
安裝升級(jí)的工作由Nutanix原廠或代理商完成,性價(jià)比不高。
★★★★技術(shù)支持服務(wù)提供維保周期內(nèi)的技術(shù)支持服務(wù)。包括:遠(yuǎn)程電話技術(shù)支持,現(xiàn)場(chǎng)專家診斷、巡檢服務(wù)
技術(shù)支持服務(wù)由聯(lián)想專家完成,更具中國(guó)本地化優(yōu)勢(shì)和性價(jià)比。
采用聯(lián)想原生的大客戶服務(wù)體系,具備了區(qū)域覆蓋廣,服務(wù)人員多,具備軟硬件一體化,工程師資質(zhì)能力更加全面的優(yōu)勢(shì)
★★★★★提供維保周期內(nèi)的技術(shù)支持服務(wù)。包括:遠(yuǎn)程電話技術(shù)支持,現(xiàn)場(chǎng)專家診斷、巡檢服務(wù)等
技術(shù)支持服務(wù)由原廠專家提供,本地的現(xiàn)場(chǎng)服務(wù)存在部分局限
Nutanix中國(guó)自身的服務(wù)體系,覆蓋面不夠廣。
★★★★產(chǎn)品和服務(wù)價(jià)格采用聯(lián)想OEM和渠道競(jìng)價(jià)體系,價(jià)格上跟具有優(yōu)勢(shì)
★★★★采用Nutanix官方報(bào)價(jià)和客戶折扣的方式。
★★★★整體方案服務(wù)聯(lián)想具備了從PC,移動(dòng)終端到后端企業(yè)級(jí)云服務(wù)的全價(jià)值鏈產(chǎn)品,在整合了數(shù)據(jù)中心全線產(chǎn)品后,更加提升了IT綜合解決方案優(yōu)勢(shì)。
在軟硬件一體化的整體方案,和端到端的能力上,更具競(jìng)爭(zhēng)優(yōu)勢(shì)
★★★★★專注于超融合相關(guān)的方案,對(duì)硬件的理解較少,需要依賴于第三方集成商的整體方案打包能力
★★★聯(lián)想超融合的優(yōu)勢(shì)與案例將路線映射到前沿的超融合基礎(chǔ)架構(gòu)#1ITIC2015全球服務(wù)器可靠性報(bào)告排名#1TBR
客戶滿意度調(diào)查排名#1IDC/Gartner超融合市場(chǎng)領(lǐng)導(dǎo)者HX7500HX5500HX3500領(lǐng)導(dǎo)力奠定基礎(chǔ)SystemX+XClarity+Nutanix:可靠、強(qiáng)大、敏捷VS手動(dòng)操作VSCISCOUCSMANAGERVSHPONEVIEW95%75%48%75%VSMANUALEXECUTION72%VSCISCOUCSMANAGER37%VSHPONEVIEW時(shí)間節(jié)省時(shí)間節(jié)省時(shí)間節(jié)省較少的步驟節(jié)省時(shí)間減少工作量減少系統(tǒng)配置時(shí)的時(shí)間和工作量增強(qiáng)業(yè)務(wù)敏捷性較少的步驟較少的步驟Lenovo超融合HX系列:產(chǎn)品家族計(jì)算類存儲(chǔ)類高性能型號(hào)LenovoConvergedHX3500LenovoConvergedHX5500LenovoConvergedHX7500工作負(fù)載VDI、小型虛擬化服務(wù)器虛擬化,大容量需求數(shù)據(jù)庫(kù)及其他高性能負(fù)載硬件平臺(tái)2U雙路,
8個(gè)2.5硬盤槽位2U雙路,
8個(gè)3.5硬盤槽位2U雙路,
24個(gè)2.5硬盤槽位處理器2x2630v3(16cores)2x2660v3(20cores)2x2680v3(24cores)2x2697v3(28cores)2x2699v3(36cores)2x2620v3(12cores)2x2630v3(16cores)2x2660v3(20cores)2x2680v3(24cores)2x2697v3(28cores)2x2643v3(12cores)2x2680v3(24cores)2x2697v3(28cores)2x2699v3(36cores)內(nèi)存128GB/256GB/384GB512GB/768GB128GB/256GB/384GB512GB/768GB128GB/256GB/384GB512GB/768GBSSD選件2x400GB2x800GB2x400GB2x800GB4x400GB4x800GBHDD選件6x1TB(6TB)6x2TB(12TB)6x2TB(12TB)6x4TB(24TB)6x6TB(36TB)20x1TB(20TB)20x2TB(40TB)網(wǎng)卡選件雙端口10Gb網(wǎng)卡*1可選雙端口10G網(wǎng)卡雙端口10Gb網(wǎng)卡*1可選雙端口10G網(wǎng)卡雙端口10Gb網(wǎng)卡*2可選雙端口10G網(wǎng)卡*12015LenovoInternal.Allrightsreserved.標(biāo)準(zhǔn)化的硬件設(shè)計(jì)、豐富的接口擴(kuò)展性2U機(jī)架式的Chassis,內(nèi)含1個(gè)節(jié)點(diǎn)(型號(hào)不同、配置不同)?10GB網(wǎng)絡(luò)(光口和電口)?1GB網(wǎng)絡(luò)?冗余風(fēng)扇?冗余電源HX7500HX5500HX3500完善的售后服務(wù)體系硬件服務(wù)軟件服務(wù)聯(lián)想提供3年全天候7*24小時(shí)保修服務(wù),可升級(jí)至5年統(tǒng)一800/400電話接口服務(wù)方式首先進(jìn)行遠(yuǎn)程服務(wù)不能解決問題時(shí),提供上門服務(wù)軟件問題,轉(zhuǎn)至Nutanix,以電話或網(wǎng)絡(luò)遠(yuǎn)程支持遠(yuǎn)程不能解決問題時(shí),聯(lián)想提供上門服務(wù)(增值服務(wù))遠(yuǎn)程服務(wù)響應(yīng)時(shí)效硬件非宕機(jī)時(shí),1小時(shí)內(nèi)響應(yīng)硬件宕機(jī)時(shí),30分鐘內(nèi)響應(yīng)緊急問題(用戶應(yīng)用停止)時(shí),1小時(shí)內(nèi)響應(yīng)嚴(yán)重問題(應(yīng)用產(chǎn)生明顯影響)時(shí),2小時(shí)內(nèi)響應(yīng)普通問題(應(yīng)用微弱影響)時(shí),8小時(shí)或第二天響應(yīng)上門服務(wù)響應(yīng)時(shí)效大中城市內(nèi),硬件宕機(jī)時(shí),4小時(shí)內(nèi)上門硬件非宕機(jī)時(shí),工程師第二天上門在全國(guó)大中城市內(nèi)工程師第二天上門大中城市郊區(qū)及其它中小城市上門時(shí)間將按交通情況相應(yīng)延長(zhǎng)大中城市郊區(qū)及其它中小城市上門服務(wù)時(shí)間將按交通情況相應(yīng)延長(zhǎng)無(wú)錫數(shù)據(jù)中心北京數(shù)據(jù)中心重慶數(shù)據(jù)中心遠(yuǎn)程監(jiān)控中心無(wú)錫NOC北京能力中心滕州婦幼保健
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2024石材工程項(xiàng)目勞務(wù)分包服務(wù)合同3篇
- 2025年玻璃幕墻玻璃破碎風(fēng)險(xiǎn)評(píng)估與應(yīng)急預(yù)案合同樣本3篇
- 2025年度美容儀器銷售代理與市場(chǎng)運(yùn)營(yíng)支持合同4篇
- 2025年度人工智能研發(fā)與應(yīng)用合作協(xié)議3篇
- 家教中家長(zhǎng)自我成長(zhǎng)的重要性
- 現(xiàn)代家庭教育的五大核心能力
- 2025年度住宅小區(qū)物業(yè)費(fèi)專項(xiàng)維修資金使用與管理合同3篇
- 2025年城市特色餐廳與旅行社聯(lián)合營(yíng)銷合作協(xié)議2篇
- 2025年度網(wǎng)絡(luò)游戲代理合作協(xié)議書(聯(lián)合運(yùn)營(yíng))4篇
- 二零二五年貨車共營(yíng)項(xiàng)目合作協(xié)議3篇
- 2024年高考八省聯(lián)考地理適應(yīng)性試卷附答案解析
- 足浴技師與店內(nèi)禁止黃賭毒協(xié)議書范文
- 中國(guó)高血壓防治指南(2024年修訂版)要點(diǎn)解讀
- 2024-2030年中國(guó)光電干擾一體設(shè)備行業(yè)發(fā)展現(xiàn)狀與前景預(yù)測(cè)分析研究報(bào)告
- 湖南省岳陽(yáng)市岳陽(yáng)樓區(qū)2023-2024學(xué)年七年級(jí)下學(xué)期期末數(shù)學(xué)試題(解析版)
- 農(nóng)村自建房安全合同協(xié)議書
- 杜仲葉藥理作用及臨床應(yīng)用研究進(jìn)展
- 4S店售后服務(wù)6S管理新規(guī)制度
- 高性能建筑鋼材的研發(fā)與應(yīng)用
- 無(wú)線廣播行業(yè)現(xiàn)狀分析
- 漢語(yǔ)言溝通發(fā)展量表(長(zhǎng)表)-詞匯及手勢(shì)(8-16月齡)
評(píng)論
0/150
提交評(píng)論