企業(yè)存儲資源池架構(gòu)選型方案

1、企業(yè)存儲資源池架構(gòu)選型方案IT資源池總體目標IT資源池的模式改變了傳統(tǒng)IT系統(tǒng)的資源配置模式，使得IT系統(tǒng)的資源配置更靈活、高效。未來，資源池需要在資源、管理、服務(wù)方面協(xié)同演進，構(gòu)建“低成本、高效率、自動化”的資源服務(wù)平臺。IT資源池的目標是有效的管理IT資源，并通過網(wǎng)絡(luò)方便、實時地為用戶按需提供服務(wù)和產(chǎn)品。資源管理服務(wù)全類型：服務(wù)器（小型機/x86、物理機/虛擬機）、存儲、網(wǎng)絡(luò)、軟件全兼容：兼容所有虛擬化軟件及硬件廠家全覆蓋：覆蓋業(yè)支與管信所有系統(tǒng)資源池內(nèi)資源使用可靈活共享、高效資源全生命周期管理資源配置管理自動化資源維護管理自動化資源安全管控自動化將資源打包成標準化的服務(wù)對外提供服務(wù)申請、

2、使用、回收全流程管理資源計量與監(jiān)控云資源池目標架構(gòu)藍圖APP集成平臺門戶決策支持云管理平臺物理資源層x86服務(wù)器小機服務(wù)器存儲設(shè)備網(wǎng)絡(luò)設(shè)備中間件數(shù)據(jù)庫分布式計算虛擬資源池平臺服務(wù)資源提供層池化資源層物理資源池資源動態(tài)分配虛擬機虛擬磁盤虛擬網(wǎng)絡(luò)操作系統(tǒng)應(yīng)用服務(wù)物理資源自服務(wù)門戶其他流程管理資源管理資源調(diào)度資源監(jiān)測云管理平臺：自動化服務(wù)運營平臺，提供統(tǒng)一監(jiān)控，服務(wù)管理和安全保障資源提供層：動態(tài)調(diào)度和分配資源池資源，向上提供物理或者虛擬資源池化資源層：虛擬化軟件平臺，提供物理設(shè)備整合，池化與資源的細粒度切分物理資源層：物理設(shè)備的集合云資源池（紅框部分）的核心特征 資源共享和分級保護 統(tǒng)一監(jiān)控和管理

3、動態(tài)調(diào)度，按需服務(wù) 自動化運維存儲資源池特性需求總結(jié)存儲基礎(chǔ)架構(gòu)相對穩(wěn)定，在出現(xiàn)新系統(tǒng)部署、存儲性能需求提升、存儲容量提升等需求下，基礎(chǔ)架構(gòu)無需做太大調(diào)整（如設(shè)備搬遷、長時間的停機數(shù)據(jù)遷移等工作）即可平滑擴展和提升。既可以滿足遠期部署規(guī)劃，又可以應(yīng)對短期突發(fā)性的容量、性能增長要求。結(jié)合硬件設(shè)備自身生命周期的規(guī)律，數(shù)據(jù)可以平滑、在線的從舊的設(shè)備遷移、流動到新的設(shè)備上。從另一角度來看，使用年限越久的設(shè)備，可以平滑的在現(xiàn)有架構(gòu)下從關(guān)鍵生產(chǎn)系統(tǒng)逐步轉(zhuǎn)移作為二級、測試設(shè)備使用。充分利用各存儲設(shè)備的性能和空間，避免出現(xiàn)使用不均、分配不合理的現(xiàn)象。根據(jù)規(guī)劃或突發(fā)性的變更需求，依據(jù)業(yè)務(wù)類型的特征來分配最合理的

4、資源，例如將容量、性能要求高的系統(tǒng)數(shù)據(jù)平滑遷移部署到最合適的高端設(shè)備（包括設(shè)備、介質(zhì)、RAID類型、緩存等資源）上，反之亦然。在共享硬件資源的基礎(chǔ)上，不同業(yè)務(wù)數(shù)據(jù)需確保性能不相互干擾、數(shù)據(jù)訪問可完全獨立。SLA及QoS保障。便于統(tǒng)一管理、統(tǒng)一維護，在單一界面中可直觀管理資源池中所有的存儲設(shè)備，監(jiān)控其運行狀況，第一時間感知故障或隱患。平滑擴展、均衡部署統(tǒng)一管理透明流動可靠性及QoS共享存儲資源池建設(shè)的幾大難點及挑戰(zhàn)1是否只有采用分布式、軟件定義式（SDS）的存儲技術(shù)才可以滿足共享資源池中爆發(fā)式的數(shù)據(jù)空間和性能的增長要求？2 41是否采用一種存儲架構(gòu)就可以滿足所有業(yè)務(wù)類型的數(shù)據(jù)存取要求？是否只有采

5、用基于硬件的存儲虛擬化技術(shù)才可以解決異構(gòu)存儲統(tǒng)一整合管理的問題？3 如何解決存儲資源池中統(tǒng)一管理、高效維護、快速故障定位分析的問題？4存儲資源池架構(gòu)選型是否單一的存儲架構(gòu)就可以滿足所有業(yè)務(wù)類型數(shù)據(jù)的存儲要求？業(yè)務(wù)類型應(yīng)用舉例存儲要求適用性存儲架構(gòu)（常用）空間要求性能要求其他核心業(yè)務(wù)數(shù)據(jù)庫、傳統(tǒng)SQL類型數(shù)據(jù)庫計費數(shù)據(jù)庫ORACLE一般極高OLTP類型、隨機讀寫為主、性能主要依賴IOPS和延遲指標FC-SAN結(jié)合ASM+InfiniBand+SSD加速可基于多節(jié)點X86平臺組建存儲環(huán)境普通業(yè)務(wù)平臺（含數(shù)據(jù)庫）OA、網(wǎng)管高高業(yè)務(wù)種類多、整體數(shù)據(jù)增長快IP-SAN或FC-SAN基于新型分布式軟件體系

6、構(gòu)建的平臺Hadoop HDFS、HBASE、Vertica、MySQL極高高OLAP為主、數(shù)據(jù)量增長極快、軟件體系決定了可采用分布式存儲或本機存儲徹底的分布式架構(gòu)及去存儲化，多采用X86服務(wù)器的本地硬盤即可滿足要求基于文件共享類型的服務(wù)視頻類極高一般一寫多讀、文件數(shù)量多、更注重存儲帶寬性能FC-SAN或NAS多采用大容量、低速硬盤云存儲服務(wù)網(wǎng)盤極高一般數(shù)據(jù)量增長快對象存儲盡可能以廉價的硬件提供存儲服務(wù)數(shù)據(jù)保護備份、歸檔極高一般備份期間對系統(tǒng)性能會有影響NAS、虛擬帶庫、帶庫虛擬機平臺VMWARE承載以上各類應(yīng)用、故數(shù)據(jù)量增長極快、整體性能要求高FC SAN、IP SAN、NAS結(jié)論不存在通用

7、的分布式處理系統(tǒng)，更不存在通用的分布式存儲系統(tǒng)多樣化成為必然上層架構(gòu)的變化有規(guī)律可循基礎(chǔ)設(shè)施硬件層面，應(yīng)注重對上層架構(gòu)的支撐和補足不同業(yè)務(wù)類型對數(shù)據(jù)存儲的要求不同不同存儲架構(gòu)適用的存儲場景也不同分布式存儲SDS存儲不能滿足所有業(yè)務(wù)場景的存儲需要不同的業(yè)務(wù)系統(tǒng)對數(shù)據(jù)存儲的可靠性要求、隔離性要求并不相同，單一存儲環(huán)境會帶來極大的安全風險。存儲資源池架構(gòu)選型資源池需支持多種技術(shù)及架構(gòu)混合并存資源池需支持分級、分域組建在統(tǒng)一資源池存儲管理平臺的基礎(chǔ)上，組建融合存儲資源池融合存儲資源池化組建策略子域劃分原則：以業(yè)務(wù)類型的數(shù)據(jù)存儲特點以及承載的軟件計算技術(shù)架構(gòu)為依據(jù)FC-SAN/全閃存資源池：承載核心系統(tǒng)

8、數(shù)據(jù)庫或虛擬機?？蛇m當補充存儲虛擬化技術(shù)搭建專用資源池，利舊退服設(shè)備。通用X86平臺存儲資源池：基于通用X86硬件特別是大容量存儲型服務(wù)器，自身不直接提供存儲服務(wù)。可通過具體的軟件定義或計算架構(gòu)定義將其具象為IP-SAN資源池、NAS資源池、對象存儲資源池等。IP-SAN資源池：建議采用SDS分布式技術(shù)架構(gòu)，承載一般系統(tǒng)的塊存儲需求，可為虛擬機，一般數(shù)據(jù)庫提供存儲服務(wù)NAS資源池：建議采用SDS分布式技術(shù)架構(gòu)，提供NFS，F(xiàn)TP，Samba，CIFS等文件服務(wù)，可為視頻點播等業(yè)務(wù)提供存儲服務(wù)對象存儲資源池：提供廉價，冗余的文件和對象存儲，可為網(wǎng)盤等業(yè)務(wù)提供存儲服務(wù)備份資源池：提供所有業(yè)務(wù)系統(tǒng)數(shù)

9、據(jù)的備份、歸檔和恢復(fù)存儲資源供應(yīng)層：集中的虛擬化管理平臺一切資源池設(shè)備通過統(tǒng)一的供應(yīng)層實現(xiàn)資源供應(yīng)虛擬化，資源具象為虛擬的卷、空間、節(jié)點等形式，統(tǒng)一向上層計算架構(gòu)供應(yīng)存儲能力。并實現(xiàn)回收、備份、容災(zāi)等高級功能。分級原則：靈活性與隔離度的平衡基于不同業(yè)務(wù)的重要性和優(yōu)先等級，劃分通用和專用存儲資源池，例如為核心CRM系統(tǒng)劃分專用存儲池，保證物理隔離并實施安全策略，提升保護級別。為網(wǎng)管類系統(tǒng)劃分通用存儲資源池。不同技術(shù)類型的存儲資源池均可定向至通用資源池和專用資源池。針對存儲資源池制定SLA優(yōu)先級，例如構(gòu)建生產(chǎn)、測試/開發(fā)存儲資源池，利舊存儲資源盡量往SLA等級較低的資源池進行轉(zhuǎn)移。融合IT基礎(chǔ)設(shè)施資源池：為不同的業(yè)務(wù)負載選擇匹配的計算架構(gòu)和存儲架構(gòu)BSS-CRMCRM網(wǎng)上營業(yè)廳10000號BSS-計費聯(lián)機采集Hotbilling在線計費OSS資源管理服務(wù)開通綜合激活EDA數(shù)據(jù)集市ODS/EDWEDW離線分布式計算 - Hadoop流式計算架構(gòu) - storm傳統(tǒng)B/S架構(gòu)存儲平臺特性計算架構(gòu)在線分布式計算 mysql sharding在線實時分析 - MPP計算架構(gòu)應(yīng)用負載FC-SAN專用資源池+ 高性能全閃存資源池通用存儲資源池（1、2、3）專用存儲資源池（1、2、3）基于X86硬件