開源云計(jì)算系統(tǒng)簡(jiǎn)介

1、開源云計(jì)算系統(tǒng)簡(jiǎn)介現(xiàn)有開源云計(jì)算系統(tǒng)開源云計(jì)算系統(tǒng)開源云計(jì)算系統(tǒng)對(duì)應(yīng)的商用云計(jì)算系統(tǒng)對(duì)應(yīng)的商用云計(jì)算系統(tǒng)Hadoop HDFSGoogle GFSHadoop MapReduceGoogle MapReduceHadoop HBaseGoogle BigtableHadoop ZooKeeperGoogle ChubbyEucalyptus、NimbusAmazon EC2EucalyptusAmazon S3Sector and Sphere無直接對(duì)應(yīng)系統(tǒng)abiquo無直接對(duì)應(yīng)系統(tǒng)MongoDB無直接對(duì)應(yīng)系統(tǒng)Eucalyptus 設(shè)計(jì)背景 體系結(jié)構(gòu) 主要構(gòu)件 訪問接口 虛擬組網(wǎng)Eucalyp

2、tus Eucalyptus:桉樹-將程序連接到有用系統(tǒng)的彈性效能計(jì)算體系結(jié)構(gòu)Elastic Utility Computing Architecture for Linking Your Programs To Useful Systems 功能：-幫助用戶完成對(duì)各種基于物理設(shè)施的虛擬設(shè)備的全局性掌控，完成對(duì)整個(gè)集群的計(jì)算能力進(jìn)行動(dòng)態(tài)配置。Eucalyptus的設(shè)計(jì)背景 開發(fā)目的： -為研究者提供模塊化的試驗(yàn)平臺(tái) 設(shè)計(jì)原則-Eucalyptus必須能夠在不受其設(shè)計(jì)者操控的軟硬件環(huán)境中進(jìn)行部署和執(zhí)行。-Eucalyptus 必須是模塊化的，以便不同的研究者進(jìn)行升級(jí)、改造和替換，同時(shí)能夠?qū)崿F(xiàn)最大

3、程度的可擴(kuò)展性。 設(shè)計(jì)目標(biāo)-可擴(kuò)展性、可移植性、方便管理Eucalyptus的基本架構(gòu)體系結(jié)構(gòu)主要構(gòu)件 云控制器-系統(tǒng)的中樞神經(jīng)，它是用戶的可見入口點(diǎn)和做出全局決定的組件。負(fù)責(zé)處理由用戶或系統(tǒng)管理員發(fā)出的請(qǐng)求，做出高層的虛擬機(jī)實(shí)例調(diào)度決定 集群控制器-負(fù)責(zé)收集節(jié)點(diǎn)的狀態(tài)信息、調(diào)度虛擬機(jī)實(shí)例執(zhí)行請(qǐng)求、配置實(shí)例網(wǎng)絡(luò)。運(yùn)行在集群的頭節(jié)點(diǎn)或服務(wù)器上。 節(jié)點(diǎn)控制器-負(fù)責(zé)管理一個(gè)物理節(jié)點(diǎn)，運(yùn)行在虛擬機(jī)寄宿的物理資源上，負(fù)責(zé)啟動(dòng)、檢查、關(guān)閉和清除虛擬機(jī)實(shí)例等工作。訪問接口 客戶端接口-實(shí)質(zhì)上是Eucalyptus內(nèi)部系統(tǒng)接口和外部定義的客戶端接口之間的轉(zhuǎn)換器。 管理接口-由云控制器通過一個(gè)基于Web的接口或

4、通過命令行的方式實(shí)現(xiàn)，管理接口只對(duì)系統(tǒng)管理員可見，且具有唯一性。 實(shí)例控制接口-虛擬機(jī)控制服務(wù)(VmControl Service)虛擬組網(wǎng) 特點(diǎn)：簡(jiǎn)單，易配置 協(xié)作完成單一任務(wù)的虛擬機(jī)之間可以通信，而屬于不同用戶的虛擬機(jī)之間應(yīng)該是通信隔離的。 解決方法：-虛擬網(wǎng)絡(luò)接口：公共接口，私有接口-通信隔離：用虛擬局域網(wǎng)（VLAN）給屬于特定用戶的實(shí)例集打上網(wǎng)絡(luò)標(biāo)簽Nimbus Nimbus： -基于網(wǎng)格中間件Globus，從最早的Virtual Workspace演化而來，提供與EC2類似的功能和接口 -Nimbus是一個(gè)開源的工具集，它可以把集群部署到IaaS云中Nimbus基本概念 標(biāo)準(zhǔn)客戶端（

5、reference client）：-以命令行的方式訪問服務(wù)，全面支持WSRF前臺(tái)的各種特性 WSRF（Web Services Resource Framework）：-即Web服務(wù)資源框架 RM API（Resource Management API）：-即資源管理接口 工作區(qū)（workspace）：-實(shí)際上就是一個(gè)計(jì)算節(jié)點(diǎn)Nimbus基本架構(gòu)Sector and Sphere 實(shí)現(xiàn)語言：C+ Sector：-部署在廣域網(wǎng)上的分布式存儲(chǔ)系統(tǒng)，它為了使系統(tǒng)有高可靠性和可用性采用自動(dòng)的文件副本冗余方式-已經(jīng)用于Sloan數(shù)字巡天系統(tǒng) Sphere：-建立在Sector之上的計(jì)算服務(wù)，它為用戶編

6、寫分布式密集型數(shù)據(jù)應(yīng)用提供了簡(jiǎn)單的編程接口Sector的基本架構(gòu)Sphere數(shù)據(jù)處理流程 當(dāng)主服務(wù)器接收到Sphere數(shù)據(jù)處理的客戶端請(qǐng)求，主服務(wù)器向客戶端發(fā)送一個(gè)可用的從節(jié)點(diǎn)列表 客戶端選擇一些或者所有從節(jié)點(diǎn)，讓SPE在其上運(yùn)行 客戶端與SPE建立UDT連接(數(shù)據(jù)傳輸提升至Hadoop的兩倍) 流處理函數(shù)被發(fā)送給每個(gè)SPE，并儲(chǔ)存在從節(jié)點(diǎn)上 SPE打開動(dòng)態(tài)庫并獲得各種處理函數(shù)Sphere數(shù)據(jù)處理模型abiquo 三部分： abiCloud、abiNtense和abiData abiCloud-開源云管理軟件，可以創(chuàng)建管理資源并且可以按需擴(kuò)展。該工具能夠以快速、簡(jiǎn)單和可擴(kuò)展的方式創(chuàng)建和管理大型、復(fù)雜的IT基礎(chǔ)設(shè)施(包括虛擬服務(wù)器、網(wǎng)絡(luò)、應(yīng)用和存儲(chǔ)設(shè)備等)。 優(yōu)勢(shì)： -強(qiáng)大的Web管理界面 版本：-社區(qū)版、企業(yè)版、ISP版abiCloud的基本架構(gòu)MongoDB 目標(biāo)：-構(gòu)建一個(gè)基于分布式文件存儲(chǔ)系統(tǒng)的數(shù)據(jù)庫 實(shí)現(xiàn)語言：C+ 平臺(tái)：LinuxMongoDB的基本架構(gòu)Mong