亞馬遜云計算優(yōu)秀課件

1、亞馬遜云計算概述Amazon的云從哪里來Amazon提供的云計算服務(wù)AWS的應(yīng)用案例AWS的業(yè)務(wù)流程AWS的體系架構(gòu)及關(guān)鍵技術(shù)Amazon的云從哪里來?一個簡單的想法IaaS：將硬件設(shè)備等基礎(chǔ)資源封裝成服務(wù)供用戶使用主要思想：虛擬優(yōu)勢：動態(tài)申請，資源無限S3（Simple Store Service）的設(shè)計思路彈性MapReduce服務(wù)High-CPU Medium公共AMI、私有AMI、付費AMI、共享AMIDynamo架構(gòu)的主要技術(shù)Dynamo的數(shù)據(jù)沖突處理并發(fā)管理和故障排除，消息的可見性超時值與生命周期由一個操作系統(tǒng)和當虛擬機啟動時你想要預(yù)先載入的任何的應(yīng)用程序組成。滿足R+WN，用戶即

2、可自行配置R和WSDB與關(guān)系數(shù)據(jù)庫的區(qū)別(2)Amazon提供的云計算服務(wù)SDB與關(guān)系數(shù)據(jù)庫的區(qū)別(1)EC2的幾個重要概念(3)Dynamo架構(gòu)的主要技術(shù)處理端：EC2上的AMIAMI是用戶整個云計算平臺運行的基礎(chǔ)，用戶使用EC2服務(wù)的第一步就是要創(chuàng)建一個自己的AMI。Amazon提供的云計算服務(wù)彈性計算云EC2簡單存儲服務(wù)S3簡單數(shù)據(jù)庫服務(wù)Simple DB簡單隊列服務(wù)SQS彈性MapReduce服務(wù)內(nèi)容推送服務(wù)CloudFront電子商務(wù)服務(wù)DevPay靈活支付服務(wù)FPSAWS的應(yīng)用案例SmugMug為什么選擇AWS SmugMug是一家在線照片存儲共享網(wǎng)站，擁有數(shù)億照片資源和幾十萬付費

3、用戶。業(yè)務(wù)量的急劇增長導(dǎo)致該新興公司無法承受巨額的基礎(chǔ)設(shè)施開銷，SmugMug選擇了Amazon的EC2服務(wù)和S3服務(wù)。應(yīng)用AWS后，僅需50人即可完成如此大的業(yè)務(wù)量。 SmugMug的基本架構(gòu)AWS的業(yè)務(wù)流程注冊賬戶資源申請創(chuàng)建虛擬節(jié)點將虛擬節(jié)點映射到物理節(jié)點分割算法數(shù)據(jù)處理數(shù)據(jù)同步基礎(chǔ)存儲架構(gòu)DynamoDynamo在Amazon服務(wù)平臺中的地位Dynamo架構(gòu)的主要技術(shù)問題采取的相關(guān)技術(shù)數(shù)據(jù)均衡分布改進的一致性哈希算法，數(shù)據(jù)備份數(shù)據(jù)沖突處理向量時鐘（vector clock）臨時故障處理Hinted handoff（數(shù)據(jù)回傳機制），參數(shù)（W,R,N）可調(diào)的弱quorum機制永久故障后的恢

4、復(fù)Merkle哈希樹成員資格以及錯誤檢測基于gossip的成員資格協(xié)議和錯誤檢測數(shù)據(jù)均衡分布的問題一致性哈希算法優(yōu)勢： -負載均衡 -屏蔽節(jié)點處理能力差異Dynamo的數(shù)據(jù)沖突處理最終一致性模型向量時鐘 （Vector Clock）Dynamo的臨時故障處理機制讀寫參數(shù)W、R、NN：系統(tǒng)中每條記錄的副本數(shù)W：每次記錄成功寫操作需要寫入的副本數(shù)R：每次記錄讀請求最少需要讀取的副本數(shù)。滿足R+WN，用戶即可自行配置R和W優(yōu)勢：實現(xiàn)可用性與容錯性之間的平衡Dynamo的永久性故障恢復(fù)Merkle哈希樹技術(shù)Dynamo中Merkle哈希樹的葉子節(jié)點是存儲數(shù)據(jù)所對應(yīng)的哈希值，父節(jié)點是其所有子節(jié)點的哈希值

5、成員資格及錯誤檢測基于Gossip協(xié)議的成員檢測機制彈性計算云EC2EC2是什么EC2的主要特性EC2基本架構(gòu)及主要概念EC2應(yīng)用實戰(zhàn)EC2是什么EC2（Elastic Compute Cloud） 簡言之，EC2就是一部具有無限采集能力的虛擬計算機，用戶能夠用來執(zhí)行一些處理任務(wù)。EC2的場景描述 EC2的主要特性靈活性：可自行配置運行的實例類型、數(shù)量，還可以選擇實例運行的地理位置?？梢愿鶕?jù)用戶的需求隨時改變實例的使用數(shù)量。 低成本：按小時計費 安全性：SSH、可配置的防火墻機制、監(jiān)控等易用性：用戶可以根據(jù)亞馬遜提供的模塊自由構(gòu)建自己的應(yīng)用程序，同時EC2還會對用戶的服務(wù)請求自動進行負載平衡容

6、錯性：彈性IP EC2的幾個重要概念(1)Amazon機器映像AMI（Amazon Machine Image） 由一個操作系統(tǒng)和當虛擬機啟動時你想要預(yù)先載入的任何的應(yīng)用程序組成。 AMI是用戶整個云計算平臺運行的基礎(chǔ)，用戶使用EC2服務(wù)的第一步就是要創(chuàng)建一個自己的AMI。 公共AMI、私有AMI、付費AMI、共享AMI EC2的幾個重要概念(2)實例Instance：用戶創(chuàng)建好AMI后，實際運行的系統(tǒng)資源SmallLargeExtra LargeHigh-CPU MediumHigh-CPUExtra Large平臺32位64位64位32位64位CPU1ECU4ECU8ECU5ECU20EC

7、U內(nèi)存1.7G7.5G15G1.7G7G存儲容量160G850G1690G350G1690G實例類型名m1.smallm1.largem1.xlargec1.mediumc1.xlargeEC2的幾個重要概念(3)彈性塊存儲EBS（Elastic Block Store） 卷，每個EBS最多創(chuàng)建20個卷 快照EC2的幾個重要概念(4)區(qū)域EC2的基本架構(gòu)EC2應(yīng)用實戰(zhàn)注冊用戶，選擇支付方式使用EC2的幾個前提條件 Java Runtime Environment Amazon EC2 command-line tools PuTTY & PuTTYgen配置工具運行實例簡單存儲服務(wù)S3S3（S

8、imple Store Service）的設(shè)計思路數(shù)據(jù)一致性模型S3的設(shè)計思路(1)S3為任意類型的文件提供臨時或永久的存儲服務(wù)非傳統(tǒng)關(guān)系數(shù)據(jù)庫存儲模式 簡單、高效 存儲、讀取，非查詢S3的設(shè)計思路(2)基本概念 對象：S3的基本存儲單元（數(shù)據(jù)、元數(shù)據(jù)），數(shù)據(jù)類型任意 鍵：對象的唯一標識符 桶：存儲對象的容器（不能嵌套、在S3中名稱唯一、每個用戶最多創(chuàng)建100個桶）S3的設(shè)計思路(3)S3的數(shù)據(jù)一致性模型冗余存儲最終一致性模型簡單隊列服務(wù)SQS(1)目標：解決低耦合系統(tǒng)間的通信問題，支持分布式計算機系統(tǒng)之間的工作流 特點：簡單、無處不在 “在互聯(lián)網(wǎng)的所有計算機不用安裝任何軟件或特殊防火墻配置就

9、可以增加或讀消息” 處理端：EC2上的AMIDynamo的數(shù)據(jù)沖突處理S3（Simple Store Service）的設(shè)計思路SDB的基本結(jié)構(gòu)及主要概念業(yè)務(wù)量的急劇增長導(dǎo)致該新興公司無法承受巨額的基礎(chǔ)設(shè)施開銷，SmugMug選擇了Amazon的EC2服務(wù)和S3服務(wù)。簡言之，EC2就是一部具有無限采集能力的虛擬計算機，用戶能夠用來執(zhí)行一些處理任務(wù)。沒有事務(wù)的概念簡單隊列服務(wù)SQS(2)機制： 冗余存儲，基于加權(quán)隨機分布的消息取樣 并發(fā)管理和故障排除，消息的可見性超時值與生命周期簡單隊列服務(wù)SQS(3)簡單數(shù)據(jù)庫服務(wù)SimpleDBSDB與S3的區(qū)別SDB與傳統(tǒng)關(guān)系數(shù)據(jù)庫的區(qū)別SDB的基本結(jié)構(gòu)及主要概念SDB與S3的區(qū)別S3是專為大型，非結(jié)構(gòu)化的數(shù)據(jù)塊設(shè)計的 SimpleDB是為復(fù)雜的，結(jié)構(gòu)化數(shù)據(jù)建立的，支持數(shù)據(jù)的查找、刪除、插入等操作 SDB與關(guān)系數(shù)據(jù)庫的區(qū)別(1)傳統(tǒng)的關(guān)