亞馬遜云計算AWSAmazonWebServ1.ppt

亞馬遜云計算AWS （Amazon Web Service）,電子工業(yè)出版社 劉鵬主編云計算教材配套課件6,概述,Amazon的云從哪里來 Amazon提供的云計算服務 AWS的應用案例 AWS的業(yè)務流程 AWS的體系架構(gòu)及關(guān)鍵技術(shù),Amazon的云從哪里來?,一個簡單的想法 IaaS：將硬件設備等基礎(chǔ)資源封裝成服務供用戶使用 主要思想：虛擬 優(yōu)勢：動態(tài)申請，資源無限,Amazon提供的云計算服務,彈性計算云EC2 簡單存儲服務S3 簡單數(shù)據(jù)庫服務Simple DB 簡單隊列服務SQS 彈性MapReduce服務 內(nèi)容推送服務CloudFront 電子商務服務DevPay 靈活支付服務FPS,AWS的應用案例SmugMug,為什么選擇AWS SmugMug是一家在線照片存儲共享網(wǎng)站，擁有數(shù)億照片資源和幾十萬付費用戶。業(yè)務量的急劇增長導致該新興公司無法承受巨額的基礎(chǔ)設施開銷，SmugMug選擇了Amazon的EC2服務和S3服務。應用AWS后，僅需50人即可完成如此大的業(yè)務量。,SmugMug的基本架構(gòu),AWS的業(yè)務流程,注冊賬戶 資源申請 創(chuàng)建虛擬節(jié)點 將虛擬節(jié)點映射到物理節(jié)點 分割算法 數(shù)據(jù)處理 數(shù)據(jù)同步,基礎(chǔ)存儲架構(gòu)Dynamo,Dynamo在Amazon服務平臺中的地位 Dynamo架構(gòu)的主要技術(shù),數(shù)據(jù)均衡分布的問題,一致性哈希算法 優(yōu)勢： -負載均衡 -屏蔽節(jié)點處理能力差異,Dynamo的數(shù)據(jù)沖突處理,最終一致性模型 向量時鐘 （Vector Clock）,Dynamo的臨時故障處理機制,讀寫參數(shù)W、R、N N：系統(tǒng)中每條記錄的副本數(shù) W：每次記錄成功寫操作需要寫入的副本數(shù) R：每次記錄讀請求最少需要讀取的副本數(shù)。 滿足R+WN，用戶即可自行配置R和W 優(yōu)勢：實現(xiàn)可用性與容錯性之間的平衡,Dynamo的永久性故障恢復,Merkle哈希樹技術(shù) Dynamo中Merkle哈希樹的葉子節(jié)點是存儲數(shù)據(jù)所對應的哈希值，父節(jié)點是其所有子節(jié)點的哈希值,成員資格及錯誤檢測,基于Gossip協(xié)議的成員檢測機制,彈性計算云EC2,EC2是什么 EC2的主要特性 EC2基本架構(gòu)及主要概念 EC2應用實戰(zhàn),EC2是什么,EC2（Elastic Compute Cloud） 簡言之，EC2就是一部具有無限采集能力的虛擬計算機，用戶能夠用來執(zhí)行一些處理任務。 EC2的場景描述,EC2的主要特性,靈活性：可自行配置運行的實例類型、數(shù)量，還可以選擇實例運行的地理位置?？梢愿鶕?jù)用戶的需求隨時改變實例的使用數(shù)量。 低成本：按小時計費 安全性：SSH、可配置的防火墻機制、監(jiān)控等 易用性：用戶可以根據(jù)亞馬遜提供的模塊自由構(gòu)建自己的應用程序，同時EC2還會對用戶的服務請求自動進行負載平衡 容錯性：彈性IP,EC2的幾個重要概念(1),Amazon機器映像AMI（Amazon Machine Image） 由一個操作系統(tǒng)和當虛擬機啟動時你想要預先載入的任何的應用程序組成。 AMI是用戶整個云計算平臺運行的基礎(chǔ)，用戶使用EC2服務的第一步就是要創(chuàng)建一個自己的AMI。 公共AMI、私有AMI、付費AMI、共享AMI,EC2的幾個重要概念(2),實例Instance：用戶創(chuàng)建好AMI后，實際運行的系統(tǒng),EC2的幾個重要概念(3),彈性塊存儲EBS（Elastic Block Store） 卷，每個EBS最多創(chuàng)建20個卷 快照,EC2的幾個重要概念(4),區(qū)域,EC2的基本架構(gòu),EC2應用實戰(zhàn),注冊用戶，選擇支付方式 使用EC2的幾個前提條件 Java Runtime Environment Amazon EC2 command-line tools PuTTY & PuTTYgen 配置工具 運行實例,簡單存儲服務S3,S3（Simple Store Service）的設計思路 數(shù)據(jù)一致性模型,S3的設計思路(1),S3為任意類型的文件提供臨時或永久的存儲服務 非傳統(tǒng)關(guān)系數(shù)據(jù)庫存儲模式 簡單、高效 存儲、讀取，非查詢,S3的設計思路(2),基本概念 對象：S3的基本存儲單元（數(shù)據(jù)、元數(shù)據(jù)），數(shù)據(jù)類型任意 鍵：對象的唯一標識符 桶：存儲對象的容器（不能嵌套、在S3中名稱唯一、每個用戶最多創(chuàng)建100個桶）,S3的設計思路(3),S3的數(shù)據(jù)一致性模型,冗余存儲 最終一致性模型,簡單隊列服務SQS(1),目標：解決低耦合系統(tǒng)間的通信問題，支持分布式計算機系統(tǒng)之間的工作流 特點：簡單、無處不在 “在互聯(lián)網(wǎng)的所有計算機不用安裝任何軟件或特殊防火墻配置就可以增加或讀消息” 處理端：EC2上的AMI,簡單隊列服務SQS(2),機制： 冗余存儲，基于加權(quán)隨機分布的消息取樣 并發(fā)管理和故障排除，消息的可見性超時值與生命周期,簡單隊列服務SQS(3),簡單數(shù)據(jù)庫服務SimpleDB,SDB與S3的區(qū)別 SDB與傳統(tǒng)關(guān)系數(shù)據(jù)庫的區(qū)別 SDB的基本結(jié)構(gòu)及主要概念,SDB與S3的區(qū)別,S3是專為大型，非結(jié)構(gòu)化的數(shù)據(jù)塊設計的 SimpleDB是為復雜的，結(jié)構(gòu)化數(shù)據(jù)建立的，支持數(shù)據(jù)的查找、刪除、插入等操作,SDB與關(guān)系數(shù)據(jù)庫的區(qū)別(1),傳統(tǒng)的關(guān)系數(shù)據(jù)庫表結(jié)構(gòu) SDB樹狀結(jié)構(gòu),SDB的基本結(jié)構(gòu),SDB與關(guān)系數(shù)據(jù)庫的區(qū)別(2),新特性： 無需預定義模式 單個屬性允許有 多個值 支持自動索引,不能完成的操作： 沒有事務的概念 不支持連接操作 實際存儲的數(shù)據(jù)類型過