中國電信云計算PaaS技術與應用

1、云計算PaaS技術與應用黃志蘭中國電信廣州研究院2021年10月15日提綱提綱v PaaSPaaS概述概述v PaaSPaaS核心技術核心技術v 相關實踐相關實踐PaaS概述概述v 定義定義面向互聯(lián)網(wǎng)應用開發(fā)者，把端到端的分布式軟件開發(fā)、測試、部署、運行環(huán)境以及應用程序托管當作服務，通過互聯(lián)網(wǎng)提供給用戶v 特點特點網(wǎng)絡化的分布式開發(fā)平臺，以Web服務方式提供給用戶開發(fā)、測試、運行環(huán)境在云端，用戶共享云平臺海量存儲、超大規(guī)模計算能力，開發(fā)環(huán)境維護工作由服務提供商解決集成帳戶認證、數(shù)據(jù)庫、消息隊列等配套基礎服務，提高開發(fā)效率Java、Python等高級編程語言，易于應用程序開發(fā)者使用v 服務形態(tài)服

2、務形態(tài)通過互聯(lián)網(wǎng)提供服務，按需提供，按量計費GoogleGoogleApp EngineApp EngineMicrosoftMicrosoftAsureAsureAmazon Amazon HadoopHadoopSalesforceSalesforceFFThe cloudThe cloudPaaS發(fā)展發(fā)展v 商業(yè)推動商業(yè)推動 SaaS企業(yè)為提高用戶粘著度，把支撐應用開發(fā)的平臺發(fā)布出來，供軟件開發(fā)上自行開發(fā)、自由定制v 需求推動需求推動 高校等科研機構需要臨時性的超大規(guī)模計算能力 大型系統(tǒng)面臨嚴峻的擴展性問題 Google等公司擁有超大規(guī)模服務器集群，需要把海量存儲和大規(guī)模計算資源提供出來

3、v 技術推動技術推動 把多臺機器虛擬成一臺超級機器的分布式技術日趨成熟和穩(wěn)定PaaSPaaS是一場互聯(lián)網(wǎng)應用軟件開發(fā)革命，體現(xiàn)了互聯(lián)網(wǎng)低成本、高效率和是一場互聯(lián)網(wǎng)應用軟件開發(fā)革命，體現(xiàn)了互聯(lián)網(wǎng)低成本、高效率和規(guī)模化應用的特性，能夠幫助應用程序開發(fā)人員快速定制、開發(fā)滿足特規(guī)模化應用的特性，能夠幫助應用程序開發(fā)人員快速定制、開發(fā)滿足特定需求的互聯(lián)網(wǎng)應用，從而大大提高工作效率和執(zhí)行力。定需求的互聯(lián)網(wǎng)應用，從而大大提高工作效率和執(zhí)行力。 提綱提綱v PaaSPaaS概述概述v PaaSPaaS核心技術核心技術v 相關實踐相關實踐PaaS核心技術核心技術v 分布式技術：把多臺機器虛擬成一臺性能極強的超級

4、計算機分布式技術：把多臺機器虛擬成一臺性能極強的超級計算機分布式存儲、分布式計算、分布式數(shù)據(jù)庫、同步機制、負載分擔、任務調度v 分布式軟件開發(fā)、測試、運行工具分布式軟件開發(fā)、測試、運行工具編程環(huán)境SDK、編程接口、代碼庫、測試工具、運行工具v 運營管理系統(tǒng)運營管理系統(tǒng)用戶管理、計費認證、資源監(jiān)控、應用管理 多合一多合一（GoogleGoogle）分布式分布式分布式解決的問題分布式解決的問題v 分布式問題由來已久，把多臺機分布式問題由來已久，把多臺機器合并成一臺機器是夢寐以求的器合并成一臺機器是夢寐以求的目標目標 編寫程序，需要考慮任務怎么分解，怎么匯總結果 分發(fā)程序，需要把程序拷貝到不同的機器

5、上，逐一啟動程序 收集結果，需要把每部分程序的結果收集起來，并進行匯總 顯示結果，需要通過統(tǒng)一的界面把結果輸出給用戶自動分發(fā)程序自動分發(fā)程序自動啟動程序自動啟動程序自動收集結果自動收集結果.java.java .java.java.java.java .java.java.java.java .java.java .java.java .java.java虛擬虛擬超級計算機超級計算機云計算分布式計算模型云計算分布式計算模型 分布式計算是由來已久的問題l 計算模型：操作(CPU)+數(shù)據(jù)(內存/硬盤)l 并行方法：傳統(tǒng)分布式系統(tǒng)試圖解決任何CPU訪問任何數(shù)據(jù)CPUCPU內存內存硬盤硬盤CPUCPU

6、內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤中間件承擔多機之間的中間件承擔多機之間的“總線總線”結束結束輸入輸入開發(fā)者必須將程序邏輯轉換成分布式平臺的邏輯開發(fā)者必須將程序邏輯轉換成分布式平臺的邏輯CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤CPUCPU內存內存硬盤硬盤借助網(wǎng)絡，借助網(wǎng)絡，HadoopHado

7、op實現(xiàn)了多機之間的實現(xiàn)了多機之間的“總線總線”結束結束輸入輸入MapMapMapMapReduceReduce應用應用邏輯邏輯轉換轉換邏輯邏輯分布分布執(zhí)行執(zhí)行分布式文件系統(tǒng)分布式文件系統(tǒng)v 分布式文件系統(tǒng)為提供海量存儲空間提供了極大的便利分布式文件系統(tǒng)為提供海量存儲空間提供了極大的便利NameNodeNameNode負責文件目錄管理負責文件目錄管理DataNodeDataNode負責真實的數(shù)據(jù)存儲負責真實的數(shù)據(jù)存儲分布式數(shù)據(jù)庫分布式數(shù)據(jù)庫v 數(shù)據(jù)庫關系模型不再是數(shù)據(jù)庫關系模型不再是PaaSPaaS解決的問題解決的問題提綱提綱v PaaSPaaS概述概述v PaaSPaaS核心技術核心技術v

8、相關實踐相關實踐中國電信與云計算中國電信與云計算PaaSv 需求分析需求分析 內部需求分析 傳統(tǒng)電信系統(tǒng)多用小型機集群，面臨擴展性問題，擴容成本高 海量數(shù)據(jù)分析處理困難：用戶數(shù)據(jù)、計費數(shù)據(jù)、網(wǎng)管數(shù)據(jù) 外部需求分析 互聯(lián)網(wǎng)信息應用：大規(guī)模數(shù)據(jù)存儲和處理需求、快速開發(fā)能力 移動互聯(lián)網(wǎng)應用：瘦客戶端應用開發(fā)需求 科研單位大規(guī)模并行計算需求 外部對電信能力的開放需求v 應對策略應對策略 打造大規(guī)模分布式處理平臺 運用分布式技術構建新型大規(guī)模集群，解決大型系統(tǒng)的擴展性 為OSS/BSS等電信運營系統(tǒng)提供大量的存儲空間和并行計算能力 為號百等信息應用、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)應用提供超大服務器集群支撐 建設電信

9、能力開放平臺相關工作相關工作-技術研究及基礎平臺建設技術研究及基礎平臺建設v 技術研究技術研究各種技術研究報告中國電信云計算白皮書云計算技術手冊v 規(guī)范編寫規(guī)范編寫IaaS服務技術要求及相關設備規(guī)范v 平臺搭建平臺搭建數(shù)百CPU核的云平臺，域名部署虛擬化平臺及分布式計算平臺v 試點應用試點應用網(wǎng)絡流量矩陣分析，IPv4/IPv6協(xié)議轉換，餐飲搜索，熱點播報，行業(yè)資訊平臺建設：大規(guī)模分布式服務引擎平臺建設：大規(guī)模分布式服務引擎分布式服務引擎分布式服務引擎-定位定位分布式服務引擎分布式服務引擎-架構架構關系型/分布式數(shù)據(jù)庫查詢引擎特征提取數(shù)據(jù)獲取分布式數(shù)據(jù)庫分布式文件系統(tǒng)分布式計算硬件平臺分布式平臺統(tǒng)計分析分類聚類預測關聯(lián)分析基礎能力層（數(shù)據(jù)挖掘、分析）內容分類信息檢索位置服務可視處理文本處理圖表服務服務能力層（信息收集、處理）ONS系統(tǒng)EPC查詢流量分析可視檢索餐飲搜索行為分析應用層熱點播報行業(yè)資訊配置調度監(jiān)控接入應用應用1：移動互聯(lián)網(wǎng)網(wǎng)絡加速：移動互聯(lián)網(wǎng)網(wǎng)絡加速v 網(wǎng)絡加速融合了IPv4/IPv6互通、內容加速及重排等功能，是極富有價值的應用移動用戶移動用戶云計算軟件平臺云計算軟件平臺( (內容過濾，頁面重排內容過濾，頁面重排) )自動分布自動分布HTTPH