微博混合云架構(gòu)實踐

1、微博混合云架構(gòu)實踐微博面臨的挑戰(zhàn)Docker與公有云混合云架構(gòu)微博春晚峰值應對混合云展望議程2015年6月1日李晨娛樂事件微博某業(yè)務請求量曲線圖微博面臨的新挑戰(zhàn)彈性需求不斷擴大娛樂綜藝等熱點事件頻繁出現(xiàn)Push日?；箻O端峰值流量普遍化春晚業(yè)務請求量全面飆升“藍色還是黑色”“duang”“世界那么大，我想去看看”“我們”“重要的事情說三遍”“青島大蝦”“誰來抬我下飛機”“主要看氣質(zhì)”“地鐵哺乳風波”“優(yōu)衣庫”事件微博面臨的新挑戰(zhàn)原有體系架構(gòu)弊病愈加明顯服務器采購擴容以月為單位機架等資源緊缺，無法滿足業(yè)務大規(guī)模擴容需求春晚應對服務器需提前12月準備，浪費巨大熱點事件爆發(fā)時無法短時間快速擴容申請評

2、審設備采購入CMDB裝機上架初始化服務部署報修下架更輕量級的虛擬化，快速部署Docker解決業(yè)務發(fā)布差異化問題2015年Docker體系開始成熟小時級數(shù)千臺服務器的支撐能力VPC技術(shù)將公有云與內(nèi)網(wǎng)融合2015年國內(nèi)公有云趨于成熟新浪內(nèi)網(wǎng)（12核16G）阿里云（4核8G+8核8G）新浪內(nèi)網(wǎng)與阿里云成本對比-月成本按小時租單小時成本（元）包月租單小時成本（元）- 阿里云按小時部署成本為新浪內(nèi)網(wǎng)3X- 常備服務器成本基本相同國外Airbnb、Yelp等使用AWS進行部署高德、快的已在阿里云部署小米借助AWS解決秒殺峰值流量問題12306借助阿里云解決飽受詬病的春節(jié)余票查詢峰值問題專線/VPC微博內(nèi)網(wǎng)

3、私有云阿里云公有云微博內(nèi)網(wǎng)與阿里云通過專線聯(lián)通VPC使阿里云服務器可以當內(nèi)網(wǎng)服務器使用將阿里云作為微博新的數(shù)據(jù)中心，多IDC部署借助Docker和運維自動化改造實現(xiàn)彈性擴縮容阿里云可直接提供對外服務（需備案）容量評估調(diào)度監(jiān)控Feed用戶紅包飛MAPI廣告通訊發(fā)布管理Docker 調(diào)度策略ECS管理賬戶體系SLB管理成本核算Docker RegisterDocker 鏡像市場阿里云Yum/日志軟件安裝共享池 管理四七層解 決方案安全保障審批流程工程框架平臺架構(gòu)服務池 管理配置管理容器監(jiān)控調(diào) 度 層物 理 層基 礎 框 架業(yè) 務 方Docker 工具體系監(jiān)控體系DNS管理專線保障公有云 流量管理O

4、S升級 自動化HadoopPHPJavaWebRPCJPool擴縮容上線發(fā)布回滾降級服務池管理SwarmMesosDocker DeamonPluto創(chuàng)建主機初始化成本中心基礎設施服務發(fā)現(xiàn)Nginx Motan SLB鏡像中心Docker RegistryRoam 監(jiān)控中心私有云公有云電信專線聯(lián)通專線調(diào)度主機容量評估編排新架構(gòu)技術(shù)挑戰(zhàn)阿里云服務器如何進行配置管理Docker鏡像如何進行調(diào)度Docker鏡像如何進行快速分發(fā)七層服務發(fā)現(xiàn)如何處理，Reload與Upsync-Module在線容量評估與動態(tài)擴縮容微博春晚峰值應對【日常】100臺服務器初始化流程，總時間14分鐘整點開始操作3min10臺基礎設施ECS創(chuàng) 建1minAnsible初始化3min阿里云建100機器3min阿里云初始化2minRegistry初始化3min預熱鏡像3min拉鏡像操作3min容器啟動、七層變更【日?！棵慷?00臺多3分鐘3min阿里云建100機器3min阿里云初始化3min拉鏡像操作1400臺50%流量0降級2小時日常峰值應對與突發(fā)峰值應對日常峰值21點部署服務，0點前完成縮容在線容量評估系統(tǒng)每周進行容量評估實時流量分析，對突發(fā)