04-CCTC2016-UCloud邱模炯-IaaS平臺大規(guī)模計算集群的容器實踐

IaaSIaaS平臺大規(guī)模計算集群的容器實踐丏注.服務(wù).中立源?各種計算類業(yè)務(wù)?成千上萬次并發(fā)請求還是容器?虛擬機(jī)3?虛擬機(jī)和容器結(jié)合3APITaskMangercorosclustercoreosclustercoreosclusterAPITaskMangercorosclustercoreosclustercoreosclusterDockerDockerRegistry上運行容器的集群模式?采用VM+docker的模式pi?更小的資源消耗，?通過etcd存儲計算節(jié)點信息?通過fleet服務(wù)管理計算節(jié)點?以Docker方式執(zhí)行任務(wù)??每個CoreOS節(jié)點部署一個or?TaskExecutor通過Docker執(zhí)行任務(wù)，并通過Docker的標(biāo)準(zhǔn)輸入和標(biāo)準(zhǔn)輸出交換數(shù)據(jù)CoreCoreOsTaskExecutorkerkerkerTaskMangerDockerRegistrycoreoscoreoscorosclusterTaskMangerDockerRegistrycoreoscoreoscorosclusterclusterclusterCoreOsTaskExecutorkerrAAPI?DockerRegistry存放業(yè)務(wù)的eeper算節(jié)點狀態(tài)并按照分配算法務(wù)執(zhí)行節(jié)點?所有管理模塊都以golang開發(fā)，rker?用戶將應(yīng)用打包成Docker并上傳到我們的?通過HTTPAPI方式調(diào)用任務(wù)，拉起Docker完成計算STaskManager完成，任務(wù)參數(shù)：{輸入,docker鏡像路徑,輸出,超時時間}?任務(wù)分為同步任務(wù)和異步任務(wù)?同步任務(wù)需要同步等待任務(wù)返回，適用于實時計算?異步任務(wù)提交后根據(jù)任務(wù)id獲取結(jié)果，適用于離線計算?獲取任務(wù)結(jié)果?獲取任務(wù)狀態(tài)提交圖片處理請求DockerDocker提交圖片處理請求DockerDocker應(yīng)用案例-UFILE圖片處理APITaskManagerCoreOsAPITaskManagerDockerDocker返回處理結(jié)果應(yīng)用案例-UFILE圖片處理?將ufile的圖片處理算法打包成Docker?要求?實時性?源圖片通過數(shù)據(jù)流輸入?目標(biāo)圖片通過數(shù)據(jù)流輸出應(yīng)用案例-UFILE圖片處理?實現(xiàn)?基于數(shù)據(jù)流的實時計算?將輸入流重定向到Docker實例的標(biāo)準(zhǔn)輸入?圖片