04-CCTC2016-UCloud邱模炯-IaaS平臺(tái)大規(guī)模計(jì)算集群的容器實(shí)踐

IaaSIaaS平臺(tái)大規(guī)模計(jì)算集群的容器實(shí)踐丏注.服務(wù).中立源?各種計(jì)算類業(yè)務(wù)?成千上萬(wàn)次并發(fā)請(qǐng)求還是容器?虛擬機(jī)3?虛擬機(jī)和容器結(jié)合3APITaskMangercorosclustercoreosclustercoreosclusterAPITaskMangercorosclustercoreosclustercoreosclusterDockerDockerRegistry上運(yùn)行容器的集群模式?采用VM+docker的模式pi?更小的資源消耗，?通過etcd存儲(chǔ)計(jì)算節(jié)點(diǎn)信息?通過fleet服務(wù)管理計(jì)算節(jié)點(diǎn)?以Docker方式執(zhí)行任務(wù)??每個(gè)CoreOS節(jié)點(diǎn)部署一個(gè)or?TaskExecutor通過Docker執(zhí)行任務(wù)，并通過Docker的標(biāo)準(zhǔn)輸入和標(biāo)準(zhǔn)輸出交換數(shù)據(jù)CoreCoreOsTaskExecutorkerkerkerTaskMangerDockerRegistrycoreoscoreoscorosclusterTaskMangerDockerRegistrycoreoscoreoscorosclusterclusterclusterCoreOsTaskExecutorkerrAAPI?DockerRegistry存放業(yè)務(wù)的eeper算節(jié)點(diǎn)狀態(tài)并按照分配算法務(wù)執(zhí)行節(jié)點(diǎn)?所有管理模塊都以golang開發(fā)，rker?用戶將應(yīng)用打包成Docker并上傳到我們的?通過HTTPAPI方式調(diào)用任務(wù)，拉起Docker完成計(jì)算STaskManager完成，任務(wù)參數(shù)：{輸入,docker鏡像路徑,輸出,超時(shí)時(shí)間}?任務(wù)分為同步任務(wù)和異步任務(wù)?同步任務(wù)需要同步等待任務(wù)返回，適用于實(shí)時(shí)計(jì)算?異步任務(wù)提交后根據(jù)任務(wù)id獲取結(jié)果，適用于離線計(jì)算?獲取任務(wù)結(jié)果?獲取任務(wù)狀態(tài)提交圖片處理請(qǐng)求DockerDocker提交圖片處理請(qǐng)求DockerDocker應(yīng)用案例-UFILE圖片處理APITaskManagerCoreOsAPITaskManagerDockerDocker返回處理結(jié)果應(yīng)用案例-UFILE圖片處理?將ufile的圖片處理算法打包成Docker?要求?實(shí)時(shí)性?源圖片通過數(shù)據(jù)流輸入?目標(biāo)圖片通過數(shù)據(jù)流輸出應(yīng)用案例-UFILE圖片處理?實(shí)現(xiàn)?基于數(shù)據(jù)流的實(shí)時(shí)計(jì)算?將輸入流重定向到Docker實(shí)例的標(biāo)準(zhǔn)輸入?圖片