樂道1號店運維云平臺介紹

1、樂道1號店運維云平臺介紹技術(shù)創(chuàng)新，變革未來Agenda123四環(huán)一庫的深度解讀樂道的產(chǎn)品架構(gòu)及核心價值樂道的演變過程及核心功能私有云平臺的演變過程純手工標準化自動化平臺化CMDB樂道首頁樂道的核心功能 - 四環(huán)一庫CMDB設備管理 裝機管理 配置管理配置管理 服務部署 服務注冊IDC閉環(huán)部署閉環(huán)監(jiān)控閉環(huán)監(jiān)控系統(tǒng) 事件管理 報警系統(tǒng)業(yè)務閉環(huán)持續(xù)集成 配置中心 發(fā)布系統(tǒng)四環(huán)一庫 - CMDBCMDB基礎設施 系統(tǒng)&配置 組織&業(yè)務四環(huán)一庫 - IDC閉環(huán)IDC閉環(huán)設備管理 裝機管理 配置管理四環(huán)一庫 - 部署閉環(huán)部署閉環(huán)配置管理 服務部署 服務注冊四環(huán)一庫 - 業(yè)務閉環(huán)業(yè)務閉環(huán)持續(xù)集成 配置中心

2、發(fā)布系統(tǒng)四環(huán)一庫 - 監(jiān)控閉環(huán)監(jiān)控閉環(huán)監(jiān)控系統(tǒng) 事件管理 報警系統(tǒng)Agenda123四環(huán)一庫的深度解讀樂道的產(chǎn)品架構(gòu)及核心價值樂道的演變過程及核心功能四環(huán)一庫 - IDC閉環(huán)IDC閉環(huán)監(jiān)控閉環(huán)IDC管理自動化配置自動化部署閉環(huán)裝機自動化業(yè)務閉環(huán)裝機管理的演變過程物理機IPMICobblerPXEAPI物理機命令行-GUI虛擬機CMDB網(wǎng)絡安裝遠程控制統(tǒng)一管理自動更新?lián)肀г艻DC_A主機Puppet AgentZabbix ServerIDC_B主機Puppet AgentZabbix Server配置管理Puppet Masterfile - zabbix_agentd.confpackage

3、 - zabbix-agentCMDB獲取詳細信息(用于factor)IDC管理系統(tǒng)設備管理宿主機管理裝機管理資源池裝機初始化創(chuàng)建虛擬機Hypervisor配置管理設 備 錄 入應用運維IDC運維IDC管理系統(tǒng)四環(huán)一庫 - 部署閉環(huán)IDC閉環(huán)監(jiān)控閉環(huán)服務注冊自動化服務部署自動化部署閉環(huán)業(yè)務閉環(huán) 配置管理可視化主機狀態(tài)空閑已廢棄預上架 中維護中使用中維護注銷服務屏蔽監(jiān)控維護完成配置管理部署服務注冊服務下架報廢刪除監(jiān)控釋放IP清理設備下架回收開啟監(jiān)控清理日志清理服務清理代碼報廢刪除監(jiān)控釋放IP清理設備上架應用運維一 鍵 上 架一鍵上架通用文件管理系統(tǒng)通用文件管理系統(tǒng)通用文件 管理系統(tǒng)GitLabP

4、uppet Master主機Puppet Agent1.git push2.web hook3.api4.git pull5.puppet agent服務自動部署發(fā)布系統(tǒng)配置中心待上架主機主機管理MQ版本倉庫產(chǎn)生消息消費消息推送代碼拉取配置服務自動注冊ZooKeeper服務調(diào)用者服務調(diào)用者服務提供者監(jiān)聽監(jiān)聽服務注冊(服務啟動)服務注銷(服務停止)etcd應用(服務調(diào)用者)LBLBconfdconfd監(jiān)聽監(jiān)聽服務注冊(主機上架)服務注銷(主機下架)應用層服務層四環(huán)一庫 - 業(yè)務閉環(huán)IDC閉環(huán)部署閉環(huán)業(yè)務閉環(huán)監(jiān)控閉環(huán)進度控制降低風險無人值守編譯 打包代碼 倉庫持續(xù)集成預發(fā)布 環(huán)境生產(chǎn) 環(huán)境發(fā)布系統(tǒng)

5、預發(fā)布 環(huán)境生產(chǎn) 環(huán)境配置中心生產(chǎn)環(huán)境流程管理配置代碼發(fā)布流程發(fā)布平臺無人發(fā)布生產(chǎn)環(huán)境自動化階段化人工單階段發(fā)布無人發(fā)布無人發(fā)布乘客業(yè)務線一趟列車一次發(fā)布車站發(fā)布系統(tǒng)時刻表上線周期訂票上線申請檢票上線審核專車緊急上線無人發(fā)布的整體架構(gòu)SCM配置代碼配置中心持續(xù)集成8.代碼發(fā)布7.代碼獲取預發(fā)布環(huán)境6.配置拉取產(chǎn)環(huán)境生1.提交審核3.審核發(fā)布系統(tǒng)4.生成發(fā)布5.發(fā)布流程管理2.上線申請配置 客戶端業(yè)務開發(fā)灰度發(fā)布生產(chǎn)環(huán)境自動化階段化人工單階段發(fā)布無人發(fā)布灰度發(fā)布灰度發(fā)布的訪問控制服務提供者服務提供者服務提供者應用(服務調(diào)用者)應用 (服務調(diào)用者)應用(服務調(diào)用者)服務層ZK集群LB發(fā)布系統(tǒng)HC/

6、調(diào)度服務發(fā)現(xiàn)服務注冊灰度控制應用層應用(服務調(diào)用者)服務提供者進度控制待發(fā)布已作廢發(fā)布中已發(fā)布階段N已 完成回滾中回滾暫停已回滾作廢發(fā)布完成暫停回滾完成暫停繼續(xù) 回滾灰度YYN最后 階段N階段等待繼續(xù)發(fā)布發(fā)布暫?；貪L進度控制待發(fā)布已作廢發(fā)布中已發(fā)布階段N已 完成回滾中回滾暫停已回滾作廢發(fā)布完成?；貪L完成暫停繼續(xù) 回滾灰度YYN最后 階段N階段等待繼續(xù)暫發(fā)布發(fā)布暫?；貪L四環(huán)一庫 - 監(jiān)控閉環(huán)IDC閉環(huán)部署閉環(huán)業(yè)務閉環(huán)監(jiān)控閉環(huán)準確性及時性全面性監(jiān)控整體架構(gòu)負載均衡交換機服務器路由器存儲設備NginxRedisDBTomcatApp 1App NApp 2健康數(shù)據(jù)日志數(shù)據(jù)服務數(shù)據(jù)業(yè)務數(shù)據(jù)系統(tǒng)數(shù)據(jù)SQ

7、LLogAgentAPIZabbixZabbix基礎監(jiān)控日志監(jiān)控大屏監(jiān)控業(yè)務監(jiān)控數(shù) 據(jù) 采 集 層監(jiān) 控 報 警 層數(shù) 據(jù) 展 示 層監(jiān)控系統(tǒng)監(jiān)控項配置報警系統(tǒng)短信/語音/郵件事件管理屏蔽/去噪 降維/合并網(wǎng)絡監(jiān)控監(jiān)控的全面性監(jiān)控的及時性Zabbix ServerZabbix ProxyZabbix ProxyZabbix AgentZabbix AgentZabbix AgentZabbix Agent基礎監(jiān)控Storm日志監(jiān)控Kafka原始日志ElasticSearch圖表、報警訪問日志應用日志監(jiān)控項的分類可 用 性穩(wěn) 定 性外部內(nèi)部負載網(wǎng)卡流量CPU使用率進程端口PingHealthCh

8、eck接口調(diào)用量接口錯誤數(shù)接口響應時間監(jiān)控的準確性 - 系統(tǒng)故障降維核心交換機接入交換機物理機虛擬機TomcatApp接入交換機物理機虛擬機Tomcat AppMonitorpingpingporthcpingping監(jiān)控的準確性 - 系統(tǒng)故障降維監(jiān)控對象監(jiān)控降維過程AppApp異常-Tomcat異常-虛擬機異常-物理機 異常-接入交換機異常-接入交換機異常TomcatTomcat異常-虛擬機異常-物理機異常-接入交換機異常-接入交換機異常虛擬機虛擬機異常-物理機異常-接入交換機異常-接入交換機異常物理機物理機異常-接入交換機異常-接入交換機異常接入交換機接入交換機異常-接入交換機異常核心交換機接入交換機異常接 入 交 換 機 異 常遠近監(jiān)控的準確性 - 應用故障降維Service BService CService Ahc監(jiān)控對象監(jiān)控降維過程Service AService A異常-Service B異常-Service C異常Service A異常-Service C異常Service BService B異常-Service C異常Service CService C異常hchcService C異常Agenda123四環(huán)一庫的深度解讀樂道的產(chǎn)品架構(gòu)及核心