淘寶高可用系統(tǒng)經(jīng)驗(yàn)分享

淘寶高可用系統(tǒng)經(jīng)驗(yàn)分享畢玄2011-03杯具的20092009年可用性99.5%，不可用時(shí)間43.8小時(shí)；鳳凰涅槃監(jiān)測(cè)&報(bào)警為什么要做鳳凰涅槃監(jiān)測(cè)&報(bào)警做什么鳳凰涅槃監(jiān)測(cè)&報(bào)警怎么做Nagious哈勃最重要的是：整理出監(jiān)測(cè)點(diǎn)和報(bào)警點(diǎn)熟悉的人做熟悉的事鳳凰涅槃隔離為什么要做鳳凰涅槃隔離做什么鳳凰涅槃隔離怎么做按域名劃分拆分應(yīng)用或接口軟負(fù)載的第7層路由鳳凰涅槃簡(jiǎn)化系統(tǒng)依賴(lài)為什么要做鳳凰涅槃簡(jiǎn)化系統(tǒng)依賴(lài)做什么鳳凰涅槃簡(jiǎn)化系統(tǒng)依賴(lài)怎么做梳理依賴(lài)關(guān)系不是合并應(yīng)用讀類(lèi)型應(yīng)用改為依賴(lài)緩存對(duì)于能不強(qiáng)制依賴(lài)的均采用異步化鳳凰涅槃優(yōu)雅降級(jí)為什么要做鳳凰涅槃優(yōu)雅降級(jí)做什么鳳凰涅槃優(yōu)雅降級(jí)怎么做整理系統(tǒng)中需考慮降級(jí)的點(diǎn)；依賴(lài)的外部；系統(tǒng)中耗資源的一些操作。通過(guò)jsp頁(yè)面修改springbean的屬性，于是就可動(dòng)態(tài)關(guān)閉了；通過(guò)軟負(fù)載路由關(guān)閉。鳳凰涅槃自我保護(hù)為什么要做鳳凰涅槃自我保護(hù)做什么鳳凰涅槃自我保護(hù)怎么做控制等待的線程數(shù)；控制使用的資源；根據(jù)能力控制。鳳凰涅槃雙機(jī)房容災(zāi)為什么要做停電路由器故障做什么一個(gè)機(jī)房掛了，另一機(jī)房能承受80%的流量；怎么做配置推送實(shí)現(xiàn)地址的變化；緩存采用雙機(jī)房同步失效。鳳凰涅槃容量規(guī)劃為什么要做Case:Detail系統(tǒng)突然訪問(wèn)量暴漲做什么明確知道應(yīng)用能承受的流量；做好預(yù)案。怎么做線上壓測(cè)鳳凰涅槃自動(dòng)化為什么要做人工操作故障做什么將運(yùn)維工作自動(dòng)化怎么做發(fā)布的自動(dòng)化通過(guò)一套系統(tǒng)來(lái)自動(dòng)調(diào)用shell鳳凰涅槃最重要的一點(diǎn)人人都有一顆“穩(wěn)定“的心。事后諸葛故障的主要類(lèi)型以及應(yīng)對(duì)措施前提梳理出關(guān)鍵路徑和非關(guān)鍵路徑整理依賴(lài)關(guān)系非關(guān)鍵路徑故障隔離、降級(jí)關(guān)鍵路徑故障監(jiān)測(cè)&報(bào)警、自我保護(hù)、簡(jiǎn)化系統(tǒng)依賴(lài)、隔離、降級(jí)、容災(zāi)、容量規(guī)劃。經(jīng)典事件效果顯著2010年可用性99.95%，不可用時(shí)間4.38小時(shí)；我們還需繼續(xù)努力2010程序bug主要原因保護(hù)做的還是不夠；隔離的挑戰(zhàn)；關(guān)鍵路徑上的b