張念禮-主動(dòng)運(yùn)維：駕馭風(fēng)險(xiǎn) 引領(lǐng)未來(lái)

博睿數(shù)據(jù)平臺(tái)支撐中心負(fù)責(zé)人運(yùn)維環(huán)境現(xiàn)狀。平臺(tái)系統(tǒng)13套,監(jiān)控環(huán)境3套平臺(tái)承載量。指標(biāo)量運(yùn)維?標(biāo)AI異常檢測(cè)基于ONE指標(biāo)體系建設(shè)全自動(dòng)巡檢主動(dòng)運(yùn)維(80%)被動(dòng)運(yùn)維(20%)AI異常檢測(cè)基于ONE指標(biāo)體系建設(shè)全自動(dòng)巡檢智能告警降噪關(guān)鍵業(yè)務(wù)流程智能根因分析因果關(guān)系拓?fù)鋺?yīng)急處理預(yù)案全?動(dòng)巡檢即時(shí)巡檢基于ONE指標(biāo)體系建設(shè)全?動(dòng)巡檢即時(shí)巡檢基于ONE指標(biāo)體系建設(shè)機(jī)器負(fù)載巡檢全局拓?fù)溲矙z錯(cuò)誤分析巡檢機(jī)器負(fù)載巡檢全局拓?fù)溲矙z錯(cuò)誤分析巡檢前端請(qǐng)求巡檢潛在?險(xiǎn)識(shí)別-主動(dòng)發(fā)現(xiàn)率2023年?險(xiǎn)問(wèn)題主動(dòng)發(fā)現(xiàn)率90%2024年?險(xiǎn)問(wèn)題主動(dòng)發(fā)現(xiàn)率96%運(yùn)維?作模式由被動(dòng)為主動(dòng)!?體化存儲(chǔ)全棧根因分析統(tǒng)?智能告警精?聚集，降低成本，提升?效?分鐘發(fā)現(xiàn)-可?性監(jiān)測(cè)支持HTTP多地址訪問(wèn)支持自定義內(nèi)外網(wǎng)監(jiān)測(cè)點(diǎn)支持設(shè)置請(qǐng)求頭、請(qǐng)求休、配置hosts支持判斷響應(yīng)狀態(tài)碼、整體用時(shí)、響應(yīng)頭、響應(yīng)體彌補(bǔ)開源?具監(jiān)控Http的功能缺失?分鐘發(fā)現(xiàn)與五分鐘定位-紅藍(lán)演練紅藍(lán)攻防演練場(chǎng)景100%通過(guò):使用壓測(cè)命令sysbench,模擬cpu占用達(dá)到90%以上調(diào)小進(jìn)程內(nèi)存大小,模擬程序內(nèi)存不足往機(jī)器上寫入大文件,模擬磁盤占用達(dá)到90%以上使用dd命令大量寫1K的小文件,模擬IO占用達(dá)到90%以上使用腳本逐步增量訪問(wèn)程序接口,模擬連接數(shù)占用逐步上升逐步增加大查詢的數(shù)量,模擬并大查詢情況頻繁訪問(wèn)兩個(gè)程序的接口,模擬吞吐量上漲情況對(duì)—臺(tái)虛機(jī)限制其流量大小,模擬服務(wù)變慢或出錯(cuò)使用IPtable封住任—個(gè)進(jìn)程的端口停止任—個(gè)正在運(yùn)行的進(jìn)程第三方zabbix/prometheus的報(bào)警事件和指標(biāo)不丟失從觸封動(dòng)作,到最終接收到告警通知,時(shí)間應(yīng)該控制在1分鐘內(nèi)同—臺(tái)主機(jī)觸封觸封不同指標(biāo)多次告警時(shí),觀察收斂準(zhǔn)確性以實(shí)體關(guān)系為核?構(gòu)建數(shù)據(jù)體系構(gòu)建統(tǒng)?可觀測(cè)全域數(shù)據(jù)關(guān)聯(lián)模型以實(shí)體關(guān)系為核?構(gòu)建數(shù)據(jù)體系構(gòu)建統(tǒng)?可觀測(cè)全域數(shù)據(jù)關(guān)聯(lián)模型詳情清單給出本次故障所涉及到的實(shí)體信息初因判斷根因的實(shí)體和指標(biāo)并給出初步故障原因深度分析到具體的方法、SQL等具體根因進(jìn)程退出進(jìn)程退出端口下線服務(wù)假死負(fù)載異常應(yīng)急處理預(yù)案完善的知識(shí)庫(kù)故障處理原則SRC響應(yīng)機(jī)制2022下半年主動(dòng)治理風(fēng)險(xiǎn)25個(gè)2023上半年主動(dòng)治理風(fēng)險(xiǎn)86個(gè)2023下半年主動(dòng)治理風(fēng)險(xiǎn)224個(gè)2024上半年主動(dòng)治理風(fēng)險(xiǎn)242個(gè)障次數(shù)相較去年下降%障次數(shù)相較去年下降%2022年下半年系統(tǒng)可靠性50%2023年上半年系統(tǒng)可靠性87%2023年下半年系統(tǒng)可