企業(yè)DevOps基礎(chǔ)架構(gòu)演進方案

企業(yè)DevOps基礎(chǔ)架構(gòu)演進方案企業(yè)DevOps基礎(chǔ)架構(gòu)演進方案1業(yè)務和技術(shù)架構(gòu)背景簡介2016挑戰(zhàn)和2017基礎(chǔ)架構(gòu)升級之路（從0到1）DevOps深度思考2018和未來升級展望（從1到n）業(yè)務和技術(shù)架構(gòu)背景簡介2業(yè)務和技術(shù)架構(gòu)背景110年發(fā)展歷程，互聯(lián)網(wǎng)消費金融行業(yè)領(lǐng)導者，紐交所上市公司PPDF，總部位于上海張江千萬級用戶量，億級網(wǎng)站流量，上百個微服務，幾百人研發(fā)團隊架構(gòu)始于經(jīng)典.Net+SqlServer單體應用，近年的架構(gòu)變遷圍繞解耦拆分和服務化效能和系統(tǒng)穩(wěn)定性.Net轉(zhuǎn)Java

+

SqlServer轉(zhuǎn)MySql業(yè)務和技術(shù)架構(gòu)背景110年發(fā)展歷程，互聯(lián)網(wǎng)消費金融行業(yè)領(lǐng)導者3業(yè)務和技術(shù)架構(gòu)背景2業(yè)務和技術(shù)架構(gòu)背景242016困局和挑戰(zhàn)Toobusyto

improve業(yè)務壓得喘不過氣系統(tǒng)耦合歷史負擔重老系統(tǒng)還得升級(換輪子)系統(tǒng)不穩(wěn)定工程師人才缺乏，安全攻擊，機房容量不足…2016困局和挑戰(zhàn)Toobusytoimprove業(yè)務52017基礎(chǔ)架構(gòu)優(yōu)先級

~

高速換輪打造輕量級微服務基礎(chǔ)架構(gòu)支持業(yè)務持續(xù)迭代和創(chuàng)新支持業(yè)務解耦拆分提升系統(tǒng)穩(wěn)定性DevOps？如何實踐？2017基礎(chǔ)架構(gòu)優(yōu)先級~高速換輪打造輕量級微服務基礎(chǔ)架構(gòu)6監(jiān)控不足造成的坑分布式微服務依賴關(guān)系錯綜復雜，如何理解？線上發(fā)布了服務，怎么知道它一切正常大量報錯，需要花很久才能定位一次將測試配置配到生產(chǎn)，通宵排查應用程序有性能瓶頸，怎么知道？很多問題最終都說可能是網(wǎng)絡問題…

…任何可能出問題的地方都需要監(jiān)控監(jiān)控不足造成的坑分布式微服務依賴關(guān)系錯綜復雜，如何理解？7DevOps實踐

~

要改進必先測量DevOps實踐~要改進必先測量8DevOps實踐

~

開發(fā)自助監(jiān)控DevOps實踐~開發(fā)自助監(jiān)控9微服務實踐

~

分布式調(diào)用鏈監(jiān)控微服務實踐~分布式調(diào)用鏈監(jiān)控10升級之路

~

調(diào)用鏈監(jiān)控選型升級之路~調(diào)用鏈監(jiān)控選型11CAT報錯大盤CAT報錯大盤12LogViewLogView13Transaction報表Transaction報表14Heartbeat報表Heartbeat報表15升級之路

~

四層監(jiān)控體系升級之路~四層監(jiān)控體系16微服務實踐

~

異步消息Looselycoupledserviceorientedarchitecturewithbounded

context分布式引入最終一致性問題，消息中間件是微服務基礎(chǔ)架構(gòu)的核心基于推模式消息1.0的挑戰(zhàn)慢消費者造成消息堵塞、消費延遲甚至丟消息微服務實踐~異步消息Looselycoupledse17升級之路

~

拉模式消息系統(tǒng)2.0pull升級之路~拉模式消息系統(tǒng)2.0pull18MySQL表結(jié)構(gòu)MySQL表結(jié)構(gòu)19數(shù)據(jù)模型數(shù)據(jù)模型20微服務實踐

~

網(wǎng)關(guān)+熔斷限流反向路由限流熔斷安全防爬日志監(jiān)控微服務網(wǎng)關(guān)熔斷限流微服務實踐~網(wǎng)關(guān)+熔斷限流反向路由微服務網(wǎng)關(guān)21升級之路

~

Netflix

Zuul網(wǎng)關(guān)升級之路~NetflixZuul網(wǎng)關(guān)22升級之路

~

Netflix

Hystrix斷路器升級之路~NetflixHystrix斷路器23微服務和DevOps實踐

~

配置中心挑戰(zhàn)主要采用本地靜態(tài)配置配置散亂格式不標準易引發(fā)生產(chǎn)事故配置修改麻煩周期長配置中心場景應用配置DB連接字符串，線程池大小，請求超時，服務地址，黑白名單，限流閥值功能開關(guān)藍綠/金絲雀發(fā)布，業(yè)務開關(guān)，降級熔斷微服務和DevOps實踐~配置中心挑戰(zhàn)配置中心場景DB連24升級之路

~

Apollo配置中心升級之路~Apollo配置中心252017成果

~

輕量級基礎(chǔ)架構(gòu)體系2017成果~輕量級基礎(chǔ)架構(gòu)體系262017優(yōu)先級初步達成業(yè)務創(chuàng)新項目按期完成核心中臺服務完成解耦拆分總體系統(tǒng)穩(wěn)定性大幅提升DevOps實踐和微服務架構(gòu)初步落地2017優(yōu)先級初步達成業(yè)務創(chuàng)新項目按期完成27可以喘口氣了？可以喘口氣了？28從1到n

~

近期思考和2018未來升級展望從1到n~近期思考和2018未來升級展望292017新的挑戰(zhàn)團隊眾多分散溝通成本高煙囪式重復系統(tǒng)建設和維護帶來的重復投資系統(tǒng)間集成和協(xié)作成本高不利于業(yè)務沉淀，規(guī)?；统掷m(xù)發(fā)展總體研發(fā)效能和一線DevOps組織差距很大2017新的挑戰(zhàn)團隊眾多分散溝通成本高30DevOps深度思考1通向DevOps的三條道路DevOps深度思考131DevOps深度思考2從傳統(tǒng)職能項目型到跨職能產(chǎn)品平臺型組織轉(zhuǎn)型DevOps深度思考232DevOps的深度思考3中臺化戰(zhàn)略DevOps的深度思考3中臺化戰(zhàn)略33DevOps和微服務架構(gòu)體系未來規(guī)劃DevOps和微服務架構(gòu)體系未來規(guī)劃34Take

AwayDevOps和微服務是企業(yè)技術(shù)升級改造最佳實踐明確階段性痛點和優(yōu)先級，分階段驅(qū)動DevOps和微服務落地利用成熟開源技術(shù)產(chǎn)品驅(qū)動企業(yè)D