金融行業(yè)開放平臺(tái)數(shù)據(jù)庫轉(zhuǎn)型白皮書

I 1 1 4 6 8 10 10 12 19 24 24 31 34 38 38 38 41 48 49 49 57 601（一）金融行業(yè)開放平臺(tái)數(shù)據(jù)庫部署情況命滾滾大潮，積極學(xué)習(xí)和吸收世界金融行業(yè)技術(shù)革新別了手工記賬時(shí)代，開啟電子化、信息化建設(shè)進(jìn)程，23集中式數(shù)據(jù)庫成熟穩(wěn)定：傳統(tǒng)商業(yè)集中式數(shù)據(jù)庫以其較強(qiáng)分布式數(shù)據(jù)庫廣泛試點(diǎn)：為應(yīng)對(duì)數(shù)字化轉(zhuǎn)型帶來的高并難題，近年來各金融機(jī)構(gòu)都在探索數(shù)據(jù)庫轉(zhuǎn)傳統(tǒng)集中式數(shù)據(jù)庫占比高：雖然分布式數(shù)據(jù)庫應(yīng)用不斷增4（二）傳統(tǒng)數(shù)據(jù)庫在金融行業(yè)應(yīng)用的架構(gòu)及能力傳統(tǒng)數(shù)據(jù)庫高可用架構(gòu)完備：可以滿足金融客戶不同災(zāi)備5傳統(tǒng)數(shù)據(jù)庫功能強(qiáng)、特性多。傳統(tǒng)數(shù)據(jù)庫由多個(gè)組件組6（三）數(shù)據(jù)庫轉(zhuǎn)型挑戰(zhàn)在其上耦合開發(fā)了大量應(yīng)用，積累了相關(guān)軟硬件規(guī)劃、上7遷移過程難：除了面臨數(shù)據(jù)庫選型難的問題，開放平臺(tái)遷長期穩(wěn)定、關(guān)聯(lián)應(yīng)用較多等特點(diǎn)，隨著金融業(yè)務(wù)的持續(xù)創(chuàng)新，上的應(yīng)用同構(gòu)功能與性能體驗(yàn)。傳統(tǒng)應(yīng)用與數(shù)優(yōu)勢(shì)在于減少了系統(tǒng)組件之間的交互開銷，對(duì)要求，架構(gòu)轉(zhuǎn)型需在滿足業(yè)務(wù)性能指標(biāo)要求的體驗(yàn)不下降。同時(shí)，需要關(guān)注傳統(tǒng)數(shù)據(jù)庫功能方面具備傳統(tǒng)數(shù)據(jù)庫功能的平替能力，另一方8金融機(jī)構(gòu)在數(shù)據(jù)庫遷移過程中需重視目標(biāo)數(shù)據(jù)庫產(chǎn)品信能力及安全等保要求，同時(shí)也要保障技術(shù)供應(yīng)鏈的（四）轉(zhuǎn)型目標(biāo)和總體思路般業(yè)務(wù)系統(tǒng)和辦公系統(tǒng)，轉(zhuǎn)型后新系統(tǒng)達(dá)到災(zāi)有提升，功能不受損，服務(wù)不降級(jí)”，整體能力從“可用”9第四，保持原有數(shù)據(jù)庫系統(tǒng)的服務(wù)等級(jí)。金融級(jí)數(shù)據(jù)庫服務(wù)于涉及國計(jì)民生的重要業(yè)務(wù)系統(tǒng)，需要保證體驗(yàn)的一致性，需要重點(diǎn)關(guān)注交易響應(yīng)時(shí)間、力等核心性能容量指標(biāo)，并要根據(jù)應(yīng)用發(fā)展趨（一）金融典型業(yè)務(wù)數(shù)據(jù)庫需求業(yè)務(wù)流量變化大的業(yè)務(wù)：大多數(shù)傳統(tǒng)業(yè)務(wù)增量相對(duì)穩(wěn)定、（二）國產(chǎn)數(shù)據(jù)庫技術(shù)路線分析（2）存算分離架構(gòu)庫在分布式事務(wù)能力、線彈性擴(kuò)展、數(shù)據(jù)一致性、防腦裂等方（三）數(shù)據(jù)庫架構(gòu)選型建議撐金融行業(yè)所有應(yīng)用場景。分布式/集中式并行發(fā)展將在金廣泛，集中式與分布式部署各有其適用的應(yīng)用場景體設(shè)備可靠性降低，采用分布式架構(gòu)可以實(shí)現(xiàn)擴(kuò)展性，同時(shí)也帶來冗余備份、網(wǎng)絡(luò)交互等方節(jié)點(diǎn)使用規(guī)?？焖贁U(kuò)張為大型數(shù)據(jù)中心的節(jié)能升，必須具備與之適配的運(yùn)維管理能力作為支撐，需要在應(yīng)用層面：將分布式系統(tǒng)完全封裝成一個(gè)邏輯單庫的解也需要投入更多的研發(fā)設(shè)計(jì)成本，一是需要進(jìn)行合理的數(shù)據(jù)分片設(shè)計(jì)，通過高內(nèi)聚低耦合的數(shù)據(jù)規(guī)劃，盡可能減少跨節(jié)點(diǎn)訪問；二是需要在系統(tǒng)架構(gòu)設(shè)計(jì)中充分考慮節(jié)點(diǎn)故障的容錯(cuò)及柔具備集中式和分布式兩種部署模式，可以滿足不同業(yè)務(wù)不同場造難度大，當(dāng)需要大量使用復(fù)雜查詢、存儲(chǔ)過程尤其是存量業(yè)務(wù)替換時(shí)，可采用集中式部署架構(gòu)實(shí)現(xiàn)對(duì)等架構(gòu)替換；反之如采用集中式部署實(shí)現(xiàn)替換可有效降低轉(zhuǎn)型難度，保證業(yè)務(wù)穩(wěn)b)敏態(tài)業(yè)務(wù)較適合采用分布式部署模式較典型的是互聯(lián)網(wǎng)類業(yè)務(wù)，這類敏態(tài)業(yè)務(wù)采用分布式部署有利于發(fā)揮分布式分片橫向擴(kuò)展能力，支撐敏態(tài)業(yè)務(wù)高并發(fā)大容數(shù)據(jù)庫轉(zhuǎn)型方法三階十二步：開放平臺(tái)數(shù)據(jù)庫轉(zhuǎn)型建議參（一）方案規(guī)劃設(shè)計(jì)包括數(shù)據(jù)庫信息、業(yè)務(wù)信息、性能容量指標(biāo)，對(duì)數(shù)據(jù)行性分析，確定數(shù)據(jù)遷移內(nèi)容與范圍，業(yè)務(wù)可接受的優(yōu)先原位替換：數(shù)據(jù)庫部署方案優(yōu)先選用“原位替換”原量大、項(xiàng)目周期長、實(shí)施風(fēng)險(xiǎn)高等痛點(diǎn)問題。通過原位替換，體能力的差異，部署方案需要從軟硬協(xié)同系統(tǒng)數(shù)據(jù)庫的性能、數(shù)據(jù)量、高可用及容災(zāi)部署進(jìn)標(biāo)數(shù)據(jù)庫對(duì)應(yīng)能力的支持情況，統(tǒng)籌規(guī)劃整體統(tǒng)涉及服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)、操作系統(tǒng)、中間件等軟硬件組集中式和分布式雙棧部署：集中式部署以服務(wù)穩(wěn)態(tài)業(yè)務(wù)場開放平臺(tái)數(shù)據(jù)庫部署建議根據(jù)服務(wù)業(yè)務(wù)場景特征和所需支遷移方案主要工作包括：數(shù)據(jù)庫遷移方案和應(yīng)用遷移方案。（二）數(shù)據(jù)庫遷移括分析傳統(tǒng)數(shù)據(jù)庫對(duì)象，將靜態(tài)對(duì)象DDL轉(zhuǎn)換為目標(biāo)數(shù)據(jù)庫語基于日志解析的同步方式無論從對(duì)源庫的影響還是實(shí)時(shí)性都是（三）投產(chǎn)運(yùn)行臺(tái)，投產(chǎn)目標(biāo)數(shù)據(jù)庫必須確保應(yīng)用實(shí)施“飛機(jī)空中更換發(fā)動(dòng)機(jī)”以參考《信息安全技術(shù)網(wǎng)絡(luò)安全等級(jí)保護(hù)基本要求GB/T（2）運(yùn)維監(jiān)控（一）現(xiàn)狀（二）挑戰(zhàn)（三）轉(zhuǎn)型實(shí)踐構(gòu)建精簡模式支持集中式數(shù)據(jù)庫原位替換：構(gòu)建精簡模式一是同城雙園區(qū)間通過存儲(chǔ)級(jí)復(fù)制實(shí)現(xiàn)增量數(shù)據(jù)強(qiáng)一致同步，異地園區(qū)間通過異步方式實(shí)現(xiàn)增量日志同步，具備本地區(qū)和全流程標(biāo)準(zhǔn)化轉(zhuǎn)型工藝，實(shí)現(xiàn)了復(fù)雜數(shù)解放了生產(chǎn)力，讓科技力量更加聚集于金融灰度切流：建設(shè)異構(gòu)數(shù)據(jù)庫數(shù)據(jù)復(fù)制工具，實(shí)現(xiàn)4.形成開放平臺(tái)數(shù)據(jù)庫轉(zhuǎn)型的普適性解決方案同步、應(yīng)用代碼遷移、測(cè)試驗(yàn)證、生產(chǎn)環(huán)境搭建（四）轉(zhuǎn)型效果過程邏輯，低成本、高效可控的原位替換轉(zhuǎn)型技術(shù)方工具和轉(zhuǎn)型方法論，構(gòu)建全金融業(yè)務(wù)場景支撐能力，辦公系統(tǒng)、一般業(yè)務(wù)系統(tǒng)和關(guān)鍵業(yè)務(wù)系統(tǒng)各類業(yè)務(wù)專精簡模式、存算分離等架構(gòu)設(shè)計(jì)簡化復(fù)雜問題，通過國產(chǎn)眾核處理器、企業(yè)存儲(chǔ)協(xié)同構(gòu)建的高性能、高可全、彈性伸縮、雙集群容災(zāi)能力以及自動(dòng)化數(shù)據(jù)遷移具能力數(shù)據(jù)庫產(chǎn)品商業(yè)版本中落地，具備快速推廣的準(zhǔn)化工藝具備良好的通用性，對(duì)金融同業(yè)開放平臺(tái)數(shù)降低難度、實(shí)現(xiàn)能力不降級(jí)，解放金融科技生產(chǎn)力聚（一）云原生數(shù)據(jù)庫各類技術(shù)路線相互融合臺(tái)用于采集分析數(shù)據(jù)支持上層服務(wù)；服務(wù)