騰訊自研分布式數(shù)據(jù)庫(kù)TDSQL簡(jiǎn)介

TDSQL素材1產(chǎn)品簡(jiǎn)介TDSQL(TencentDistributedSQL)是騰訊打造的一款MySQ1_兼容HTAP分布式數(shù)據(jù)庫(kù)產(chǎn)品，具備強(qiáng)一致高可用、全球部署架構(gòu)、分布式水平擴(kuò)展、高性能、企業(yè)級(jí)安全等特性，同時(shí)提供智能DBA、自動(dòng)化運(yùn)營(yíng)、監(jiān)控告警等配套設(shè)施，為用戶提供完整的分布式數(shù)據(jù)庫(kù)解決方案。目前TDSQL已經(jīng)為超過500+的政企和金融機(jī)構(gòu)提供數(shù)據(jù)庫(kù)的公有云及私有云服務(wù)，客戶覆蓋銀行、保險(xiǎn)、證券、互聯(lián)網(wǎng)金融、計(jì)費(fèi)、第三方支付、物聯(lián)網(wǎng)、互聯(lián)顧、政務(wù)等領(lǐng)域。TDSQL亦憑借其高質(zhì)量的產(chǎn)品及服務(wù)，獲得了多項(xiàng)國(guó)際和國(guó)家認(rèn)證，得到了客戶及行業(yè)的一致認(rèn)可。2九大特性2.1強(qiáng)同步復(fù)制多副本強(qiáng)一致性下的高可用方案，基于跨數(shù)據(jù)中心強(qiáng)同步復(fù)制，故障可自動(dòng)切換，且數(shù)據(jù)零丟失。2.2全球部■架構(gòu)按需部署，輕松實(shí)現(xiàn)異地多活，兩IDC對(duì)等架構(gòu)、兩地三中心架構(gòu)、兩地四中心架構(gòu)、多地多中心。2.3分布式水平擴(kuò)展AutoSharding機(jī)制，實(shí)現(xiàn)實(shí)時(shí)在線無縫擴(kuò)容，確保集群性能、容量線性增長(zhǎng)；提供健壯的分布式事務(wù)機(jī)制，全SQL兼容，單機(jī)數(shù)據(jù)庫(kù)遷移TDSQL零門檻。2.4內(nèi)核深度優(yōu)化內(nèi)核深度定制優(yōu)化，跨數(shù)據(jù)中心強(qiáng)同步性能相較于異步零損耗；OLTPTPS相較于原生MySQL提升85%。2.5企業(yè)級(jí)安全增強(qiáng)通過透明加密、數(shù)據(jù)庫(kù)防火墻、SSL接入、SQL審計(jì)等措施，實(shí)現(xiàn)事前、事中、事后的全生命周期安全防護(hù)。2.6HTAP內(nèi)嵌分布式查詢引擎，OLTP與OLAP混合支持，同時(shí)支持SparkOnTDSQL，對(duì)不同負(fù)載SQL進(jìn)行智能調(diào)度。2.7多引擎支持支持MySQL社區(qū)版、Percona、MariaDB三大分支；支持InnoDB、RocksDB等多種存儲(chǔ)引擎。2.8智能DBA基于海量運(yùn)營(yíng)經(jīng)驗(yàn)加AI的DBA智能診斷系統(tǒng)，快速幫助業(yè)務(wù)預(yù)防、發(fā)現(xiàn)、定位并解決問題。2.9自動(dòng)化運(yùn)營(yíng)體系提供完善的運(yùn)營(yíng)配套體系，Binlog訂閱、冷備、多源異構(gòu)數(shù)據(jù)庫(kù)同步等，無縫對(duì)接周邊系統(tǒng)。應(yīng)用場(chǎng)景分支業(yè)務(wù)聚合到總部（全國(guó)全球覆蓋）：政務(wù)/銀行/大型國(guó)企政務(wù)、銀行、大型國(guó)企的組織架構(gòu)通常采用總部-分部-分支的架構(gòu)，包括某些核心IT系統(tǒng)建設(shè)也采用這種模式。隨著業(yè)務(wù)互通，人員互通，信息互通等需求越來越強(qiáng)烈，傳統(tǒng)的總部-分部-分支累的IT架構(gòu)已經(jīng)不適應(yīng)當(dāng)前業(yè)務(wù)快速發(fā)展需要，因此不少業(yè)務(wù)系統(tǒng)逐漸向總部聚合。而TDSQL特性天生支持超大規(guī)模業(yè)務(wù)系統(tǒng)的需要，還能在向總部聚合系統(tǒng)的過程中，提供可靠的數(shù)據(jù)同步工具，幫助業(yè)務(wù)平滑遷移?？蛻舸恚号_(tái)州銀行、浦發(fā)銀行、某國(guó)有銀行、粵省事、廣東省電子政務(wù)大廳、廣州省公安廳移動(dòng)警務(wù)、云南煙草、南方航空實(shí)時(shí)高并發(fā)交易場(chǎng)景：互聯(lián)網(wǎng)金融/電商/O2O/零售互聯(lián)網(wǎng)金融、電商、O2O、零售等行業(yè)，普遍存在用戶基數(shù)大、核心交易系統(tǒng)數(shù)據(jù)庫(kù)單表上億行且訪問日益變慢等問題，制約業(yè)務(wù)發(fā)展。產(chǎn)品提供彈性擴(kuò)展能力，能夠極大提升數(shù)據(jù)庫(kù)處理能力，可以面對(duì)類似全網(wǎng)推廣、限時(shí)秒殺等營(yíng)銷活動(dòng)；配合熱點(diǎn)更新，強(qiáng)同步復(fù)制能力，即使是敏感交易類業(yè)務(wù)也可以完全用產(chǎn)品承載，普通x86服務(wù)器，便可輕松支撐起上億的用戶訪問?？蛻舸恚赫猩套C券、富途證券、有贊、永輝超市海量數(shù)據(jù)存儲(chǔ)訪問場(chǎng)景：物聯(lián)網(wǎng)面向物聯(lián)網(wǎng)，交易訂單等業(yè)務(wù)，業(yè)務(wù)數(shù)據(jù)增長(zhǎng)迅猛，會(huì)產(chǎn)生超過單機(jī)數(shù)據(jù)庫(kù)存儲(chǔ)能力極限的數(shù)據(jù)，數(shù)據(jù)庫(kù)實(shí)例超過TB級(jí)別且持續(xù)快速增長(zhǎng)，造成數(shù)據(jù)庫(kù)容量瓶頸，限制業(yè)務(wù)發(fā)展。產(chǎn)品可以彈性擴(kuò)展存儲(chǔ)空間，提供RocksDB等高壓縮比的存儲(chǔ)能力，且可以高效利用每一個(gè)物理節(jié)點(diǎn)的存儲(chǔ)量能力，避免浪費(fèi)?？梢詮V泛應(yīng)用于IOT場(chǎng)景下的車聯(lián)網(wǎng)、工業(yè)遠(yuǎn)程監(jiān)控、智能家居、智能汽車、充電樁加油站等超大規(guī)模傳感器數(shù)據(jù)上報(bào)存儲(chǔ)訪問場(chǎng)景?？蛻舸恚篞Q音樂等彈性擴(kuò)容，快速回檔：游戲游戲等需要彈性擴(kuò)容和快速回檔的業(yè)務(wù)。產(chǎn)品對(duì)計(jì)算資源的彈性伸縮能力，賦予用戶更高的生產(chǎn)力，分鐘級(jí)部署游戲分區(qū)數(shù)據(jù)庫(kù)。借助任意時(shí)間點(diǎn)回檔到臨時(shí)實(shí)例功能及支持批量操作的特性，用戶可以隨時(shí)隨地在不影響現(xiàn)網(wǎng)運(yùn)營(yíng)情況下，恢復(fù)到任意時(shí)間點(diǎn)，為游戲回檔提供有效支持。利用分布式實(shí)例，可以輕松搭建起可彈性擴(kuò)展的"全區(qū)全服”內(nèi)業(yè)務(wù)。客戶代表：游族網(wǎng)絡(luò)支持混合云TDSQL可支持公有云/專有云部署方案，通過專線與數(shù)據(jù)同步工具的配合，可以輕松搭建一套跨云的混合云架構(gòu)?？蛻舸恚簑ebank4資質(zhì)和獎(jiǎng)項(xiàng)TDSQL現(xiàn)已代表騰訊云數(shù)據(jù)庫(kù)活動(dòng)通過多項(xiàng)國(guó)家或國(guó)際認(rèn)證，包括：可信云服務(wù)認(rèn)證可信云服務(wù)（TRUCS）認(rèn)證是我國(guó)目前唯一針對(duì)云服務(wù)的權(quán)威認(rèn)證體系，由數(shù)據(jù)中心聯(lián)盟和云計(jì)算發(fā)展與政策論壇聯(lián)合組織。是國(guó)內(nèi)權(quán)威機(jī)構(gòu)首次開展云服務(wù)資質(zhì)認(rèn)證，其高規(guī)格、高標(biāo)準(zhǔn)對(duì)于國(guó)內(nèi)云服務(wù)運(yùn)營(yíng)商提出了更高的要求。依據(jù)可信云服務(wù)（TRUCS）認(rèn)證要求，騰訊云主機(jī)服務(wù)、云數(shù)據(jù)庫(kù)服務(wù)、云緩存服務(wù)、對(duì)象存儲(chǔ)服務(wù)、本地負(fù)載均衡服務(wù)、數(shù)據(jù)中心間VPN月服務(wù)、云分發(fā)服務(wù)、塊存儲(chǔ)服務(wù)已通過數(shù)據(jù)中心聯(lián)盟組織可信云評(píng)測(cè)和認(rèn)證。CSASTAR云安全評(píng)估基于國(guó)際權(quán)威的非盈利組織云安全聯(lián)盟(CloudSecurityAlliance)推出的云控制矩陣CCM(CloudControlMatrix)，滿足云計(jì)算安全領(lǐng)域的特定要求，針對(duì)云計(jì)算安全特性的一項(xiàng)國(guó)際性認(rèn)證。2016年9月以金牌等級(jí)通過CSASTAR云安全認(rèn)證，同時(shí)獲得了CNAS和UKAS國(guó)內(nèi)國(guó)外雙認(rèn)可信息安全管理體系認(rèn)證資質(zhì)，這是首家同時(shí)獲得這些資質(zhì)的云服務(wù)商，進(jìn)一步鞏固了其國(guó)內(nèi)領(lǐng)先的云服務(wù)提供商的地位。ISO27001是以信息資產(chǎn)及業(yè)務(wù)風(fēng)險(xiǎn)管理為核心的管理體系，對(duì)企業(yè)建立、實(shí)施和文件化信息安全管理提出了極高的要求°ISO27001的前身是BS7799信息安全管理體系標(biāo)準(zhǔn)，由全球權(quán)威的標(biāo)準(zhǔn)研發(fā)和國(guó)際認(rèn)證評(píng)審服務(wù)提供商BSI撰寫，后被國(guó)際標(biāo)準(zhǔn)組織(InternationalStandardizationOrganization,簡(jiǎn)稱ISO)采納升級(jí)為ISO27001國(guó)際信息安全管理體系認(rèn)證標(biāo)準(zhǔn)。該標(biāo)準(zhǔn)已成為當(dāng)今國(guó)際上最權(quán)威、最嚴(yán)格，也是最被廣泛接受和應(yīng)用的信息安全領(lǐng)域的體系認(rèn)證標(biāo)準(zhǔn)。ISO20000信息技術(shù)服務(wù)管理體系目的是提供建立、實(shí)施、運(yùn)作、監(jiān)控、評(píng)審、維護(hù)和改進(jìn)IT月艮務(wù)管理體系(ITSM)的模式，通過"IT月艮務(wù)標(biāo)準(zhǔn)化"來管理IT問題，即將IT問題歸類，識(shí)別問題的內(nèi)在聯(lián)系，然后依據(jù)服務(wù)級(jí)別協(xié)議進(jìn)行計(jì)劃、推行和監(jiān)控，并強(qiáng)調(diào)與客戶的溝通，幫助企業(yè)建立起一套行之有效的以客戶為中心的自我完善的體系。騰訊云已獲得ISO20000證書，由騰訊云為客戶提供云計(jì)算服務(wù)、托管服務(wù)和災(zāi)備服務(wù)的IT服務(wù)質(zhì)量管理。ISO22301是第一份以業(yè)務(wù)連續(xù)管理(BusinessContinuityManagement，簡(jiǎn)稱BCM)為主題的國(guó)際標(biāo)準(zhǔn)，提供了一種完整通用的BCM方法論，讓企業(yè)能夠達(dá)到國(guó)際上公認(rèn)的最佳實(shí)踐。騰訊云是國(guó)內(nèi)首批通過ISO22301認(rèn)證的云服務(wù)商，業(yè)務(wù)持續(xù)管理體系：提供騰訊云云計(jì)算服務(wù)，包括云服務(wù)器、云數(shù)據(jù)庫(kù)、負(fù)載均衡、域名服務(wù)、金融云解決方案、云安全、云監(jiān)控、及相關(guān)售后支援服務(wù)之業(yè)務(wù)連續(xù)性管理系統(tǒng)。ISO9001是一個(gè)系統(tǒng)性的保證公司產(chǎn)品質(zhì)量及運(yùn)作的指導(dǎo)性綱領(lǐng)和規(guī)范架構(gòu)，圍繞企業(yè)提供的產(chǎn)品或服務(wù)展開的，策劃和實(shí)施及改進(jìn)產(chǎn)品或服務(wù)實(shí)現(xiàn)的全過程，確保滿足客戶及相關(guān)法律法規(guī)要求。騰訊云已獲得ISO9001證書，認(rèn)證范圍包括云計(jì)算服務(wù)、托管服務(wù)及災(zāi)備服務(wù)等。ISO27018是一個(gè)由國(guó)際標(biāo)準(zhǔn)化組織(ISO)于2014年頒布的國(guó)際標(biāo)準(zhǔn)協(xié)議，是首個(gè)專注于云中個(gè)人信息保護(hù)的國(guó)際行為準(zhǔn)則。通過ISO27018認(rèn)證可證明企業(yè)在保護(hù)企業(yè)數(shù)據(jù)、知識(shí)產(chǎn)權(quán)、文檔和云端IT系統(tǒng)安全等方面達(dá)到了高標(biāo)準(zhǔn)的行業(yè)最佳實(shí)踐。MariaDB白金會(huì)員ACMUG中國(guó)開源數(shù)據(jù)庫(kù)專業(yè)委員會(huì)的主席團(tuán)成員2018年11月30日，通過數(shù)據(jù)中心聯(lián)盟第七批大數(shù)據(jù)產(chǎn)品評(píng)測(cè)，成為DCA首批分布式數(shù)據(jù)庫(kù)認(rèn)證產(chǎn)品。2018年12月20日，IT168頒發(fā)的"技術(shù)卓越獎(jiǎng)"。52018年產(chǎn)品迭代2018年03月16日分布式數(shù)據(jù)庫(kù)TDSQL與英特爾⑧合作測(cè)試，在其至強(qiáng)?平臺(tái)上跑出峰值286萬QPS的超高數(shù)據(jù)，高于同類數(shù)據(jù)庫(kù)性能。2018年5月11日，分布式數(shù)據(jù)庫(kù)TDSQL原創(chuàng)的全態(tài)數(shù)據(jù)的概念和基于歷史態(tài)數(shù)據(jù)的可見性判斷算法T-TDSQL，在DTCC大會(huì)上公開，提供增量抽取、增量計(jì)算等能力，極大的方便了業(yè)務(wù)對(duì)賬、數(shù)據(jù)重演、數(shù)據(jù)分析、聯(lián)機(jī)閃回等特性。2018年06月20日基于騰訊專有云(TCE)的云數(shù)據(jù)庫(kù)產(chǎn)品3.0版本發(fā)布，支持關(guān)系型數(shù)據(jù)庫(kù)MySQL、MariaDB、分布式數(shù)據(jù)庫(kù)、MongoDB、Redis等云數(shù)據(jù)庫(kù)方案。2018年09月16日分布式數(shù)據(jù)庫(kù)TDSQL的HTAP混合計(jì)算架構(gòu)發(fā)布，深度整合SparkCatalyst，以解決用戶復(fù)雜OLAP需求的解決方案。2018年12月07日CloudDBA（扁鵲智能檢測(cè)工具）在MariaDB和分布式數(shù)據(jù)庫(kù)全量支持，通過收集分析用戶指定的診斷時(shí)間段內(nèi)的監(jiān)控指標(biāo)，提供這段時(shí)間的DB存在的問題，并綜合這些問題得出DB健康狀態(tài)的評(píng)分。對(duì)于用戶提供的的慢sql，CloudDBA可以自動(dòng)分析sql，并結(jié)合sql涉及的表結(jié)構(gòu)，數(shù)據(jù)分布得出適當(dāng)?shù)乃饕ㄗh，有助于用戶在無需DBA的參與下減少由于索引不當(dāng)引起的慢查詢問題。62018年獲得的專利2018-02-071818112018020061CN:一種基于MVCC和時(shí)態(tài)技術(shù)實(shí)現(xiàn)增量計(jì)算方法和裝置2018-03-1618PCT1502017020258CN-PCT:一種非相關(guān)子查詢優(yōu)化的方法和裝置2018-04-2518115282018040430CN:一種快速備份數(shù)據(jù)的方法和裝置2018-04-252018040433:一種快速估算有效數(shù)據(jù)占比的方法和裝置2018-05-2218118022018050415CN:一種快速恢復(fù)數(shù)據(jù)的方法和裝置2018-05-2218118012018050416CN:一種實(shí)現(xiàn)數(shù)據(jù)庫(kù)行存與列存格式的數(shù)據(jù)混存的方法和裝置2018-06-192018060281:一種通