騰訊自研分布式數(shù)據(jù)庫TDSQL簡介

TDSQL素材1產(chǎn)品簡介TDSQL(TencentDistributedSQL)是騰訊打造的一款MySQ1_兼容HTAP分布式數(shù)據(jù)庫產(chǎn)品，具備強一致高可用、全球部署架構(gòu)、分布式水平擴展、高性能、企業(yè)級安全等特性，同時提供智能DBA、自動化運營、監(jiān)控告警等配套設(shè)施，為用戶提供完整的分布式數(shù)據(jù)庫解決方案。目前TDSQL已經(jīng)為超過500+的政企和金融機構(gòu)提供數(shù)據(jù)庫的公有云及私有云服務(wù)，客戶覆蓋銀行、保險、證券、互聯(lián)網(wǎng)金融、計費、第三方支付、物聯(lián)網(wǎng)、互聯(lián)顧、政務(wù)等領(lǐng)域。TDSQL亦憑借其高質(zhì)量的產(chǎn)品及服務(wù)，獲得了多項國際和國家認(rèn)證，得到了客戶及行業(yè)的一致認(rèn)可。2九大特性2.1強同步復(fù)制多副本強一致性下的高可用方案，基于跨數(shù)據(jù)中心強同步復(fù)制，故障可自動切換，且數(shù)據(jù)零丟失。2.2全球部■架構(gòu)按需部署，輕松實現(xiàn)異地多活，兩IDC對等架構(gòu)、兩地三中心架構(gòu)、兩地四中心架構(gòu)、多地多中心。2.3分布式水平擴展AutoSharding機制，實現(xiàn)實時在線無縫擴容，確保集群性能、容量線性增長；提供健壯的分布式事務(wù)機制，全SQL兼容，單機數(shù)據(jù)庫遷移TDSQL零門檻。2.4內(nèi)核深度優(yōu)化內(nèi)核深度定制優(yōu)化，跨數(shù)據(jù)中心強同步性能相較于異步零損耗；OLTPTPS相較于原生MySQL提升85%。2.5企業(yè)級安全增強通過透明加密、數(shù)據(jù)庫防火墻、SSL接入、SQL審計等措施，實現(xiàn)事前、事中、事后的全生命周期安全防護。2.6HTAP內(nèi)嵌分布式查詢引擎，OLTP與OLAP混合支持，同時支持SparkOnTDSQL，對不同負(fù)載SQL進行智能調(diào)度。2.7多引擎支持支持MySQL社區(qū)版、Percona、MariaDB三大分支；支持InnoDB、RocksDB等多種存儲引擎。2.8智能DBA基于海量運營經(jīng)驗加AI的DBA智能診斷系統(tǒng)，快速幫助業(yè)務(wù)預(yù)防、發(fā)現(xiàn)、定位并解決問題。2.9自動化運營體系提供完善的運營配套體系，Binlog訂閱、冷備、多源異構(gòu)數(shù)據(jù)庫同步等，無縫對接周邊系統(tǒng)。應(yīng)用場景分支業(yè)務(wù)聚合到總部（全國全球覆蓋）：政務(wù)/銀行/大型國企政務(wù)、銀行、大型國企的組織架構(gòu)通常采用總部-分部-分支的架構(gòu)，包括某些核心IT系統(tǒng)建設(shè)也采用這種模式。隨著業(yè)務(wù)互通，人員互通，信息互通等需求越來越強烈，傳統(tǒng)的總部-分部-分支累的IT架構(gòu)已經(jīng)不適應(yīng)當(dāng)前業(yè)務(wù)快速發(fā)展需要，因此不少業(yè)務(wù)系統(tǒng)逐漸向總部聚合。而TDSQL特性天生支持超大規(guī)模業(yè)務(wù)系統(tǒng)的需要，還能在向總部聚合系統(tǒng)的過程中，提供可靠的數(shù)據(jù)同步工具，幫助業(yè)務(wù)平滑遷移。客戶代表：臺州銀行、浦發(fā)銀行、某國有銀行、粵省事、廣東省電子政務(wù)大廳、廣州省公安廳移動警務(wù)、云南煙草、南方航空實時高并發(fā)交易場景：互聯(lián)網(wǎng)金融/電商/O2O/零售互聯(lián)網(wǎng)金融、電商、O2O、零售等行業(yè)，普遍存在用戶基數(shù)大、核心交易系統(tǒng)數(shù)據(jù)庫單表上億行且訪問日益變慢等問題，制約業(yè)務(wù)發(fā)展。產(chǎn)品提供彈性擴展能力，能夠極大提升數(shù)據(jù)庫處理能力，可以面對類似全網(wǎng)推廣、限時秒殺等營銷活動；配合熱點更新，強同步復(fù)制能力，即使是敏感交易類業(yè)務(wù)也可以完全用產(chǎn)品承載，普通x86服務(wù)器，便可輕松支撐起上億的用戶訪問?？蛻舸恚赫猩套C券、富途證券、有贊、永輝超市海量數(shù)據(jù)存儲訪問場景：物聯(lián)網(wǎng)面向物聯(lián)網(wǎng)，交易訂單等業(yè)務(wù)，業(yè)務(wù)數(shù)據(jù)增長迅猛，會產(chǎn)生超過單機數(shù)據(jù)庫存儲能力極限的數(shù)據(jù)，數(shù)據(jù)庫實例超過TB級別且持續(xù)快速增長，造成數(shù)據(jù)庫容量瓶頸，限制業(yè)務(wù)發(fā)展。產(chǎn)品可以彈性擴展存儲空間，提供RocksDB等高壓縮比的存儲能力，且可以高效利用每一個物理節(jié)點的存儲量能力，避免浪費。可以廣泛應(yīng)用于IOT場景下的車聯(lián)網(wǎng)、工業(yè)遠程監(jiān)控、智能家居、智能汽車、充電樁加油站等超大規(guī)模傳感器數(shù)據(jù)上報存儲訪問場景?？蛻舸恚篞Q音樂等彈性擴容，快速回檔：游戲游戲等需要彈性擴容和快速回檔的業(yè)務(wù)。產(chǎn)品對計算資源的彈性伸縮能力，賦予用戶更高的生產(chǎn)力，分鐘級部署游戲分區(qū)數(shù)據(jù)庫。借助任意時間點回檔到臨時實例功能及支持批量操作的特性，用戶可以隨時隨地在不影響現(xiàn)網(wǎng)運營情況下，恢復(fù)到任意時間點，為游戲回檔提供有效支持。利用分布式實例，可以輕松搭建起可彈性擴展的"全區(qū)全服”內(nèi)業(yè)務(wù)?？蛻舸恚河巫寰W(wǎng)絡(luò)支持混合云TDSQL可支持公有云/專有云部署方案，通過專線與數(shù)據(jù)同步工具的配合，可以輕松搭建一套跨云的混合云架構(gòu)?？蛻舸恚簑ebank4資質(zhì)和獎項TDSQL現(xiàn)已代表騰訊云數(shù)據(jù)庫活動通過多項國家或國際認(rèn)證，包括：可信云服務(wù)認(rèn)證可信云服務(wù)（TRUCS）認(rèn)證是我國目前唯一針對云服務(wù)的權(quán)威認(rèn)證體系，由數(shù)據(jù)中心聯(lián)盟和云計算發(fā)展與政策論壇聯(lián)合組織。是國內(nèi)權(quán)威機構(gòu)首次開展云服務(wù)資質(zhì)認(rèn)證，其高規(guī)格、高標(biāo)準(zhǔn)對于國內(nèi)云服務(wù)運營商提出了更高的要求。依據(jù)可信云服務(wù)（TRUCS）認(rèn)證要求，騰訊云主機服務(wù)、云數(shù)據(jù)庫服務(wù)、云緩存服務(wù)、對象存儲服務(wù)、本地負(fù)載均衡服務(wù)、數(shù)據(jù)中心間VPN月服務(wù)、云分發(fā)服務(wù)、塊存儲服務(wù)已通過數(shù)據(jù)中心聯(lián)盟組織可信云評測和認(rèn)證。CSASTAR云安全評估基于國際權(quán)威的非盈利組織云安全聯(lián)盟(CloudSecurityAlliance)推出的云控制矩陣CCM(CloudControlMatrix)，滿足云計算安全領(lǐng)域的特定要求，針對云計算安全特性的一項國際性認(rèn)證。2016年9月以金牌等級通過CSASTAR云安全認(rèn)證，同時獲得了CNAS和UKAS國內(nèi)國外雙認(rèn)可信息安全管理體系認(rèn)證資質(zhì)，這是首家同時獲得這些資質(zhì)的云服務(wù)商，進一步鞏固了其國內(nèi)領(lǐng)先的云服務(wù)提供商的地位。ISO27001是以信息資產(chǎn)及業(yè)務(wù)風(fēng)險管理為核心的管理體系，對企業(yè)建立、實施和文件化信息安全管理提出了極高的要求°ISO27001的前身是BS7799信息安全管理體系標(biāo)準(zhǔn)，由全球權(quán)威的標(biāo)準(zhǔn)研發(fā)和國際認(rèn)證評審服務(wù)提供商BSI撰寫，后被國際標(biāo)準(zhǔn)組織(InternationalStandardizationOrganization,簡稱ISO)采納升級為ISO27001國際信息安全管理體系認(rèn)證標(biāo)準(zhǔn)。該標(biāo)準(zhǔn)已成為當(dāng)今國際上最權(quán)威、最嚴(yán)格，也是最被廣泛接受和應(yīng)用的信息安全領(lǐng)域的體系認(rèn)證標(biāo)準(zhǔn)。ISO20000信息技術(shù)服務(wù)管理體系目的是提供建立、實施、運作、監(jiān)控、評審、維護和改進IT月艮務(wù)管理體系(ITSM)的模式，通過"IT月艮務(wù)標(biāo)準(zhǔn)化"來管理IT問題，即將IT問題歸類，識別問題的內(nèi)在聯(lián)系，然后依據(jù)服務(wù)級別協(xié)議進行計劃、推行和監(jiān)控，并強調(diào)與客戶的溝通，幫助企業(yè)建立起一套行之有效的以客戶為中心的自我完善的體系。騰訊云已獲得ISO20000證書，由騰訊云為客戶提供云計算服務(wù)、托管服務(wù)和災(zāi)備服務(wù)的IT服務(wù)質(zhì)量管理。ISO22301是第一份以業(yè)務(wù)連續(xù)管理(BusinessContinuityManagement，簡稱BCM)為主題的國際標(biāo)準(zhǔn)，提供了一種完整通用的BCM方法論，讓企業(yè)能夠達到國際上公認(rèn)的最佳實踐。騰訊云是國內(nèi)首批通過ISO22301認(rèn)證的云服務(wù)商，業(yè)務(wù)持續(xù)管理體系：提供騰訊云云計算服務(wù)，包括云服務(wù)器、云數(shù)據(jù)庫、負(fù)載均衡、域名服務(wù)、金融云解決方案、云安全、云監(jiān)控、及相關(guān)售后支援服務(wù)之業(yè)務(wù)連續(xù)性管理系統(tǒng)。ISO9001是一個系統(tǒng)性的保證公司產(chǎn)品質(zhì)量及運作的指導(dǎo)性綱領(lǐng)和規(guī)范架構(gòu)，圍繞企業(yè)提供的產(chǎn)品或服務(wù)展開的，策劃和實施及改進產(chǎn)品或服務(wù)實現(xiàn)的全過程，確保滿足客戶及相關(guān)法律法規(guī)要求。騰訊云已獲得ISO9001證書，認(rèn)證范圍包括云計算服務(wù)、托管服務(wù)及災(zāi)備服務(wù)等。ISO27018是一個由國際標(biāo)準(zhǔn)化組織(ISO)于2014年頒布的國際標(biāo)準(zhǔn)協(xié)議，是首個專注于云中個人信息保護的國際行為準(zhǔn)則。通過ISO27018認(rèn)證可證明企業(yè)在保護企業(yè)數(shù)據(jù)、知識產(chǎn)權(quán)、文檔和云端IT系統(tǒng)安全等方面達到了高標(biāo)準(zhǔn)的行業(yè)最佳實踐。MariaDB白金會員ACMUG中國開源數(shù)據(jù)庫專業(yè)委員會的主席團成員2018年11月30日，通過數(shù)據(jù)中心聯(lián)盟第七批大數(shù)據(jù)產(chǎn)品評測，成為DCA首批分布式數(shù)據(jù)庫認(rèn)證產(chǎn)品。2018年12月20日，IT168頒發(fā)的"技術(shù)卓越獎"。52018年產(chǎn)品迭代2018年03月16日分布式數(shù)據(jù)庫TDSQL與英特爾⑧合作測試，在其至強?平臺上跑出峰值286萬QPS的超高數(shù)據(jù)，高于同類數(shù)據(jù)庫性能。2018年5月11日，分布式數(shù)據(jù)庫TDSQL原創(chuàng)的全態(tài)數(shù)據(jù)的概念和基于歷史態(tài)數(shù)據(jù)的可見性判斷算法T-TDSQL，在DTCC大會上公開，提供增量抽取、增量計算等能力，極大的方便了業(yè)務(wù)對賬、數(shù)據(jù)重演、數(shù)據(jù)分析、聯(lián)機閃回等特性。2018年06月20日基于騰訊專有云(TCE)的云數(shù)據(jù)庫產(chǎn)品3.0版本發(fā)布，支持關(guān)系型數(shù)據(jù)庫MySQL、MariaDB、分布式數(shù)據(jù)庫、MongoDB、Redis等云數(shù)據(jù)庫方案。2018年09月16日分布式數(shù)據(jù)庫TDSQL的HTAP混合計算架構(gòu)發(fā)布，深度整合SparkCatalyst，以解決用戶復(fù)雜OLAP需求的解決方案。2018年12月07日CloudDBA（扁鵲智能檢測工具）在MariaDB和分布式數(shù)據(jù)庫全量支持，通過收集分析用戶指定的診斷時間段內(nèi)的監(jiān)控指標(biāo)，提供這段時間的DB存在的問題，并綜合這些問題得出DB健康狀態(tài)的評分。對于用戶提供的的慢sql，CloudDBA可以自動分析sql，并結(jié)合sql涉及的表結(jié)構(gòu)，數(shù)據(jù)分布得出適當(dāng)?shù)乃饕ㄗh，有助于用戶在無需DBA的參與下減少由于索引不當(dāng)引起的慢查詢問題。62018年獲得的專利2018-02-071818112018020061CN:一種基于MVCC和時態(tài)技術(shù)實現(xiàn)增量計算方法和裝置2018-03-1618PCT1502017020258CN-PCT:一種非相關(guān)子查詢優(yōu)化的方法和裝置2018-04-2518115282018040430CN:一種快速備份數(shù)據(jù)的方法和裝置2018-04-252018040433:一種快速估算有效數(shù)據(jù)占比的方法和裝置2018-05-2218118022018050415CN:一種快速恢復(fù)數(shù)據(jù)的方法和裝置2018-05-2218118012018050416CN:一種實現(xiàn)數(shù)據(jù)庫行存與列存格式的數(shù)據(jù)混存的方法和裝置2018-06-192018060281:一種通