Tbase 企业级NewSQL HTAP分布式云数据库

2017年PGXZ改名为TBase，以发布会的方式正式对外进行了发布，经过团队小伙伴们的努力，TBase V1版本到目前在公司外部市场上的客户包括了政务，公安，消防，电信，金融等行业的十几家客户。TBase以其功能强大，运行稳定，和强大的互联网基因得到客户的普遍认可。在和外部客户的接触中，听到了很多赞美的声音，也有不少希望TBase能够解决客户更多痛点的期望。

2017年中TBase团队结合客户的需求和数据库技术的最新发展趋势，经过相当长时间的规划和讨论，在PostgreSQL最新版本V10.0的基础上规划了TBase V2版本，希望能够代表腾讯最新最强的数据库技术，来满足客户的需求，解决客户业务运行中的痛点。

在接下来的8个多月里，数平小伙伴们夜以继日，终于完成TBase V2核心的开发，这个凝结了数平小伙伴们数百个昼夜辛勤工作的版本终于要和大家见面了，很高兴能能在这里给同学们介绍TBase V2的核心概念和架构。

TBase V2核心概念

TBase V2的重要的技术特性和概念，主要包括以下几个方面：

              

企业级：企业级特性包含以下几个方面：

• 用户友好的事务特性：业务无需关注数据库的事务特性，数据库内核支持完整的分布式事务，保证事务的ACID。

• 用户友好的数据库特性：主键，外键，序列，约束，分区表，存储过程，触发器，子查询等企业级的特性完整支持。

• 用户友好的SQL接口：当前TBase V2能够兼容SQL2003标准，同时还能够兼容常见的ORACLE语法，可以方便ORACLE深度用户的迁移，当前在外部已经有ORACLE迁移的案例。

• 用户友好的分布式查询能力：良好的分布式查询支持能力，数据库内核能够高效的处理分布式JOIN。

NewSQL数据库：相对传统的数据库产品，TBase能够做到高效的在线线性扩容，在集群规模发生变化的时候不会影响到业务的运行。

HTAP能力： Hybrid Transactional/Analytical Processing，即事务和分析混合处理技术，这个技术要求本来资源诉求矛盾的两种业务类型在同一个数据库中完成处理。TBase V2经过专门的设计完美的做到了HTAP，同时具备了高效的OLAP能力和海量的OLTP处理能力。

下面是我们测试的事务测试模型TPCC的benchmark测试结果，系统在每分钟完成的事务量超过310万，更大规模集群的测试还在进行中，从当前的架构设计来看，在硬件允许的情况下，系统的事务吞吐量会随着集群规模准线性提升：

                

下面这张图展示了TBase在行存储模式下和业界MPP数据仓库标杆在OLAP测试集合TPCH 1Tbenchmark下的对比情况：

通过这张图可以直观的看到TBase的OLAP分析能力，TBase在22个用例中每个用例的耗时都优于我们的竞品，部分用例耗时大幅度的超过对方。

通过HTAP技术，业务可以在单一的TBase集群中同时处理OLTP类交易和OLAP类分析。通过HTAP，可以大幅度的减少业务系统的复杂度，降低运维成本。

高数据安全：

在和客户交流的过程中，多个行业的客户都提到了数据安全的诉求，TBase团队结合客户的需求和业界先进的数据库安全解决方案设计了TBase V2的数据安全体系。这个体系主要包含以下几个方面：

• 三权分立：把数据库系统dba的角色分解为三个相互独立的角色，安全管理员，审计管理员，数据管理员，这个三个角色之间相互制约，消除出系统中的上帝权限，从系统角色设计上了解决了数据安全问题。

• 强制安全规则：结合业界先进的数据库安全解决方案，TBase V2提出了强制安全规则解决方案，通过安全管理员制定的强制安全规则，可也做到行级可见和列级可见，进而限制用户看到的数据，对不同的用户做到权限的行列混合控制，有效的杜绝数据越权查看，保证关键数据的安全性。

• 透明数据脱敏管理：对于金融，安全等对数据安全有特殊要求行业，经常会有数据脱敏的诉求，但是现有的解决方案很多都需要有业务的参与，要求业务深度的参与，有一定的门槛。TBase针对这个痛点进行了专门的设计，做到业务的透明脱敏，业务只需要根据自己的业务规则结合TBase的脱敏语法，设计业务逻辑。TBase内部就可以做到数据的脱敏，同时结合上面提到的强制安全规则，安全管理员可以做到指定数据脱敏的针对用户，最终达到高安全级别的用户看到的是非脱敏的数据，低安全级别的用户看到的是脱敏后的数据。

• 审计能力：在与客户交流的过程中，众多客户都提到了数据库审计的诉求，TBase V2在设计的过程中，结合业界标杆的审计标准设计了自己的审计系统，在内核中实现了审计的核心功能，做到在兼顾高精准的审计粒度的同时还能保证系统的性能。同时针对一些业务中遇到的问题，设计专门的解决方案，做到审计结果的实时通知。

多租户能力：

TBase提供集群级和集群用户级两个级别的多租户能力。通过集群级的多租户能力，可以帮助业务快速的建立一个数据库私有云，