直击阿里新一代数据库技术：如何实现极致弹性能力？

阿里妹导读：张瑞，阿里巴巴研究员，阿里集团数据库技术团队负责人，经历阿里数据库技术变革历程，连续六年作为数据库总负责人参与双11备战工作。今天，我们邀请他来分享新一代数据库技术在双11中的应用。

阿里数据库技术团队负责人张瑞

张瑞：双11是一场技术大练兵，是互联网界的超级工程。需要做到支撑尽可能高的零点峰值，给用户最好的体验；也要做到成本尽可能低，要求极致的弹性能力；还要做到整体系统的稳定。

数据库如何实现极致弹性能力？

数据库上云

大家都知道，数据库实现弹性能力是比较困难的，一方面是因为数据库对性能要求非常高，另一方面是需要进行大量数据的搬迁，成本很高。数据库弹性的第一个方向是数据库上云，通过云的弹性能力来解决数据库的资源问题。 

数据库上云面临以下几个难点：

1.     数据库如何快速上云，构建混合云？

2.     如何降低虚拟化带来的性能损耗？

3.     公有云环境和内部网络的互通问题。

 

经过几年的探索，这些难点都已得到解决。第一，数据库使用了高性能ECS，通过使用SPDK、DPDK技术和NVMe存储，可以让虚拟化损耗非常小，接近物理机；第二，我们建设了一套数据库混合云管理系统，可以同时管理云上和云下环境，在双11前快速把混合云构建起来，支撑双十一。第三，我们通过VPC网络连接阿里内部和公有云的网络，解决了混合云场景下的网络互联问题。

 

数据库弹性调度

使用云的资源还不够，为了实现更加极致的弹性能力，我们通过离在线混部技术，可以让数据库使用离线集群的计算资源，最大程度的降低成本。为了实现离在线混部技术，有两大基础条件：第一是容器化，通过容器实现了计算节点的资源隔离和统一调度，第二是计算存储分离，它是数据库弹性调度能力的基础。非常幸运的是，这几年技术的发展让存储计算分离成为可能，比如：25G高速网络、RDMA技术，高性能分布式存储等。

数据库存储计算分离架构如图，包括存储层、网络层和计算层，存储使用阿里自研分布式存储系统-盘古，数据库计算节点则部署在阿里自研容器（Pouch）中，通过25G网络与存储节点连接。

 

为了实现数据库存储和计算分离，我们在分布式存储-盘古上做了非常多的优化，比如：

• 响应延时：单路读写响应延时0.4ms，RDMA网络响应延时小于0.2ms；

• 二三异步：第三个数据副本异步完成，极大提升了延时的稳定性；