mysql paxos_如何评价阿里最近推出的paxos基础库?

腾讯的PhxPaxos,目前是开源的Paxos独立库中start最多的(1000+),其和MySQL结合后推出了PhxSQL项目,但是其在功能和性能上并不能满足阿里的需求。X-Paxos是阿里巴巴数据库团队面向高性能、全球部署以及阿里业务特征等需求,实现的高性能分布式强一致的 Paxos 独立基础库,并和AliSQL结合后推出了AliSQL X-Cluster项目。

X-Paxos和PhxPaxos都是基于Multi-Paxos实现的Paxos独立库,二者主要的区别如下:PhxPaxos可支持多Paxos实例,共享网络层,但是每个Paxos实例只支持单线程;X-Paxos目前仅支持单Paxos实例,但完全基于多线程实现,可以在单个Paxos实例中完全使用多线程的能力,所有的任务都有通用的woker线程来运行,消除了CPU的瓶颈。

PhxPaxos不支持Pipelining,在跨地域环境(高延迟)下,效率很低,几乎不可用;而X-Paxos完美支持Batching和Pipelining,而且通过内置探测,针对不同节点的部署延迟,自适应的调整每个节点的Batching和Pipeling参数,达到整体的最大吞吐。

PhxPaxos内置日志模块,日志直接基于LevelDB实现,多份日志冗余;而X-Paxos实现可插拔的日志,应用程序可根据需求实现自己的日志模块,消除日志冗余。采用PhxPaxos的PhxSQL单节点需要既保存MySQL的binlog,又保存Paxos log,单次commit本地需要sync 2次,既影响性能,又浪费了存储空间。而采用X-Paxos的AliSQL X-Cluster直接改造了现有的binlog模块,对接到X-Paxos的日志模块,单节点仅一份日志,即降低了存储,又提高了性能。

X-Paxos做了很多附加功能,比如在线添加/删除节点,在线转让Leader,策略化多数派和权重化选主,节点角色定制化(Proposer/Accepter/Learner的独立配置)等。

PhxPaxos去年已经开源,X-Paxos目前没有开源,但是其设计和工程实践心得已公布,对于业界非常有参考意义,相信熟悉Paxos算法的人应该能够自己实现出来。

X-Paxos和PhxPaxos性能对比如下:

从上面2个对比图中可以看到:X-Paxos的同地域内性能是PhxPaxos的100倍以上。

跨地域场景下PhxPaxos几乎不可用,而X-Paxos在444Byte(sysbench insert场景单请求大小),性能只有3.5%的下降,几乎不影响吞吐。

利益相关:X-Paxos的镙丝钉

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值