mysql复制架构迁移到pxc_2020-03-18 Mysql常见的HA中间层架构mmm,pxc,mha

1、MMM结构(双主复制的结构)

Master-Master Replication Manager for MySQL 是一套脚本集合,用以监控、管理双主复制架构,通过设置一个可写的VIP和多个只读的VIP,完成故障自动转移、读负载分摊等功能;双主互为主从

3894474dcceb

MMM

存在问题:

通过vip实现漂移,不能跨网段,更不能跨机房

网络分区,导致数据库双写,数据冲突,需要业务修改数据或者重做

DBA部署和运维不方便,容易出问题(绑定vip,配置文件等)

使用binlog进行同步会有延时,如果写节点写操作过程中挂了,集群中其他节点无法访问挂掉的 写节点的binlog,就 无法同步这部分数据,导致数据丢失。

MMM的版本已不更新,谈不上对mysql新特性的支持

不适合于对数据一致性要求很高的场景。(异步复制,数据双写冲突)

VIP地址漂移原理?

1、MMM本身的monitor和agent提供了动态变更网卡IP绑定的功能(网卡可以绑定多个IP的呢)

2、借用keepalived的虚拟路由冗余协议,实现这种高可用的VIP机制(ARP表原理), 所以又有MM+Keepalived组合

明白了VIP地址漂移的道理,那么不能跨网段就显而易见了(多网段VIP没办法路由呢)。

2、PXC结构

Percona XtraDB Cluster是一个为MySQL用户提供高可用性和伸缩性的解决方案,采用ZK作为中央控制模块。

GTID:Global Transaction ID    全局事务唯一id

3894474dcceb

PXC

1、同步复制,事务要么在所有节点提交或不提交,一致性高。(一半以上结点OK则事务成功,高可用)

2、多主复制,可以在任意节点进行写操作,当然也可以读。

一致性最高,但是QPS相对受限。

2、mha结构

MHA(Master High Availability)是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中,MHA能做到在0~30秒之内自动完成数据库的故障切换操作,并且在进行故障切换的过程中,MHA能在最大程度上保证数据的一致性,以达到真正意义上的高可用。

组成部分:

1.MHA manager,管理节点

2.MHA node,数据节点

部署架构:

MHA manager可以单独部署在一台机器上,管理多个master-slave集群,也可以单独部署在一个slave节点上。MHA manager探测集群的node节点,当发现master故障时,会选取拥有最新数据的slave提升为新的master,然后将其他的slave导向新的master节点,并完成数据的同步,整个故障转移过程对于客户端应用程序来说是完全透明的。

3894474dcceb

MHA

原理介绍:

MHA的目的在于维持MySQL Replication中Master库的高可用性,其最大特点是可以修复多个Slave之间的差异日志,最终使所有Slave保持数据一致,然后从中选择一个充当新的Master,并将其它Slave指向它。

当master出现故障时,可以通过对比slave之间I/O thread 读取主库binlog的position号,选取最接近的slave做为备选主库(备胎)。其它的从库可以通过与备选主库对比生成差异的中继日志。在备选主库上应用从原来master保存的binlog,同时将备选主库提升为master。最后在其它slave上应用相应的差异中继日志并开始从新的master开始复制。

过程:

(1)从宕机崩溃的master保存二进制日志事件(binlog events);

(2)识别含有最新更新的slave,作为备选主库;

(3)对比备选主库和其他slave,生成差异的中继日志(relay log);

(4)应用从master保存的二进制日志事件(binlog events)到备选主库;

(5)提升提升备选主库为新的master主库;

(6)在其他slave上应用差异中继日志(relay log);

(6)使其他的slave连接新的master进行复制;

优点:

1. 故障切换时,可以自行判断哪个从库与主库的数据最接近,就切换到上面,可以减少数据的丢失,保证数据的一致性

2. 支持 binlog server,可提高 binlog 传送效率,进一步减少数据丢失风险。

3. 可以配置 mysql 5.7 的增强半同步,来保证数据的时时同步

在MHA自动故障切换过程中,MHA试图从宕机的主服务器上保存二进制日志,最大程度的保证数据的不丢失,但这并不总是可行的。例如,如果主服务器硬件故障或无法通过ssh访问,MHA没法保存二进制日志,只进行故障转移而丢失了最新的数据。使用MySQL 5.5的半同步复制,可以大大降低数据丢失的风险。MHA可以与半同步复制结合起来。如果只有一个slave已经收到了最新的二进制日志,MHA可以将最新的二进制日志应用于其他所有的slave服务器上,因此可以保证所有节点的数据一致性。

Manager若自身需要是高可用的,且保证对各个机房的可达性。

另外,可自定义开发哨兵Sentinel集群替代Manager。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值