从Mysql主库binlog直接进行同步数据,有啥好处?

大家都知道,MySQL主从复制时使用的binlog日志,它记录了所有的DDL和DML语句(除了数据查询语句select、show等),以事件形式记录,还包含语句所执行的消耗时间。

MySQL主从复制有以下几个步骤:

  1. master(主库)在每次准备提交事务完成数据更新前,将改变记录到二进制日志(binary log)中;
  2. slave(从库)发起连接,连接到master,请求获取指定位置的binlog文件;
  3. master创建dump线程,推送binlog的slave;
  4. slave启动一个I/O线程来读取主库上binary log中的事件,并记录到slave自己的中继日志(relay log)中;
  5. slave还会起动一个SQL线程,该线程从relay log中读取事件并在备库执行,完成数据同步;
  6. slave记录自己的binlog。

image.png

通过上述步骤完成主从同步,需要将binlog推送到从库,然后再读取到relay log,从库在启动SQL进行进行sql语句的执行,时间太漫长;有没有什么方法可以减少这种同步时间,或者如果redis、hive想从MySQL主库同步数据,该如何加快同步速度?

binlog记录了Mysql数据的实时变化,是数据同步的基础,服务需要做的就是遵守Mysql的协议,将自己伪装成Mysql的slave来监听业务主库binlog,完成数据实时同步。

问:伪装成Mysql的slave来监听业务主库binlog,完成数据实时同步,有啥好处?

答:可实时更新缓存
业务查询类服务往往会在mysql之上架设一个缓存,减少对底层数据库的访问;当mysql库数据变化时,如果缓存还没有过期那么就会拿到过期的数据,业务期望能够实时更新缓存。

利用binlog服务,根据策略实时将数据同步到redis中,这样就能够保证了缓存中数据有效性,减少了对数据库的调用,从而提高整体性能。

image.png

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值