一直搞不清楚什么是读写分离,主从复制的原理,今天总算搞懂了

【原创】 洪生鹏  

作为一名java程序员,求职面试时时常会遇到类似这样的问题:

  • 你有没有做过MySQL读写分离?
  • 如何实现MySQL的读写分离?
  • 说说MySQL主从复制原理?
  • 如何解决 MySQL主从同步延时问题?

1、MySQL的读写分离

说到读写分离,我们先了解下什么是主从复制。

主从复制,是用来建立一个和主数据库完全一样的数据库环境,称为从数据库,主数据库一般是准实时的业务数据库。一台服务器充当主服务器,而另外一台服务器充当从服务器。

1.1 此时主服务器会将更新信息写入到一个特定的二进制文件中,并会维护文件的一个索引用来跟踪日志循环,这个日志可以记录并发送到从服务器的更新中去。

1.2 一台从服务器连接到主服务器时,从服务器会通知主服务器从服务器的日志文件中读取最后一次成功更新的位置。然后从服务器会接收从哪个时刻起发生的任何更新,然后锁住并等到主服务器通知新的更新。

读写分离简单来说就是基于主从复制架构,一个主库,有多个从库,主库主要负责写,写完后主库会自动把数据给同步给从库。

2、MySQL主从复制的原理

一直搞不清楚什么是读写分离,主从复制的原理,今天总算搞懂了

 

主库将变更写入binlog日志,然后从库连接到主库之后,从库有一个 IO 线程,将主库的 binlog 日志拷贝到自己本地,写入一个 relay中继日志(relay log)中。接着从库中有一个SQL线程会从中继日志读取binlog,然后执行binlog日志中的内容,也就是在自己本地再次执行一遍SQL语句,从而使从服务器和主服务器的数据保持一致。
主从配置就是围绕这个原理配置,也就是说:从库会生成两个线程,一个I/O线程,一个SQL线程; I/O线程会去请求主库的binlog,并将得到的binlog写到本地的relay-log(中继日志)文件中; 主库会生成一个log dump线程, 用来给从库I/O线程传binlog; SQL线程,会读取relay log文件中的日志,并解析成sql语句逐一执行

有一点需要注意的是,就是从库同步主库数据的过程是串行化的,也就是说主库上并行的操作,在从库上会串行执行。
由于从库从主库拷贝日志以及串行执行 SQL 的特点,在高并发场景下,从库的数据是有延时的。
在实际运用中,时常会出现这样的情况,主库的数据已经有了,可从库还是读取不到,可能要过几十毫秒,甚至几百毫秒才能读取到。

  • 一个是半同步复制,用来解决主库数据丢失问题;
  • 一个是并行复制,用来解决从库复制延迟的问题。

半同步复制,也叫 semi-sync 复制,指的就是主库写入 binlog 日志之后,就会强制将数据立即同步到从库,从库将日志写入自己本地的 relay log 之后,接着会返回一个 ack 给主库,主库接收到至少一个从库的 ack 之后才会认为写操作完成了。
并行复制,指的是从库开启多个线程,并行读取 relay log 中不同库的日志,然后并行存放不同库的日志,这是库级别的并行。

一直搞不清楚什么是读写分离,主从复制的原理,今天总算搞懂了

 

3、MySQL 主从同步延时问题

譬如用户升级条件达到了,主库也成功更新了用户状态,可在生产环境高峰期,这个时候,主从复制延时了,从库在高峰期时候却没更新。导致用户在手机app界面上显示的等级还是原来的。
主从延时排查方法
MySQL 有主从同步的状态信息,可以通过MySQL命令 show slave status获取,除了获知当前是否主从同步正常工作,另外一个重要指标就是 Seconds_Behind_Master,根据输出的Seconds_Behind_Master参数的值来判断:NULL,表示io_thread或是sql_thread有任何一个发生故障;0,该值为零,表示主从复制良好;正值,表示主从已经出现延时,数字越大表示从库延迟越严重。

4、主从延迟解决方案

  • 分库,将一个主库拆分为多个主库,(可以是多主一从)这样每个主库的写并发会减少。
  • 单个库读写分离,一主多从,主写从读,分散压力。这样从库压力比主库高,保护主库。、
  • MySQL 支持的并行复制,多个库并行复制。但要是单库写入并发太高,并行复制并没有意义。
  • 升级Slave硬件配置

不知你有没有其他解决方案,欢迎交流!

由于笔者水平有限,文中纰漏之处在所难免,权当抛砖引玉,不妥之处,请大家批评指正。

  • 7
    点赞
  • 54
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
MySQL的分离主从复制是一种常见的数据库架构模式,用于提高数据库系统的性能和可用性。在主从复制中,有一个主数据库(Master)负责处理操作,而一个或多个从数据库(Slave)负责处理操作。 主从复制的工作原理如下: 1. 主数据库接收到操作(如插入、更新、删除)时,将操作记录到二进制日志(Binary Log)中。 2. 从数据库连接到主数据库,获取二进制日志,并将这些日志应用到自己的数据库中,以使从数据库的数据与主数据库保持一致。 3. 当有操作请求时,从数据库直接查询自己的数据,不需要访问主数据库,从而分担了主数据库的负载。 分离的优势在于: 1. 提高了系统的性能:操作由从数据库处理,可以分散负载,提高系统的并发能力和响应速度。 2. 增加了系统的可用性:即使主数据库发生故障,从数据库仍然可以继续提供服务,减少了系统的停机时间。 3. 改善了数据安全性:从数据库可以用于备份和故障恢复,保护数据免受意外删除或损坏。 要配置MySQL的分离主从复制,需要进行以下步骤: 1. 在主数据库上开启二进制日志功能,并配置唯一的server-id。 2. 在从数据库上配置主数据库的连接信息,并使用CHANGE MASTER TO语句设置从数据库复制主数据库的位置。 3. 启动从数据库的复制进程,使其开始复制主数据库的数据。 4. 在应用程序中,根据需要将操作发送到从数据库,操作发送到主数据库。 需要注意的是,主从复制是异步的,因此在进行操作时,可能会存在稍许的延迟,数据在主从数据库之间的同步并不是实时的。此外,主数据库出现故障时,需要手动切换应用程序的操作到另一个可用的主数据库。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值