系列文章目录
SpringBoot + Mybatis + Sharding-jdbc实现读写分离(三)之实现读写分离
前言
上一篇文章我们配置完镜像并且安装好了mysql,接下来我们来配置mysql的主从同步。
一、为什么要做主从同步?
1、在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作。
2、做数据的热备
3、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能
二、主从同步的流程
- 步骤一:主库db的更新事件(update、insert、delete)被写到binlog
- 步骤二:从库发起连接,连接到主库
- 步骤三:此时主库创建一个binlog dump thread,把binlog的内容发送到从库
- 步骤四:从库启动之后,创建一个I/O线程,读取主库传过来的binlog内容并写入到relay log
- 步骤五:还会创建一个SQL线程,从relay log里面读取内容,从Exec_Master_Log_Pos位置开始执行读取到的更新事件,将更新内容写入到slave的db
注:上面的解释是解释每一步做了什么,并非绝对按照上面步骤执行。内容采自
三、主从同步原理
binlog: binary log,主库中保存所有更新事件日志的二进制文件。
主从复制的基础是主库记录数据库的所有变更记录到binlog。binlog是数据库服务器启动的那一刻起,保存所有修改数据库结构或内容的一个文件。
mysql主从复制是一个异步的复制过程,主库发送更新事件到从库,从库读取更新记录,并执行更新记录,使得从库的内容与主库保持一致。
在主库里,只要有更新事件出现,就会被依次地写入到binlog里面,之后会推到从库中作为从库进行复制的数据源。
binlog输出线程。每当有从库连接到主库的时候,主库都会创建一个线程然后发送binlog内容到从库。 对于每一个即将发送给从库的sql事件,binlog输出线程会将其锁住。一旦该事件被线程读取完之后,该锁会被释放,即使在该事件完全发送到从库的时候,该锁也会被释放。
在从库里,当复制开始的时候,从库就会创建两个线程进行处理:
从库I/O线程。当START SLAVE语句在从库开始执行之后,从库创建一个I/O线程,该线程连接到主库并请求主库发送binlog里面的更新记录到从库上。 从库I/O线程读取主库的binlog输出线程发送的更新并拷贝这些更新到本地文件,其中包括relay log文件。
从库的SQL线程。从库创建一个SQL线程,这个线程读取从库I/O线程写到relay log的更新事件并执行。
可以知道,对于每一个主从复制的连接,都有三个线程。拥有多个从库的主库为每一个连接到主库的从库创建一个binlog输出线程,每一个从库都有它自己的I/O线程和SQL线程。
从库通过创建两个独立的线程,使得在进行复制时,从库的读和写进行了分离。因此,即使负责执行的线程运行较慢,负责读取更新语句的线程并不会因此变得缓慢。比如说,如果从库有一段时间没运行了,当它在此启动的时候,尽管它的SQL线程执行比较慢,它的I/O线程可以快速地从主库里读取所有的binlog内容。这样一来,即使从库在SQL线程执行完所有读取到的语句前停止运行了,I/O线程也至少完全读取了所有的内容,并将其安全地备份在从库本地的relay log,随时准备在从库下一次启动的时候执行语句。
四、配置mysql主从同步配置
主节点:
- 启用二进制日志;
- 为当前节点设置一个全局唯一的server_id;
- 创建有复制权限的用户账号 REPLIACTION SLAVE ,REPLIATION CLIENT。
从节点:
- 启动中继日志;
- 为当前节点设置一个全局唯一的server_id;
- 使用有复制权限的用户账号连接至主节点,并启动复制线程。
环境信息
主节点:192.168.30.17从节点:192.168.30.18
mysql版本:mysql-5.5.17
linux:Cent OS7
1.编辑主节点配置文件
命令:vi /etc/my.con
1.启动二进制文件
- log-bin=mysql-bin
- binlog_format=mixed
- server-id=1
- innodb_file_per_table=ON
- skip_name_resolve=ON
2.重启mysql服务,连接mysql
命令:service mysqld restart
3.查看二进制日志是否开启
命令:SHOW GLOBAL VARIABLES LIKE ‘%log%’;
4.查看主节点二进制日志列表
命令:SHOW MASTER LOGS;
5.查看主节点的server id
SHOW GLOBAL VARIABLES LIKE ‘%server%’;
6.在主节点上创建有复制权限的用户。REPLIACTION SLAVE ,REOPLIATION CLIENT
命令:GRANT REPLICATION SLAVE,REPLICATION CLIENT ON . TO ‘repluser’@‘192.168.30.18’ IDENTIFIED by ‘replpass’;
7.刷新
命令:PLUSH PRIVILEGES;
2.编辑从节点配置文件
- 添加:
- relay-log=relay-log
- relay-log-index=relay-log.index
- server-id=2
- innodb_file_per_table=ON
- skip_name_resolve=ON
1.重启mysql服务,连接mysql
命令:service mysqld restart
2.查看中继日志是否开启
命令:SHOW GLOBAL VARIABLES LIKE ‘%log%’;
3.查看主节点二进制日志列表
命令:SHOW MASTER LOGS;
4.查看从节点的server id
命令:SHOW GLOBAL VARIABLES LIKE ‘%server%’;
5.在从节点配置访问主节点的参数信息
添加 主节点主机,访问主节点的用户名及密码,主节点二进制文件信息。
注意:主节点的二进制文件一定要是二进制列表中的最后一个二进制文件。
6.查看从节点的状态信息
因为没有启动 从节点的复制线程,IO线程 和 SQL 线程都为NO.
再次查看从节点状态信息
7.测试
在主节点创建数据库,并查看二进制日志信息