MySQL主从复制
当我们的项目中MySQL服务器只有一台时,那么就可能会存在如下问题:
- 读和写所有压力都由一台数据库承担,压力大
- 数据库服务器磁盘损坏则数据丢失,单点故障
解决方案:
为了解决上述提到的两个问题,我们可以准备两台MySQL,一台主(Master)服务器,一台从(Slave)服务器,主库的数据变更,需要同步到从库中(主从复制)。而用户在访问我们项目时,如果是写操作(insert、update、delete),则直接操作主库;如果是读(select)操作,则直接操作从库(在这种读写分离的结构中,从库是可以有多个的),这种结构我们称为 读写分离 。
1. MySQL主从复制
MySQL数据库默认是支持主从复制的,不需要借助于其他的技术,我们只需要在数据库中简单的配置即可。接下来,我们就从以下的几个方面,来介绍一下主从复制:
1.1 介绍
MySQL主从复制是一个异步的复制过程,底层是基于Mysql数据库自带的 二进制日志 功能。就是一台或多台MySQL数据库(slave,即从库)从另一台MySQL数据库(master,即主库)进行日志的复制,然后再解析日志并应用到自身,最终实现 从库 的数据和 主库 的数据保持一致。MySQL主从复制是MySQL数据库自带功能,无需借助第三方工具。
二进制日志:
二进制日志(BINLOG)记录了所有的 DDL(数据定义语言)语句和 DML(数据操纵语言)语句,但是不包括数据查询语句。此日志对于灾难时的数据恢复起着极其重要的作用,MySQL的主从复制, 就是通过该binlog实现的。默认MySQL是未开启该日志的。
MySQL的主从复制原理如下:
MySQL复制过程分成三步:
- MySQL master 将数据变更写入二进制日志( binary log)
- slave将master的binary log拷贝到它的中继日志(relay log)
- slave重做中继日志中的事件,将数据变更反映它自己的数据
1.2 搭建
提前准备两台服务器,并且在服务器中安装MySQL,服务器的信息如下:
数据库 | IP | 数据库版本 |
---|---|---|
Master | 192.168.36.168 | 8.0.30 |
Slave | 192.168.36.237 | 8.0.30 |
并在两台服务器上做如下准备工作:
-
防火墙开放3306端口号
firewall-cmd --zone=public --add-port=3306/tcp --permanent
-
并将两台数据库服务器启动起来:
systemctl start mysqld
-
登录MySQL验证是否可以正常启动
主数据库配置
服务器:192.168.36.168
-
修改Mysql数据库的配置文件
/etc/my.cnf
在最下面增加配置:
log-bin=mysql-bin #[必须]启用二进制日志 server-id=168 #[必须]服务器唯一ID(唯一即可)
-
重启Mysql服务
执行指令:
systemctl restart mysqld
-
创建数据同步的用户并授权
登录mysql,并执行如下指令,创建用户并授权:
mysql> GRANT REPLICATION SLAVE ON *.* to 'xiaoliu'@'%' identified by 'XiaoLiu@123456';
如果上述命令执行失败的话可以用下面的指令:
mysql> CREATE USER 'xiaoliu'@'%' IDENTIFIED WITH mysql_native_password BY 'XiaoLiu@123456'; mysql> GRANT REPLICATION SLAVE ON *.* TO 'xiaoliu'@'%';
PS:上面SQL的作用是创建一个用户
xiaoliu
,密码为XiaoLiu@123456
,并且给xiaoliu
用户授予REPLICATION SLAVE
权限。常用于建立复制时所需要用到的用户权限,也就是slave必须被master授权具有该权限的用户,才能通过该用户复制。MySQL密码复杂程度说明:
mysql> show variables like 'validate_password_policy';
目前 MySQL8.0.30 默认密码校验策略等级为 MEDIUM , 该等级要求密码组成为: 数字、小写字母、大写字母 、特殊字符、长度至少8位
-
登录Mysql数据库,查看master同步状态
执行下面SQL,记录下结果中File和Position的值
mysql> show master status;
PS:上面SQL的作用是查看Master的状态,执行完此SQL后不要再执行任何操作
从库配置
服务器: 192.168.36.237
-
修改Mysql数据库的配置文件
/etc/my.cnf
server-id=201 #[必须]服务器唯一ID
-
重启Mysql服务
systemctl restart mysqld
-
登录Mysql数据库,设置主库地址及同步位置
mysql> change master to master_host='192.168.36.168',master_user='xiaoliu',master_password='XiaoLiu@123456',master_log_file='mysql-bin.000015',master_log_pos=157; mysql> start slave;
参数说明:
A. master_host : 主库的IP地址
B. master_user : 访问主库进行主从复制的用户名(上面在主库创建的)
C. master_password : 访问主库进行主从复制的用户名对应的密码
D. master_log_file : 从哪个日志文件开始同步(上述查询master状态中展示的有)
E. master_log_pos : 从指定日志文件的哪个位置开始同步(上述查询master状态中展示的有)
从库启动后报出以下错误,是因为两个数据库内的数据不相同,主从数据库必须是两个数据库中的数据要完全相同,所以我们对数据做一下处理,使两个服务器里面的数据相同即可
mysql> start slave; ERROR 1872 (HY000): Slave failed to initialize relay log info structure from the repository
处理之后两个服务器中MySQL的数据均保留原始数据(含泪删掉了原来的数据,我也不知道哪些没有备份了)
如果是以前配置过主从复制,并且两个服务器数据相同,且报出以上错误的话,使用RESET SLAVE语句,清除master信息和relay日志的信息,删除所有的relay日志文件,并开始创建一个全新的中继日志
mysql> stop slave; mysql> reset slave;
成功之后我们重新启动:
mysql> start slave;
-
查看从数据库的状态
mysql> show slave status;
MySQL命令行技巧:
\G : 在MySQL的sql语句后加上\G,表示将查询结果进行按列打印,可以使每个字段打印到单独的行。即将查到的结构旋转90度变成纵向;
mysql> show slave status\G # PS:这里没有分号
然后通过状态信息中的
Slave_IO_running
和Slave_SQL_running
可以看出主从同步是否就绪,如果这两个参数全为Yes,表示主从同步已经配置完成。
1.3 测试
主从复制的环境,已经搭建好了,接下来,我们可以对两台MySQL服务器,进行测试。测试时,我们只需要在主库Master执行操作,查看从库Slave中是否将数据同步过去即可。
-
在 master 中创建数据库
xiaoliu
, 刷新slave查看是否可以同步过去 -
在 master 的
xiaoliu
数据库下创建user
表, 刷新slave查看是否可以同步过去 -
在 master 的
user
表中插入一条数据, 刷新slave查看是否可以同步过去
主从复制数据库配置完成!
在以后的项目中,面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。 对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免由数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。
通过读写分离,就可以降低单台数据库的访问压力, 提高访问效率,也可以避免单机故障。
以上就是关于主从复制数据库的配置,特此记录!