1)、Mysql的主从同步就是当master(主库)发生数据变化的时候,会实时同步到slave(从库)。
2)、主从复制可以水平扩展数据库的负载能力,容错,高可用,数据备份。
3)、不管是delete、update、insert,还是创建函数、存储过程,都是在master上,当master有操作的时候,slave会快速的接受到这些操作,从而做同步。
环境准备
一台安装有docker的服务器或者虚拟机.
我的是在windows安装的deepin20的虚拟机,只是为了搭建环境使用.
首先拉取mysql最新版
docker pull mysql
最新版是MySQL Server 8.0.33-1.el8
拉取成功之后,先docker images,看看是否存在.
大小是564M
接下来,启动两个mysql服务,注意是一主一从,端口号需要对应好
本文中出现的
"主机"表示master数据库
"从机"表示slave数据库
1 两个数据库映射到本地不同的文件夹中.
/home/mysql/master/
/home/mysql/slave/
主要是三大件.data,log和cnf文件.
先创建文件夹:
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/master/logs
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/master/data
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/master/cnf
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/slave/logs
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/slave/data
root@caineng-yao-deepin-PC:/# mkdir -p /home/mysql/slave/cnf
注意,使用root权限.
创建my.conf文件
vi /home/mysql/master/cnf/my.cnf
[client]
port = 3306
default-character-set = utf8mb4
[mysql]
port = 3306
default-character-set = utf8mb4
[mysqld]
# bind-address = 0.0.0.0
# port = 3306
max_connections=10000
character-set-server = utf8mb4
collation-server = utf8mb4_unicode_ci
# 设置时区和字符集
# default-time-zone='+8:00'
character-set-client-handshake=FALSE
init_connect='SET NAMES utf8mb4 COLLATE utf8mb4_unicode_ci'
gtid-mode=ON
enforce-gtid-consistency = ON
vi /home/mysql/salve/cnf/my.cnf
[client]
port = 3307
default-character-set = utf8mb4
[mysql]
port = 3307
default-character-set = utf8mb4
[mysqld]
# bind-address = 0.0.0.0
# port = 3306
max_connections=10000
character-set-server = utf8mb4
collation-server = utf8mb4_unicode_ci
# 设置时区和字符集
# default-time-zone='+8:00'
character-set-client-handshake=FALSE
init_connect='SET NAMES utf8mb4 COLLATE utf8mb4_unicode_ci'
gtid-mode=ON
enforce-gtid-consistency = ON
//主机
docker run -p 3306:3306 --restart=always --name mysql_master -v /home/mysql/master/cnf:/etc/mysql/conf.d -v /home/mysql/master/logs:/logs -v /home/mysql/master/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 -itd mysql
// 从机
docker run -p 3307:3307 --restart=always --name mysql_slave -v /home/mysql/slave/cnf:/etc/mysql/conf.d -v /home/mysql/slave/logs:/logs -v /home/mysql/slave/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 -itd mysql
这里有一点要注意
mysql 8.0以上的配置
/etc/mysql/conf.d
mysql 5.7或以下的配置
/etc/mysql
切记
如果8.0配置成了5.7的配置,就会报错
[ERROR] [Entrypoint]: mysqld failed while attempting to check config
command was: mysqld --verbose --help --log-bin-index=/tmp/tmp.hwT8SIto98
mysqld: Can't read dir of '/etc/mysql/conf.d/' (OS errno 2 - No such file or directory)
mysqld: [ERROR] Stopped processing the 'includedir' directive in file /etc/my.cnf at line 36.
运行两条命令之后,使用docker ps查看
运行成功
如果执行的过程中有错误,
例如容器已经存在,要你先删除
可以删除容器
查看容器的命令
docker ps -a
然后删除容器
docker rm 6bec7c18e610
如果删除容器还不行,那就删除镜像
docker rmi XXXXX
接下来开始配置主从服务
主机配置
vi /home/mysql/master/cnf/my.cnf
###主从数据库配置核心部分
[mysqld]
# 设置同步的binary log二进制日志文件名前缀,默认为binlog;在MySQL 8.0中,无论是否指定--log bin选项,默认情况下都会启用二进制日志记录,并将log_bin系统变量设置为ON。
log-bin=mysql-bin
# 服务器唯一id,默认为1,值范围为1~2^32−1. ;主数据库和从数据库的server-id不能重复
server-id=3306
###可选配置
# 需要主从复制的数据库,如多个则重复配置
binlog-do-db=test
# 复制过滤:也就是指定哪个数据库不用同步(mysql库一般不同步),如多个则重复配置
binlog-ignore-db=mysql
# 为每个session分配的内存,在事务过程中用来存储二进制日志的缓存
binlog_cache_size=1M
# 主从复制的格式(mixed,statement,row,默认格式是statement。建议是设置为row,主从复制时数据更加能够统一)
binlog_format=row
# 配置二进制日志自动删除/过期时间,单位秒,默认值为2592000,即30天;8.0.3版本之前使用expire_logs_days,单位天数,默认值为0,表示不自动删除。
binlog_expire_logs_seconds=2592000
# 跳过主从复制中遇到的所有错误或指定类型的错误,避免slave端复制中断,默认OFF关闭,可选值有OFF、all、ddl_exist_errors以及错误码列表。8.0.26版本之前使用slave_skip_errors
# 如:1062错误是指一些主键重复,1032错误是因为主从数据库数据不一致
replica_skip_errors=1062
从机配置
vi /home/mysql/slave/cnf/my.cnf
###主从数据库配置核心部分
[mysqld]
# 设置同步的binary log二进制日志文件名前缀,默认是binlog
log-bin=mysql-bin
# 服务器唯一id,默认为1,值范围为1~2^32−1. ;主数据库和从数据库的server-id不能重复
server-id=3307
###可选配置
# 需要主从复制的数据库 ,如多个则重复配置
replicate-do-db=test
# 复制过滤:也就是指定哪个数据库不用同步(mysql库一般不同步) ,如多个则重复配置
binlog-ignore-db=mysql
# 为每个session分配的内存,在事务过程中用来存储二进制日志的缓存
binlog_cache_size=1M
# 主从复制的格式(mixed,statement,row,默认格式是statement。建议是设置为row,主从复制时数据更加能够统一)
binlog_format=row
# 配置二进制日志自动删除/过期时间,单位秒,默认值为2592000,即30天;8.0.3版本之前使用expire_logs_days,单位天数,默认值为0,表示不自动删除。
binlog_expire_logs_seconds=2592000
# 跳过主从复制中遇到的所有错误或指定类型的错误,避免slave端复制中断,默认OFF关闭,可选值有OFF、all、ddl_exist_errors以及错误码列表。8.0.26版本之前使用slave_skip_errors
# 如:1062错误是指一些主键重复,1032错误是因为主从数据库数据不一致
replica_skip_errors=1062
# relay_log配置中继日志,默认采用 主机名-relay-bin 的方式保存日志文件
relay_log=replicas-mysql-relay-bin
# log_replica_updates表示slave是否将复制事件写进自己的二进制日志,默认值ON开启;8.0.26版本之前使用log_slave_updates
log_replica_updates=ON
# 防止改变数据(只读操作,除了特殊的线程)
read_only=ON
创建同步账号
进入到主机mysql服务器,
docker ps
# 找到主机的id,然后执行
docker exec -it 9efe6af04b17 bash
#进入到主机的mysql服务器中
mysql -uroot -p
# 密码是123456
然后在mysql中创建一个同步的账号
CREATE USER 'myrep'@'%' IDENTIFIED BY '123456';
说明:
MySQL创建用户命令:CREATE USER 'username'@'host' IDENTIFIED BY 'password';
username:指定创建的用户名
host:指定用户登录的主机ip,% 表示任意主机都可远程登录,localhost 表示本地才能登录
password:指定该用户的登录密码
赋予权限
GRANT REPLICATION SLAVE ON *.* TO 'myrep'@'%';
FLUSH PRIVILEGES;
说明:
MySQL创建授权命令:GRANT REPLICATION SLAVE ON database.table TO 'username'@'host';
privilege :指定授权的权限,比如create、drop等权限,具体有哪些权限,可查看官网文档
database:指定哪些数据库生效,*表示全部数据库生效
table:指定所在数据库的哪些数据表生效,*表示所在数据库的全部数据表生效
username:指定被授予权限的用户名
host:指定用户登录的主机ip,%表示任意主机都可远程登录
FLUSH PRIVILEGES 刷新使权限生效.
接下来继续执行依据代码
SHOW MASTER STATUS;
查看并记下binary log二进制日志文件名 File 以及位置 Position的值,需要在从数据库用到:
我的数据库日志文件是mysql-bin.000001, position的位置是860
进入到从机服务器执行命令与主机连接.
先查看主机的ip地址192.168.2.133
如果要查看docker机器的ip地址可以用下面的命令,但是这里没有用,直接可以用宿主机的ip地址192.168.2.133
docker inspect -f '{{range .NetworkSettings.Networks}}{{.IPAddress}}{{end}}' mysql_master
CHANGE REPLICATION SOURCE TO SOURCE_HOST='192.168.2.133',SOURCE_PORT=3306,SOURCE_USER='myrep',SOURCE_PASSWORD='123456',SOURCE_LOG_FILE='mysql-bin.000001',SOURCE_LOG_POS=860;
说明:
MASTER_HOST/SOURCE_HOST:主数据库的主机ip,我的两台机器都在本机
MASTER_PORT/SOURCE_PORT:主数据库的端口,不设置则默认是3306
MASTER_USER/SOURCE_USER:主数据库被授予同步复制权限的用户名
MASTER_PASSWORD/SOURCE_PASSWORD:对应的用户密码
MASTER_LOG_FILE/SOURCE_LOG_FILE:在主数据库执行命令show master status 查询到的二进制日志文件名称
MASTER_LOG_POS/SOURCE_LOG_POS:在主数据库执行命令show master status 查询到的位置 Position的值
最后开启主从复制工作:
START REPLICA;
低于8.0.22版本的语法:START SLAVE;
查看运行的状态
SHOW REPLICA STATUS;
# 如果需要竖排显示
SHOW REPLICA STATUS \G;
如果低于8.0.22版本,一定要将REPLICA 改成SLAVE
假如显示Replica_IO_Running为YES 和 Replica_SQL_Running 为YES,则证明主从复制成功!
题外话
如果你想使用sqlyog连接数据库的话,会报错
2058(Plugin caching_sha2_password could not be loaded:)
意思是mysql8的密码方式有所改变,不允许通过其他软件访问,但是可以使用内部访问。
进入主机的mysql服务器:
使用123456登录
然后执行这句:
ALTER USER ‘root’@‘%’ IDENTIFIED WITH mysql_native_password BY ‘123456’;
FLUSH PRIVILEGES;
完结!至此搭建完成,数据库test同步成功。