MySQL数据同步方案
异步复制
MySQL原生的异步复制master不需要确认slave是否成功接收binlog并执行数据复制,当主库执行完客户端的提交请求后会立即返回客户端结果,这样能够保证master的性能不受影响。但是slave的数据同步就会存在一定的延迟,主备数据无法保证一致性,如果master发生宕机,slave切换为新的主库可能会丢失部分数据。
半同步复制
MySQL主库在执行完客户端的事务提交请求后不会立马返回结果,而是等待至少有一个slave成功接收binlog(不保证slave成功执行了这个binlog的事务)后才返回给客户端,半同步复制相对于异步复制降低了数据丢失的风险,但也增加了数据写入的迟延时间,降低了主库的吞吐量。
Group Replication
Mysql Group Replication 是5.7版本之后发布的新功能,实现真正意义上的MySQL集群。MySQL Group Replication有两种模式,单主模式single-primary mode和多主模式multi-primary mode,集群中的每一台服务器都可以提供服务并进行客户端数据的读写,但如果多台服务器同时操作同一条数据,Mysql Group Replication默认采用的是乐观锁机制,只会有一台服务器处理成功,其余服务器返回失败。
半同步复制配置
半同步复制配置前提:
1)关闭系统防火墙或者开放mysql端口
2)MySQL 5.5及以上版本
3)变量have_dynamic_loading为YES (查看命令:show variables like “have_dynamic_loading”;)
4) 主从复制已经存在 (即提前部署mysql主从复制环境,主从同步要配置基于整个数据库的,不要配置基于某个库的同步,即同步时不要过滤库)
配置数据库主从复制
关闭系统防火墙
# 查看防火墙状态
firewall-cmd --state
#关闭防火墙
systemctl stop firewalld.service
# 禁止开机自启动防火墙
systemctl disable firewalld.service
master数据库配置
-
安装mysql,版本需要5.7及以上,5.7版本对于半同步复制的效率有很大的提升;
MySQL安装教程参考文档:Centos7安装MySQL -
编辑mysql配置文件my.cnf,完整配置如下:
# For advice on how to change settings please see
# http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html
[mysqld]
#
# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
#
# Remove leading # to turn on a very important data integrity option: logging
# changes to the binary log between backups.
# log_bin
#
# Remove leading # to set options mainly useful for reporting servers.
# The server defaults are faster for transactions and fast SELECTs.
# Adjust sizes as needed, experiment to find the optimal values.
# join_buffer_size = 128M
# sort_buffer_size = 2M
# read_rnd_buffer_size = 2M
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
user=mysql
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION
#数据存放路径
datadir=/home/mysql/data
socket=/home/mysql/data/mysql.sock
# 安装文件目录
basedir=/usr/local/mysql
# 编码配置
character_set_server=utf8mb4
##################### MySQL半同步复制master服务器配置 begin #####################
# 数据同步时数据库唯一标识,server_id参数的值必须是数字,否则启动MySQL会报错
server_id=132
# 开启二进制日志
log-bin=mysql-bin