Sharding-JDBC一：MySQL主从复制搭建

MySQL主从同步原理

基本原理：
slave会从master读取binlog来进行数据同步

具体步骤：

• step1：master将数据改变记录到二进制日志（binary log）中。
• step2： 当slave上执行 start slave 命令之后，slave会创建一个 IO 线程用来连接master，请求master中的binlog。
• step3：当slave连接master时，master会创建一个 log dump 线程，用于发送 binlog 的内容。在读取 binlog 的内容的操作中，会对主节点上的 binlog 加锁，当读取完成并发送给从服务器后解锁。
• step4：IO 线程接收主节点 binlog dump 进程发来的更新之后，保存到 中继日志（relay log） 中。
• step5：slave的SQL线程`，读取relay log日志，并解析成具体操作，从而实现主从操作一致，最终数据一致。

一主多从配置

服务器规划：使用docker方式创建，主从服务器IP一致，端口号不一致

• 主服务器：容器名lx-mysql-master，端口3506
• 从服务器：容器名lx-mysql-slave1，端口3507
• 从服务器：容器名lx-mysql-slave2，端口3508
  注意 如果此时防火墙是开启的，则先关闭防火墙，并重启docker，否则后续安装的MySQL无法启动

安装docker连接

#关闭docker
systemctl stop docker
#关闭防火墙
systemctl stop firewalld
#启动docker
systemctl start docker

准备主服务器

创建文件夹

mkdir -p /lx/mysql/master/data
mkdir -p /lx/mysql/master/conf
mkdir -p /lx/mysql/slave1/conf
mkdir -p /lx/mysql/slave2/conf
mkdir -p /lx/mysql/slave1/data
mkdir -p /lx/mysql/slave2/data

创建docker-compose-mysql.yml文件

version: '3'
services:
  lx-mysql-master:
    image: mysql:8.0.29
    restart: always
    environment:
      MYSQL_ROOT_PASSWORD: 123456
      MYSQL_PASSWORD: 123456
    ports:
      - 3506:3306
    volumes:
      - "/lx/mysql/master/conf:/etc/mysql/conf.d"
      - "/lx/mysql/master/data:/var/lib/mysql"
    container_name: "lx-mysql-master"
    
  lx-mysql-slave1:
    image: mysql:8.0.29
    environment:
      MYSQL_ROOT_PASSWORD: 123456
      MYSQL_PASSWORD: 123456
    ports:
      - 3507:3306
    volumes:
      - "/lx/mysql/slave1/conf:/etc/mysql/conf.d"
      - "/lx/mysql/slave1/data:/var/lib/mysql"
    container_name: "lx-mysql-slave1"
    
  lx-mysql-slave2:
    image: mysql:8.0.29
    environment:
      MYSQL_ROOT_PASSWORD: 123456
      MYSQL_PASSWORD: 123456
    ports:
      - 3508:3306
    volumes:
      - "/lx/mysql/slave2/conf:/etc/mysql/conf.d"
      - "/lx/mysql/slave2/data:/var/lib/mysql"
    container_name: "lx-mysql-slave2"

step2：创建MySQL主服务器配置文件：
默认情况下MySQL的binlog日志是自动开启的，可以通过如下配置定义一些可选配置

vim /lx/mysql/master/conf/my.cnf

配置如下内容

[mysqld]
# 服务器唯一id，默认值1
server-id=1
# 设置日志格式，默认值ROW
binlog_format=STATEMENT
# 二进制日志名，默认binlog
# log-bin=binlog
# 设置需要复制的数据库，默认复制全部数据库
#binlog-do-db=mytestdb
# 设置不需要复制的数据库
#binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema

使用docker-compose启动主机

docker-compose -f docker-compose-mysql.yml up -d lx-mysql-master

binlog格式说明：

• binlog_format=STATEMENT：日志记录的是主机数据库的写指令，性能高，但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。
• binlog_format=ROW（默认）：日志记录的是主机数据库的写后的数据，批量操作时性能较差，解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题。
• binlog_format=MIXED：是以上两种level的混合使用，有函数用ROW，没函数用STATEMENT，但是无法识别系统变量

binlog-ignore-db和binlog-do-db的优先级问题：

step3：使用命令行登录MySQL主服务器：

#进入容器：env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it lx-mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4：主机中创建slave用户：用于从机向主机拉取日志的账号

-- 创建slave用户
CREATE USER 'lx_slave'@'%';
-- 设置密码
ALTER USER 'lx_slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'lx_slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;

step5：主机中查询master状态：
执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化

SHOW MASTER STATUS;

记下File和Position的值。执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化。

准备从服务器

可以配置多台从机slave1、slave2…，这里以配置slave1为例

step1：创建MySQL从服务器配置文件：
配置如下内容：

[mysqld]
# 服务器唯一id，每台服务器的id必须不同，如果配置其他从机，注意修改id
server-id=2
# 中继日志名，默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

vim /lx/mysql/slave1/conf/my.cnf

step2：在docker中创建并启动MySQL从服务器：端口3507

 docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave1

**step3：使用命令行登录MySQL从服务器：

#进入容器：
docker exec -it lx-mysql-slave1 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4：在从机上配置主从关系：
在从机上执行以下SQL操作

CHANGE MASTER TO MASTER_HOST='192.168.254.128', 
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551; 

启动主从同步

启动从机的复制功能，执行SQL：

START SLAVE;
-- 查看状态（不需要分号）
SHOW SLAVE STATUS\G

**两个关键进程：**下面两个参数都是Yes，则说明主从配置成功！

搭建3508 步骤和3507一样

step1：创建MySQL从服务器配置文件：

vim /lx/mysql/slave2/conf/my.cnf

内容如下

[mysqld]
# 服务器唯一id，每台服务器的id必须不同，如果配置其他从机，注意修改id
server-id=3
# 中继日志名，默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

step2：在docker中创建并启动MySQL从服务器：端口3508

docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave2

step3：使用命令行登录MySQL从服务器：

#进入容器：
docker exec -it lx-mysql-slave2 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4：在从机上配置主从关系：

CHANGE MASTER TO MASTER_HOST='192.168.254.128', 
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551;

启动主从同步

启动从机的复制功能，执行SQL：

START SLAVE;
 

-- 查看状态（不需要分号）
SHOW SLAVE STATUS\G

下面两个参数都是Yes，则说明主从配置成功！

实现主从同步

在主机中执行以下SQL，在从机3506中查看数据库、表和数据是否已经被同步

CREATE DATABASE db_user;
USE db_user;
CREATE TABLE t_user (
 id BIGINT AUTO_INCREMENT,
 uname VARCHAR(30),
 PRIMARY KEY (id)
);
INSERT INTO t_user(uname) VALUES('zhang3');
INSERT INTO t_user(uname) VALUES(@@hostname);

停止和重置

需要的时候，可以使用如下SQL语句

-- 在从机上执行。功能说明：停止I/O 线程和SQL线程的操作。
stop slave; 

-- 在从机上执行。功能说明：用于删除SLAVE数据库的relaylog日志文件，并重新启用新的relaylog文件。
reset slave;

-- 在主机上执行。功能说明：删除所有的binglog日志文件，并将日志索引文件清空，重新开始所有新的日志文件。
-- 用于第一次进行搭建主从库时，进行主库binlog初始化工作；
reset master;

常见问题

启动主从同步后，常见错误是Slave_IO_Running： No 或者 Connecting 的情况，此时查看下方的 Last_IO_ERROR错误日志，根据日志中显示的错误信息在网上搜索解决方案即可
可关注公众号 佳哇程序员
或直接扫码关注