基于gtids的主从复制搭建

学习内容

1. 备份的三种类型

1. 热备份

2. 逻辑备份

3. 物理备份

2. 情景

⼊职企业，发现企业架构为⼀主多从，但是两台从服务器和主库不同 步，但是每天会全库北⽅主服务器上的数据到从服务器，由于数据量 不是很⼤，所以没有⼈处理主从不同步的问题。

2. 技术

1. 熟悉mysql数据库常⻅主从架构

2. 理解mysql主从架构实现原理

3. 掌握mysql主从架构的搭建

3. 业务场景

1. 企业对数据安全性越来越重视，由于常规备份不能实时记录 数据库的所有状态，为了能够保障数据库实时备份冗余，希 望将现有的单机数据库变成双机热备 4. ⽬标 1. 了解什么mysql的replication

2. 理解mysql的replication的架构原理 3. 掌握mysql基本复制架构 m-s 4. 了解和掌握基于GTID复制特点以及搭建

5.   集群概述

1. 集群主要类型 1. ⾼可⽤集群 High Avaible Cluster HA cluster

2. ⾼可⽤集群是指通过特殊软件，把独⽴的服务器连接起来， 组成⼀个能够提供故障切换（Fail Over）功能的集群

2. ⾼可⽤标准

可⽤性级别指标 年宕机时间 描述 叫法 99% 3.65天 基本可⽤系统 2个9 99.9% 8.76⼩时 可⽤系统 3个9 99.99% 52.6分钟 ⾼可⽤系统 4个9 99.999% 5.3分钟 抗故障系统 5个9 99.9999% 32秒 容错系统 6个9

复制原理

1. replication,可以实现将数据从⼀台数据库服务器（mster）复制 到多台数据库服务器slave

2. 默认情况下，replication属于异步复制，所以⽆需⻓连接

3. ⼯作原理

1. master 主服务器

2. slave 从服务器

1. slave端的io线程发送请求给master端的binlog dump线 程、

2. master端的binlog dump线程获取⼆进制⽇志信息（⽂ 件名和位置信息）发送给slave端的io线程 3. slave端的io线程获取到内容，依次写到slave端relay log （中继⽇志）并把master端的binlog⽂件名和位置记录 到master。info⾥头，

4. slave端的sql线程检测到relaylog中的内容更新，就会解 析relaylog中的更新内容，并执⾏这些操作，从⽽达到和 master端数据⼀致

复制架构体系

1. 双机热备 主从复制

2. 级联复制

1. 可以分担读的压⼒

2. 中间服务器出现故障，就瘫痪了

3. 并联复制 ⼀主多从

1. 解决单点故障

2. 承担更多的读的压⼒

3. 从服务器都从主服务器读取数据，master服务器压⼒⼤

4. 双主复制

安装前的环境准备

1. 普通的ab复制，最基本的架构 M-S

2. 两者数据库的的版本必须⼀致

4.前期准备，克隆机器，设置ip，修改主机名称，关闭 NEtworkManager，防⽕墙 selinux，配置yum源，配置时间同步

# master服务器中添加

sed -i '$a192.168.137.80

master.msyql.yuanyu.zhangmin' /etc/hosts

# slave服务器中添加

sed -i '$a192.168.137.90

slave.msyql.yuanyu.zhangmin' /etc/hosts

时间同步是⾮常重要的设置

主从复制核⼼思路

1. 思路

1. slave和master必须安装相同的msyql版本

# master服务器中添加

sed -i '$a192.168.137.80

master.msyql.yuanyu.zhangmin' /etc/hosts

# slave服务器中添加

sed -i '$a192.168.137.90

slave.msyql.yuanyu.zhangmin' /etc/hosts

ntpdate cn.ntp.org.cn

1. slave和master必须安装相同的msyql版本

# master服务器中添加

sed -i '$a192.168.137.80

master.msyql.yuanyu.zhangmin' /etc/hosts

# slave服务器中添加

sed -i '$a192.168.137.90

slave.msyql.yuanyu.zhangmin' /etc/hosts

ntpdate cn.ntp.org.cn2. master开启⼆进制⽇志，slave必须开始relay⽇志

3. mster端和slava端的server-id不能⼀致

4. se

1. master必须创建⼀个复制⽤户

2. 保持master和slave端初始数据⼀致

3. slave端配置主从复制

2. 思路

1. 思路

主从复制之master配置

1.编写mysql安装脚本

##

1. 上传mysql安装包到mstaer和slave

2. 编写脚本

#!/bin/bash

yum list installed |grep libaio

if [ $? ne 0 ]; then

 yum -y install libaio

fi

echo libaio yes

rm -rf /etc/my.cnfecho remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-

x86_64.tar.xz

echo tar zx yes

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64

/usr/local/mysql

echo copy file to /usr/local/mysql   yes

mkdir /usr/local/mysql/mysql-files

echo mysql-files yes

grep mysql /etc/passwd

 useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files

chmod 750 /usr/local/mysql/mysql-files

/usr/local/mysql/bin/mysqld --initialize --

user=mysql --basedir=/usr/local/mysql/

/usr/local/mysql/bin/mysql_ssl_rsa_setup --

datadir=/usr/local/mysql/data3. 编写配置⽂件

4. 重启服务

cp /usr/local/mysql/support-files/mysql.server

/etc/init.d/mysql8

sed -i '$aexport

PATH=/usr/local/mysql/bin:$PATH' /etc/profile

source /etc/profile

vim /usr/local/mysql/my.cnf

[mysqld]

basedir=/usr/local/mysql

datadir=/usr/local/mysql/data

socket=/tmp/mysql.sock

port=3306

log-error=/usr/local/mysql/data/db01-

master.err

log-bin=/usr/local/mysql/data/binlog

server-id=10

character_set_server=utf8mb4 

5. 设置开机启动

[root@mysql001 ~]# service mysql8

restart

Shutting down MySQL.. SUCCESS!

Starting MySQL.Logging to

'/usr/local/mysql/data/db01-master.err'.

.. SUCCESS!

[root@mysql001 ~]# chkconfig --add

mysql8

[root@mysql001 ~]# chkconfig mysql8 on

[root@mysql001 ~]# chkconfig

注：该输出结果只显示 SysV 服务，并不包含

原⽣ systemd 服务。SysV 配置数据

可能被原⽣ systemd 配置覆盖。

     要列出 systemd 服务，请执⾏

'systemctl list-unit-files'。

     查看在具体 target 启⽤的服务请执⾏

     'systemctl list-dependencies

[target]'。

mysql8         0:关 1:关 2:开 3:开 4:开

5:开 6:关 

主从复制之slave从服务器软件的安装

1. 不需要初始化

2. 查看⽂件

3. 脚本

netconsole     0:关 1:关 2:关 3:关 4:关

5:关 6:关

network       0:关 1:关 2:开 3:开 4:开

5:开 6:关

相对于主服务器的安装与配置，从服务器不需要初始化，他的数

据都来⾃于主服务器，其他都⼀样

[root@slave ~]# ls

anaconda-ks.cfg mysql-8.0.33-linux-glibc2.12-

x86_64.tar.xz

initserver.sh   mysql.sh

vim mysql.sh

#!/bin/bashyum list installed |grep libaio

if [ $? ne 0 ]; then

       yum -y install libaio

fi

echo libaio yes

rm -rf /etc/my.cnf

echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-

x86_64.tar.xz

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64

/usr/local/mysql

echo copy file to /usr/local/mysql   yes

mkdir /usr/local/mysql/mysql-files

echo mysql-files yes

mkdir /usr/local/mysql/mysql-files

echo mysql-files yes

grep mysql /etc/passwd

echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-

x86_64.tar.xz4. 配置⽂件

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64

/usr/local/mysql

echo copy file to /usr/local/mysql   yes

mkdir /usr/local/mysql/mysql-files

echo mysql-files yes

grep mysql /etc/passwd

       useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files

chmod 750 /usr/local/mysql/mysql-files

#/usr/local/mysql/bin/mysqld --initialize --

user=mysql --basedir=/usr/local/mysql/

cp /usr/local/mysql/support-files/mysql.server

/etc/init.d/mysql8

sed -i '$aexport

PATH=/usr/local/mysql/bin:$PATH' /etc/profile

source /etc/profile 

主从复制之数据同步

1. master服务器同步到slave服务器

1. 停⽤master服务器msyql服务

[root@slave ~]# ls /usr/local/mysql/

bin   include LICENSE my.cnf       README

support-files

docs lib     man     mysql-files share

vim

[mysqld]

basedir=/usr/local/mysql

datadir=/usr/local/mysql/data

socket=/tmp/mysql.sock

port=3310

log-error=/usr/local/mysql/data/db01-slave.err

relay-log=/usr/local/mysql/data/relaylog

server-id=11

character_set_server=utf8mb4

service mysql8 stop2. master删除/usr/local/mysql/data/auto.cnf 每安装⼀个

mysql软件，data数据⽬录都会产⽣⼀个auto.cnf⽂件，⾥⾯

是⼀个唯⼀性编号，相当于每个⼈的身份证编号

3. master和slave都安装rsync

4. 同步master中的data到slave对应位置

5. 启动主服务器和从服务器

[root@mysql001 ~]# ls

/usr/local/mysql/data/auto.cnf

/usr/local/mysql/data/auto.cnf

[root@mysql001 ~]# cat

/usr/local/mysql/data/auto.cnf

[auto]

server-uuid=f6421989-5330-11ef-974f000c29ce78bb

[root@mysql001

~]# rm -rf

/usr/local/mysql/data/auto.cnf

yum -y install rsync

rsync -av /usr/local/mysql/data

root@10.1.1.110:/usr/local/mysql/6. 登录从服务器

[root@mysql001 ~]# service mysql8 start

Starting MySQL.. SUCCESS!

[root@slave ~]# service mysql8 start

Starting MySQL.Logging to

'/usr/local/mysql/data/db01-slave.err'.

. SUCCESS!

[root@mysql001 ~]#

/usr/local/mysql/bin/mysql -P3310 -

pZhang_Min_666

mysql: [Warning] Using a password on the

command line interface can be insecure.

Welcome to the MySQL monitor. Commands end

with ; or \g.

Your MySQL connection id is 8

Server version: 8.0.33 MySQL Community

Server - GPL

Copyright (c) 2000, 2023, Oracle and/or its

affiliates. 

⽆法启动的⼏种情况

1. /etc/init.d/mysql8不存在，可能没有复制

2. mysql没有安装在/usr/local/mysql

3. my.cnf导致⽆法启动，格式

1. 安装路径

2. 数据⽬录

3. 套接字

4. 错误⽇志到底放在data⾥头

5. mysql账户⽆法写⼊/usr/local/mysql/

6. 将错误⽇志放在data就没有权限⽂件

7. 直接修改/usr/local/mysql的权限

Oracle is a registered trademark of Oracle

Corporation and/or its

affiliates. Other names may be trademarks of

their respective

owners.

Type 'help;' or '\h' for help. Type '\c' to

clear the current input statement.主从复制的实现

1. master创建授权账号

2. 在master中锁表，然后查看⼆进制⽂件和位置

mysql> create user 'slave'@'10.1.1.%'

identified by 'slave_123';

Query OK, 0 rows affected (0.02 sec)

mysql> grant replication slave on *.* to

'slave'@'10.1.1.%';

Query OK, 0 rows affected (0.01 sec)

mysql> flush privileges;3. 在从服务器中，使⽤change master to 指定主服务器，并实现数

据同步

mysql> flush tables with read lock;

mysql> show master status;

+---------------+----------+--------------+----

--------------+-------------------+

| File          | Position | Binlog_Do_DB |

Binlog_Ignore_DB | Executed_Gtid_Set |

+---------------+----------+--------------+----

--------------+-------------------+

| binlog.000003 |      707 |              |    

             |                   |

+---------------+----------+--------------+----

--------------+-------------------+

1 row in set (0.00 sec)

[root@slave ~]# /usr/local/mysql/bin/mysql -

P3310 -pZhang_Min_666

mysql: [Warning] Using a password on the

command line interface can be insecure.

Welcome to the MySQL monitor. Commands end

with ; or \g.

Your MySQL connection id is 8

Server version: 8.0.33 MySQL Community Server -

GPLCopyright (c) 2000, 2023, Oracle and/or its

affiliates.

Oracle is a registered trademark of Oracle

Corporation and/or its

affiliates. Other names may be trademarks of

their respective

owners.

Type 'help;' or '\h' for help. Type '\c' to

clear the current input statement.

mysql> change master to

    -> master_host='10.1.1.100'

,

    -> master_user='slave'

,

    -> master_password='slave_123'

,

    -> master_port=3306,

    -> master_log_file='binlog.000003'

,

    -> master_log_pos=707;

Query OK, 0 rows affected, 9 warnings (0.01

sec)4. 启动slave数据同步，查看状态

5. 常⻅⽂件

change master to master_host='10.1.1.100',

master_user='slave',

master_password='slave_123', master_port=3306,

master_log_file='binlog.000004',

master_log_pos=1092;

mysql> start slave；

mysql> show slave status\G1. change-master-to写错

6. 解锁⽂件

8.0需要ssl⾮对称加密

1. 获得远程master主机的公钥

2. 登录slave服务器本地的数据库

stop slave

reset slave

change master to ...

mysql> unlock tables;

Query OK, 0 rows affected (0.00 sec)

mysql -uzhangmin -pabc_123 -h 192.168.71.166 -

P3306 --get-server-public-key

quit

mysql -pZhang_Min_666 -P33103. 停⽤slave服务，重新设置slave服务

4. 启动slave服务

slave服务器不⼩⼼写⼊数据的解决⽅案

mysql> stop slave;

mysql> reset slave;

mysql> change master to

master_host='192.168.71.166',

master_user='zhangmin',

master_password='abc_123', master_port=3306,

master_log_file='binlog.000006',master_log_pos=

866;

mysql> start slave

mysql> show slave status\Gslave服务器不⼩⼼写⼊数据的解决⽅案

基于gtids的主从复制搭建