Day20

主从复制
学习内容
1. 备份的三种类型
1. 热备份
2. 逻辑备份
3. 物理备份
2. 情景
⼊职企业，发现企业架构为⼀主多从，但是两台从服务器和主库不同
步，但是每天会全库北⽅主服务器上的数据到从服务器，由于数据量
不是很⼤，所以没有⼈处理主从不同步的问题。
2. 技术
1. 熟悉mysql数据库常⻅主从架构
2. 理解mysql主从架构实现原理
3. 掌握mysql主从架构的搭建
3. 业务场景1. 企业对数据安全性越来越重视，由于常规备份不能实时记录
数据库的所有状态，为了能够保障数据库实时备份冗余，希
望将现有的单机数据库变成双机热备
4. ⽬标
1. 了解什么mysql的replication
2. 理解mysql的replication的架构原理
3. 掌握mysql基本复制架构 m-s
4. 了解和掌握基于GTID复制特点以及搭建
5.
集群概述
1. 集群主要类型
1. ⾼可⽤集群 High Avaible Cluster HA cluster
2. ⾼可⽤集群是指通过特殊软件，把独⽴的服务器连接起来，
组成⼀个能够提供故障切换（Fail Over）功能的集群
2. ⾼可⽤标准可⽤性级别指标
年宕机时间
描述
叫法
99%
3.65天
基本可⽤系统
2个9
99.9%
8.76⼩时
可⽤系统
3个9
99.99%
52.6分钟
⾼可⽤系统
4个9
99.999%
5.3分钟
抗故障系统
5个9
99.9999%
32秒
容错系统
6个9
3. 常⽤的集群架构
1. mysql replication
2. mysql cluster
3. mysql group replication MGR
4. Maradb Galera CLuster
5. MHA|keepalived|HeatBeat|Lvs，Haproxy等技术构建⾼可⽤
集群
4.
复制原理
1. replication,可以实现将数据从⼀台数据库服务器（mster）复制
到多台数据库服务器slave
2. 默认情况下，replication属于异步复制，所以⽆需⻓连接3. ⼯作原理
1. master 主服务器
2. slave 从服务器
3. 描述
1. slave端的io线程发送请求给master端的binlog dump线
程
2. master端的binlog dump线程获取⼆进制⽇志信息（⽂
件名和位置信息）发送给slave端的io线程
3. slave端的io线程获取到内容，依次写到slave端relay log
（中继⽇志）并把master端的binlog⽂件名和位置记录
到master。info⾥头，
4. slave端的sql线程检测到relaylog中的内容更新，就会解
析relaylog中的更新内容，并执⾏这些操作，从⽽达到和
master端数据⼀致
4.
复制架构体系复制架构体系
1. 双机热备 主从复制
1. 默认情况下 master接收读写，从服务器只接受读
2. 级联复制
1. 可以分担读的压⼒
2. 中间服务器出现故障，就瘫痪了3. 并联复制 ⼀主多从
1. 解决单点故障
2. 承担更多的读的压⼒
3. 从服务器都从主服务器读取数据，master服务器压⼒⼤
4. 双主复制
1. 看起来可以同时接收读写，实际运作中只有⼀台服务器在⼯
作，另外⼀台只接受读
5. 1.
安装前的环境准备安装前的环境准备
1. 普通的ab复制，最基本的架构 M-S
2. 两者数据库的的版本必须⼀致
编
号
主机名称
主机ip地
址
⻆⾊信
息
1
master.mysql.yuanyu.zhangmin 80
主服务
器
2
slave.mysql.yuanyu.zhangmin
90
从服务
器
3. 环境的规划
4.前期准备，克隆机器，设置ip，修改主机名称，关闭
NEtworkManager，防⽕墙 selinux，配置yum源，配置时间同步 时间同步是⾮常重要的设置
主从复制核⼼思路
1. 思路
1. slave和master必须安装相同的msyql版本
# master服务器中添加
sed -i '$a192.168.137.80
master.msyql.yuanyu.zhangmin' /etc/hosts
# slave服务器中添加
sed -i '$a192.168.137.90
slave.msyql.yuanyu.zhangmin' /etc/hosts
ntpdate cn.ntp.org.cn2. master开启⼆进制⽇志，slave必须开始relay⽇志
3. mster端和slava端的server-id不能⼀致
4. se
1. master必须创建⼀个复制⽤户
2. 保持master和slave端初始数据⼀致
3. slave端配置主从复制
2. 思路
1. 思路
主从复制之master配置
1.编写mysql安装脚本
##
1. 上传mysql安装包到mstaer和slave
2. 编写脚本
#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnfecho remo my.cnf yes
tar -xf mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xz
echo tar zx yes
cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64
/usr/local/mysql
echo copy file to /usr/local/mysql yes
mkdir /usr/local/mysql/mysql-files
echo mysql-files yes
grep mysql /etc/passwd
useradd -r -s /sbin/nologin mysql
chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files
/usr/local/mysql/bin/mysqld --initialize --
user=mysql --basedir=/usr/local/mysql/
/usr/local/mysql/bin/mysql_ssl_rsa_setup --
datadir=/usr/local/mysql/datacp /usr/local/mysql/support-files/mysql.server
/etc/init.d/mysql8
sed -i '$aexport
PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile
3. 编写配置⽂件
vim /usr/local/mysql/my.cnf
[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3306
log-error=/usr/local/mysql/data/db01-
master.err
log-bin=/usr/local/mysql/data/binlog
server-id=10
character_set_server=utf8mb4
4. 重启服务[root@mysql001 ~]# service mysql8
restart
Shutting down MySQL.. SUCCESS!
Starting MySQL.Logging to
'/usr/local/mysql/data/db01-master.err'.
.. SUCCESS!
5. 设置开机启动
[root@mysql001 ~]# chkconfig --add
mysql8
[root@mysql001 ~]# chkconfig mysql8 on
[root@mysql001 ~]# chkconfig
注：该输出结果只显示 SysV 服务，并不包含
原⽣ systemd 服务。SysV 配置数据
可能被原⽣ systemd 配置覆盖。
要列出 systemd 服务，请执⾏
'systemctl list-unit-files'。
查看在具体 target 启⽤的服务请执⾏
'systemctl list-dependencies
[target]'。
mysql8 0:关 1:关 2:开 3:开 4:开
5:开 6:关主从复制之slave从服务器软件的安装
1. 不需要初始化
2. 查看⽂件
3. 脚本
netconsole 0:关 1:关 2:关 3:关 4:关
5:关 6:关
network 0:关 1:关 2:开 3:开 4:开
5:开 6:关
相对于主服务器的安装与配置，从服务器不需要初始化，他的数
据都来⾃于主服务器，其他都⼀样
[root@slave ~]# ls
anaconda-ks.cfg mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xz
initserver.sh mysql.sh
vim mysql.sh
#!/bin/bashyum list installed |grep libaio
if [ $? ne 0 ]; then
yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf
echo remo my.cnf yes
tar -xf mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xz
cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64
/usr/local/mysql
echo copy file to /usr/local/mysql yes
mkdir /usr/local/mysql/mysql-files
echo mysql-files yes
mkdir /usr/local/mysql/mysql-files
echo mysql-files yes
grep mysql /etc/passwd
echo remo my.cnf yes
tar -xf mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xzcp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64
/usr/local/mysql
echo copy file to /usr/local/mysql yes
mkdir /usr/local/mysql/mysql-files
echo mysql-files yes
grep mysql /etc/passwd
useradd -r -s /sbin/nologin mysql
chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files
#/usr/local/mysql/bin/mysqld --initialize --
user=mysql --basedir=/usr/local/mysql/
cp /usr/local/mysql/support-files/mysql.server
/etc/init.d/mysql8
sed -i '$aexport
PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile
4. 配置⽂件主从复制之数据同步
1. master服务器同步到slave服务器
1. 停⽤master服务器msyql服务
[root@slave ~]# ls /usr/local/mysql/
bin include LICENSE my.cnf README
support-files
docs lib man mysql-files share
vim
[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3310
log-error=/usr/local/mysql/data/db01-slave.err
relay-log=/usr/local/mysql/data/relaylog
server-id=11
character_set_server=utf8mb4
service mysql8 stop2. master删除/usr/local/mysql/data/auto.cnf 每安装⼀个
mysql软件，data数据⽬录都会产⽣⼀个auto.cnf⽂件，⾥⾯
是⼀个唯⼀性编号，相当于每个⼈的身份证编号
[root@mysql001 ~]# ls
/usr/local/mysql/data/auto.cnf
/usr/local/mysql/data/auto.cnf
[root@mysql001 ~]# cat
/usr/local/mysql/data/auto.cnf
[auto]
server-uuid=f6421989-5330-11ef-974f-
000c29ce78bb
[root@mysql001 ~]# rm -rf
/usr/local/mysql/data/auto.cnf
3. master和slave都安装rsync
yum -y install rsync
4. 同步master中的data到slave对应位置
rsync -av /usr/local/mysql/data
root@10.1.1.110:/usr/local/mysql/
5. 启动主服务器和从服务器[root@mysql001 ~]# service mysql8 start
Starting MySQL.. SUCCESS!
[root@slave ~]# service mysql8 start
Starting MySQL.Logging to
'/usr/local/mysql/data/db01-slave.err'.
. SUCCESS!
6. 登录从服务器
[root@mysql001 ~]#
/usr/local/mysql/bin/mysql -P3310 -
pZhang_Min_666
mysql: [Warning] Using a password on the
command line interface can be insecure.
Welcome to the MySQL monitor. Commands end
with ; or \g.
Your MySQL connection id is 8
Server version: 8.0.33 MySQL Community
Server - GPL
Copyright (c) 2000, 2023, Oracle and/or its
affiliates.⽆法启动的⼏种情况
1. /etc/init.d/mysql8不存在，可能没有复制
2. mysql没有安装在/usr/local/mysql
3. my.cnf导致⽆法启动，格式
1. 安装路径
2. 数据⽬录
3. 套接字
4. 错误⽇志到底放在data⾥头
5. mysql账户⽆法写⼊/usr/local/mysql/
6. 将错误⽇志放在data就没有权限⽂件
7. 直接修改/usr/local/mysql的权限
Oracle is a registered trademark of Oracle
Corporation and/or its
affiliates. Other names may be trademarks of
their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to
clear the current input statement.主从复制的实现
1. master创建授权账号
2. 在master中锁表，然后查看⼆进制⽂件和位置
mysql> create user 'slave'@'10.1.1.%'
identified by 'slave_123';
Query OK, 0 rows affected (0.02 sec)
mysql> grant replication slave on *.* to
'slave'@'10.1.1.%';
Query OK, 0 rows affected (0.01 sec)
mysql> flush privileges;mysql> flush tables with read lock;
mysql> show master status;
+---------------+----------+--------------+----
--------------+-------------------+
| File | Position | Binlog_Do_DB |
Binlog_Ignore_DB | Executed_Gtid_Set |
+---------------+----------+--------------+----
--------------+-------------------+
| binlog.000003 | 707 | |
| |
+---------------+----------+--------------+----
--------------+-------------------+
1 row in set (0.00 sec)
3. 在从服务器中，使⽤change master to 指定主服务器，并实现数
据同步
[root@slave ~]# /usr/local/mysql/bin/mysql -
P3310 -pZhang_Min_666
mysql: [Warning] Using a password on the
command line interface can be insecure.
Welcome to the MySQL monitor. Commands end
with ; or \g.
Your MySQL connection id is 8
Server version: 8.0.33 MySQL Community Server -
GPLCopyright (c) 2000, 2023, Oracle and/or its
affiliates.
Oracle is a registered trademark of Oracle
Corporation and/or its
affiliates. Other names may be trademarks of
their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to
clear the current input statement.
mysql> change master to
-> master_host='10.1.1.100',
-> master_user='slave',
-> master_password='slave_123',
-> master_port=3306,
-> master_log_file='binlog.000003',
-> master_log_pos=707;
Query OK, 0 rows affected, 9 warnings (0.01
sec)change master to master_host='10.1.1.100',
master_user='slave',
master_password='slave_123', master_port=3306,
master_log_file='binlog.000004',
master_log_pos=1092;
4. 启动slave数据同步，查看状态
mysql> start slave；
mysql> show slave status\G
5. 常⻅⽂件1. change-master-to写错
6. 解锁⽂件
8.0需要ssl⾮对称加密
1. 获得远程master主机的公钥
2. 登录slave服务器本地的数据库
stop slave
reset slave
change master to ...
mysql> unlock tables;
Query OK, 0 rows affected (0.00 sec)
mysql -uzhangmin -pabc_123 -h 192.168.71.166 -
P3306 --get-server-public-key
quit
mysql -pZhang_Min_666 -P33103. 停⽤slave服务，重新设置slave服务
mysql> stop slave;
mysql> reset slave;
mysql> change master to
master_host='192.168.71.166',
master_user='zhangmin',
master_password='abc_123', master_port=3306,
master_log_file='binlog.000006',master_log_pos=
866;
4. 启动slave服务
mysql> start slave
mysql> show slave status\G
slave服务器不⼩⼼写⼊数据的解决⽅案slave服务器不⼩⼼写⼊数据的解决⽅案
基于gtids的主从复制搭建