云计算实训22——Mysql主从复制

是小赵鸭.

已于 2024-08-12 19:43:26 修改

阅读量1.3k

点赞数 42

文章标签： mysql 数据库 linux 云计算深度学习学习方法

于 2024-08-06 19:57:43 首次发布

本文链接：https://blog.csdn.net/m0_73907608/article/details/140964447

版权

（一）集群概述

1. 集群主要类型

（1）⾼可⽤集群 High Avaible Cluster HA cluster

（2）⾼可⽤集群是指通过特殊软件，把独⽴的服务器连接起来，组成⼀个能够提供故障切换（Fail Over）功能的集群

2. ⾼可⽤标准

3. 常⽤的集群架构

（1） mysql replication

（2）mysql cluster

（3）mysql group replication MGR

（4）Maradb Galera CLuster

（5）MHA|keepalived|HeatBeat|Lvs，Haproxy等技术构建⾼可⽤集群

4. 复制原理
（1）replication,可以实现将数据从⼀台数据库服务器（mster）复制到多台数据库服务器slave

（2）默认情况下，replication属于异步复制，所以⽆需⻓连接

（3）⼯作原理

1. master 主服务器

2. slave 从服务器

3. 描述

（1）slave端的io线程发送请求给master端的binlog dump线程

（2）master端的binlog dump线程获取⼆进制⽇志信息（⽂件名和位置信息）发送给slave端的io线程

（3）slave端的io线程获取到内容，依次写到slave端relay log （中继⽇志）并把master端的binlog⽂件名和位置记录到master。info⾥头

（4）slave端的sql线程检测到relaylog中的内容更新，就会解析relaylog中的更新内容，并执⾏这些操作，从⽽达到和 master端数据⼀致

4. 复制架构体系复制架构体系

（1）双机热备主从复制

默认情况下 master接收读写，从服务器只接受读

（2）级联复制

1. 可以分担读的压⼒ 2. 中间服务器出现故障，就瘫痪了

（3）并联复制⼀主多从

1. 解决单点故障 2. 承担更多的读的压⼒ 3. 从服务器都从主服务器读取数据，master服务器压⼒⼤

（4）双主复制

5. 安装前的环境准备安装前的环境准备

1. 普通的ab复制，最基本的架构 M-S

2. 两者数据库的的版本必须⼀致

3. 环境的规划

4.前期准备，克隆机器，设置ip，修改主机名称，关闭 NEtworkManager，防⽕墙 selinux，配置yum源，配置时间同步

时间同步是⾮常重要的设置

ntpdate cn.ntp.org.cn

主从复制核⼼思路

1. 思路

1. slave和master必须安装相同的msyql版本

2. master开启⼆进制⽇志，slave必须开始relay⽇志

3. mster端和slava端的server-id不能⼀致

4.（1）master必须创建⼀个复制⽤户

（2）保持master和slave端初始数据⼀致

（3）slave端配置主从复制

（二）主从复制之master配置

1.编写mysql安装脚本

上传mysql安装包到mstaer和slave

2.然后编写脚本

#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf
echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-x86_64.tar.xz
echo tar zx yes

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64 /usr/local/mysql
echo copy file to /usr/local/mysql yes

mkdir /usr/local/mysql/mysql-files
echo mysql-files yes

grep mysql /etc/passwd

useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files

/usr/local/mysql/bin/mysqld --initialize --user=mysql --basedir=/usr/local/mysql/

/usr/local/mysql/bin/mysql_ssl_rsa_setup --datadir=/usr/local/mysql/data

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql8

sed -i '$aexport PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile

3. 编写配置⽂件

vim /usr/local/mysql/my.cnf

[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3306
log-error=/usr/local/mysql/data/db01-master.err
log-bin=/usr/local/mysql/data/binlog
server-id=10
character_set_server=utf8mb4

4. 重启服务

5. 设置开机启动

（三）主从复制之slave从服务器软件的安装

1. 不需要初始化

相对于主服务器的安装与配置，从服务器不需要初始化，他的数据都来⾃于主服务器，其他都⼀样

2. 查看⽂件

3. 脚本

#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf
echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-x86_64.tar.xz
echo tar zx yes

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64 /usr/local/mysql
echo copy file to /usr/local/mysql yes

mkdir /usr/local/mysql/mysql-files
echo mysql-files yes

grep mysql /etc/passwd

useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files

#/usr/local/mysql/bin/mysqld --initialize --user=mysql --basedir=/usr/local/mysql/

#/usr/local/mysql/bin/mysql_ssl_rsa_setup --datadir=/usr/local/mysql/data

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql8

sed -i '$aexport PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile

4. 配置⽂件

vim /usr/local/mysql/my.cnf

[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3310
log-error=/usr/local/mysql/data/db01-slave.err
relay-log=/usr/local/mysql/data/relaylog
server-id=11
character_set_server=utf8mb4

（四）主从复制之数据同步

1. master服务器同步到slave服务器

（1）停⽤master服务器msyql服务

2. master删除/usr/local/mysql/data/auto.cnf 每安装⼀个 mysql软件，data数据⽬录都会产⽣⼀个auto.cnf⽂件，⾥⾯是⼀个唯⼀性编号，相当于每个⼈的身份证编号

3. master和slave都安装rsync

4. 同步master中的data到slave对应位置

5. 启动主服务器和从服务器

6. 登录从服务器

（五）⽆法启动的⼏种情况

1. /etc/init.d/mysql8不存在，可能没有复制

2. mysql没有安装在/usr/local/mysql

3. my.cnf导致⽆法启动，格式

（1）安装路径

（2）数据⽬录

（3）套接字

（4）错误⽇志到底放在data⾥头

（5）mysql账户⽆法写⼊/usr/local/mysql/

（6）将错误⽇志放在data就没有权限⽂件

（7）直接修改/usr/local/mysql的权限

（六）主从复制的实现

1. master创建授权账号

2. 在master中锁表，然后查看⼆进制⽂件和位置

3. 在从服务器中，使⽤change master to 指定主服务器，并实现数据同步

4. 启动slave数据同步，查看状态

5. 常⻅⽂件

change-master-to写错

6. 解锁⽂件

（七）8.0需要ssl⾮对称加密

1. 获得远程master主机的公钥

2. 登录slave服务器本地的数据库

3. 停⽤slave服务，重新设置slave服务

4. 启动slave服务

（八）基于gtids的主从复制搭建

1. 什么是GTIDs

(1)Global transaction identifiers 全局事务标识符，是mysql5.6新加⼊的技术

(2)使⽤GTIDs时，每⼀个事务都可以被识别和个跟踪

(3)添加的新的slave或者发⽣故障时，需要将master身份或者⻆⾊迁移到slave上时，都需要考虑哪⼀个⼆进制⽇志以及哪个position值，极⼤简化了相关操作。

(4)GTIDs是完全基于事务的，因此不⽀持MYISAM存储引擎

(5)GTIDs由source_id 和transaction组成；

source_id来源于server.uuid可以在auto.cnf中看到

tansaction_id 是⼀个序列数字，⾃动⽣成

2. 限制条件

(1)不⽀持⾮事务引擎（MyISAM）因为可以回导致多个gtid分布给同⼀个事务

(2)create table select语句不⽀持（主库语法报错）

(3)create、drop temprary table语法不⽀持

(4)必须使⽤enforce-gtid-consistency参数

(5)sql-slave-skip-counter不⽀持

(6)gtid复制环境中必须统⼀开启gtid或者关闭gtid

(7)在5.7之前使⽤mysql upgrade命令也会出现问题

3. replication

是基于传统的⽅式部署，并且已经在运⾏，利⽤已经存在的环境升级⾄基于GTIDs的replication

(1)修改配置⽂件，⽀持GTIDs（主从）

(2) 重启数据库（主从）

(3)为了保证数据⼀直，master和slave都设置为只读

(4)从服务器上重新配置同步

4. 实践步骤

(1)修改配置⽂件⽀持GTIDs

master:

slave:

[mysqld]

basedir=/usr/local/mysql

datadir=/usr/local/mysql/data

socket=/tmp/mysql.sock

port=3310

log-error=/usr/local/mysql/data/db01-

slave.err

relay-log=/usr/local/mysql/data/relaylogserver-id=11

character_set_server=utf8mb4

log-bin=/usr/local/mysql/data/binloggtid-mode=on

log-slave-updates=1

enforce-gtid-consistency

skip-slave-start