Mysql主从复制

(一)集群概述

1. 集群主要类型

(1)⾼可⽤集群 High Avaible Cluster HA cluster

(2)⾼可⽤集群是指通过特殊软件,把独⽴的服务器连接起来, 组成⼀个能够提供故障切换(Fail Over)功能的集群

2. ⾼可⽤标准

3. 常⽤的集群架构

(1) mysql replication

(2)mysql cluster

(3)mysql group replication MGR

(4)Maradb Galera CLuster

(5)MHA|keepalived|HeatBeat|Lvs,Haproxy等技术构建⾼可⽤ 集群

4. 复制原理

(1)replication,可以实现将数据从⼀台数据库服务器(mster)复制 到多台数据库服务器slave

(2)默认情况下,replication属于异步复制,所以⽆需⻓连接

(3)⼯作原理

1. master 主服务器

2. slave 从服务器

3. 描述

(1)slave端的io线程发送请求给master端的binlog dump线 程

(2)master端的binlog dump线程获取⼆进制⽇志信息(⽂ 件名和位置信息)发送给slave端的io线程

(3)slave端的io线程获取到内容,依次写到slave端relay log (中继⽇志)并把master端的binlog⽂件名和位置记录 到master。info⾥头

 (4)slave端的sql线程检测到relaylog中的内容更新,就会解 析relaylog中的更新内容,并执⾏这些操作,从⽽达到和 master端数据⼀致

4. 复制架构体系 复制架构体系

(1)双机热备 主从复制

默认情况下 master接收读写,从服务器只接受读

(2)级联复制

1. 可以分担读的压⼒ 2. 中间服务器出现故障,就瘫痪了

(3)并联复制 ⼀主多从

1. 解决单点故障 2. 承担更多的读的压⼒ 3. 从服务器都从主服务器读取数据,master服务器压⼒⼤

(4)双主复制

5. 安装前的环境准备 安装前的环境准备

1. 普通的ab复制,最基本的架构 M-S

2. 两者数据库的的版本必须⼀致

3. 环境的规划

4.前期准备,克隆机器,设置ip,修改主机名称,关闭 NEtworkManager,防⽕墙 selinux,配置yum源,配置时间同步

时间同步是⾮常重要的设置

ntpdate cn.ntp.org.cn

主从复制核⼼思路

1. 思路

1. slave和master必须安装相同的msyql版本

2. master开启⼆进制⽇志,slave必须开始relay⽇志

3. mster端和slava端的server-id不能⼀致

4.(1)master必须创建⼀个复制⽤户

   (2) 保持master和slave端初始数据⼀致

   (3)slave端配置主从复制

(二)主从复制之master配置

1.编写mysql安装脚本

上传mysql安装包到mstaer和slave

2.然后编写脚本

#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
    yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf
echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-x86_64.tar.xz
echo tar zx yes

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64 /usr/local/mysql
echo copy file to /usr/local/mysql   yes

mkdir /usr/local/mysql/mysql-files
echo mysql-files yes

grep mysql /etc/passwd

    useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files

/usr/local/mysql/bin/mysqld --initialize --user=mysql --basedir=/usr/local/mysql/

/usr/local/mysql/bin/mysql_ssl_rsa_setup --datadir=/usr/local/mysql/data

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql8

sed -i '$aexport PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile

3. 编写配置⽂件

vim /usr/local/mysql/my.cnf

[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3306
log-error=/usr/local/mysql/data/db01-master.err
log-bin=/usr/local/mysql/data/binlog
server-id=10
character_set_server=utf8mb4

4. 重启服务

5. 设置开机启动

(三)主从复制之slave从服务器软件的安装

1. 不需要初始化

相对于主服务器的安装与配置,从服务器不需要初始化,他的数 据都来⾃于主服务器,其他都⼀样

2. 查看⽂件

3. 脚本

#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
    yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf
echo remo my.cnf yes

tar -xf mysql-8.0.33-linux-glibc2.12-x86_64.tar.xz
echo tar zx yes

cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64 /usr/local/mysql
echo copy file to /usr/local/mysql   yes

mkdir /usr/local/mysql/mysql-files
echo mysql-files yes

grep mysql /etc/passwd

    useradd -r -s /sbin/nologin mysql

chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files

#/usr/local/mysql/bin/mysqld --initialize --user=mysql --basedir=/usr/local/mysql/

#/usr/local/mysql/bin/mysql_ssl_rsa_setup --datadir=/usr/local/mysql/data

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql8

sed -i '$aexport PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile

4. 配置⽂件

vim /usr/local/mysql/my.cnf

[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3310
log-error=/usr/local/mysql/data/db01-slave.err
relay-log=/usr/local/mysql/data/relaylog
server-id=11
character_set_server=utf8mb4
 

(四)主从复制之数据同步

1. master服务器同步到slave服务器

(1)停⽤master服务器msyql服务

2. master删除/usr/local/mysql/data/auto.cnf 每安装⼀个 mysql软件,data数据⽬录都会产⽣⼀个auto.cnf⽂件,⾥⾯ 是⼀个唯⼀性编号,相当于每个⼈的身份证编号

3. master和slave都安装rsync

4. 同步master中的data到slave对应位置

5. 启动主服务器和从服务器

6. 登录从服务器

(五)⽆法启动的⼏种情况

1. /etc/init.d/mysql8不存在,可能没有复制

2. mysql没有安装在/usr/local/mysql

3. my.cnf导致⽆法启动,格式

(1)安装路径

(2)数据⽬录

(3)套接字

(4)错误⽇志到底放在data⾥头

(5)mysql账户⽆法写⼊/usr/local/mysql/

(6)将错误⽇志放在data就没有权限⽂件

(7)直接修改/usr/local/mysql的权限

(六)主从复制的实现

1. master创建授权账号

2. 在master中锁表,然后查看⼆进制⽂件和位置

3. 在从服务器中,使⽤change master to 指定主服务器,并实现数 据同步

4. 启动slave数据同步,查看状态

5. 常⻅⽂件

change-master-to写错

6. 解锁⽂件

(七)8.0需要ssl⾮对称加密

1. 获得远程master主机的公钥

2. 登录slave服务器本地的数据库

3. 停⽤slave服务,重新设置slave服务

4. 启动slave服务

(八)slave服务器不⼩⼼写⼊数据的解决⽅案

1. 正常情况下,master既可以读,也可以写,但是slave从服务器
只能读取操作,⼀旦我们在slave从服务器中写⼊数据,主从结
构会失败。
2. show slave status\G
3. 如果数据⽐较少,可以通过跳过当前语句的⽅式解决,但是如果
从服务器写⼊的数据⽐较多,架构必须重新搭建
4. 可通过变量sql_slave_skip_counter临时跳过事务进⾏处理
5. 跳过事务应该在slave上运⾏
6. 传统的ab复制⽅式可以使⽤,基于GTIDs的⽅式不⽀持

(九)基于gtids的主从复制搭建

1. 什么是GTIDs
(1) Global transaction identifiers 全局事务标识符,是mysql5.6
新加⼊的技术
(2) 使⽤GTIDs时,每⼀个事务都可以被识别和个跟踪
(3)添加的新的slave或者发⽣故障时,需要将master身份或者⻆
⾊迁移到slave上时,都需要考虑哪⼀个⼆进制⽇志以及哪个
position值,极⼤简化了相关操作。
(4) GTIDs是完全基于事务的,因此不⽀持MYISAM存储引擎
(5)GTIDs由source_id 和transaction组成;
(6) source_id来源于server.uuid可以在auto.cnf中看到
(7)tansaction_id 是⼀个序列数字,⾃动⽣成
2. 限制条件
(1) 不⽀持⾮事务引擎(MyISAM)因为可以回导致多个gtid分
布给同⼀个事务
(2) create table select语句不⽀持(主库语法报错)
(3) create、drop temprary table语法不⽀持
(4) 必须使⽤enforce-gtid-consistency参数
(5) sql-slave-skip-counter不⽀持
(6) gtid复制环境中必须统⼀开启gtid或者关闭gtid
(7) 在5.7之前使⽤mysql upgrade命令也会出现问题
3. replication是基于传统的⽅式部署,并且已经在运⾏,利⽤已经
存在的环境升级⾄基于GTIDs的replication
(1) 修改配置⽂件,⽀持GTIDs(主从)
(2) 重启数据库(主从)
(3) 为了保证数据⼀直,master和slave都设置为只读
(4) 从服务器上重新配置同步
4. 实践步骤
  1. 修改配置⽂件⽀持GTIDs
  (1)master
(2)slave
[mysqld]
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
socket=/tmp/mysql.sock
port=3310
log-error=/usr/local/mysql/data/db01-
slave.err
relay-log=/usr/local/mysql/data/relaylog
server-id=11
character_set_server=utf8mb4
log-bin=/usr/local/mysql/data/binlog
gtid-mode=on
log-slave-updates=1
enforce-gtid-consistency
skip-slave-start
2. 重启启动mysql服务
[root@mysql001 ~]# service mysql8 restart
Shutting down MySQL.......... SUCCESS!
Starting MySQL.. SUCCESS!
[root@slave ~]# service mysql8 restart
Shutting down MySQL.. SUCCESS!
Starting MySQL... SUCCESS!
3. 主从配置只读模式
mysql> set @@global.read_only=ON;
Query OK, 0 rows affected (0.00 sec)
mysql> set @@global.read_only=ON;
Query OK, 0 rows affected (0.00 sec)
4. slave重新配置change master to
mysql> stop slave;
mysql> reset slave;
mysql> change master to
-> master_host='10.1.1.100',
-> master_user='slave',
-> master_password='slave_123',
-> master_port=3306,
-> master_auto_position=1;
Query OK, 0 rows affected, 8 warnings (0.01
sec)
mysql> start slave;
mysql> show slave status\G
5. 关闭主从服务器的只读模式
mysql> set @@global.read_only=OFF;
Query OK, 0 rows affected (0.00 sec)
mysql> set @@global.read_only=OFF;
Query OK, 0 rows affected (0.00 sec)
6. 获得公钥
[root@slave ~]# mysql -uslave -pslave_123 -h
10.1.1.100 -P3306 --get-server-public-key
mysql: [Warning] Using a password on the
command line interface can be insecure.
Welcome to the MySQL monitor. Commands end
with ; or \g.
Your MySQL connection id is 11
Server version: 8.0.33 MySQL Community
Server - GPL
Copyright (c) 2000, 2023, Oracle and/or its
affiliates.
Oracle is a registered trademark of Oracle
Corporation and/or its
affiliates. Other names may be trademarks of
their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to
clear the current input statement.
mysql> quit
Bye

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值