Docker 部署 MySQL 主从同步

最新推荐文章于 2024-04-18 10:12:12 发布
最新推荐文章于 2024-04-18 10:12:12 发布
阅读量407 收藏 2
点赞数
分类专栏： 容器化技术
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zk86547462/article/details/112922879
版权

一、集群的目标

高可用(High Avaliability)，是当一台服务器停止服务后，对于业务及用户毫无影响。停止服务的原因可能由于网卡、路由器、机房、CPU负载过高、内存溢出、自然灾害等不可预期的原因导致，在很多时候也称为单点问题。

突破数据量限制，一台服务器不能存储大量数据，需要多台分担，每个存储一部分，共同存储完整个集群数据，最好能做到互相备份，即使单节点故障，也能在其他节点找到数据。

数据备份容灾，单节点故障后，存储的数据仍然可以在别的地方拉起。

分担压力，由于多个服务器都能完成各自一部分工作，所以尽量的避免了单点压力的存在。

二、集群的基础形式

在这里插入图片描述

三、MySQL集群

MySQL-MMM是Master-Master-Replication Manager for Mysql（MySQL主主复制管理器）的简称。MMM基于MySQL Replication 做的扩展架构，主要用来监控 MySQL 主主复制并做失败转移。其原理是将真实数据库节点的IP(RIP）映射为虚拟的IP（VIP）集。

MySQL 主从同步

1、下载MySQL镜像

sudo docker pull mysql:5.7

2、创建两个实例并启动master和slave

docker run -p 3307:3306 --name mysql-master \
-v /mydata/mysql/master/log:/var/log/mysql \
-v /mydata/mysql/master/data:/var/lib/mysql \
-v /mydata/mysql/master/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=root \
-d mysql:5.7

docker run -p 3307:3306 --name mysql-master \
-v /mydata/mysql/master/log:/var/log/mysql \
-v /mydata/mysql/master/data:/var/lib/mysql \
-v /mydata/mysql/master/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=root \
-d mysql:5.7

修改master基本配置：

vi /mydata/mysql/master/conf/my.cnf

[client]
default-character-set=utf8

[mysql]
default-character-set=utf8
[mysqld]
init_connect='SET collation_connection = utf8_unicode_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_unicode_ci
skip-character-set-client-handshake
skip-name-resolve

修改 slave 基本配置

vi /mydata/mysql/slaver/conf/my.cnf

[client]
default-character-set=utf8

[mysql]
default-character-set=utf8
[mysqld]
init_connect='SET collation_connection = utf8_unicode_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_unicode_ci
skip-character-set-client-handshake
skip-name-resolve

4、添加主从复制部分配置

主MySQL配置文件修改

#master-slaver repication
#主服务器唯一ID
server_id=1
#启用二进制日志
log-bin=mysql-bin
#是否只读（1只读）
read-only=0
#设置需要复制的数据库
binlog-do-db=gulimall_ums
binlog-do-db=gulimall_pms
binlog-do-db=gulimall_oms
binlog-do-db=gulimall_wms
binlog-do-db=gulimall_admin

# 设置不要复制的数据库(可设置多个)
replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema

#设置logbin格式
binlog_format=STATEMENT

修改完配置后重启master。

从MySQL配置文件修改：

修改配置文件： vim /etc/my.cnf
#master-slaver repication
#从服务器唯一ID
server_id=2
log-bin=mysql-bin
read-only=1
binlog-do-db=gulimall_ums
binlog-do-db=gulimall_pms
binlog-do-db=gulimall_oms
binlog-do-db=gulimall_wms
binlog-do-db=gulimall_admin

replicate-ignore-db=mysql
replicate-ignore-db=sys
replicate-ignore-db=information_schema
replicate-ignore-db=performance_schema

#启用中继日志
#relay-log=mysql-relay

配置好之后重启 slaver。

为master授权用户来同步它的数据

1、进入master容器

docker exec -it mysql /bin/bash

2、进入mysql内部

mysql -uroot -p

1)、授权 root可以远程访问（主从无关，为了方便我们远程连接MySQL）

grant all privileges on *.* to 'root'@'%' identified by 'root' with grant option;
flush privileges;

2)、添加用来同步的用户

GRANT REPLICATION SLAVE ON *.* to 'backup'@'%' identified by '123456';

3)、查看master状态

show master status;

配置slaver同步master数据

1、进入slaver容器

docker exec -it mysql-slaver-01 /bin/bash

2、进入mysql内部

mysql -uroot -p

1)、授权 root可以远程访问（主从无关，为了方便我们远程连接MySQL）

grant all privileges on *.* to 'root'@'%' identified by 'root' with grant option;
flush privileges;

2)、设置主库连接

change master to master_host='192.168.10.10',master_user='backup',master_password='123456',master_log_file='mysql_bin.000001',master_log_pos=0,master_port=3307;

#复制主机的命令
CHANGE MASTER TO MASTER_HOST='主机的IP地址',
MASTER_USER='slave',
MASTER_PASSWORD='123123',
MASTER_LOG_FILE='mysql-bin.具体数字',MASTER_LOG_POS=具体值;

3)、启动从库同步

start slave;

4)、查看从从库状态

show slave status\G;

在这里插入图片描述
如果主从库数据不同步，则可以使用如下命令临时解决：

mysql> stop slave;
Query OK, 0 rows
affected (0.00 sec)

mysql> set global sql_slave_skip_counter=1;
Query OK, 0 rows
affected (0.00 sec)

mysql> start slave;
Query OK, 0 rows
affected (0.00 sec)

搭建双主双从

一个主机 m1 用于处理所有写请求， 它的从机 s1 和另一台主机 m2 还有它的从机 s2 负责所有读请求。当 m1 主机宕机后， m2 主机负责写请求， m1、 m2 互为备机。 架构图如下
在这里插入图片描述

编号角色IP 地址机器名
1Master1192.168.140.128host79.atguigu
2Slave1192.168.140.127host80.atguigu
3Master2192.168.140.126host81.atguigu
4Slave2192.168.140.125host82.atguigu

1、 搭建 MySQL 数据库主从复制（双主双从）
① 双主机配置
Master1配置

修改配置文件： vim /etc/my.cnf
#主服务器唯一ID
server-id=1
#启用二进制日志
log-bin=mysql-bin
# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
#设置需要复制的数据库
binlog-do-db=需要复制的主数据库名字
#设置logbin格式
binlog_format=STATEMENT
# 在作为从数据库的时候， 有写入操作也要更新二进制日志文件
log-slave-updates
#表示自增长字段每次递增的量，指自增字段的起始值，其默认值是1， 取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长字段从哪个数开始，指字段一次递增多少，他的取值范围是1 .. 65535
auto-increment-offset=1

Master2配置

修改配置文件： vim /etc/my.cnf
#主服务器唯一ID
server-id=3
#启用二进制日志
log-bin=mysql-bin
# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
#设置需要复制的数据库
binlog-do-db=需要复制的主数据库名字
#设置logbin格式
binlog_format=STATEMENT
# 在作为从数据库的时候，有写入操作也要更新二进制日志文件
log-slave-updates
#表示自增长字段每次递增的量，指自增字段的起始值，其默认值是1，取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长字段从哪个数开始，指字段一次递增多少，他的取值范围是1 .. 65535
auto-increment-offset=2

② 双从机配置
Slave1配置

修改配置文件： vim /etc/my.cnf
#从服务器唯一ID
server-id=2
#启用中继日志
relay-log=mysql-relay

Slave2配置

修改配置文件： vim /etc/my.cnf
#从服务器唯一ID
server-id=4
#启用中继日志
relay-log=mysql-relay

③ 双主机、 双从机重启 mysql 服务
④ 主机从机都关闭防火墙
⑤ 在两台主机上建立帐户并授权 slave

#在主机MySQL里执行授权命令
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' IDENTIFIED BY '123123';
#查询Master1的状态
show master status;

在这里插入图片描述
#查询Master2的状态

show master status;

在这里插入图片描述

#分别记录下File和Position的值
#执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化

⑥ 在从机上配置需要复制的主机
Slava1 复制 Master1， Slava2 复制 Master2

#复制主机的命令
CHANGE MASTER TO MASTER_HOST='主机的IP地址',
MASTER_USER='slave',
MASTER_PASSWORD='123123',
MASTER_LOG_FILE='mysql-bin.具体数字',MASTER_LOG_POS=具体值;

Slava1的复制命令在这里插入图片描述
Slava2的复制命令
在这里插入图片描述


#启动两台从服务器复制功能
start slave;
#查看从服务器状态
show slave status\G;

#Slava1的复制Master1
在这里插入图片描述
#Slava2的复制Master2
在这里插入图片描述

#下面两个参数都是Yes，则说明主从配置成功！
# Slave_IO_Running: Yes
# Slave_SQL_Running: Yes

⑦ 两个主机互相复制
Master2 复制 Master1， Master1 复制 Master2

Master2的复制命令
在这里插入图片描述
Master1的复制命令
在这里插入图片描述

#启动两台主服务器复制功能
start slave;
#查看从服务器状态
show slave status\G;

Master2的复制Master1

在这里插入图片描述
Master1的复制Master2
在这里插入图片描述

#下面两个参数都是Yes，则说明主从配置成功！
# Slave_IO_Running: Yes
# Slave_SQL_Running: Yes

⑧ Master1 主机新建库、新建表、 insert 记录， Master2 和从机复制
在这里插入图片描述
⑨ 如何停止从服务复制功能

stop slave;

⑩ 如何重新配置主从

stop slave;
reset master;

2、 修改 Mycat 的配置文件 schema.xml

修改的balance属性，通过此属性配置读写分离的类型

负载均衡类型，目前的取值有4 种：
（1） balance="0", 不开启读写分离机制，所有读操作都发送到当前可用的 writeHost 上。
（2） balance="1"，全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡，简单的说，当双主双从
模式(M1->S1， M2->S2，并且 M1 与 M2 互为主备)，正常情况下， M2,S1,S2 都参与 select 语句的负载均衡。
（3） balance="2"，所有读操作都随机的在 writeHost、 readhost 上分发。
（4） balance="3"，所有读请求随机的分发到 readhost 执行， writerHost 不负担读压力

为了双主双从读写分离balance设置为1

…
<dataNode name="dn1" dataHost="host1" database="testdb" />
<dataHost name="host1" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="1"
slaveThreshold="100" >
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM1" url="192.168.140.128:3306" user="root"
password="123123">
<!-- can have multi read hosts -->
<readHost host="hostS1" url="192.168.140.127:3306" user="root"
password="123123" />
</writeHost>
<writeHost host="hostM2" url="192.168.140.126:3306" user="root"
password="123123">
<!-- can have multi read hosts -->
<readHost host="hostS2" url="192.168.140.125:3306" user="root"
password="123123" />
</writeHost>
</dataHost>
… #
balance="1": 全部的readHost与stand by writeHost参与select语句的负载均衡。
#writeType="0": 所有写操作发送到配置的第一个writeHost，第一个挂了切到还生存的第二个
#writeType="1"，所有写操作都随机的发送到配置的 writeHost， 1.5 以后废弃不推荐
#writeHost，重新启动后以切换后的为准，切换记录在配置文件中:dnindex.properties 。
#switchType="1": 1 默认值，自动切换。
# -1 表示不自动切换
# 2 基于 MySQL 主从同步的状态决定是否切换。

在这里插入图片描述
3、 启动 Mycat
4、 验证读写分离

#在写主机Master1数据库表mytbl中插入带系统变量数据， 造成主从数据不一致
INSERT INTO mytbl VALUES(3,@@hostname);

在这里插入图片描述

#在Mycat里查询mytbl表,可以看到查询语句在Master2（host81） 、 Slava1（host80） 、 Slava2（host82）主从三个主机间切换

5、 抗风险能力
停止数据库Master1
在这里插入图片描述
在Mycat里插入数据依然成功， Master2自动切换为写主机
INSERT INTO mytbl VALUES(3,@@hostname);
在这里插入图片描述
https://blog.csdn.net/qq_17079255/article/details/108944499

拾 -.-
关注
专栏目录
docker的mysql主从同步配置
飞雪迎春
04-08 763
基于docker 的mysql 主从配置
docker上部署mysql主从
qq_44264681的博客
07-04 364
MYSQL主从是指,创建两个或以上的相同内容的数据库,而其中一个作为主数据库用于增删改,而另外的作为从数据库用于查操作.这样一是因为一个数据库难以处理高并发的请求,另一个就是防止数据都放在同一个库中而容易出现数据丢失的风险.
docker mysql 同步_docker mysql 主从同步配置
weixin_31827003的博客
01-26 65
在centos 中创建两个mysql容器docker run --name q_master -p 13306:3306 -e MYSQL_ROOT_PASSWORD=123456 -d mysql:latest --character-set-server=utf8 --collation-server=utf8_general_cidocker run --name q_slave -p 1...
Docker（MySQL主从同步）
weixin_38380811的博客
11-09 1405
Docker（MySQL主从同步）
Docker Mysql主从同步
qq_42506719的博客
10-12 559
在mysql中输入以下命令，查看主从库是否重复，确保两者不同；1.可以在my.cnf中修改，但重启后可能依然不生效；待uu_id和server_id修改完后重启容器。端口:13306(具体而定)端口:23306(具体而定)主库重新创建用户，赋予权限；）slave已启动，但想修改主库配置;2.创建slave用户并赋予权限。4. 开启从库，主从同步。2. 将主库数据导入从库。3. 配置主库连接参数。出现两个Yes即完成。
Docker mysql主从同步
harder_cn的博客
11-10 1845
1、整体环境 此次使用虚拟机，每台虚拟机上安装docker，每个docker又安装了mysql5.7 宿主机系统centos7 master: 192.168.0.103:3306 slave: 192.168.0.105:3306 2、安装mysql docker run --dns 8.8.8.8 --dns 8.8.4.4 --name mysql5.7 -p 3306:3306 -e MYSQL_ROOT_PASSWORD=123 -d mysql:5.7 注意点： mysql...
详解用Docker构建MySQL主从环境
01-09
MySQL 主从同步分为 3 个步骤： master 节点将数据的更新记录写到 binary log 中。 slave 节点开启 IO 线程连接 master 节点，请求获取指定 binary log 文件的指定位置之后的日志。 master 节点的 binary log ...
springboot多数据源配合docker部署mysql主从实现读写分离
最新发布
2401_84010865的博客
04-18 462
这些面试题是我朋友进阿里前狂刷七遍以上的面试资料，由于面试文档很多，内容更多，没有办法一一为大家展示出来，所以只好为大家节选出来了一部分供大家参考。面试的本质不是考试，而是告诉面试官你会做什么，所以，这些面试资料中提到的技术也是要学会的，不然稍微改动一下你就凉凉了。
[Docker-2]排查基于docker部署mysql主从过程中遇到“Slave_IO_Running: Connecting”这个疑难杂症
负熵电光丸
02-08 2676
关于“Slave_IO_Running: Connecting”的排查方法，已经有很多博客写得清清楚楚了(很多都是复制粘贴..真浪费时间)，那么如果已有的常规排查方法都不能解决你的问题，而且你是在docker中部署主从集群的话，或许这篇文可以帮到你。 建议先看这个问题的常规的排查方法，如果解决不了你再回来看本文。 https://blog.csdn.net/mbytes/article/...
单机服务器docker搭建mysql5.7主从同步
淡然的博客
11-30 855
1.首先使用docker安装mysql5.7 docker pull mysql:5.7 2.创建主库（从3306映射一个3308端口） docker run -d -p 3308:3306 -v /home/mysql-master/conf:/etc/mysql/conf.d -v /home/mysql-master/data:/var/lib/mysql -v /home/mysql-master/log:/var/log/mysql -e MYSQL_ROOT
docker mysql 主从同步
qq_36485886的博客
06-20 332
docker mysql 一主一从 数据同步
docker mysql主从同步
Ch3nnn的博客
06-22 570
参考于：https://blog.csdn.net/tr1912/article/details/81302648 本文基于docker 构建 主从及双机热备。 主从复制的根本操作就是把从主服务器上所执行过的sql在从机上再执行一遍，只要两个机器的数据库初态（数据库结构，数据，配置）是一样的，那么我们开启主从复制之后就能保证他们一直都是一样的状态。这些都是mysql自己实现的，我们就配置一下就可以了。 首先看下面一张图： 从图中我们可以看出来了，主服务器需要做的事情非常简单的，就只是把执行的sq
docker mysql 同步_docker mySql主从同步
weixin_42501688的博客
01-26 77
这里使用mysql5.6.docker pull mysql:5.6在根目录下创建mysql_1.cnf:主库配置[mysqld]log-bin=mysql-binserver-id=1在根目录下创建mysql_2.cnf:从库配置[mysqld]log-bin=mysql-binserver-id=2root 密码为123456docker run --name mysql_1 -v /root...
基于Docker的mysql主从同步
u011494923的博客
09-23 381
基于Docker的mysql主从同步
基于docker下的mysql主从同步
感恩的心的博客
01-09 390
目录 一、创建Master和Slave 1.1.1、创建master 1.1.2、修改master配置 1.2.1、创建slave 1.2.2、修改slave配置 二、master开启日志权限，给slave分配账号权限 2.1.1、添加master主从复制部分配置 2.1.2、为master授权用户来同步数据 2.2.1、添加slave主从复制部分配置 2.2.2、配置Slater同步Master数据 一、创建Master和Slave 1.1.1、创建master docker r
Docker配置MySQL主从同步
qq_40293674的博客
04-21 325
1、拉取MySQL5.7镜像到本地 docker pull mysql:5.7 # 如果你只需要跑一个mysql实例，不做主从，那么执行以下命令即可，不用再做后面的参考步骤: docker run -d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7 #然后用shell或客户端软件通过配置( 用户名:root 密码:132456 IP:你...
docker搭建mysql主从同步
weixin_39701913的博客
12-04 402
第一步通过docker-compose安装mysql，需要两个数据库 1.master的mysql的docker-compose.yml version: '3.1' services: db: restart: always image: mysql:5.7.22 container_name: mysql-master ports: - 3306:3306 environment: TZ: Asia/Shanghai M...
使用Docker部署MySQL主从复制环境
在Docker中安装MySQL主从复制是云环境中常见的数据库部署策略，可以确保数据的高可用性和容灾能力。以下是一份详细步骤，基于提供的部分命令，解释如何实现这一过程： 1. 创建MySQL主服务器 首先，我们需要启动一...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值