三、搭建主从复制架构
使用的MySQL percona版本,并且通过docker进行搭建服务。
3.1、主从复制原理
3.2、搭建主库
创建目录
mkdir /root/data/mysql/master01
切换目录
cd /root/data/mysql/master01
创建文件夹
mkdir conf data
给文件夹授权
chmod 777 * -R
在这里插入图片描述
创建配置文件
cd /root/data/mysql/master01/conf
vim my.cnf
输入如下内容
[mysqld]
log-bin=mysql-bin #开启二进制日志
server-id=1 #服务id,不可重复
在这里插入图片描述
创建容器
docker create --name master01 -v /root/data/mysql/master01/data:/var/lib/mysql -v /root/data/mysql/master01/conf:/etc/my.cnf.d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=root percona
启动
docker start master01 && docker logs -f master01
在这里插入图片描述
创建同步账户以及授权
create user 'huan'@'%' identified by 'huan';
grant replication slave on *.* to 'huan'@'%';
flush privileges;
#查看master状态
show master status;
#查看二进制日志相关的配置项
show global variables like 'binlog%';
#查看server相关的配置项
show global variables like 'server%';
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
3.3、搭建从库
创建目录
mkdir /root/data/mysql/slave01
cd /root/data/mysql/slave01
mkdir conf data
chmod 777 * -R
创建配置文件
cd /root/data/mysql/slave01/conf
vim my.cnf
输入如下内容
[mysqld]
server-id=2 #服务id,不可重复
#创建容器
docker create --name slave01 -v /root/data/mysql/slave01/data:/var/lib/mysql -v /root/data/mysql/slave01/conf:/etc/my.cnf.d -p 3307:3306 -e MYSQL_ROOT_PASSWORD=root percona
启动
docker start slave01 && docker logs -f slave01
在这里插入图片描述
设置master相关信息
CHANGE MASTER TO
master_host='123.60.31.104',
master_user='huan',
master_password='huan',
master_port=3306,
master_log_file='mysql-bin.000003',
master_log_pos=739;
启动同步
start slave;
查看master状态
show slave status;
当看到两个大Yes就成功啦
在这里插入图片描述
3.4、主从复制模式
在这里插入图片描述
在查看二进制日志相关参数内容中,会发现默认的模式为ROW,其实在MySQL中提供了有3种模式,基于SQL语句的复制(statement-based replication, SBR),基于行的复制(row-based replication,RBR),混合模式复制(mixedbased replication,MBR)。
对应的,binlog的格式也有三种:STATEMENT,ROW,MIXED。
STATEMENT模式(SBR)
每一条会修改数据的sql语句会记录到binlog中。
a. 优点是并不需要记录每一条sql语句和每一行的数据变化,减少了binlog日志量,节约IO,提高性能。
b. 缺点是在某些情况下会导致master-slave中的数据不一致(如sleep()函数,
last_insert_id(),以及user-defined functions(udf)等会出现问题)
ROW模式(RBR)
不记录每条sql语句的上下文信息,仅需记录哪条数据被修改了,修改成什么样了。而且不会出现某些特定情况下的存储过程、或function、或trigger的调用和触发无法被正确复制的问题。缺点是会产生大量的日志,尤其是altertable的时候会让日志暴涨。
MIXED模式(MBR)
以上两种模式的混合使用,一般的复制使用STATEMENT模式保存binlog对于STATEMENT模式无法复制的操作使用ROW模式保存binlog,MySQL会根据执行的SQL语句选择日志保存方式。 建议使用MIXED模式。
#修改主库的配置
binlog_format=MIXED
#重启
docker restart master01 && docker logs -f master01
#查看二进制日志相关的配置项
show global variables like 'binlog%';
在这里插入图片描述
四、MyCat中间件
新建目录
mkdir /root/data/mycat
切换目录
cd /root/data/mycat
下载mycat release1.6.7.6到当前目录
wget http://dl.mycat.org.cn/1.6.7.6/20201126013625/Mycat-server-1.6.7.6-release-20201126013625-linux.tar.gz
改名
mv Mycat-server-1.6.7.6-release-20201126013625-linux.tar.gz mycat1.6.7.6.tar.gz
解压conf目录到当前目录,因为使用docker直接挂载conf目录会报错,mycat启动时需要依赖conf目录中的文件。
tar -zxvf mycat1.6.7.6.tar.gz -C /root/data/mycat/conf
修改conf配置文件
server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/">
<system>
<property name="nonePasswordLogin">0</property>
<property name="useHandshakeV10">1</property>
<property name="useSqlStat">0</property>
<property name="useGlobleTableCheck">0</property>
<property name="sequnceHandlerType">2</property>
<property name="subqueryRelationshipCheck">false</property>
<property name="processorBufferPoolType">0</property>
<property name="handleDistributedTransactions">0</property>
<property name="useOffHeapForMerge">1</property>
<property name="memoryPageSize">64k</property>
<property name="spillsFileBufferSize">1k</property>
<property name="useStreamOutput">0</property>
<property name="systemReserveMemorySize">384m</property>
<property name="useZKSwitch">false</property>
</system>
<!--这里是设置的huan用户和虚拟逻辑库-->
<user name="huan" defaultAccount="true">
<property name="password">huan</property>
<!--虚拟逻辑库的数据库名-->
<property name="schemas">huan</property>
</user>
</mycat:server>
schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<!--配置数据表-->
<schema name="huan" checkSQLschema="false" sqlMaxLimit="100">
<table name="t_blog" dataNode="dn1" rule="mod-long" />
</schema>
<!--配置分片关系-->
<dataNode name="dn1" dataHost="cluster1" database="huan" />
<!--配置连接信息-->
<dataHost name="cluster1" maxCon="1000" minCon="10" balance="3"
writeType="1" dbType="mysql" dbDriver="native" switchType="1"
slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<writeHost host="W1" url="123.60.31.104:3306" user="root" password="root">
<readHost host="W1R1" url="123.60.31.104:3307" user="root" password="root" />
</writeHost>
</dataHost>
</mycat:schema>
balance属性说明:
负载均衡类型,目前的取值有3 种:
balance=“0”, 不开启读写分离机制,所有读操作都发送到当前可用的writeHost 上。
balance=“1”,全部的readHost 与stand by writeHost 参与select 语句的负载均衡,简单的说,当双 主
双从模式(M1->S1,M2->S2,并且M1 与M2 互为主备),正常情况下,M2,S1,S2 都参与select 语句的负
载均衡。
balance=“2”,所有读操作都随机的在writeHost、readhost 上分发。
balance=“3”,所有读请求随机的分发到wiriterHost 对应的readhost 执行,writerHost 不负担读压 力,
注意balance=3 只在1.4 及其以后版本有,1.3 没有。
创建Dockerfile文件,输入以下内容
FROM openjdk:8-jdk-stretch
ADD http://dl.mycat.org.cn/1.6.7.6/20201126013625/Mycat-server-1.6.7.6-release-20201126013625-linux.tar.gz /usr/local
RUN cd /usr/local && tar -zxvf Mycat-server-1.6.7.6-release-20201126013625-linux.tar.gz && ls -lna
ENV MYCAT_HOME=/usr/local/mycat
WORKDIR /usr/local/mycat
ENV TZ Asia/Shanghai
EXPOSE 8066 9066
CMD ["/usr/local/mycat/bin/mycat", "console","&"]
rule.xml
<function name="mod-long" class="io.mycat.route.function.PartitionByMod">
<!-- how many data nodes -->
<property name="count">1</property>
</function>
创建镜像文件
docker build -t mycat:1.6.7.6 .
运行容器并挂载配置文件目录与日志目录
docker run --privileged=true -p 8066:8066 -p 9066:9066 --name mycat -v /root/data/mycat/conf:/usr/local/mycat/conf -v /root/data/mycat/logs:/usr/local/mycat/logs -d mycat:1.6.7.6