mysql集成Mycat,Mycat实现读写分离和高可用
一、下载Mycat
1. 准备环境
现有两台虚拟机mysql版本都是5.7,并且已经配置好主从。
master(主): 192.168.23.133
slave(从): 192.168.23.134
mysql安装参考:
https://blog.csdn.net/wangyue23com/article/details/121618751
mysql主从参考:
https://blog.csdn.net/wangyue23com/article/details/121619309
2. 下载
Mycat运行依赖JDK环境,需要安装。
yum install -y java-1.8.0-openjdk-devel.x86_64
然后下载:mycat-server-1.6.6.1-release-20181031195535-linux.tar.gz
链接:https://pan.baidu.com/s/1dV-yOvc745tRepD5v3c4kw
提取码:joak
下载后文件上传到 /opt目录下。(/opt一般用于存放用户自己的软件包,/usr一般存放系统自带的软件包)
#进入opt目录
cd /opt
#解压缩
tar -xvf mycat-server-1.6.6.1-release-20181031195535-linux.tar.gz
查看解压后的目录结构:
[root@localhost mycat]# ll
total 12
drwxr-xr-x. 2 mycat mycat 190 Nov 29 01:23 bin
drwxrwxrwx. 2 mycat mycat 6 Oct 31 2018 catlet
drwxrwxrwx. 4 mycat mycat 4096 Nov 29 17:45 conf
drwxr-xr-x. 2 mycat mycat 4096 Nov 29 01:23 lib
drwxrwxrwx. 3 mycat mycat 92 Nov 29 17:45 logs
drwxr-xr-x. 2 root root 25 Nov 29 01:56 tmlogs
-rwxrwxrwx. 1 mycat mycat 185 Oct 31 2018 version.txt
bin:存放启动和关闭mycat的文件的目录,(重点关注目录下的mycat)
catlet:存放一些小的程序,内部的应用(无需关注)
conf:存放mycat配置文件的目录(重点关注,schema.xml、server.xml)
lib:存放mycat启动依赖的第三方jar包的目录
logs:存放Mycat日志的目录
3. 配置mycat
首先配置mycat的内存参数:
vim /opt/mycat/conf/wrapper.conf
根据自己硬件条件修改如下配置:内存高可以设置高一点,看情况设置。
wrapper.java.additional.10=-Xmx2G
wrapper.java.additional.11=-Xms200M
然后修改schema.xml。
#进入mycat配置目录
cd /opt/mycat/conf
#编辑配置文件,这个配置文件用来设置mysql数据库的用户密码,以及配置高可用
vim schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<!-- "show" 代表mysql数据库schema名 -->
<schema name="show" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
</schema>
<!-- 这行只需要修改下database即可 -->
<dataNode name="dn1" dataHost="localhost1" database="show" />
<!-- localhost1 是别名,跟dataNode的保持一致,balance默认为0,配置为1代表查询操作访问slave节点,并且负载均衡-->
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts 输入master的数据库连接参数 ,写操作会请求master来完成,hostM1是对Master节点的简称 -->
<writeHost host="hostM1" url="192.168.23.133:3306" user="dbroot"
password="Root123456!">
<!-- can have multi read hosts ,hostS2对Slave节点的简称 -->
<readHost host="hostS2" url="192.168.23.134:3306" user="dbroot" password="Root123456!" />
<!-- <readHost host="hostS3" url="192.168.23.134:3306" user="dbroot" password="Root123456!" /> -->
</writeHost>
</dataHost>
</mycat:schema>
参数配置详情参考链接:
https://blog.csdn.net/weixin_36522099/article/details/108831695
下面再次配置server.xml来设置用户名和密码
vim server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/">
<system>
<property name="nonePasswordLogin">0</property> <!-- 0为需要密码登陆、1为不需要密码登陆 ,默认为0,设置为1则需要指定默认账户-->
<property name="useHandshakeV10">1</property>
<property name="useSqlStat">0</property> <!-- 1为开启实时统计、0为关闭 -->
<property name="useGlobleTableCheck">0</property> <!-- 1为开启全加班一致性检测、0为关闭 -->
<property name="sequnceHandlerType">2</property>
<property name="subqueryRelationshipCheck">false</property> <!-- 子查询中存在关联查询的情况下,检查关联字段中是否有分片字段 .默认 false -->
<!-- <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议-->
<!-- <property name="fakeMySQLVersion">5.6.20</property>--> <!--设置模拟的MySQL版本号-->
<!-- <property name="processorBufferChunk">40960</property> -->
<!--
<property name="processors">1</property>
<property name="processorExecutor">32</property>
-->
<!--默认为type 0: DirectByteBufferPool | type 1 ByteBufferArena | type 2 NettyBufferPool -->
<property name="processorBufferPoolType">0</property>
<!--默认是65535 64K 用于sql解析时最大文本长度 -->
<!--<property name="maxStringLiteralLength">65535</property>-->
<!--<property name="sequnceHandlerType">0</property>-->
<!--<property name="backSocketNoDelay">1</property>-->
<!--<property name="frontSocketNoDelay">1</property>-->
<!--<property name="processorExecutor">16</property>-->
<!--
<property name="serverPort">8066</property> <property name="managerPort">9066</property>
<property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property>
<property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
<!--分布式事务开关,0为不过滤分布式事务,1为过滤分布式事务(如果分布式事务内只涉及全局表,则不过滤),2为不过滤分布式事务,但是记录分布式事务日志-->
<property name="handleDistributedTransactions">0</property>
<!--off heap for merge/order/group/limit 1开启 0关闭-->
<property name="useOffHeapForMerge">1</property>
<!--
单位为m
-->
<property name="memoryPageSize">64k</property>
<!--单位为k-->
<property name="spillsFileBufferSize">1k</property>
<property name="useStreamOutput">0</property>
<!--单位为m-->
<property name="systemReserveMemorySize">384m</property>
<!--是否采用zookeeper协调切换 -->
<property name="useZKSwitch">false</property>
<!-- XA Recovery Log日志路径 -->
<!--<property name="XARecoveryLogBaseDir">./</property>-->
<!-- XA Recovery Log日志名称 -->
<!--<property name="XARecoveryLogBaseName">tmlog</property>-->
<!--如果为 true的话 严格遵守隔离级别,不会在仅仅只有select语句的时候在事务中切换连接-->
<property name="strictTxIsolation">false</property>
<property name="useZKSwitch">true</property>
</system>
<!-- 全局SQL防火墙设置 -->
<!--白名单可以使用通配符%或着*-->
<!--例如<host host="127.0.0.*" user="root"/>-->
<!--例如<host host="127.0.*" user="root"/>-->
<!--例如<host host="127.*" user="root"/>-->
<!--例如<host host="1*7.*" user="root"/>-->
<!--这些配置情况下对于127.0.0.1都能以root账户登录-->
<!--
<firewall>
<whitehost>
<host host="1*7.0.0.*" user="root"/>
</whitehost>
<blacklist check="false">
</blacklist>
</firewall>
-->
<user name="root" defaultAccount="true">
<property name="password">123456</property>
<property name="schemas">show</property>
<!-- 表级 DML 权限设置 -->
<!--
<privileges check="false">
<schema name="TESTDB" dml="0110" >
<table name="tb01" dml="0000"></table>
<table name="tb02" dml="1111"></table>
</schema>
</privileges>
-->
</user>
</mycat:server>
上面<system></system>标签内的参数默认即可,咱们修改的地方只要<user>标签内的参数。
<!-- root代表连接mycat中间件的用户名 -->
<user name="root" defaultAccount="true">
<!-- password代表连接mycat中间件的密码 -->
<property name="password">123456</property>
<!-- schemas代表 schemas.xml文件中配置的schemas,也就是数据库名 -->
<property name="schemas">show</property>
</user>
4. 启动mycat
首先将mycat加入到系统 环境变量中。
vi /etc/profile
文件末尾增加以下内容:
MYCAT_HOME=/opt/mycat
PATH=$MYCAT_HOME/bin:$PATH
然后别忘记使他生效:
source /etc/profile
然后就可以启动mycat了,相关操作命令:
#启动mycat
mycat start
#停止mycat
mycat stop
#重启mycat
mycat restart
以上就实现了mycat读写分离工作。
5. mycat实现高可用(主mysql宕机,从mysql顶上)
修改高可用的配置:
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<!-- "show" 代表mysql数据库schema名 -->
<schema name="show" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
</schema>
<!-- 这行只需要修改下database即可 -->
<dataNode name="dn1" dataHost="localhost1" database="show" />
<!-- localhost1 是别名,跟dataNode的保持一致,balance默认为0,配置为3代表查询操作访问slave节点,并且负载均衡-->
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="3"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts 输入master的数据库连接参数 ,写操作会请求master来完成 -->
<writeHost host="hostM1" url="192.168.23.133:3306" user="dbroot"
password="Root123456!">
<!-- can have multi read hosts -->
<readHost host="hostS2" url="192.168.23.134:3306" user="dbroot" password="Root123456!" />
<!-- <readHost host="hostS3" url="192.168.23.134:3306" user="dbroot" password="Root123456!" /> -->
</writeHost>
<!-- 高可用,hostM1宕机了, hostM2顶上 -->
<writeHost host="hostM2" url="192.168.23.134:3306" user="dbroot" password="Root123456!" />
</dataHost>
</mycat:schema>
重新启动mycat。
mycat restart
如果生产环境下 主mysql停止了,则会自动切换到备库。这个时候 conf/dnindex.properties
这个文件从之前的localhost1=0 变为了1,这时候即使重启主mysql依然不会访问主(master)mysql,这个时候需要停止mycat,并将localhost1=0 重新改为0,再次启动就切换回了。
localhost1=0代表当前writehost第几个服务。1为第二个配置的writehost节点。
实际生产环境高可用和负载均衡可能是这样的:
以上就是Mycat,完成配置。
二、 验证Mycat是否读写分离和高可用
1.读写分离验证
连接数据库(用户密码和8066端口在server.xml中配置):
中间件mycat地址:192.168.23.133 端口:8066
用户名:root
密码:123456
连接成功后,新创建一张表,则分别看主从数据可见新表。
现在修改slave节点数据,比如新增一条数据,再次访问mycat查询数据,能发现新增了一条数据,而主master节点没有新增数据,则验证读的slave节点,读写分离已完成。
2. 高可用验证
现在停止mysql主数据库,然后再次通过mycat中间件修改和查询数据,会发现修改和查询执行的是Slave节点,则从库已经顶上来了,实现了高可用。