冰河，能讲讲Mycat如何实现MySQL的读写分离吗？

最新推荐文章于 2024-04-21 15:22:50 发布
最新推荐文章于 2024-04-21 15:22:50 发布
阅读量1k 收藏
点赞数 1
分类专栏： 精通分布式存储系列 精通分布式数据库系列 文章标签： Mycat MySQL 分布式存储 读写分离
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/l1028386804/article/details/110848709
版权

写在前面

随着系统业务的不断发展，MySQL数据库中的数据量也在不断攀升，当数据量达到一定量级时，MySQL的主从复制、读写分离、分库分表就成为了一种必然的架构趋势。这不，就有小伙伴问我能不能讲讲Mycat如何实现MySQL的读写分离。于是就安排上了这篇文章。目前，我也在业余时间开发和维护Mycat源码，小伙伴们在学习和使用Mycat时，遇到问题也可以加我微信【sun_shine_lyz】共同交流哦！

注：文章已经收录到：

GitHub：https://github.com/sunshinelyz/technology-binghe

Gitee：https://gitee.com/binghe001/technology-binghe

环境说明

这里大家需要注意的是MySQL的主从复制是依赖的MySQL自己的主从复制机制，Mycat不负责MySQL的主从复制，有关MySQL的主从复制配置，大家可以参考博文《MySQL之——主从复制的配置》,好了，我们接下来进入今天的主题内容。

搭建环境

操作系统：CentOS-6.5-x86_64-bin-DVD1.iso

JDK版本：jdk1.8

Mycat版本：Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz (下载源码自行编译的)

Mycat节点IP：192.168.209.133 主机名：liuyazhuang133 主机配置：4核CPU、4G内存

MySQL版本：mysql-5.6.32.tar.gz

主节点IP：192.168.209.131 主机名：liuyazhuang131 主机配置：4核CPU、4G内存

从节点IP：192.168.209.132 主机名：liuyazhuang132 主机配置：4核CPU、4G内存

Mycat部署架构

Mycat的读写分离是基于后端MySQL集群的主从同步来实现的，而Mycat提供语句的分发功能。MyCat1.4开始支持MySQL主从复制状态绑定的读写分离机制，让读更加安全可靠。

我们来看看Mycat的整体部署架构图。

在这里插入图片描述

Mycat的安装

设置主机名和IP与主机名的映射

# vim /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=liuyazhuang133

# vim /etc/hosts
127.0.0.1 liuyazhuang133
192.168.209.131 liuyazhuang131
192.168.209.132 liuyazhuang132
192.168.209.133 liuyazhuang133

配置Java环境变量

因为Mycat是用Java开发的，因此Mycat运行需要安装JDK（准确来说是JRE就够了），并且需要JDK1.7或以上版本

# vim /etc/profile
## java env
export JAVA_HOME=/usr/local/java/jdk1.8
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib/rt.jar
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin
# source /etc/profile
# java -version

上传Mycat安装包

上传Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz 到 MyCat服务器中的/home/mycat目录，并解压并移动到 /usr/local/mycat目录

$ tar -zxvf Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz

# mv /home/mycat/mycat  /usr/local/
# cd /usr/local/mycat/
# ll

在这里插入图片描述

设置Mycat的环境变量

# vim /etc/profile
## mycat env
export MYCAT_HOME=/usr/local/mycat
export PATH=$PATH:$MYCAT_HOME/bin
# source /etc/profile

配置Mycat

确认MySQL主从复制正常

在配置Mycat前，请确认MySQL的主从复制安装配置已完成并正常运行。MySQL主从数据的同步在MySQL中配置，Mycat不负责数据同步的问题。

补充：

  • MySQL主从复制配置中，如果涉及到函数或存储过程的同步复制，需要在/etc/my.cnf中的[mysqld]段中增加配置log_bin_trust_function_creators=true 或在客户端中设置 set global log_bin_trust_function_creators = 1;
  • 如果要做读写分离下的主从切换，那么从节点也有可能会变为写节点，因此从节点就不能设置为只读 read_only=1
  • Linux版本的MySQL，需要设置为MySQL大小写不敏感，否则可能会发生找不到表的问题。可在/etc/my.cnf的[mysqld]段中增加lower_case_table_names=1 。

配置schema.xml

schema.xml是Mycat最重要的配置文件之一，用于设置Mycat的逻辑库、表、数据节点、dataHost等内容，

[root@liuyazhuang133 conf]$ cd /usr/local/root/conf/
[root@liuyazhuang133 conf]$ vi schema.xml

文件内容如下所示。

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
      <schema name="lyz_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="lyz_dn1"></schema>
      <schema name="lyz_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="lyz_dn2"></schema>
      <dataNode name="lyz_dn1" dataHost="dtHost2" database="lyzdb1" />
      <dataNode name="lyz_dn2" dataHost="dtHost2" database="lyzdb2" />
      <dataHost name="dtHost2" maxCon="500" minCon="20" balance="1"
           writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
           <heartbeat>show slave status</heartbeat>
           <!-- can have multi write hosts -->
           <writeHost host="hostM2" url="192.168.209.131:3306" user="root" password="root" />
           <writeHost host="hostS2" url="192.168.209.132:3306" user="root" password="root" />
      </dataHost>
</mycat:schema>

Mycat1.4开始支持MySQL主从复制状态绑定的读写分离机制，让读更加安全可靠，配置如下：

Mycat心跳检查语句配置为 show slave status ，dataHost 上定义两个新属性：switchType=“2” 与 slaveThreshold=“100”，此时意味着开启MySQL主从复制状态绑定的读写分离与切换机制，MyCat心跳机制通过检测 show slave status 中的 “Seconds_Behind_Master”, “Slave_IO_Running”, “Slave_SQL_Running” 三个字段来确定当前主从同步的状态以及Seconds_Behind_Master主从复制时延，当Seconds_Behind_Master 大于slaveThreshold时，读写分离筛选器会过滤掉此Slave机器，防止读到很久之前的旧数据，而当主节点宕机后，切换逻辑会检查Slave上的Seconds_Behind_Master是否为0，为0时则表示主从同步，可以安全切换，否则不会切换。

配置 server.xml

server.xml 主要用于设置系统变量、管理用户、设置用户权限等。

[root@liuyazhuang133 conf]$ vim server.xml

文件内容如下所示。

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
      <system>
		<property name="defaultSqlParser">druidparser</property>
		<property name="charset">utf8mb4</property>
		  </system>
		  <user name="lyz">
			   <property name="password">lyz.123</property>
			   <property name="schemas">lyz_schema1,lyz_schema2</property>
		  </user>
		  <user name="userlyz">
			   <property name="password">lyz.123</property>
			   <property name="schemas">lyz_schema1,lyz_schema2</property>
			   <property name="readOnly">true</property>
		  </user>
</mycat:server>

防火墙中打开8066和9066端口

Mycat的默认数据端口为8066，mycat通过这个端口接收数据库客户端的访问请求。

管理端口为9066，用来接收Mycat监控命令、查询Mycat运行状况、重新加载配置文件等。

[root@liuyazhuang133 mycat]# vim /etc/sysconfig/iptables

增加：

## MyCat
-A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT

重启防火墙：

[root@liuyazhuang133 mycat]# service iptables restart

修改log日志级别为debug

修改log日志级别为debug，以便通过日志确认基于Mycat的MySQL数据库集群读写分离的数据操作状态（可以在正式上生产前改成info级别）

[root@liuyazhuang133 conf]$ vim /usr/local/mycat/conf/log4j.xml

在这里插入图片描述

启动Mycat

[root@liuyazhuang133 bin]$ cd /usr/local/root/bin/

(1) 控制台启动，这种启动方式在控制台关闭后，Nycat服务也将关闭，适合调试使用：

[root@liuyazhuang133 bin]$ ./mycat console

(2) 可以采用以下后台启动的方式：

[root@liuyazhuang133 bin]$ ./mycat start
Starting root-server...

Mycat连接测试

(1) 如果本地Windows安装有MySQL，可以使用已有的mysql客户端远程操作Mycat

在这里插入图片描述

在这里插入图片描述

(2) Nativecat连接Mycat

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

读写分离测试

(1) 监听Mycat日志

[root@liuyazhuang133 ~]$ cd /usr/local/mycat/logs/
[root@liuyazhuang133 logs]$ tail -f mycat.log

(2) 读测试

$ mysql -uuserlyz -plyz.123 -h192.168.209.233 -P8066
mysql> show databases;

在这里插入图片描述

mysql> use lyz_schema2;

在这里插入图片描述

mysql> show tables;

在这里插入图片描述

mysql> select * from lyz_user_02;

在这里插入图片描述

执行上面的查询语句，此时对应的Mycat日志信息如下：

在这里插入图片描述

多次执行 select * from lyz_user_02 语句，Mycat打印出来的日志信息显示读操作请求都是路由到Slave节点（192.168.209.132）

写测试

mysql> insert into lyz_user_02 (userName, pwd) values('liuyazhuang', 'lyz。123');

在这里插入图片描述

执行上面的新增插入语句后，此时对应的Mycat日志信息如下：

在这里插入图片描述
多次执行以上插入语句，发现新增数据都是从 Master节点（192.168.209.131）插进入的，并且Slave节点通过Binlog同步了Master节点中的数据。

在这里插入图片描述
在这里插入图片描述

综上，基于Mycat的读写分离集群配置成功。如果文章对你有有点帮助，麻烦小伙伴们点个赞，给个在看和转发哦~~。

好了，今天就到这儿吧，我是冰河，我们下期见~~

重磅福利

微信搜一搜【冰河技术】微信公众号，关注这个有深度的程序员，每天阅读超硬核技术干货，公众号内回复【PDF】有我准备的一线大厂面试资料和我原创的超硬核PDF技术文档，以及我为大家精心准备的多套简历模板（不断更新中），希望大家都能找到心仪的工作，学习是一条时而郁郁寡欢，时而开怀大笑的路，加油。如果你通过努力成功进入到了心仪的公司，一定不要懈怠放松，职场成长和新技术学习一样，不进则退。如果有幸我们江湖再见！

另外，我开源的各个PDF，后续我都会持续更新和维护，感谢大家长期以来对冰河的支持！！

冰 河
关注
专栏目录
MySQL读写分离神器：MyCat浅析
NewTyun的博客
04-25 674
新钛云服已为您服务1470天前言：在如今的互联⽹时代，⼤数据已成为⾏业发展的⼀个重要⻛向标，⽽对于海量数据的处理⼜成为⽆论是技术还是业务发展中都不可回避的重要问题。数据量越来越⼤，对性能要求越来越⾼；对于⼤量数据的存储的现在主要分为两种数据库：关系型数据库和 NoSQL 数据库。传统数据库天然存在着单机单库瓶颈、难于扩展；⽽ NoSQL 产品的出现虽然弥补了传统数据库...
Mycat实现MySQL读写分离
夏颜的博客
07-13 662
① 面对越来越大的访问压力，单台的服务器的性能成为瓶颈，需要分担负载 ② 主从只负责各自的写和读，极大程度的缓解 X 锁和S 锁争用 ③ 从库可配置myisam 引擎，提升查询性能以及节约系统开销 ④ 增加冗余，提高可用性基本的原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT 查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库① Cobar： 阿里巴巴B2B 开发的关系型分布式系统，管理将近 3000 个MySQL
中间件Mycat如何实现读写分离
Moshizhu的博客
06-20 287
Mycat适用的场景很丰富，以下是几个典型的应用场景1.单纯的读写分离，此时配置最为简单，支持读写分离，主从切换2.分表分库，对于超过1000万的表进行分片，最大支持1000亿的单表分片3.多租户应用，每个应用一个库，但应用程序只连接Mycat，从而不改造程序本身，实现多租户化报表系统，借助于Mycat的分表能力，处理大规模报表的统计4.替代Hbase，分析大数据，作为海量数据实时查询的一种简单有效方案，比如100亿条频繁查询的记录需要在3秒内查询出来结果，除了基于主键的查询，还可能存在范围查询或其他属性查
Mycat之——错误处理总结
冰河的专栏
08-13 9862
1、报错1 mysql> INSERT INTO t_order(ID,SN,CREATE_TIME) VALUES(1,'2BJ0001001',NOW()); ERROR 1064 (HY000): For input string: "2BJ0001001" mysql> 报错是因为分片字段是str字符串，所以需要修改分片规则1中type从0改成1，0是数字型分片，1是字符串分片
Mycat - 高可用与负载均衡实现，满满的干货！
weixin_30301183的博客
01-23 437
前言 　　开心一刻 　　　　和朋友去吃小龙虾，隔壁桌一个小女孩问妈妈:"妈妈，小龙虾回不了家，它妈妈会不会着急?" 她妈妈愣住了，我扒虾的手停下了，这么善良的问题，怎么下得了口。这是老板急忙过来解围:"不会的，不会的，它们全家都在这了。" 　　路漫漫其修远兮，吾将上下而求索！ 　　github：https://github.com/youzhibing 　　码云(gitee)：ht...
Mycat之——Mycat的限制
冰河的专栏
03-16 1934
不支持的SQL语句 create table like xxx create table select xxx select for update select lock in share mode select into outfile/into var_name 不支持跨库多表关联查询、子查询。 不支持多表UPDATE或者UPDATE分片键。 不支持跨分片的update/dele...
MyCat集群部署（HAProxy + MyCat）
adovosr4302的博客
11-23 766
本文档内容的依赖龙果学院《基于Dubbo的分布式系统架构实战》课程 二、软件版本 操作系统：CentOS-6.6-x86_64 JDK版本：jdk1.7.0_72 HAProxy版本：haproxy-1.5.16.tar.gz MyCat版本：Mycat-server-1.4-release-20151019230038-linux.tar.gz MySQL版本：mysq...
冰河，能讲讲Mycat如何实现MySQL的读写分离吗？，java程序员面试笔试宝典pdf
最新发布
2401_84440157的博客
04-21 744
其它面试题（springboot、mybatis、并发、java中高级面试总结等）网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注Java）一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！面试题总结。
冰河，能讲讲Mycat如何实现MySQL的读写分离吗？，javamybatis面试题
m0_58269520的博客
03-21 821
无论是哪家公司，都很重视Spring框架技术，重视基础，所以千万别小看任何知识。面试是一个双向选择的过程，不要抱着畏惧的心态去面试，不利于自己的发挥。同时看中的应该不止薪资，还要看你是不是真的喜欢这家公司，好了希望这篇文章对大家有帮助！部分截图：由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注Java）
MySQL搭建主从复制 读写分离 分库分表 MyCat高可用
思维小刀
12-14 689
Mysql主从复制 环境的介绍 系统环境:centos7.0 客户端连接工具:xshell 远程文件传输工具:xftp 服务器: 192.168.126.138(主) 192.168.126.139(从) 基于rpm实现MySQL的安装 #查看有没有安装MySQL rpm -qa | grep -i mysql #卸载 rpm -e --nodeps mysql-community-client-5.7.28-1.el7.x86_64 #查找 find / -name mysql #删除.
基于Mycat实现Mysql读写分离以及分库分表.doc
09-22
基于Mycat实现Mysql读写分离以及分库分表详解 本文档详细介绍了基于Mycat实现Mysql读写分离以及分库分表的技术，涵盖了Mycat安装、配置、读写分离、分库分表等多方面的知识点。 一、读写分离 Mycat读写分离是指将...
Mycat实现mysql主从读写分离的配置文件
01-18
这是Mycat实现mysql主从读写分离时用到的的配置文件。 内容包括：schema.xml和server.xml。 请根据实际情况替换里面的数据库地址、用户、密码。 相关操作教程：...
mysql与mycat的读写分离
05-15
本文介绍了MySQL与Mycat读写分离的基本概念及其实现过程，包括MySQL主从配置、表创建策略以及Mycat读写分离机制的启用方法。通过这种方式，不仅可以提高系统的整体性能，还可以增强系统的稳定性和可扩展性。在实际...
sharding-jdbc之——分库分表实例
热门推荐
冰河的专栏
02-25 8万+
转载请注明出处：http://blog.csdn.net/l1028386804/article/details/79368021一、概述之前，我们介绍了利用Mycat进行分库分表操作，Mycat分表操作是利用分库来进行的，单个库中的分表操作可结合MySQL的分区进行，这也是Mycat官方提倡的方式。那么，如何利用Mycat真正实现数据库的分库分表，可以私信我。今天，我们来看看sharding-j...
硬核！4.5万字手把手教你搭建MySQL海量数据存储架构！！（全程实战，建议收藏）
冰河的专栏
06-09 4万+
MySQL数据库到底能存储多少数据呢？很多小伙伴可能会觉得MySQL数据库存储的数据量不大，不能支撑起大数据量的存储与读写性能。实则不然，只要架构设计得当，MySQL其实完全可以存储海量数据，并且在海量数据的存储下提供良好的读写性能。
Mycat之——高可用负载均衡集群的实现（HAProxy + Keepalived + Mycat）
冰河的专栏
07-30 2万+
本文是在博文《Mycat之——Mycat集群部署（基于HAProxy + Mycat）》的基础上，实现高可用负载均衡，若还没有阅读博文《Mycat之——Mycat集群部署（基于HAProxy + Mycat）》，请先阅读博文《Mycat之——Mycat集群部署（基于HAProxy + Mycat）》。 一、本文要解决的问题 在博文《Mycat之——Mycat集群部署（基于HAProxy +
Mycat之——Mycat集群部署（基于HAProxy + Mycat）
冰河的专栏
07-19 1万+
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/75331934 一、软件版本 操作系统：CentOS-6.5-x86_64 JDK版本：jdk1.7.0_80 HAProxy版本：haproxy-1.5.19.tar.gz Mycat版本：Mycat-server-1.5.1-RELEASE-20170717215510-li...
Mycat之——配置文件schema.xml
冰河的专栏
11-28 1万+
今天，给大家带来一篇数据库中间件——Mycat的文章，Schema.xml作为MyCat中重要的配置文件之一，管理着MyCat的逻辑库、表、分片规则、DataNode以及DataSource。弄懂这些配置，是正确使用MyCat的前提。这里就一层层对该文件进行解析。 select user()
Mycat之——Mycat在MySQL主从复制基础上实现读写分离
冰河的专栏
07-17 6929
今天，给大家带来一篇Mycat在MySQL主从复制的基础上实现读写分离，这里大家需要注意的是MySQL的主从复制是依赖的MySQL自己的主从复制机制，Mycat不负责MySQL的主从复制，有关MySQL的主从复制配置，大家可以参考博文《MySQL之——主从复制的配置》,好了，我们接下来进入今天的主题内容。 一、环境 操作系统：CentOS-6.5-x86_64-bin-DVD1.iso
使用Mycat实现MySQL读写分离的全步骤指南
"mycat实现mysql数据库读写分离.pdf" 这篇文档详细介绍了如何利用Mycat实现MySQL数据库的读写分离，包括了实验环境的设定、所需软件的下载与安装、配置文件的修改、数据库主从配置以及Mycat的读写分离设置，并提供...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

冰 河

可以吃鸡腿么？

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值