Mycat的使用_尚硅谷视频学习笔记

最新推荐文章于 2024-08-23 15:33:46 发布
最新推荐文章于 2024-08-23 15:33:46 发布
阅读量1.6k 收藏 14
点赞数 2
分类专栏： # JavaEE 文章标签： mycat
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_17079255/article/details/108944499
版权

文章目录

第一章 入门概述

1.1 是什么

Mycat是数据库中间件

1、数据库中间件

中间件：是一类连接软件和应用的计算机软件，以便软件各部件之间的沟通。
例子：Tomcat, web中间件。
数据库中间件：连接java应用的应用程序和数据库。

2、为什么要用Mycat？
1 java与数据库紧耦合
2 高访问量高并发对数据库的压力
3 读写请求数据不一致

3、数据库中间件对比
在这里插入图片描述

  1. Cobar属于阿里B2B事业群，始于2008年，在阿里服役3年多，接管3000+个MySQL数据库的schema,集群日处理在线SQL请求50亿次以上。由于Cobar发起人的离职， Cobar停止维护。
  2. Mycat是开源社区在阿里cobar基础上进行二次开发，解决了cobar存在的问题，并且加入了许多新的功能在其中。青出于蓝而胜于蓝。
  3. OneProxy基于MySQL官方的proxy思想利用c进行开发的， OneProxy是一款商业收费的中间件。舍弃了一些功能，专注在性能和稳定性上。
  4. kingshard由小团队用go语言开发，还需要发展，需要不断完善。
  5. Vitess是Youtube生产在使用， 架构很复杂。不支持MySQL原生协议，使用需要大量改造成本。
  6. Atlas是360团队基于mysql proxy改写，功能还需完善，高并发下不稳定。
  7. MaxScale是mariadb（MySQL原作者维护的一个版本） 研发的中间件
  8. MySQLRoute是MySQL官方Oracle公司发布的中间件

4、Mycat的官网
http://www.mycat.io/

1.2 干什么

1、读写分离
在这里插入图片描述

2、数据分片
垂直拆分（分库）、 水平拆分（分表）、 垂直+水平拆分（分库分表）

在这里插入图片描述

3、多数据源整合
在这里插入图片描述

1.3 原理

Mycat 的原理中最重要的一个动词是“拦截”，它拦截了用户发送过来的 SQL 语句，首先对 SQL语句做了一些特定的分析：如分片分析、路由分析、读写分离分析、缓存分析等，然后将此 SQL 发往后端的真实数据库， 并将返回的结果做适当的处理，最终再返回给用户。
在这里插入图片描述
这种方式把数据库的分布式从代码中解耦出来，程序员察觉不出来后台使用 Mycat 还是MySQL。

第二章 安装启动

2.1 安装

1、 解压后即可使用
解压缩文件拷贝到 linux 下 /usr/local/

2、 三个配置文件

  1. schema.xml： 定义逻辑库，表、分片节点等内容
  2. rule.xml： 定义分片规则
  3. server.xml： 定义用户以及系统相关变量，如端口等

2.2 启动

1、 修改配置文件server.xml
修改用户信息，与MySQL区分， 如下：

…
<user name="mycat">
<property name="password">123456</property>
<property name="schemas">TESTDB</property>
</user>
…

在这里插入图片描述

2、修改配置文件 schema.xml
删除标签间的表信息， 标签只留一个， 标签只留一个， 只留一对

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">

	<schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
	</schema>
	<dataNode name="dn1" dataHost="host1" database="testdb" />
	<dataHost name="host1" maxCon="1000" minCon="10" balance="0"
		writeType="0" dbType="mysql" dbDriver="native" switchType="1"
		slaveThreshold="100">
		<heartbeat>select user()</heartbeat>
		<!-- can have multi write hosts -->
		<writeHost host="hostM1" url="192.168.140.128:3306" user="root"
		password="123123">
			<!-- can have multi read hosts -->
			<readHost host="hostS1" url="192.168.140.127:3306" user="root"
			password="123123" />
		</writeHost>
	</dataHost>
</mycat:schema>

在这里插入图片描述
3、 验证数据库访问情况
Mycat 作为数据库中间件要和数据库部署在不同机器上，所以要验证远程访问情况。

mysql -uroot -p123123 -h 192.168.140.128 -P 3306
mysql -uroot -p123123 -h 192.168.140.127 -P 3306
#如远程访问报错，请建对应用户
grant all privileges on *.* to root@'缺少的host' identified by '123123';

4、 启动程序

  1. 控制台启动 ： 去 mycat/bin 目录下执行 ./mycat console
  2. 后台启动 ：去 mycat/bin 目录下 ./mycat start
    为了能第一时间看到启动日志，方便定位问题，我们选择①控制台启动。

5、 启动时可能出现报错
如果操作系统是 CentOS6.8， 可能会出现域名解析失败错误，如下图
在这里插入图片描述
可以按照以下步骤解决
① 用 vim 修改 /etc/hosts 文件， 在 127.0.0.1 后面增加你的机器名
在这里插入图片描述
② 修改后重新启动网络服务
在这里插入图片描述

2.3 登录

1、登录后台管理窗口
此登录方式用于管理维护 Mycat

mysql -umycat -p123456 -P 9066 -h 192.168.140.128
#常用命令如下：
show database

在这里插入图片描述

show @@help
在这里插入图片描述
2、登录数据窗口
此登录方式用于通过 Mycat 查询数据，我们选择这种方式访问 Mycat

mysql -umycat -p123456 -P 8066 -h 192.168.140.128

第三章 搭建读写分离

我们通过 Mycat 和 MySQL 的主从复制配合搭建数据库的读写分离， 实现 MySQL 的高可用性。我们将搭建：一主一从、双主双从两种读写分离模式。

3.1 搭建一主一从

一个主机用于处理所有写请求，一台从机负责所有读请求，架构图如下
在这里插入图片描述
1、 搭建 MySQL 数据库主从复制
① MySQL 主从复制原理
在这里插入图片描述
② 主机配置(host79)

修改配置文件： vim /etc/my.cnf
#主服务器唯一ID
server-id=1
#启用二进制日志
log-bin=mysql-bin
# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
#设置需要复制的数据库
binlog-do-db=需要复制的主数据库名字
#设置logbin格式
binlog_format=STATEMENT

binlog 日志三种格式
在这里插入图片描述
③ 从机配置(host80)

修改配置文件： vim /etc/my.cnf
#从服务器唯一ID
server-id=2
#启用中继日志
relay-log=mysql-relay

④ 主机、从机重启 MySQL 服务
⑤ 主机从机都关闭防火墙
⑥ 在主机上建立帐户并授权 slave

#在主机MySQL里执行授权命令
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' IDENTIFIED BY '123123';
#查询master的状态
show master status;

在这里插入图片描述

#记录下File和Position的值
#执行完此步骤后不要再操作主服务器MySQL，防止主服务器状态值变化

⑦ 在从机上配置需要复制的主机

#复制主机的命令
CHANGE MASTER TO MASTER_HOST='主机的IP地址',
MASTER_USER='slave',
MASTER_PASSWORD='123123',
MASTER_LOG_FILE='mysql-bin.具体数字',MASTER_LOG_POS=具体值;

在这里插入图片描述

#启动从服务器复制功能
start slave;
#查看从服务器状态
show slave status\G;

在这里插入图片描述

#下面两个参数都是Yes，则说明主从配置成功！
# Slave_IO_Running: Yes
# Slave_SQL_Running: Yes

⑧ 主机新建库、新建表、 insert 记录， 从机复制
在这里插入图片描述
⑨ 如何停止从服务复制功能

stop slave;

⑩ 如何重新配置主从

stop slave;
reset master;

2、 修改 Mycat 的配置文件 schema.xml
之前的配置已分配了读写主机，是否已实现读写分离？

验证读写分离
（1） 在写主机插入： insert into mytbl values (1,@@hostname);
主从主机数据不一致了
（2） 在Mycat里查询： select * from mytbl;

修改的balance属性，通过此属性配置读写分离的类型

负载均衡类型，目前的取值有4 种：
（1） balance="0", 不开启读写分离机制， 所有读操作都发送到当前可用的 writeHost 上。
（2） balance="1"，全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡，简单的说，当双主双从
模式(M1->S1， M2->S2，并且 M1 与 M2 互为主备)，正常情况下， M2,S1,S2 都参与 select 语句的负载均衡。
（3） balance="2"，所有读操作都随机的在 writeHost、 readhost 上分发。
（4） balance="3"，所有读请求随机的分发到 readhost 执行， writerHost 不负担读压力

为了能看到读写分离的效果，把balance设置成2， 会在两个主机间切换查询

…
<dataHost name="host1" maxCon="1000" minCon="10" balance="2"
		writeType="0" dbType="mysql" dbDriver="native" switchType="1"
slaveThreshold="100">
…

在这里插入图片描述

3、 启动 Mycat
4、 验证读写分离

#（1） 在写主机数据库表mytbl中插入带系统变量数据， 造成主从数据不一致
INSERT INTO mytbl VALUES(2,@@hostname);

在这里插入图片描述

#（2） 在Mycat里查询mytbl表,可以看到查询语句在主从两个主机间切换

在这里插入图片描述

3.2 搭建双主双从

一个主机 m1 用于处理所有写请求， 它的从机 s1 和另一台主机 m2 还有它的从机 s2 负责所有读请求。当 m1 主机宕机后， m2 主机负责写请求， m1、 m2 互为备机。 架构图如下
在这里插入图片描述

编号 角色 IP 地址 机器名
1 Master1 192.168.140.128 host79.atguigu
2 Slave1 192.168.140.127 host80.atguigu
3 Master2 192.168.140.126 host81.atguigu
4 Slave2 192.168.140.125 host82.atguigu

1、 搭建 MySQL 数据库主从复制（双主双从）
① 双主机配置
Master1配置

修改配置文件： vim /etc/my.cnf
#主服务器唯一ID
server-id=1
#启用二进制日志
log-bin=mysql-bin
# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
#设置需要复制的数据库
binlog-do-db=需要复制的主数据库名字
#设置logbin格式
binlog_format=STATEMENT
# 在作为从数据库的时候， 有写入操作也要更新二进制日志文件
log-slave-updates
#表示自增长字段每次递增的量，指自增字段的起始值，其默认值是1， 取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长字段从哪个数开始，指字段一次递增多少，他的取值范围是1 .. 65535
auto-increment-offset=1

Master2配置

修改配置文件： vim /etc/my.cnf
#主服务器唯一ID
server-id=3
#启用二进制日志
log-bin=mysql-bin
# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
#设置需要复制的数据库
binlog-do-db=需要复制的主数据库名字
#设置logbin格式
binlog_format=STATEMENT
# 在作为从数据库的时候，有写入操作也要更新二进制日志文件
log-slave-updates
#表示自增长字段每次递增的量，指自增字段的起始值，其默认值是1，取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长字段从哪个数开始，指字段一次递增多少，他的取值范围是1 .. 65535
auto-increment-offset=2

② 双从机配置
Slave1配置

修改配置文件： vim /etc/my.cnf
#从服务器唯一ID
server-id=2
#启用中继日志
relay-log=mysql-relay

Slave2配置

修改配置文件： vim /etc/my.cnf
#从服务器唯一ID
server-id=4
#启用中继日志
relay-log=mysql-relay

③ 双主机、 双从机重启 mysql 服务
④ 主机从机都关闭防火墙
⑤ 在两台主机上建立帐户并授权 slave

#在主机MySQL里执行授权命令
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' IDENTIFIED BY '123123';
#查询Master1的状态
show master status;

在这里插入图片描述

#查询Master2的状态
show master status;

在这里插入图片描述

#分别记录下File和Position的值
#执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化

⑥ 在从机上配置需要复制的主机
Slava1 复制 Master1， Slava2 复制 Master2

#复制主机的命令
CHANGE MASTER TO MASTER_HOST='主机的IP地址',
MASTER_USER='slave',
MASTER_PASSWORD='123123',
MASTER_LOG_FILE='mysql-bin.具体数字',MASTER_LOG_POS=具体值;
Slava1的复制命令

在这里插入图片描述

Slava2的复制命令

在这里插入图片描述

#启动两台从服务器复制功能
start slave;
#查看从服务器状态
show slave status\G;

#Slava1的复制Master1

在这里插入图片描述

#Slava2的复制Master2

在这里插入图片描述

#下面两个参数都是Yes，则说明主从配置成功！
# Slave_IO_Running: Yes
# Slave_SQL_Running: Yes

⑦ 两个主机互相复制
Master2 复制 Master1， Master1 复制 Master2

# Master2的复制命令

在这里插入图片描述

# Master1的复制命令

在这里插入图片描述

#启动两台主服务器复制功能
start slave;
#查看从服务器状态
show slave status\G;

Master2的复制Master1

在这里插入图片描述

Master1的复制Master2

在这里插入图片描述

#下面两个参数都是Yes，则说明主从配置成功！
# Slave_IO_Running: Yes
# Slave_SQL_Running: Yes

⑧ Master1 主机新建库、新建表、 insert 记录， Master2 和从机复制
在这里插入图片描述
⑨ 如何停止从服务复制功能


                

                
                
        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  溯光旅者
                
              
            

            

                关注
              
            

        

        

          
      

      

            

                专栏目录
          









                



	

		

			

				
					
mycat学习教程

				
			

			

				

					12-25
				

			

		

		

			
				
mycat快速上手，安装，测试教程.

			
		

	



                

            
              



	

		

			

				
					
MyCat_In_Action_中文版doc

				
			

			

				

					12-25
				

			

		

		

			
				
MyCat_In_Action_中文版doc,mycat文档，快速上手

			
		

	



              


  
              

                


	

		

			

				
					
Mycat入门教程

					
热门推荐

				
			

			

				

					借你一秒
				

				

					02-24
					
					4万+
					
				

			

		

		

			
				
mycat介绍
介绍在官方网站上有比较详细的介绍，在这里复制粘贴没什么意思，大家到官网上看
官网链接
前置条件本教程是在window环境下运行的，实际生产推荐在Linux上运行。 
必备条件(自行安装,如果不会装请先打好基础在来学习)：
JDK：建议是1.7及其以上。
MySQL：必须是5.5及其以上。
拓扑结构
两张表users和item，三个数据库db01,db02,db03（三个库在一个数据库

			
		

	





	

		

			

				
					
数据库中间MyCat硬核教程，主从复制，分库分表

					
最新发布

				
			

			

				

					lc547913923的专栏
				

				

					08-23
					
					864
					
				

			

		

		

			
				
mycat 分表分库

			
		

	



		

			
		



	

		

			

				
					
Mycat学习入门

				
			

			

				

					Manaphy Chen的博客
				

				

					01-21
					
					816
					
				

			

		

		

			
				
第一章 入门概述
Mycat概述
1、数据库中间件

Mycat 是数据库中间件。
数据库中间件：连接java应用程序和数据库

2、为什么要用Mycat？

Java与数据库紧耦合。
高访问量高并发对数据库的压力。
读写请求数据不一致

3、数据库中间件对比

① Cobar属于阿里B2B事业群，始于2008年，在阿里服役3年多，接管3000+个MySQL数据库的schema,
集群日处理在线S...

			
		

	





	

		

			

				
					
mycat 入门教程

				
			

			

				

					wangjun5159的专栏
				

				

					06-02
					
					1万+
					
				

			

		

		

			
				
mycat 入门教程

			
		

	





	

		

			

				
					
MyCat教程【简单介绍】

				
			

			

				

					波波烤鸭的博客
				

				

					10-15
					
					9290
					
				

			

		

		

			
				
一、MyCat简介
1. 什么是MyCat
  MyCat 是目前最流行的基于 java 语言编写的数据库中间件，是一个实现了 MySQL 协议的服务器，前端用户可以把它看作是一个数据库代理，用 MySQL 客户端工具和命令行访问，而其后端可以用 MySQL 原生协议与多个 MySQL 服务器通信，也可以用 JDBC 协议与大多数主流数据库服务器通信，其核心功能是分库分表。配合数据库的主从模式还可...

			
		

	





	

		

			

				
					
mycatserver_mycatweb_zookeeper.zip

				
			

			

				

					12-31
				

			

		

		

			
				
【标题】"mycatserver_mycatweb_zookeeper.zip" 提供的是一个关于构建mycat集群的软件包，其中包含了mycat服务器、mycatweb管理界面以及zookeeper组件。mycat是一个高性能、分布式的新一代数据库中间件，常用于...

			
		

	





	

		

			

				
					
尚硅谷Java视频教程_Dubbo

				
			

			

				

					09-11
				

			

		

		

			
				
本套视频从分布式系统的基本概念出发，由浅入深，讲解了RPC原理，Dubbo基本使用，Dubbo高可用场景以及Dubbo原理，涉及了分布式系统中服务注册、服务发现、负载均衡、灰度发布、集群容错、服务降级等核心概念的讲解及...

			
		

	





	

		

			

				
					
myecho_/.myecho_myecho_mycat_mycat函数创建_

				
			

			

				

					10-03
				

			

		

		

			
				
"myecho_/.myecho_myecho_mycat_mycat函数创建_"这个标题表明我们将探讨如何创建并使用自定义的`myecho`和`mycat`函数。描述中提到的“实现myecho，mycat，mycp等函数”进一步确认了我们将深入学习这两个函数的实现...

			
		

	





	

		

			

				
					
尚硅谷Mycat笔记（自己整理）

				
			

			

				

					qq_44866424的博客
				

				

					09-07
					
					1059
					
				

			

		

		

			
				
Mycat
一、Mycat入门概述
1、是什么
Mycat 是数据库中间件。

数据库中间件

中间件：是一类连接软件组件和应用的计算机软件，以便于软件各部件之间的沟通。
例子：Tomcat，web中间件。
数据库中间件：连接java应用程序和数据库

为什么要用Mycat？


Java与数据库紧耦合。
高访问量高并发对数据库的压力。
读写请求数据不一致

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-beIXOp3L-1630978519487)(C:\Users\DEL

			
		

	





	

		

			

				
					
Mycat入门学习

				
			

			

				

					张铎
				

				

					01-06
					
					1326
					
				

			

		

		

			
				
1.学习目标

2.MyCat简介
2.1 什么是MyCat
MyCat是目前最流行的基于java语言编写的数据库中间件，是一个实现了MySQL协议的服务器，前端用户可以把它看做是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议与多个MySQL服务器通信，也可以用JDBC协议与大多数主流数据服务器通信，其核心功能是分库分表，配合数据库的主从模式还可以实现读写分离。
MyCat是基于阿里开源的Cobar产品而研发，Cobar的稳定性，可靠性，优秀的架构和性能以及众多成熟的使

			
		

	





	

		

			

				
					
MyCat学习

				
			

			

				

					宏微的博客
				

				

					04-23
					
					2988
					
				

			

		

		

			
				
MyCat

			
		

	





	

		

			

				
					
mycat学习(一)

				
			

			

				

					玛瑙小龙虾的博客
				

				

					05-02
					
					735
					
				

			

		

		

			
				
历史
Mycat是基于开源cobar演变而来，我们对cobar的代码进行了彻底的重构，使用NIO重构了网络模块，并且优化了Buffer内核，增强了聚合，Join等基本特性，同时兼容绝大多数数据库成为通用的数据库中间件。1.4 版本以后 完全的脱离基本cobar内核，结合Mycat集群管理、自动扩容、智能优化，成为高性能的中间件。我们致力于开发高性能数据库中间而努力。永不收费，永不闭源，持续推动开源社区的发展
特性


支持SQL92标准


遵守Mysql原生协议，跨语言，跨平台，跨数据库的通用中间件代理。

			
		

	





	

		

			

				
					
Mycat简单入门

				
			

			

				

					fish332的博客
				

				

					08-14
					
					363
					
				

			

		

		

			
				
mycat集群

			
		

	





	

		

			

				
					
mycat入门

				
			

			

				

					weixin_42132143的博客
				

				

					07-21
					
					303
					
				

			

		

		

			
				
安装
github下载连接
解压即可
配置文件

server.xml

里面配置连接Mycat的用户名、密码（默认root、123456）
TESTDB ：是mycat对外的数据库


schema.xml

读写分离
注意：这个 name=“TESTDN”  必须对应上上面设置的对外的数据库名

<mycat:schema xmlns:mycat="http://io.mycat/">

	<schema name="TESTDB" checkSQLschema="false" sql

			
		

	





	

		

			

				
					
MyCat入门

				
			

			

				

					其实我是个程序员的博客
				

				

					05-27
					
					445
					
				

			

		

		

			
				
一、mycat介绍
目前最流行的分布式数据库中间插件，能满足数据库大量存储，提高查询性能。

二、Mycat架构
前端用户可以把mycat看做一个数据库代理，用mysql客户端工具(Navicat)和命令访问，而后端支持mysql，sqlserver，
Oracle等主流数据库，用mysql native协议和多个mysql服务器通信，也可用JDBC协议和大多数主流数据库服务器通信，
其核心功能就是分库分表，即将一个大表水平切分成N个小表，真正的存储在后端Mysql服务器中或其他数据库中。

三、Mycat

			
		

	





	

		

			

				
					

				
			

			

				

					
				

			

		

		

			
				

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		
评论 2

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值