一:什么是Mycat?
简单的说,Mycat就是:
一个彻底开源的,面向企业应用开发的"大数据库集群"
支持事务、ACID、可以替代Mysql的加强版数据库
一个可以视为"Mmysql"集群的企业级数据库,用来代替昂贵的Oracle集群。
一个融合内存缓存技术、Nosql技术、HDFS大数据的新型SQL Server
结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品
一个新颖的数据库中间件产品
MyCat的目标是:低成本的将现有的单机数据库和应用平滑移到“云端”解决数据存储和业务规模迅速增长情况下的数据瓶颈问题。
二:Mycat的关键特性
支持SQL92标准
支持Mysql集群,可以作为Proxy使用
支持JDBC链接ORACLE、DB2、SQL Server,将其模拟为MySQL Server使用。
支持galera for mysql集群,percona-cluster或者mariadb cluster,提供高可用性数据分片集群。
自动故障切换,高可用性。
支持读写分离,支持Mysql双主多从,以及一主多从的模式
支持全局表,数据自动分片到多个节点,用于高效表关联查询
支持独有的基于E-R关系的分片策略,实现了高效的表关联查询
多平台支持,部署和实施简单
三:Mycat架构
如图所示:MyCAT使用Mysql的通讯协议模拟成了一个Mysql服务器,并建立了完整的Schema(数据库)、Table (数据表)、User(用户)的逻辑模型,并将这套逻辑模型映射到后端的存储节点DataNode(MySQL Instance)上的真实物理库中,这样一来,所有能使用Mysql的客户端以及编程语言都能将MyCAT当成是Mysql Server来使用,不必开发新的客户端协议。
四:Mycat解决的问题
性能问题
数据库连接过多
E-R分片难处理
可用性问题
成本和伸缩性问题
Mycat支持的数据库如下图所示
五:分片策略
MyCAT支持水平分片与垂直分片:
水平分片:一个表格的数据分割到多个节点上,按照行分隔。
垂直分片:一个数据库中多个表格A,B,C,A存储到节点1上,B存储到节点2上,C存储到节点3上。
MyCAT通过定义表的分片规则来实现分片,每个表格可以捆绑一个分片规则,每个分片规则指定一个分片字段并绑定一个函数,来实现动态分片算法。
1、Schema:逻辑库,与MySQL中的Database(数据库)对应,一个逻辑库中定义了所包括的Table。
2、Table:表,即物理数据库中存储的某一张表,与传统数据库不同,这里的表格需要声明其所存储的逻辑数据节点DataNode。在此可以指定表的分片规则。
3、DataNode:MyCAT的逻辑数据节点,是存放table的具体物理节点,也称之为分片节点,通过DataSource来关联到后端某个具体数据库上
4、Database:定义某个物理库的访问地址,用于捆绑到Datanode上
六:下载和安装Mycat
下载地址:https://github.com/MyCATApache/Mycat-download/tree/master
大家也可以直接到http://download.csdn.net/detail/u012453843/9876344这个地址进行下载。
安装:
需要环境:Linux系统、jdk1.7及以上、mysql5.6
关于jdk的安装,大家可以参考:http://blog.csdn.net/u012453843/article/details/52422736这篇博客进行学习。
关于mysql的安装,大家可以参考:http://blog.csdn.net/u012453843/article/details/73486730这篇博客进行学习
1.将mycat的压缩包上传到服务器
我使用的连接服务器的工具是XShell,大家可以参考:http://blog.csdn.net/u012453843/article/details/54293774这篇博客进行学习
使用rz将开发包上传到服务器上,如下图所示。
[root@taotao-mysql software]# ll
总用量 157912
-rw-r--r--. 1 root root 153530841 5月 8 08:59 jdk-7u80-linux-x64.gz
-rw-r--r--. 1 root root 8152178 6月 21 11:13 Mycat-server-1.4-release-20151019230038-linux.tar.gz
-rw-r--r--. 1 root root 5824 11月 12 2015 mysql-community-release-el6-5.noarch.rpm
[root@taotao-mysql software]#
2.解压缩安装包
[root@taotao-mysql software]# ll
总用量 157912
-rw-r--r--. 1 root root 153530841 5月 8 08:59 jdk-7u80-linux-x64.gz
drwxr-xr-x. 7 root root 4096 6月 21 19:24 mycat
-rw-r--r--. 1 root root 8152178 6月 21 11:13 Mycat-server-1.4-release-20151019230038-linux.tar.gz
-rw-r--r--. 1 root root 5824 11月 12 2015 mysql-community-release-el6-5.noarch.rpm
[root@taotao-mysql software]#
解压后,我们来看看mycat目录下的文件,首先看bin目录,如下所示,其中mycat是用来启动的。
[root@taotao-mysql mycat]# ll bin/
总用量 376
-rwxr-xr-x. 1 root root 15714 10月 19 2015 mycat
-rwxr-xr-x. 1 root root 2947 6月 17 2015 rehash.sh
-rwxr-xr-x. 1 root root 2502 6月 17 2015 startup_nowrap.sh
-rwxr-xr-x. 1 root root 140198 10月 19 2015 wrapper-linux-ppc-64
-rwxr-xr-x. 1 root root 99401 10月 19 2015 wrapper-linux-x86-32
-rwxr-xr-x. 1 root root 111027 10月 19 2015 wrapper-linux-x86-64
接着我们看conf目录,如下所示,该目录下schema.xml文件定义了逻辑表以及如何连接Datanode,连接实际的数据库。server.xml一般是全局的配置,如用户名密码。rule.xml文件则定义了分库分表的规则。这三个文件最重要。
[root@taotao-mysql mycat]# ll conf/
总用量 72
-rwxrwxrwx. 1 root root 88 10月 19 2015 autopartition-long.txt
-rwxrwxrwx. 1 root root 340 10月 19 2015 cacheservice.properties
-rwxrwxrwx. 1 root root 439 10月 19 2015 ehcache.xml
-rwxrwxrwx. 1 root root 931 10月 19 2015 index_to_charset.properties
-rwxrwxrwx. 1 root root 1647 6月 17 2015 log4j.xml
-rwxrwxrwx. 1 root root 15 10月 19 2015 partition-hash-int.txt
-rwxrwxrwx. 1 root root 102 10月 19 2015 partition-range-mod.txt
-rwxrwxrwx. 1 root root 943 10月 19 2015 router.xml
-rwxrwxrwx. 1 root root 4510 10月 19 2015 rule.xml
-rwxrwxrwx. 1 root root 4130 10月 19 2015 schema.xml
-rwxrwxrwx. 1 root root 413 10月 19 2015 sequence_conf.properties
-rwxrwxrwx. 1 root root 75 10月 19 2015 sequence_db_conf.properties
-rwxrwxrwx. 1 root root 51 10月 19 2015 sequence_time_conf.properties
-rwxrwxrwx. 1 root root 2549 10月 19 2015 server.xml
-rwxrwxrwx. 1 root root 4152 10月 19 2015 wrapper.conf
[root@taotao-mysql mycat]#
3.需要对conf目录下的schema.xml、server.xml、rule.xml进行配置(我们暂且不配置)
4.启动mycat
[root@taotao-mysql software]# cd mycat/
[root@taotao-mysql mycat]# ls
bin catlet conf lib logs version.txt
[root@taotao-mysql mycat]# cd bin
[root@taotao-mysql bin]# ll
总用量 376
-rwxr-xr-x. 1 root root 15714 10月 19 2015 mycat
-rwxr-xr-x. 1 root root 2947 6月 17 2015 rehash.sh
-rwxr-xr-x. 1 root root 2502 6月 17 2015 startup_nowrap.sh
-rwxr-xr-x. 1 root root 140198 10月 19 2015 wrapper-linux-ppc-64
-rwxr-xr-x. 1 root root 99401 10月 19 2015 wrapper-linux-x86-32
-rwxr-xr-x. 1 root root 111027 10月 19 2015 wrapper-linux-x86-64
[root@taotao-mysql bin]# ./mycat start
Starting Mycat-server...
[root@taotao-mysql bin]#