MyCAT数据库分片（一）

1. MyCAT介绍

1.1. 什么是MyCAT？

简单的说，MyCAT就是：

•一个彻底开源的，面向企业应用开发的“大数据库集群”

•支持事务、ACID、可以替代Mysql的加强版数据库

•一个可以视为“Mysql”集群的企业级数据库，用来替代昂贵的Oracle集群

•一个融合内存缓存技术、Nosql技术、HDFS大数据的新型SQL Server

•结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品

•一个新颖的数据库中间件产品

MyCAT的目标是：低成本的将现有的单机数据库和应用平滑迁移到“云”端，解决数据存储和业务规模迅速增长情况下的数据瓶颈问题。

1.2. MyCAT的关键特性

•支持 SQL 92标准
•支持Mysql集群，可以作为Proxy使用
•支持JDBC连接ORACLE、DB2、SQL Server，将其模拟为MySQL Server使用
•支持galera for mysql集群，percona-cluster或者mariadb cluster，提供高可用性数据分片集群
•自动故障切换，高可用性
•支持读写分离，支持Mysql双主多从，以及一主多从的模式
•支持全局表，数据自动分片到多个节点，用于高效表关联查询
•支持独有的基于E-R 关系的分片策略，实现了高效的表关联查询
•多平台支持，部署和实施简单

1.3. MyCAT架构

如图所示：MyCAT使用Mysql的通讯协议模拟成了一个Mysql服务器，并建立了完整的Schema（数据库）、Table （数据表）、User(用户)的逻辑模型，并将这套逻辑模型映射到后端的存储节点DataNode（MySQL Instance）上的真实物理库中，这样一来，所有能使用Mysql的客户端以及编程语言都能将MyCAT当成是Mysql Server来使用，不必开发新的客户端协议。

1.4. Mycat解决的问题

性能问题
数据库连接过多
E-R分片难处理
可用性问题
成本和伸缩性问题

2. Mycat对多数据库的支持

3. 分片策略

MyCAT支持水平分片与垂直分片：
•水平分片：一个表格的数据分割到多个节点上，按照行分隔。（经常用这个）

•垂直分片：一个数据库中多个表格A，B，C，A存储到节点1上，B存储到节点2上，C存储到节点3上。

MyCAT通过定义表的分片规则来实现分片，每个表格可以捆绑一个分片规则，每个分片规则指定一个分片字段并绑定一个函数，来实现动态分片算法。

1、Schema：逻辑库，与MySQL中的Database（数据库）对应，一个逻辑库中定义了所包括的Table。

2、Table：表，即物理数据库中存储的某一张表，与传统数据库不同，这里的表格需要声明其所存储的逻辑数据节点DataNode。在此可以指定表的分片规则。

3、DataNode：MyCAT的逻辑数据节点，是存放table的具体物理节点，也称之为分片节点，通过DataSource来关联到后端某个具体数据库上

4、DataSource：定义某个物理库的访问地址，用于捆绑到Datanode上

4. Mycat的下载及安装

4.1. 下载mycat

官方网站：
http://www.mycat.org.cn/

github地址
https://github.com/MyCATApache
我这边下载好的安装包，文件名
Mycat-server-1.4-release-20151019230038-linux.tar.gz
链接：https://pan.baidu.com/s/1mp9ltIHldYW77OEJn7m6mA
提取码：c1f0

windows的安装包也放在这吧
文件名
Mycat-server-1.4-release-20151019230038-win.tar.gz
链接：https://pan.baidu.com/s/1HFJ1v7WJe6sKP6P9aMIQHA
提取码：w3iw

4.3. Mycat安装(很简单命令就不写了)

第一步：把MyCat的压缩包上传到linux服务器

第二步：解压缩，得到mycat目录

第三步：进入mycat/bin，启动MyCat

启动命令：./mycat start

mycat 支持的命令{ console | start | stop | restart | status | dump }

Mycat的默认端口号为：8066

停止命令：./mycat stop

重启命令：./mycat restart

注意：可以使用mysql的客户端直接连接mycat服务。默认服务端口为8066

5. Mycat分片

5.1. 需求

把商品表分片存储到三个数据节点上。

db1,db3 ,db2里面的表都删完，为空

5.2. 安装环境

mysql节点1环境
操作系统版本 : centos6.4
数据库版本 : mysql-5.6
mycat版本 ：1.4 release
数据库名 : db1、db3
ip:192.168.25.130

mysql节点2环境
操作系统版本 : centos6.4
数据库版本 : mysql-5.6
mycat版本 ：1.4 release
数据库名 : db2
ip:192.168.25.134

mysql 安装见Linux软件安装（二）之Mysql安装

MyCat安装到节点1上（需要安装jdk）

5.3. 配置schema.xml

5.3.1. Schema.xml介绍

Schema.xml作为MyCat中重要的配置文件之一，管理着MyCat的逻辑库、表、分片规则、DataNode以及DataSource。弄懂这些配置，是正确使用MyCat的前提。这里就一层层对该文件进行解析。

schema 标签用于定义MyCat实例中的逻辑库
Table 标签定义了MyCat中的逻辑表
dataNode 标签定义了MyCat中的数据节点，也就是我们通常说所的数据分片。
dataHost标签在mycat逻辑库中也是作为最底层的标签存在，直接定义了具体的数据库实例、读写分离配置和心跳语句。

注意：若是LINUX版本的MYSQL，则需要设置为Mysql大小写不敏感，否则可能会发生表找不到的问题。（我在centos中没有找到这个文件，这个大小写不敏感也不太重要，也可以不配置）

想要更改可以添加这个文件，具体添加过程看我的另一篇博客
https://blog.csdn.net/qq_36335126/article/details/104009075

（安装这个版本带my.cnf
Centos6.4下安装mysql(yum在线安装)）
https://blog.csdn.net/qq_36335126/article/details/103997701

在MySQL的配置文件中/etc/my.cnf [mysqld] 中增加一行
　　lower_case_table_names = 1

5.3.2. Schema.xml配置

进入mycat/conf目录下，这里边保存着mycat的配置文件

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">

   <schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100">
   	<!-- auto sharding by id (long) -->
   	<table name="TB_ITEM" dataNode="dn1,dn2,dn3" rule="auto-sharding-long" />
   	<table name="TB_USER" primaryKey="ID" type="global" dataNode="dn1,dn2" />
   </schema>

   <dataNode name="dn1" dataHost="localhost1" database="db1" />
   <dataNode name="dn2" dataHost="localhost2" database="db2" />
   <dataNode name="dn3" dataHost="localhost1" database="db3" />
   
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"
   	writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
   	<heartbeat>select user()</heartbeat>
   	<!-- can have multi write hosts -->
   	<writeHost host="hostM1" url="192.168.25.130:3306" user="root"
   		password="root">
   		<!-- can have multi read hosts -->

   	</writeHost>
   </dataHost>