mycat分片

官方网站：

http://www.mycat.org.cn/

 

github地址

https://github.com/MyCATApache

 

1.1. Mycat安装

第一步：把MyCat的压缩包上传到linux服务器

第二步：解压缩，得到mycat目录

第三步：进入mycat/bin，启动MyCat

启动命令：./mycat start

停止命令：./mycat stop

重启命令：./mycat restart

 

注意：可以使用mysql的客户端直接连接mycat服务。默认服务端口为8066

1. Mycat分片

1.1. 需求

把商品表分片存储到三个数据节点上。

 

1.2. 安装环境

mysql节点1环境

操作系统版本 : centos6.4

数据库版本 : mysql-5.6

mycat版本 ：1.4 release

数据库名 : db1、db3

ip:192.168.25.134

 

mysql节点2环境

操作系统版本 : centos6.4

数据库版本 : mysql-5.6

mycat版本 ：1.4 release

数据库名 : db2

ip:192.168.25.166

 

MyCat安装到节点1上（需要安装jdk）

 

1.3. 配置schema.xml

1.3.1. Schema.xml介绍

Schema.xml作为MyCat中重要的配置文件之一，管理着MyCat的逻辑库、表、分片规则、DataNode以及DataSource。弄懂这些配置，是正确使用MyCat的前提。这里就一层层对该文件进行解析。

 

schema 标签用于定义MyCat实例中的逻辑库

Table 标签定义了MyCat中的逻辑表

dataNode 标签定义了MyCat中的数据节点，也就是我们通常说所的数据分片。

dataHost标签在mycat逻辑库中也是作为最底层的标签存在，直接定义了具体的数据库实例、读写分离配置和心跳语句。

 

注意：若是LINUX版本的MYSQL，则需要设置为Mysql大小写不敏感，否则可能会发生表找不到的问题。 在MySQL的配置文件中my.ini [mysqld] 中增加一行 　　lower_case_table_names = 1

 

1.3.2. Schema.xml配置

<?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://org.opencloudb/">   <schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100"> <!-- auto sharding by id (long) --> <table name="TB_ITEM" dataNode="dn1,dn2,dn3" rule="auto-sharding-long" /> <table name="TB_USER" primaryKey="ID" type="global" dataNode="dn1,dn2" /> </schema> <dataNode name="dn1" dataHost="localhost1" database="db1" /> <dataNode name="dn2" dataHost="localhost2" database="db2" /> <dataNode name="dn3" dataHost="localhost1" database="db3" /> <dataHost name="localhost1" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100"> <heartbeat>select user()</heartbeat> <!-- can have multi write hosts --> <writeHost host="hostM1" url="192.168.25.134:3306" user="root" password="root"> <!-- can have multi read hosts -->   </writeHost> </dataHost> <dataHost name="localhost2" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100"> <heartbeat>select user()</heartbeat> <!-- can have multi write hosts --> <writeHost host="hostM1" url="192.168.25.166:3306" user="root" password="root"> <!-- can have multi read hosts --> </writeHost> </dataHost> </mycat:schema>

 

1.4. 配置server.xml

 

1.4.1. Server.xml介绍

server.xml几乎保存了所有mycat需要的系统配置信息。最常用的是在此配置用户名、密码及权限。

 

1.4.2. Server.xml配置

<user name="test">     <property name="password">test</property>     <property name="schemas">TESTDB</property>     <property name="readOnly">true</property> </user>

 

1.5. 配置rule.xml

rule.xml里面就定义了我们对表进行拆分所涉及到的规则定义。我们可以灵活的对表使用不同的分片算法，或者对表使用相同的算法但具体的参数不同。这个文件里面主要有tableRule和function这两个标签。在具体使用过程中可以按照需求添加tableRule

和function。

此配置文件可以不用修改，使用默认即可。

1.6. 测试分片

1.6.1. 创建表

配置完毕后，重新启动mycat。使用mysql客户端连接mycat，创建表。

-- ---------------------------- -- Table structure for tb_item -- ---------------------------- DROP TABLE IF EXISTS `tb_item`; CREATE TABLE `tb_item` (   `id` bigint(20) NOT NULL COMMENT '商品id，同时也是商品编号',   `title` varchar(100) NOT NULL COMMENT '商品标题',   `sell_point` varchar(500) DEFAULT NULL COMMENT '商品卖点',   `price` bigint(20) NOT NULL COMMENT '商品价格，单位为：分',   `num` int(10) NOT NULL COMMENT '库存数量',   `barcode` varchar(30) DEFAULT NULL COMMENT '商品条形码',   `image` varchar(500) DEFAULT NULL COMMENT '商品图片',   `cid` bigint(10) NOT NULL COMMENT '所属类目，叶子类目',   `status` tinyint(4) NOT NULL DEFAULT '1' COMMENT '商品状态，1-正常，2-下架，3-删除',   `created` datetime NOT NULL COMMENT '创建时间',   `updated` datetime NOT NULL COMMENT '更新时间',   PRIMARY KEY (`id`),   KEY `cid` (`cid`),   KEY `status` (`status`),   KEY `updated` (`updated`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='商品表';   -- ---------------------------- -- Table structure for tb_user -- ---------------------------- DROP TABLE IF EXISTS `tb_user`; CREATE TABLE `tb_user` (   `id` bigint(20) NOT NULL AUTO_INCREMENT,   `username` varchar(50) NOT NULL COMMENT '用户名',   `password` varchar(32) NOT NULL COMMENT '密码，加密存储',   `phone` varchar(20) DEFAULT NULL COMMENT '注册手机号',   `email` varchar(50) DEFAULT NULL COMMENT '注册邮箱',   `created` datetime NOT NULL,   `updated` datetime NOT NULL,   PRIMARY KEY (`id`),   UNIQUE KEY `username` (`username`) USING BTREE,   UNIQUE KEY `phone` (`phone`) USING BTREE,   UNIQUE KEY `email` (`email`) USING BTREE ) ENGINE=InnoDB AUTO_INCREMENT=37 DEFAULT CHARSET=utf8 COMMENT='用户表';

 

1.6.2. 插入数据

 

将此文件中的数据插入到数据库：

 

1.6.3. 分片测试

由于配置的分片规则为“auto-sharding-long”，所以mycat会根据此规则自动分片。

每个datanode中保存一定数量的数据。根据id进行分片

经测试id范围为：

Datanode1：1~5000000

Datanode2：5000000~10000000

Datanode3：10000001~15000000

 

当15000000以上的id插入时报错：

[Err] 1064 - can't find any valid datanode :TB_ITEM -> ID -> 15000001

此时需要添加节点了。