初识Mycat(Mycat 相关试例)
书接上回先放一张Mycat逻辑库图解
1、Mycat试例相关配置
MyCAT目前通过配置文件的方式来定义逻辑库和相关配置:
1、MYCAT_HOME/conf/schema.xml中定义逻辑库,表、分片节点等内容
2、MYCAT_HOME/conf/rule.xml中定义分片规则
3、MYCAT_HOME/conf/server.xml中定义用户以及系统相关变量,如端口等。
2、Mycat分片
MyCAT支持水平分片与垂直分片:
1、水平分片:一个表格的数据分割到多个节点上,按照行分隔。
2、垂直分片:一个数据库中多个表格A,B,C,A存储到节点1上,B存储到节点2上,C存储到节点3上
3、全局配置(全局表):(建议数据字典表设置为全局
1、可以备份不宜丢失
2、方便关联查询
3、Mycat测试
3、Mycat测试
1、准备
1、10.2.15.136:3306 linux ces1数据库
2、0.2.15.129:3306 linux ces2数据库
3、新建表gl 与 tt
使用mycat管理 ces1 ces2
将gl表在mycat中配置为全局表
将tt表在mycat中配置为水平分片(规则按g_id水平分片)
进行相关测试(相关创建过程不予详述)
以下是我根据上述规则配置的 schema.xml(mycat表关系配置)
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
<schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100">
<!-- testdb逻辑辑库 -->
<!-- 库中垂直拆分 节点 全局 dn1,dn2均存在company表 插入同时写 只要不全蹦可以读 -->
<!-- <table name="mycat_sequence" primaryKey="name" type="global" dataNode="dn1" />
<table name="employee" primaryKey="ID" dataNode="dn1,dn2" rule="sharding-by-intfile"/>
<table name="test" primaryKey="ID" dataNode="dn3"/> -->
<!-- 库中水平拆分 节点 全局 通过sharding-by-intfile规则 按照sharding_id 枚举分片 详细配置在partition-hash-int.txt中-->
<table name="mycat_sequence" primaryKey="name" type="global" dataNode="dn1" />
<table name="gl" primaryKey="ID" dataNode="dn1,dn2" type="global" />
<table name="tt" primaryKey="ID" dataNode="dn1,dn2" rule="auto-sharding-long" />
</schema>
<dataNode name="dn1" dataHost="localhost1" database="ces1" />
<dataNode name="dn2" dataHost="localhost2" database="ces2" />
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<!--对应数据节点实际库 设置读写分离-->
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM1" url="10.2.15.132:3306" user="root"
password="123456">
</writeHost>
</dataHost>
<dataHost name="localhost2" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<writeHost host="hostM1" url="10.2.2.21:3306" user="root"
password="123456">
</writeHost>
</dataHost>
</mycat:schema>
以及我的server.xml(mycat用户服务相关配置)
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License");
- you may not use this file except in compliance with the License. - You
may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0
- - Unless required by applicable law or agreed to in writing, software -
distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT
WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the
License for the specific language governing permissions and - limitations
under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
<system>
<property name="defaultSqlParser">druidparser</property>
<property name="sequnceHandlerType">1</property>
<!-- <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议-->
<!-- <property name="processorBufferChunk">40960</property> -->
<!--
<property name="processors">1</property>
<property name="processorExecutor">32</property>
-->
<!--默认是65535 64K 用于sql解析时最大文本长度 -->
<!--<property name="maxStringLiteralLength">65535</property>-->
<!--<property name="sequnceHandlerType">0</property>-->
<!--<property name="backSocketNoDelay">1</property>-->
<!--<property name="frontSocketNoDelay">1</property>-->
<!--<property name="processorExecutor">16</property>-->
<!--
<property name="mutiNodeLimitType">1</property> 0:开启小数量级(默认) ;1:开启亿级数据排序
<property name="mutiNodePatchSize">100</property> 亿级数量排序批量
<property name="processors">32</property> <property name="processorExecutor">32</property>
<property name="serverPort">8066</property> <property name="managerPort">9066</property>
<property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property>
<property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
</system>
<user name="test">
<property name="password">test</property>
<property name="schemas">TESTDB</property>
</user>
<user name="user">
<property name="password">user</property>
<property name="schemas">TESTDB</property>
<property name="readOnly">true</property>
</user>
<!--
<quarantine>
<whitehost>
<host host="127.0.0.1" user="mycat"/>
<host host="127.0.0.2" user="mycat"/>
</whitehost>
<blacklist check="false"></blacklist>
</quarantine>
-->
</mycat:server>
2、全局序列
数据库方式
原理:在数据库中建立一张表,存放sequence名称(name),sequence当前值(current_value),步长(increment int类型每次读取多少个sequence,假设为K)等信息;
Sequence获取步骤:
1).当初次使用该sequence时,根据传入的sequence名称,从数据库这张表中读取current_value,和increment到MyCat中,并将数据库中的current_value设置为原current_value值+increment值;
2).MyCat将读取到current_value+increment作为本次要使用的sequence值,下次使用时,自动加1,当使用increment次后,执行步骤1)相同的操作.
MyCat负责维护这张表,用到哪些sequence,只需要在这张表中插入一条记录即可。若某次读取的sequence没有用完,系统就停掉了,则这次读取的sequence剩余值不会再使用。
全局序列是为了保证不同分片数据主键唯一由于之前学习使用Mycat是很久之前的事情现在可以用雪花算法保证同表不同分片主键唯一