Mycat实现读写分离

一般来说Mysql读写分离实现有两种方式：一种是通过代码层面配置动态多数据源实现；一种是通过代理中间件实现

PS：如果担心Mycat挂掉，可以在Mycat上层加一层Keeplived，Mycat1和Mycat2配置读指向一台服务器，写指向另一台服务器即可。Keeplived的配置方式可以参考：Mysql+Keepalived实现双主热备

一、安装Mycat

#安装Java环境(mycat基于java)
yum install java-1.8.0-openjdk.x86_64 
#下载mycat
wget http://dl.mycat.io/1.6.5/Mycat-server-1.6.5-release-20180122220033-linux.tar.gz
#解压
tar -zxvf Mycat-server-1.6.5-release-20180122220033-linux.tar.gz
#剪切到/usr/local下
mv mycat /usr/local/

二、配置Mycat

1、配置连接信息

Mycat的server.xml配置逻辑库

<user name="root">
    <property name="password">123456</property>
	<property name="schemas">TESTDB</property>
</user>
 
<user name="readOnly">
	<property name="password">123456</property>
	<property name="schemas">TESTDB</property>
	<property name="readOnly">true</property>
</user>

配置说明：

• user标签的name指的是应用连接中间件逻辑库的用户名
• property标签的password指的是应用连接中间件逻辑库的密码
• property标签的schemas指的是数据库配置文件schema.xml里<schemas>标签的name，可以配置一个或多个
• property标签的readOnly指的是应用连接中间件逻辑库具有的权限，true为只读，false为读写，默认为false

2、配置数据库信息

 Mycat的schema.xml配置数据库信息

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
    <!-- <schema name="park" checkSQLschema="false" sqlMaxLimit="100">
        <table name="part" dataNode="dn1,dn2,dn3,dn4" rule="sharding-by-month" />
    </schema> -->
	<schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">  
    </schema>
	<dataNode name="dn1" dataHost="localhost1" database="test" />
    <dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="5">
    <heartbeat>show slave status</heartbeat>
    <!-- can have multi write hosts -->
    <writeHost host="hostM1" url="localhost:3306" user="root" password="root">
        <!-- can have multi read hosts -->
        <readHost host="hostS1" url="localhost:3307" user="root" password="root" />
    </writeHost>
    <writeHost host="hostM2" url="localhost:3308" user="root" password="root"></writeHost>
    </dataHost>
</mycat:schema>

配置说明：

dataHost标签的maxCon指的是每个读写实例连接池的最大连接。也就是说，标签内嵌套的writeHost、readHost标签都会使用这个属性的值来实例化出连接池的最大连接数

dataHost标签的minCon指的是每个读写实例连接池的最小连接，初始化连接池的大小

dataHost标签的balance指的是负载均衡类型，目前的取值有三种：

• balance="0"，不开启读写分离机制，所有读操作都发送到当前可用的writeHost上
• balance="1"，全部的readHost与stand by writeHost参与select语句的负载均衡，简单的说，当双主双从模式(M1->S1，M2->S2，并且M1与M2互为主备)，正常情况下，M2,S1,S2都参与select语句的负载均衡
• balance="2"，所有读操作都随机的在writeHost、readhost上分发
• balance="3"，所有读请求随机的分发到wiriterHost对应的readhost执行，writerHost不负担读压力，注意balance=3只在1.4及其以后版本有，1.3没有

dataHost标签的writeType指的是写类型，目前的取值有三种：

• writeType="0"，所有写操作发送到配置的第一个writeHost，第一个挂了切到还生存的第二个writeHost，重新启动后已切换后的为准，切换记录在配置文件中:dnindex.properties
• writeType="1"，所有写操作都随机的发送到配置的writeHost，1.5以后废弃不推荐
• writeType="2"，不执行写操作

dataHost标签的switchType指的是自动切换类型，目前的取值有四种：

• switchType="-1"，表示不自动切换
• switchType="1"，默认值，自动切换
• switchType="2"，基于MySQL主从同步的状态决定是否切换
• switchType="3"，基于MySQLgalarycluster的切换机制（适合集群）（1.4.1）

第一台写入数据库hostM1宕机后，根据switchType=1会自动切换到hostM2上，当hostM1重启恢复之后，Mycat并不会切换回第一个hostM1写入节点，而是需要重新配置主从状态（Mycat没办法做到像Keeplived那样动态切换，其实Keeplived也可以实现读写分离，实现方式是通过配置两个虚拟IP，一个用来读另一个用来写，但是这种实现方式在代码层面依旧需要配置双数据源），或者把hostM2再关闭下，它就会自动切换回hostM1了

dataHost标签的dbType指的是数据库类型

指定连接的数据库类型，目前支持二进制的mysql协议，还有其他使用JDBC连接的数据库，例如：mongodb、oracle、spark等

dataHost标签的dbDriver指的是连接数据库的驱动

目前可选的值有native和JDBC

• native：因为这个值执行的是二进制的mysql协议，所以可以使用mysql和maridb。其他类型的数据库则需要使用JDBC驱动来支持。从1.6版本开始支持postgresql的native原始协议
• JDBC：需要将符合JDBC 4标准的驱动JAR包放到MYCAT\lib目录下，并检查驱动JAR包中包括如下目录结构的文件：META-INF\services\java.sql.Driver。在这个文件内写上具体的Driver类名，例如：com.mysql.jdbc.Driver

heartbeat标签指的是用于和数据库进行心跳检查的语句。例如，MYSQL可以使用select user()，Oracle可以使用select 1 from dual等。这个标签还有一个connectionInitSql属性，主要是当使用Oracla数据库时，需要执行的初始化SQL语句就这个放到这里面来。例如：altersession set nls_date_format='yyyy-mm-dd hh24:mi:ss'

1.4主从切换的语句必须是：showslave status

writeHost标签、readHost标签：

这两个标签都是指定数据库的相关配置给Mycat，用于实例化连接池。唯一不同的是，writeHost指定写实例、readHost指定读实例。在一个dataHost内可以定义多个writeHost和readHost。但是，如果writeHost指定的数据库宕机，那么这个writeHost绑定的所有readHost都将不可用。另一方面，由于这个writeHost宕机系统会自动的检测到，并切换到备用的writeHost

table标签：想要显示的数据表，table标签的name表示数据表名称

dataHost：配置数据库信息，一个dataHost中可能有多个服务器，这些服务器可能会分担读写任务

dataNode：数据分片，Mycat会根据分片规则（schema标签的rule）将数据写入dataNode对应的数据库中，不同的dataNode中可以使用相同的dataHost

分片举例：用Mycat一直是用编号作为分片依据，最近一个项目中数据库结构不适合以自增编号做分片依据，并且要求加入新数据库服务器之后不能中断服务，经过对现有数据分析，所有表都有一个添加时间字段，那么我们决定用这个字段来按月分片存储数据。这里要先说一下，按月分片的话并不会将数据分布到12个dataNode中，而是每年的每个月对应一个dataNode，也就是2018年1-12月对应12个dataNode，2019年1-12月又对应12个dataNode，也就是每一年就需要用到12个dataNode。当然可以将同一个dataHost放到不同的dataNode中。初期可以根据服务器数量添加Node，到Node用完后可以添加Node节点。schema.xml配置如下：

<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
    <schema name="park" checkSQLschema="false" sqlMaxLimit="100">
    <!-- auto sharding by id (long) -->
    <table name="cars" dataNode="dn$1,dn2,dn3,dn4,dn5,dn6,dn7,dn8,dn9" rule="sharding-by-month" />
    <!-- global table is auto cloned to all defined data nodes ,so can join with any table whose sharding node is in the same data node -->
    </schema>
    <dataNode name="dn1" dataHost="212-3306" database="park" />
    <dataNode name="dn2" dataHost="212-3307" database="park" />
    <dataNode name="dn3" dataHost="212-3308" database="park" />
    <dataNode name="dn4" dataHost="212-3309" database="park" />
    <dataNode name="dn5" dataHost="212-3306" database="park" />
    <dataNode name="dn6" dataHost="212-3307" database="park" />
    <dataNode name="dn7" dataHost="212-3308" database="park" />
    <dataNode name="dn8" dataHost="212-3309" database="park" />
    <dataHost name="212-3306" maxCon="100" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM1" url="192.168.0.212:3306" user="root" password="123456">
        </writeHost>
    </dataHost>
    
    <dataHost name="212-3307" maxCon="100" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM2" url="192.168.0.212:3307" user="root" password="123456">
        </writeHost>
    </dataHost>
    <dataHost name="212-3308" maxCon="100" minCon="10" balance="0"
              writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM3" url="192.168.0.212:3308" user="root" password="123456">
        </writeHost>
    </dataHost>
    <dataHost name="212-3309" maxCon="100" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM4" url="192.168.0.212:3309" user="root" password="123456">
        </writeHost>
    </dataHost>
</mycat:schema>

3、启动Mycat

#切换路径
cd /usr/local/mycat/bin
#重启
./mycat restart