MyCat笔记(八)：Mycat 全局序列

目录

        全局序列号介绍

1.本地文件方式

2.数据库方式

3.本地时间戳方式

4.分布式ZK ID生成器(未测试)

5. ZK递增方式(未测试)

6.其他方式

---

全局序列号介绍

       在实现分库分表的情况下，数据库自增主键已无法保证自增主键的全局唯一。为此，MyCat 提供了全局 sequence，并且提供了包含本地配置和数据库配置等多种实现方式。

1.本地文件方式

    原理：

        此方式 MyCat 将 sequence 配置到文件中，当使用到 sequence 中的配置后，MyCat 会更新 sequence_conf.properties文件中 sequence 当前的值。

    配置方式：

       1.在 conf/sequence_conf.properties文件中做如下配置。此处为 users 表创建序列，如下图

       

       2.在server.xml 中配置 sequnceHandlerType 属性。0表示使用本地文件方式

      

      (注意：修改配置后，二选一方式。通过 ①MyCat管理端 reload @@config_all  ②重启 mycat 服务，使配置生效)

    使用示例：

      

    优缺点：

         优点：本地加载，读取速度较快。

         缺点：当MyCAT重新发布后，配置文件中的 sequence 会恢复到初始值。

    疑惑之处：

      next value for MYCATSEQ_USERS 如果不加 引号，则会报错：Lost connection to MySQL server during query。查看教程发现不加引号也不会出错，目前不清楚是什么原因。难道是版本的问题？？有知道的可以告诉一下我哈。

---

2.数据库方式

  原理：

        在数据库中建立一张表，存放 sequence 名称(name)，sequence 当前值(current_value)，步长(increment，int类型每次读取多少个sequence，假设为K)等信息；

  Sequence 获取步骤：

    1）当初次使用该 sequence 时，根据传入的 sequence 名称，从数据库这张表中读取 current_value 和 increment 到 MyCat 中，并将数据库中的 current_value 设置为原 current_value 值 + increment 值。

    2）MyCat 将读取到 current_value + increment 作为本次要使用的 sequence 值，下次使用时，自动加1，当使用 increment 次后，执行步骤1)相同的操作。

    3）MyCat 负责维护这张表，用到哪些 sequence，只需要在这张表中插入一条记录即可。若某次读取的 sequence 没有用完，系统就停掉了，则这次读取的sequence剩余值不会再使用。

  配置方式：

       1.在server.xml 中配置 sequnceHandlerType 属性。1表示使用数据库方式

        

  数据库配置：

       注意：MYCAT_SEQUENCE表和创建的3个function函数，需要放在同一个节点上。创建表和 function 请直接在具体节点的数据库上执行。切记别在 MyCat 上执行，需要在真实的物理库中执行！！！本例直接在 db_userHOST1 节点主机执行(节点信息见下图)

   1.创建 MYCAT_SEQUENCE 表（表名可大写，可小写）

表头介绍：
     name    sequence名称
     current_value   当前value
     increment   增长步长! 可理解为mycat在数据库中一次读取多少个sequence. 当这些用完后, 下次再从数据库中读取。

    SQL语句：  

-- 建表语句
DROP TABLE IF EXISTS MYCAT_SEQUENCE;
CREATE TABLE MYCAT_SEQUENCE (name VARCHAR(50) NOT NULL,current_value INT NOT NULL,increment INT NOT NULL DEFAULT 100, PRIMARY KEY(name)) ENGINE=InnoDB;
	
-- 插入具有自增ID的sequence
-- GLOBAL全局序列
INSERT INTO MYCAT_SEQUENCE(name,current_value,increment) VALUES ('GLOBAL', 100000,100);
-- 本例，为users表添加全局序列,如下所示
INSERT INTO MYCAT_SEQUENCE(name,current_value,increment) VALUES ('USERS', 100000,100);

   2.创建存储函数 function

-- 1.传入序列名,获取当前sequence的值
DROP FUNCTION IF EXISTS MYCAT_SEQ_CURRVAL;
DELIMITER $$
CREATE FUNCTION mycat_seq_currval(SEQ_NAME VARCHAR(50)) RETURNS VARCHAR(64) CHARSET utf8
DETERMINISTIC
BEGIN
DECLARE RETVAL VARCHAR(64);
SET RETVAL = "-999999999,NULL";
SELECT CONCAT(CAST(CURRENT_VALUE AS CHAR), ",", CAST(INCREMENT AS CHAR)) INTO RETVAL FROM MYCAT_SEQUENCE WHERE NAME = SEQ_NAME;
RETURN RETVAL;
END$$
DELIMITER ;

 
-- 2.给指定的 sequence 设定值
DROP FUNCTION IF EXISTS MYCAT_SEQ_SETVAL;
DELIMITER $$
CREATE FUNCTION mycat_seq_setval(SEQ_NAME VARCHAR(50),VALUE INTEGER) RETURNS        VARCHAR(64) CHARSET UTF8
DETERMINISTIC
BEGIN
UPDATE MYCAT_SEQUENCE
SET CURRENT_VALUE = VALUE
WHERE NAME = SEQ_NAME;
RETURN MYCAT_SEQ_CURRVAL(SEQ_NAME);
END$$
DELIMITER ;
 
 
-- 3.获取传入序列名的下一个sequence值
DROP FUNCTION IF EXISTS MYCAT_SEQ_NEXTVAL;
DELIMITER $$
CREATE FUNCTION mycat_seq_nextval(SEQ_NAME VARCHAR(50)) RETURNS VARCHAR(64)  CHARSET UTF8
DETERMINISTIC
BEGIN
UPDATE MYCAT_SEQUENCE
SET CURRENT_VALUE = CURRENT_VALUE + INCREMENT WHERE NAME = SEQ_NAME;
RETURN MYCAT_SEQ_CURRVAL(SEQ_NAME);
END$$
DELIMITER ;
 
-- 至此，数据库方面的准备工作已结束完毕。

  schema.xml 配置：(MyCat中修改schema.xml文件，在指定的 schema 中加入 mycat_sequence 表，如下图所示)

-- 在指定的 schema 中加入 mycat_sequence 表
<table name="mycat_sequence" dataNode="db_user_dataNode2"/>

至此位置，创建库、3个函数、schema.xml 配置完成。

       接下来完成对 conf/sequence_db_conf.properties 文件的相关配置，指定 sequence 相关配置在哪个节点上，通过 vim 命令来完成对 sequence_db_conf.properties 文件的配置，如下图所示

至此位置，MyCat 全局序列(数据库方式)配置全部完成。接下来开始测试工作。

(注意：修改配置后，二选一方式。通过 ①MyCat管理端 reload @@config_all  ②重启 mycat 服务，使配置生效)

  测试：(在MyCat中测试)

     数据库方式有如下两种使用方式：①使用next value for MYCATSEQ_XXX   或者   ②指定autoIncrement

     1.next value for MYCATSEQ_XXX 测试

       

     2.指定autoIncrement 测试（修改MyCat配置文件schema.xml，然后 reload @@config_al 或 重启MyCat，使配置生效）

  优缺点：

         优点：在MyCat重启后，sequence值不会被初始化；

         缺点：如果存取sequence的数据库挂了，会遇到单点故障；

---

3.本地时间戳方式

  实现方式：

          ID =  64 位二进制 (42(毫秒)+5(机器 ID)+5(业务编码)+12(重复累加)

          换算成十进制为 18 位数的 long 类型，每毫秒可以并发 12 位二进制的累加。

  配置方式：

    1.在server.xml 中配置 sequnceHandlerType 属性。2表示使用本地时间戳方式

     

    2.在 MyCat 下，对 conf/sequence_time_conf.properties 文件进行配置 

     

   注意：多个MyCat节点下每个mycat配置的 WORKID，DATAACENTERID不同，组成唯一标识，总共支持32*32=1024种组合   

   3.修改MyCat schema.xml 文件，指定 autoIncrement=true

(注意：修改配置后，二选一方式。通过 ①MyCat管理端 reload @@config_all  ②重启 mycat 服务，使配置生效)

  测试：(执行 insert 语句)

insert into users(phoneNum) values('13699999999');

    

      如果出现如上错误：Out of range value for column 'userID' at row 1，说明主键为int 类型，长度不够导致的。使用时间戳的方式实现全局唯一主键的话，主键的类型要是bigint

      修改主键类型为 bigint 后，再次执行 insert 语句，你会看到已经可以成功插入数据，如下图所示。

      

  优缺点：

       优点：不存在上面两种方式(本地文件方式、数据库方式)因为MyCat的重启导致id重复的现象

       缺点：数据类型太长，建议采用bigint(最大取值18446744073709551615）

---

4.分布式ZK ID生成器

    

---

5. ZK递增方式

    

---

6.其他方式

    snowflake 算法

    UUID

    Redis 方式 

    程序本身自动生成ID方式  等

---

发现这本书不错，如有更多需要，可以自行阅读了解

---

Mycat 全局序列 ID，至此介绍完毕

如果本文对你有所帮助，那就给我点个赞呗 ^_^ 

End