【云贝学院】云贝学院TDSQL TCP认证课程已上线,学院有不定期公开课 需要进入讨论群的同学加老师微信:19941464235
作者:胡毅
Oracle提供了sequence对象,由系统提供自增长的序列号,用于生成数据库数据记录的自增长主键或序号的地方。如果当前的序列不存在,它会创建一个序列,如果存在,它首先要得到当前序列的最大值,然后再加一,实现自增长的功能。
在TDSQL使用过程用,也有不少金融用户要求能支持ORACLE sequence 一样功能的全局序例。而TDSQL也正是在percona数据库内核中实现了Oracle sequence功能,该功能与oracle原版sequence功能完全相同,没有任何省略和遗漏。TDSQL sequence 完全解决了mysql 自增列的缺陷;
- sequence完全独立与表而存在,不需要作为表的索引第一列;
- 一个表的不同字段可以使用多个sequence产生序列值;
- 一个sequence可以给任意多个表使用产生自增序列值,也可以脱离表的insert/update语句而单独使用。
所有存储引擎上面的表都可以使用sequence功能。当然,对于SBR复制模式来说,与mysql自增列一样,使用sequence仍然会导致主备数据不一致。TDSQL使用RBR复制,所以不存在这个问题。
1、Tdsql Sequence 语法:
创建语法:
CREATE TDSQL_SEQUENCE [dbname.]sequence_name
[start with n]
[tdsql_minvalue n | nominvalue]
[maxvalue n | nomaxvalue]
[tdsql_increment by n]
[TDSQL_NOCYCLE | TDSQL_CYCLE]
说明:
START WITH:指定生成的第一个序列号。在升序时,序列可从比最小值大的值开始,缺省值为序列的最小值。对于降序,序列可由比最大值小的值开始,缺省值为序列的最大值。
TDSQL_INCREMENT BY:指定序列号之间的间隔,该值可为正的或负的整数,但不可为0。序列为升序。忽略该子句时,缺省值为1。
TDSQL_MINVALUE:指定序列的最小值。
MAXVALUE:指定序列可生成的最大值。
TDSQL_NOCYCLE:一直累加,不循环。
下面我们来测试一下 TDSQL 的 SEQUENCE:
#更能proxy 参数,并重启proxy
[root@huyidb01 conf]# pwd
/data/tdsql_run/15002/gateway/conf
[root@huyidb01 conf]# cat instance_15002.cnf | grep sequence
<sequence mode="1"/>
<save_in_db open="1"/>
[root@huyidb03 bin]# ./restart_cgroup.sh instance_15002
stop router_update
OK: router_update of instance_15002 is stopped
stop proxy
OK: MySQL-Proxy of instance_15002 is stopped
rm ../data/instance_15002_embedded_mysql* -rf
port:15002
sh: ./initcgrouphierarchy.sh: No such file or directory
popen file:netstat -apn 2>/dev/null | grep 36000| grep -i LISTEN | awk '{print $4}' | awk -F':' '{print $1}' get buff is empty
hierarchy is empty,after guess is:/sys/fs/cgroup
use ../data as embedded database dir
start router_update
rm /dev/shm/0.0.0.0_15002
zookeeper timeout:10000 msec,msg timeout 30000 msec
kp init success
start proxy
[2020-12-20 16:43:36] pid:65639,we are the init master
OK: MySQL-Proxy of instance_15002 is started
#创建序例
[root@huyidb01 bin]# mysql -uhuyi -phuyi -h10.85.10.51 -P15002 -c
MySQL [(none)]> use huyidb ;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A
Database changed
MySQL [huyidb]> select * from mysql.tdsql_sequences ;
Empty set (0.01 sec)
#创建一个默认参数的sequence
MySQL [huyidb]> create tdsql_sequence huyidb.s1 ;
Query OK, 0 rows affected (0.01 sec)
MySQL [huyidb]> show create tdsql_sequence huyidb.s1 ;
+---------+------------------------------------------------------------------------------------------------------------------------------+
| Table | Create Table |
+---------+------------------------------------------------------------------------------------------------------------------------------+
| huyidb.s1 | create tdsql_sequence huyidb.s1 start with 1 tdsql_minvalue 1 maxvalue 9223372036854775806 tdsql_increment by 1 tdsql_nocycle |
+---------+------------------------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)
#创建一个指定参数的sequence
MySQL [huyidb]> create tdsql_sequence huyidb.s2 start with 1 tdsql_minvalue 1 maxvalue 5 tdsql_increment by 1 tdsql_nocycle ;
Query OK, 0 rows affected (0.01 sec)
#创建一个带缓存的sequence
MySQL [huyidb]> create tdsql_sequence huyidb.s3 start with 1 tdsql_minvalue 1 maxvalue 50 tdsql_increment by 1 cache 10 tdsql_nocycle ;
Query OK, 0 rows affected (0.00 sec)
#虽然创建成功了,但是从生成的语句来看,并没有cache 10 关键字。
MySQL [(none)]> show create tdsql_sequence huyidb.s3;
+-----------+---------------------------------------------------------------------------------------------------------------+
| Table | Create Table |
+-----------+---------------------------------------------------------------------------------------------------------------+
| huyidb.s4 | create tdsql_sequence huyidb.s3 start with 1 tdsql_minvalue 1 maxvalue 50 tdsql_increment by 1 tdsql_nocycle |
+-----------+---------------------------------------------------------------------------------------------------------------+
#创建一张测试表
MySQL [(none)]> create table huyidb.test1 ( a int , b int , c int,primary key (a) ) shardkey=a;
Query OK, 0 rows affected (0.14 sec)
#一个表同时使用多个sequence
MySQL [(none)]> insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s2), tdsql_nextval(huyidb.s3)) ;
Query OK, 1 row affected (0.03 sec)
MySQL [(none)]> select * from huyidb.test1 ;
+---+------+------+
| a | b | c |
+---+------+------+
| 1 | 1 | 1 |
+---+------+------+
1 row in set (0.00 sec)
#多个例使用同一个sequence
insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s1)) ;
MySQL [(none)]> select * from huyidb.test1 ;
+---+------+------+
| a | b | c |
+---+------+------+
| 1 | 1 | 1 |
| 2 | 3 | 4 |
+---+------+------+
2 rows in set (0.00 sec)
# nocycle 达到最大值时会报错。
MySQL [(none)]> truncate table huyidb.test1 ;
MySQL [(none)]> insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s2), tdsql_nextval(huyidb.s2), tdsql_nextval(huyidb.s2)) ;
ERROR 609 (HY000): Proxy ERROR:get sequence id from db error
#查看当前最大序例
MySQL [(none)]> select tdsql_lastval(huyidb.s2);
+---+
| 4 |
+---+
| 4 |
+---+
# 模拟proxy 故障前,我们查看s3序例的当前值为2
insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s3)) ;
MySQL [(none)]> select tdsql_lastval(huyidb.s3);
+---+
| 2 |
+---+
| 2 |
+---+
#kill proxy
ps -ef |grep gateway |grep 15002 | grep -v 'grep'| awk '{print $2}' | xargs kill -9
#在次登录 检查huyidb.s3序例是否连续
MySQL [(none)]> truncate table huyidb.test1 ;
MySQL [(none)]> insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s3)) ;
Query OK, 1 row affected (0.01 sec)
MySQL [(none)]> select tdsql_lastval(huyidb.s3);
+---+
| 3 |
+---+
| 3 |
+---+
1 row in set (0.00 sec)
#我们登录proxy2 上插入 s3序例
mysql -uhuyi -phuyi -h10.85.10.52 -P15002 -c
MySQL [(none)]> insert into huyidb.test1 (a,b,c) values (tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s1), tdsql_nextval(huyidb.s3)) ;
Query OK, 1 row affected (0.02 sec)
MySQL [(none)]> select tdsql_lastval(huyidb.s3);
+---+
| 4 |
+---+
| 4 |
+---+
通过上面实验可以看出sequence可以保证全局唯一,且连续增长。解决了mysql自增例不连续,多个表不能引用同一个自增例,同一个表不能用多个自增例等问题。但也同时带来了新的问题。那就是sequence目前为保证分布式全局唯一,性能较差,适用于并发不高的场景。因为序例值是存在DB中的,每一次使用时,都需要临时去取。
2、SEQUENCE 的查看:
#查看下一个序例值:
MySQL [huyi]> select next value for test.s3 ;
或
MySQL [huyi]> select tdsql_nextval(huyidb.s3);
#查看当前序例值:
MySQL [huyi]> select tdsql_lastval(huyidb.s3);
其它待确认问题:
- 创建sequence时,cache 关键字未生效
- Sequence 创建成功,mysql.tdsql_sequences无数据
- Sequence每次从DB中取值对并发性能的影响
- Sequence 的maxvalue通过proxy 限制
*本文章禁止转载,可转发(转发原创文章请注明出处)