概述

在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式。下面对这几种实现方式做一下介绍。


1、本地文件方式

原理:

此方式 MyCAT 将 sequence 配置到文件中,当使用到 sequence 中的配置后,MyCAT 会更下classpath 中的 sequence_conf.properties 文件中 sequence 当前的值。

配置方式:

在 sequence_conf.properties 文件中做如下配置:

GLOBAL_SEQ.HISIDS= GLOBAL_SEQ.MINID=1001 GLOBAL_SEQ.MAXID=1000000000 GLOBAL_SEQ.CURID=1000

其中 HISIDS 表示使用过的历史分段(一般无特殊需要可不配置),MINID 表示最小 ID 值,MAXID 表示最大ID 值,CURID 表示当前 ID 值。

server.xml 中配置:

0

注:sequnceHandlerType 需要配置为 0,表示使用本地文件方式。

使用示例:

insert into table1(id,name) values(next value for MYCATSEQ_GLOBAL,‘test’);

缺点:当 MyCAT 重新发布后,配置文件中的 sequence 会恢复到初始值。

优点:本地加载,读取速度较快。


2、数据库方式

原理:

在数据库中建立一张表,存放 sequence 名称(name),sequence 当前值(current_value),步长(incrementint 类型每次读取多少个 sequence,假设为 K)等信息;

Sequence 获取步骤:

1).当初次使用该 sequence 时,根据传入的 sequence 名称,从数据库这张表中读取 current_value,和increment 到 MyCat 中,并将数据库中的 current_value 设置为原 current_value 值+increment 值。

MyCat 将读取到 current_value+increment 作为本次要使用的 sequence 值,下次使用时,自动加 1,当使用 increment 次后,执行步骤 1)相同的操作。

MyCat 负责维护这张表,用到哪些 sequence,只需要在这张表中插入一条记录即可。若某次读取的sequence 没有用完,系统就停掉了,则这次读取的 sequence 剩余值不会再使用。

配置方式(server.xml 配置):

1

注:sequnceHandlerType 需要配置为 1,表示使用数据库方式生成 sequence。

配置方式(数据库 配置):

1) 创 建 MYCAT_SEQUENCE 表

– 创建存放 sequence 的表DROP TABLE IF EXISTS MYCAT_SEQUENCE;– name sequence 名 称– current_value 当 前 value– increment 增长步长! 可理解为 mycat 在数据库中一次读取多少个 sequence. 当这些用完后, 下次再从数据库中读取。CREATE TABLE MYCAT_SEQUENCE (name VARCHAR(50) NOT NULL,current_value INT NOT NULL,increment INT NOT NULL DEFAULT 100, PRIMARY KEY(name)) ENGINE=InnoDB;– 插入一条 sequenceINSERT INTO MYCAT_SEQUENCE(name,current_value,increment) VALUES (‘GLOBAL’, 100000,100);

2) 创建相关 function

– 获取当前 sequence 的值 (返回当前值,增量)DROP FUNCTION IF EXISTS mycat_seq_currval;DELIMITERCREATE FUNCTION mycat_seq_currval(seq_name VARCHAR(50)) RETURNS varchar(64) CHARSET utf-8DETERMINISTIC BEGINDECLARE retval VARCHAR(64);SET retval=“-999999999,null”;SELECT concat(CAST(current_value AS CHAR),“,”,CAST(increment AS CHAR)) INTO retval FROM MYCAT_SEQUENCE WHERE name = seq_name;RETURN retval; END DELIMITER;– 设 置 sequence 值DROP FUNCTION IF EXISTS mycat_seq_setval; DELIMITERCREATE FUNCTION mycat_seq_setval(seq_name VARCHAR(50),value INTEGER) RETURNS varchar(64) CHARSET utf-8DETERMINISTIC BEGINUPDATE MYCAT_SEQUENCESET current_value = value WHERE name = seq_name;RETURN mycat_seq_currval(seq_name); ENDDELIMITER;​– 获取下一个 sequence 值DROP FUNCTION IF EXISTS mycat_seq_nextval; DELIMITERCREATE FUNCTION mycat_seq_nextval(seq_name VARCHAR(50)) RETURNS varchar(64) CHARSET utf-8DETERMINISTIC BEGINUPDATE MYCAT_SEQUENCESET current_value = current_value + increment WHERE name = seq_name; RETURN mycat_seq_currval(seq_name);END DELIMITER;

3)sequence_db_conf.properties 相关配置,指定 sequence 相关配置在哪个节点上:

例如:

USER_SEQ=test_dn1

注意:MYCAT_SEQUENCE 表和以上的 3 个 function,需要放在同一个节点上。function 请直接在具体节点的数据库上执行,如果执行的时候报:

you might want to use the less safe log_bin_trust_function_creators variable

需要对数据库做如下设置:

windows 下 my.ini[mysqld]加上 log_bin_trust_function_creators=1linux 下/etc/my.cnf 下 my.ini[mysqld]加上 log_bin_trust_function_creators=1

修改完后,即可在 mysql 数据库中执行上面的函数。

使用示例:

insert into table1(id,name) values(next value for MYCATSEQ_GLOBAL,'test');

3、本地时间戳方式

ID= 64 位二进制 (42(毫秒)+5(机器 ID)+5(业务编码)+12(重复累加)

换算成十进制为 18 位数的 long 类型,每毫秒可以并发 12 位二进制的累加。

使用方式:

a. 配置 server.xml

2

b. 在 mycat 下配置:sequence_time_conf.properties

WORKID=0-31 任意整数DATAACENTERID=0-31 任意整数

多个个 mycat 节点下每个 mycat 配置的 WORKID,DATAACENTERID 不同,组成唯一标识,总共支持32*32=1024 种组合。


4、分布式 ZK ID 生成器

3

Zk 的连接信息统一在 myid.properties 的 zkURL 属性中配置。

基于 ZK 与本地配置的分布式 ID 生成器(可以通过 ZK 获取集群(机房)唯一 InstanceID,也可以通过配置文件配置 InstanceID)

ID 结构:long 64 位,ID 最大可占 63 位* |current time millis(微秒时间戳 38 位,可以使用 17 年)|clusterId(机房或者 ZKid,通过配置文件配置 5位)|instanceId(实例 ID,可以通过 ZK 或者配置文件获取,5 位)|threadId(线程 ID,9 位)|increment(自增,6 位)* 一共 63 位,可以承受单机房单机器单线程 1000*(2^6)=640000 的并发。* 无悲观锁,无强竞争,吞吐量更高

配置文件:sequence_distributed_conf.properties,只要配置里面:INSTANCEID=ZK 就是从 ZK 上获取InstanceID。


5、Zk 递增方式

4

Zk 的连接信息统一在 myid.properties 的 zkURL 属性中配置,4 是 zookeeper 实现递增序列号

--配置文件:sequence_conf.properties, 只要配置好 ZK 地址和表名的如下属性* TABLE.MINID 某线程当前区间内最小值* TABLE.MAXID 某线程当前区间内最大值* TABLE.CURID 某线程当前区间内当前值-- 文件配置的 MAXID 以及 MINID 决定每次取得区间,这个对于每个线程或者进程都有效-- 文件中的这三个属性配置只对第一个进程的第一个线程有效,其他线程和进程会动态读取 ZK

6、自增长主键

6.1 MyCAT 自增长主键和返回生成主键 ID 的实现

说明:

1) mysql 本身对非自增长主键,使用 last_insert_id()是不会返回结果的,只会返回 0;

2) mysql只 会对定义自增长主键,可以用last_insert_id() 返 回 主 键 值 ;

MyCAT目前提供了自增长主键功能,但是如果对应的 mysql 节点上数据表,没有定义 auto_increment,那么在 MyCAT 层调用 last_insert_id()也是不会返回结果的。

正确配置方式如下:

1) mysql 定义自增主键

CREATE TABLE table1( 'id_' INT(10) UNSIGNED NOT NULL AUTO_INCREMENT,  'name_' INT(10) UNSIGNED NOT NULL, PRIMARY KEY ('id_') ) ENGINE=MYISAM AUTO_INCREMENT=6 DEFAULT CHARSET=utf8;

2) mycat 定义主键自增

3) mycat 对应 sequence_db_conf.properties 增加相应设置

TABLE1=dn1

4) 在数据库中 mycat_sequence 表中增加 TABLE1 表的 sequence 记录

测试使用:

127.0.0.1/root:[TESTDB> insert into tt2(name_) values(‘t1’);Query OK, 1 row affected (0.14 sec) 127.0.0.1/root:[TESTDB> select last_insert_id();+——————+| LAST_INSERT_ID() |+——————+| 100 |+——————+​1 row in set (0.01 sec) 127.0.0.1/root:[TESTDB> insert into tt2(name_) values(‘t2’); Query OK, 1 row affected (0.00 sec)  127.0.0.1/root:[TESTDB> select last_insert_id(); +——————+| LAST_INSERT_ID() |+——————+| 101 |+——————+1 row in set (0.00 sec)127.0.0.1/root:[TESTDB> insert into tt2(name_) values(‘t3’);Query OK, 1 row affected (0.00 sec) 127.0.0.1/root:[TESTDB> select last_insert_id();+——————+| LAST_INSERT_ID() |+——————+| 102 |+——————+1 row in set (0.00 sec)

Myibatis 中新增记录后获取 last_insert_id 的示例:


觉得有用的朋友多帮忙转发哦!后面会分享更多devops和DBA方面的内容,感兴趣的朋友可以关注下~

mysql序列号生成_一文看懂mycat的6种全局序列号实现方式相关推荐

  1. mysql 缓冲池监控_一文看懂mysql数据库监控指标--缓冲池使用情况

    如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题.为了保证数据库的平稳运行,你可以主动监控以下这个与性能及资源利用率相关的指标:缓冲池使用情况. 缓冲 ...

  2. mysql逻辑设计_一文看懂数据库设计之逻辑设计,值得收藏

    概述 数据库逻辑设计是从事数据库应用设计.开发.运行维护等各方面工作的一个重要的基础性工作.根据不同业务和应用需求,确定并遵循数据库逻辑设计原则,例如按照第三范式开展逻辑设计,不仅能满足减少数据冗余. ...

  3. heartbeat如何监控程序_一文看懂MyCAT 命令行监控命令,监控调优必备

    概述 系统开发中,数据库是非常重要的一个点.除了程序的本身的优化,如:SQL语句优化.代码优化,数据库的处理本身优化也是非常重要的.主从.热备.分表分库等都是系统发展迟早会遇到的技术问题问题.Myca ...

  4. 判别两棵树是否相等 设计算法_一文看懂生成对抗网络 - GANs?(附:10种典型算法+13种应用)...

    生成对抗网络 – GANs 是最近2年很热门的一种无监督算法,他能生成出非常逼真的照片,图像甚至视频.我们手机里的照片处理软件中就会使用到它. 本文将详细介绍生成对抗网络 – GANs 的设计初衷.基 ...

  5. mysql删除分表键_一文看懂 MySQL 分区和分表,提高表增删改查效率

    原标题:一文看懂 MySQL 分区和分表,提高表增删改查效率 作者:冯帅,精通Oracle. MySQL. 擅长异构数据库数据同步及迁移.数据库的设计和调优,对高可用方案有深入研究. MySQL分区和 ...

  6. angular 字符串转换成数字_一文看懂Python列表、元组和字符串操作

    好文推荐,转自CSDN,原作星辰StarDust,感觉写的比自己清晰-大江狗荐语. 序列 序列是具有索引和切片能力的集合. 列表.元组和字符串具有通过索引访问某个具体的值,或通过切片返回一段切片的能力 ...

  7. java rest 序列化_一文看懂Java序列化

    一文看懂Java序列化 简介 首先我们看一下wiki上面对于序列化的解释. 序列化(serialization)在计算机科学的数据处理中,是指将数据结构或对象状态转换成可取用格式(例如存成文件,存于缓 ...

  8. 怎么看电脑系统是win几_一文看懂arm架构和x86架构有什么区别

    一文看懂arm架构和x86架构有什么区别 本文主要介绍的是arm架构和x86架构的区别,首先介绍了ARM架构图,其次介绍了x86架构图,最后从性能.扩展能力.操作系统的兼容性.软件开发的方便性及可使用 ...

  9. 用户画像标签维度_一文看懂用户画像标签体系(包括维度、应用场景)

    一文看懂用户画像标签体系(包括维度.应用场景) 互联网相关企业在建立用户画像时一般除了基于用户维度(userid)建立一套用户标签体系外,还会基于用户使用设备维度(cookieid)建立相应的标签体系 ...

最新文章

  1. Hawk使用补充说明
  2. 周华健,歌声伴我长大(一)
  3. libpython2.7.so.1.0 cannot open的解决方法
  4. requests基础3
  5. Winforn中设置ZedGraph多条Y轴时曲线刻度不均匀问题解决
  6. TensorFlow——[基本图像分类]fashion-mnist及mnist_reader.py运行错误[TypeError: Invalid dimensions for image data]
  7. 数据库MySQL--基础查询
  8. Redis核心配置_Redis高级数据类型使用
  9. c语言switch同时比较多个变量,C语言学习if和switch分支选择结构
  10. 智表ZCELL产品V1.4.0开发API接口文档 与 产品功能清单
  11. linux网卡绑定和漂移,LINUX修改、增加IP的方法,一张网卡绑定多个IP/漂移IP【转】...
  12. 常见排序算法:冒泡排序
  13. 关于邮件服务器应用系统安全SSL ×××(强身份认证)方案
  14. Linux配置防火墙,开启80端口、3306端口
  15. pc软件签名:数字证书的使用
  16. 质因数分解的一些讨论(Pollard-Rho算法)
  17. 由两个重要极限推导常见等价无穷小以及常见导数公式
  18. C++刷题: 逆波兰表达式(力扣150题)
  19. 初生牛犊不怕虎:年轻人的成长之路
  20. 高德地图宣布品牌升级,打造出门好生活开放服务平台

热门文章

  1. 多线程 调用 axis 报错_java笔记录(三、多线程)
  2. 这款插件让你在VSCode上也能答题背单词
  3. Flink应用实战案例50篇(一)- Flink SQL 在京东的优化实战
  4. html中给文章怎么设置行高,css如何设置行距?
  5. java json写入内存_如何在客户端上减少JSON.stringify使用的内存量?
  6. mysql、oracle知识点总结
  7. 天涯明月刀7月4号服务器维护,7月8日服务器例行维护公告
  8. word-break属性和css换行显示
  9. 关于HTML5本地持久化存储的Web SQL、Local Storage、Cookies技术
  10. Bootstrap概述