u013938578的博客

twitter开源分布式生成id算法。优点：基本解决了所有问题缺点：每个节点时间可能不同，生成id是整体趋势递增的。

分布式zookeeper生成ID。

本地时间戳方式：使用时间戳方式。

本地文件方式：使用服务器本地磁盘文件的方式。

Mycat的介绍和安装我这里就不写了，不会的，去看我mycat的主题，后续的教程，都是基于mycat专题的环境进行的，不会的可以自己去看一下。下面我们准备一下mycat的集群。

如果ID是连续的，恶意用户的扒取工作就很容易了，直接按顺序下载指定的URL就行，如果订单号就更危险了，竞争对手可以直接知道我们一天的单量。在Mysql的InnoDb引擎中使用的是聚集索引，由于多数据的RDBMS使用的是Btree的数据结构来存储索引数据，在主键的选择上面我们应该尽量敷衍有序的主键保存写入性能。使用数据库的自动增长（auto_increment），是比较简单和常见的ID生成方案，数据库内部可以确保生成id的唯一性。从以上可以从出，一个能够生成全局唯一ID的系统是非常必要的。

主表customer主键为id，关联表orders主键id，customer_id列映射customer表里面id，order_items表 ，无主键，order_id列映射orders 里面的主键id。根据这一思路，提出了基于 E-R 关系的数据分片策略，子表的记录与所关联的父表记录存放在同一个数据分片上，即子表依赖于父表，通过表分组（Table Group）保证数据 Join 不会跨库操作。这样一种表分组的设计方式是解决跨分片数据 join 的一种很好的思路，也是数据切分规划的重要一条规则。

一个真实的业务系统中，往往存在大量的类似字典表的表格，它们与业务表之间可能有关系，这种关系，可以理解为“标签”，而不应理解为通常的“主从关系”，这些表基本上很少变动，可以根据主键 ID进行缓存，下面这张图说明了一个典型的“标签关系”图：在分片的情况下，当业务表因为规模而进行分片以后，业务表与这些附属的字典表之间的关联，就成了比较棘手的问题，考虑到字典表具有以下几个特性：变动不频繁数据量总体变化不大数据规模不大，很少有超过数十万条记录。

按月份列分区 ，每个自然月一个分片，格式 between操作解析的范例。dateFormat ： 日期字符串格式。columns： 分片字段，字符串类型。sBeginDate ： 开始日期。

以后只要使用到字符串的id 类型，就使用jch的算法就ok 了。

配置说明： 上面columns 标识将要分片的表字段，algorithm 分片函数， partitionCount 分片个数列表，partitionLength 分片范围列表 分区长度:默认为最大2^n=1024 ,即最大支持1024分区 约束 : count,length两个数组的长度必须是一致的。此算法的优点在于如果按照 10进制取模运算，在连续插入1-10 时候1-10会被分到1-10个分片，增 大了插入的事务控制难度，而此算法根据二进制则可能会分到连续的分片，减少插入事务事务控制难度。

规则文件为 ​autopartition-long.txt，db1 的表里面，写满500w，才进第二个里面写数据。当数据达到500w 时，才进行分库分表。缺点：没有里面写的负载均衡效果。优点：没有跨区回滚事务的风险。

配置说明： 上面columns 标识将要分片的表字段，algorithm 分片函数， 此种配置非常明确即根据id进行十进制求模预算，相比固定分片hash，此种在批量插入时可能存在批量插入单 事务插入多数据分片，增大事务一致性难度。缺点：批量写入，失败后事务的回滚有难度！db1 db2 db3 (跨数据库的回滚，非常难，很耗费性能）当id=1 时 1%3=1 所以数据到db2。当id=2 时 2%3=2 所以数据到db3。当id=3 时 3%3=0 所以数据到db1。第99 条失败了，执行数据的回滚！

上面columns 标识将要分片的表字段，algorithm 分片函数， 其中分片函数配置中，mapFile标识配置文件名称，type默认值为0，0 表示Integer，非零表示String， 所有的节点配置都是从0开始，及 0代表节点1。如果不配置默认节点（defaultNode值小于0 表示不配置默认节点），碰到 不识别的枚举值就会报错， * like this：can’t find datanode for shardin。默认节点的作用：枚举分片时，如果碰到不识别的枚举值，就让它路由到默认节点。

2. balance="1"，全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡，简单的说，当双主双从模式(M1->S1，M2->S2，并且 M1 与 M2 互为主备)，正常情况下，M2,S1,S2 都参与 select 语句的负载均衡。4. balance="3"，所有读请求随机的分发到 wiriterHost 对应的 readhost 执行，writerHost 不负担读压力，注意 balance=3 只在 1.4 及其以后版本有，1.3 没有。

server.xml配置

是指那些原有的很大数据的表，需要切分到多个表，这样，每个分片都有表的一部分数据，所有分片数据的合集构成了完整的表数据，如图一种中MYCAT服务区的users表即是分片表，通过userID字段取模的方式进行数据的水平切分。逻辑表的数据来源，可以是数据进行切分后，分布在一个或多个分片库中，针对不同的数据分布和管理特点，我们将逻辑表又分为分片表、全局表、ER表、非分片表五种逻辑表类型。一个数据库中并不是所有的表都很大，某些表是可以不用进行切分的，非分片是相对分片表来说的，就是那些不需要进行数据切分的表。

使用mycat要安装JDK.不会的去看Linux里面的安装JDK的知识点，这是不再做说明也可以直接使用yum install java-1.7.0-openjdk 因为mycat 基于jdk1.7开发的，所有最好安装jdk1.7的版本重要说明：Mycat-server-1.6-release 版本发布的版本是基于jdk1.7开发的，所在要安装JDK1.7Mycat-server-1.6.7.1-release 版本发布更新成了JDK1.8所以要安装JDK1.8下面的教程是使用JDK1.8。

1.1 是什么集群（cluster）技术是一种较新的技术，通过集群技术，可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益，其任务调度则是集群系统中的核心技术。MySQL集群技术在分布式系统中为MySQL数据提供了冗余特性，增强了安全性，使得单个MySQL服务器故障不会对系统产生巨大的负面效应，系统的稳定性得到保障。1.2 优点高可伸缩性：服务器集群具有很强的可伸缩性。随着需求和负荷的增长，可以向集群系统添加更多的服务器。在这样的配置中，可以有多台服务器执行相同的应用和数据库操作。

MyCat是目前最流行的分布式数据库中间插件，是一个开源的分布式数据库系统，是一个实现了MySQL协议的服务器，前端用户可以把它看作是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议与多个MySQL服务器通信，也可以用JDBC协议与大多数主流数据库服务器通信，其核心功能是分表分库，即将一个大表水平分割为N个小表，存储在后端MySQL服务器里或者其他数据库里。