如何进行分表？数据归档和正常分表有区别吗？

最新推荐文章于 2024-09-14 18:46:05 发布

知识分享官

最新推荐文章于 2024-09-14 18:46:05 发布

阅读量271

点赞数 4

文章标签： java

本文链接：https://blog.csdn.net/2301_78976656/article/details/141105203

版权

分表技术选型

分别常见的主要考虑2种分表方案：Sharding-JDBC、利用Mybatis自带的拦截器特性。

JAVA生态中很常用的分表框架是Sharding-JDBC，虽然功能强大，但需要一定的接入成本，并且很多功能暂时用不上。
如果系统本身已经在使用Mybatis了，只需要添加一个mybaits拦截器，把SQL表名替换为新的周期表就可以了，没有接入新框架的成本，开发成本也不高。

分表方案总结

方案一

通过Sharding-JDBC，基于字段Hash取余进行动态路由

整理了这份Java面试笔记包括了：Java面试、Spring、JVM、MyBatis、Redis、MySQL、并发编程、微服务、Linux、Springboot、SpringCloud、MQ、Kafka 面试专题

需要全套面试笔记【点击此处】即可免费获取

properties

代码解读

复制代码

# 配置真实数据源 spring.shardingsphere.datasource.names=server-order0,server-order1 # 配置第 1 个数据源 spring.shardingsphere.datasource.server-order0.type=com.zaxxer.hikari.HikariDataSource spring.shardingsphere.datasource.server-order0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.server-order0.jdbc-url=jdbc:mysql://111.230.25.88:3301/db_order spring.shardingsphere.datasource.server-order0.username=root spring.shardingsphere.datasource.server-order0.password=lisirui. # 配置第 2 个数据源 spring.shardingsphere.datasource.server-order1.type=com.zaxxer.hikari.HikariDataSource spring.shardingsphere.datasource.server-order1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.server-order1.jdbc-url=jdbc:mysql://111.230.25.88:3302/db_order spring.shardingsphere.datasource.server-order1.username=root spring.shardingsphere.datasource.server-order1.password=lisirui. # 标准分片表配置（数据节点） spring.shardingsphere.rules.sharding.tables.t_order.actual-data-nodes=server-order$->{0..1}.t_order$->{0..1} # 分片列名称根据 user_id 进行分表 spring.shardingsphere.rules.sharding.tables.t_order.database-strategy.standard.sharding-column=user_id ...

方案二

通过Mybatis拦截器，动态新增新表

怎么设计表后缀呢？还是这样1,2,3路由？

比如说，我们的业务特性是查最近的一月的数据，按日期的水平拆分是合理的。每月生成一张新表，同时此表只放本月的数据，这样表内数据量得到了控制，不会很大。

通过拦截器获取表名

ini

代码解读

复制代码

String tableName = TemplateMatchService.matchTableName(boundSql.getSql().trim());

根据数据日期进行计算后缀，替换原有 sql，最终执行。

ini

代码解读

复制代码

String rebuildSql = boundSql.getSql().replace(shardingProperty.getTableName(), shardingTable); metaStatementHandler.setValue(ORIGIN_BOUND_SQL, rebuildSql);