sharding sphere 4.0.0-RC1版本 按年分表(自动建表)

本文介绍了如何在Sharding Sphere 4.0.0-RC1版本中实现按年自动分表的功能。通过系统初始化时查询并缓存现有表,确保在插入和查询时只操作实际存在的表,避免了手动建表的需要。在插入数据时,如果发现指定年份的表不存在,会先创建表后再进行操作。而在范围查询时,仅从缓存的表中选择,防止查询超出实际范围。
摘要由CSDN通过智能技术生成

1. sharding sphere 4.0.0-RC1版本 按年分表(自动建表)

1.1. 概述

上篇文章留了个坑,sharding sphere本身没有提供自动建表功能,但我想了想,我们可以绕过它本身的设定,它本身的数据分片是通过分片算法实现,如下继承一些接口PreciseShardingAlgorithmRangeShardingAlgorithm等,在范围查询的时候,原本我们需要从availableTargetNames参数去判断已存在的表,从而做到不查不存在的表,插入时也是同样的道理

但是事实上我们可以不需要使用availableTargetNames参数,在系统初始化的时候自行去查询已存在的表再缓存起来,当然过程中我也踩了些坑,因为LogShardingAlgorithm的加载过程和我读数据库的顺序不好控制,理论上我可以随时连接数据库读,但我又需要读到spring加载的配置环境再决定连哪个数据库,不断的测试后还是不好安排,最后采取了如下的方式,在第一次调用分片算法的时候读取并缓存表

这样做后实现的效果就是在做插入数据的时候,我判断日期为2020年的表是否在缓存中,在则说明数据库存在该表,否则我先创建该表,再把该表加入缓存;而做范围查询的时候,我们容易请求参数超范围,则从缓存中的表挑选,这些表才是存在的,比如你数据库存在2018,2019,2020年的表,你查询条件是2017~2021,那么也只会查18,19,20三张表

/**
 * @author: laolia
  • 3
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
以下是一个基于shardingsphere-sharding-boot-starter 5.1.2版本实现分库分表的例子: 1. 添加依赖 在pom.xml文件中添加以下依赖: ```xml <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-jdbc-core</artifactId> <version>5.1.2</version> </dependency> <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-proxy-backend-common</artifactId> <version>5.1.2</version> </dependency> <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-jdbc-core-spring-boot-starter</artifactId> <version>5.1.2</version> </dependency> <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-proxy-frontend-common</artifactId> <version>5.1.2</version> </dependency> <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-proxy-bootstrap</artifactId> <version>5.1.2</version> </dependency> ``` 2. 配置数据源 在application.yml文件中配置数据源信息,例如: ```yaml spring: datasource: sharding: datasource: ds_0: type: com.alibaba.druid.pool.DruidDataSource driverClassName: com.mysql.jdbc.Driver url: jdbc:mysql://localhost:3306/db1?useUnicode=true&characterEncoding=UTF8&serverTimezone=Asia/Shanghai username: root password: root ds_1: type: com.alibaba.druid.pool.DruidDataSource driverClassName: com.mysql.jdbc.Driver url: jdbc:mysql://localhost:3306/db2?useUnicode=true&characterEncoding=UTF8&serverTimezone=Asia/Shanghai username: root password: root # 配置分库规则 shardingRule: # 分库策略 defaultDatabaseStrategy: inline: shardingColumn: user_id algorithmExpression: ds_${user_id % 2} # 分表策略 defaultTableStrategy: inline: shardingColumn: order_id algorithmExpression: t_order_${order_id % 2} # 绑定表 bindingTables: - t_order # 分库分表算法 shardingAlgorithms: inline: type: INLINE props: algorithm-expression: ds_${user_id % 2} algorithm-expression: t_order_${order_id % 2} # 配置默认数据源 url: jdbc:mysql://localhost:3306/db1?useUnicode=true&characterEncoding=UTF8&serverTimezone=Asia/Shanghai username: root password: root driver-class-name: com.mysql.jdbc.Driver ``` 3. 创实体类 创一个简单的实体类,例如: ```java public class Order { private Long orderId; private Long userId; private String status; // getter and setter } ``` 4. 创DAO 创一个简单的DAO类,通过注解来指定表名和主键,例如: ```java @Repository @Mapper public interface OrderDao { @Insert("insert into t_order (order_id, user_id, status) values (#{orderId}, #{userId}, #{status})") @Options(useGeneratedKeys = true, keyProperty = "orderId") int insert(Order order); @Select("select * from t_order where order_id = #{orderId}") @Results({ @Result(column = "order_id", property = "orderId"), @Result(column = "user_id", property = "userId"), @Result(column = "status", property = "status") }) Order selectByPrimaryKey(Long orderId); } ``` 5. 编写测试用例 编写一个简单的测试用例,例如: ```java @RunWith(SpringRunner.class) @SpringBootTest public class OrderDaoTest { @Autowired private OrderDao orderDao; @Test public void testInsert() { Order order = new Order(); order.setUserId(1L); order.setStatus("INIT"); orderDao.insert(order); System.out.println(order.getOrderId()); } @Test public void testSelectByPrimaryKey() { Order order = orderDao.selectByPrimaryKey(1L); System.out.println(order); } } ``` 6. 运行测试用例 通过运行测试用例来验证分库分表是否正常工作。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值