sharding-jdbc+seata实现分库分表,多数据源整合和seata分布式事务

sharding-jdbc+seata实现分库分表和分布式事务

sharding-jdbc 的相关理论&使用文档参考官网(https://shardingsphere.apache.org/document/legacy/4.x/document/cn/manual/sharding-jdbc/

seata 的相关理论&使用文档参考官网(https://github.com/seata/seata

 

image

 

sharding-jdbc可以理解为增强版的驱动,用户可以通过对图中的蓝色部分类进行创建,然后向上使用黄色工厂来进行创建满足规则的jdbc驱动,实现分库分表和读写分离。

 

工程搭建

本文不引入注册中心等其他组件。

seata-server

参考:https://github.com/seata/seata-workshop

下载解压seata,这里不需要做任何配置修改,因为这里只针对分库分表且多数据源的项目进行分布式事务实现,整合到微服务不是重点。如有需要,参考官网改一下配置就行了。

启动seata-server:指定事务操作记录的存储模式为file

seata-server.sh -p 8091 -m file

 

 

整合到springboot项目

springboot项目地址https://github.com/yangzhouhu/shardingsphere-springboot  用得着的话点个star啊

不论是已有项目,还是新项目。除了引入jar依赖外,还需要引入几个配置文件,参考官网

image.png

参数说明可以参考https://seata.io/zh-cn/docs/user/configurations.html

 

 

sharding-jdbc在数据源创建时的流程

在配置好实际数据源后,调用ShardingDataSourceFactory.createDataSource()方法,流程是这样的

image.png

这里的shardingDataSourceNames初始化,会去掉master和slave的数据库名。

 

ShardingDataSource.java

image.png

注册了路由,sql改写,结果集处理器,会初始化对应的配置的引擎,然后初始化了sharing的运行时上下文shardingRuntimeContext

 

shardingRuntimeContext里边主要是缓存了datasourceMetaData,以及初始化了sharding的事务引擎信息。

image.png

他的顶级父类是个抽象类,有多数据源和单数据源两种实现,这里使用到了多数据源实现

image.png

shardingSphereMetaData里边主要是数据源信息和库信息

image.png

image.png

这里会初始化执行引擎和sqlparser引擎。

 

 

sharding-jdbc在执行insert语句调用时的流程

本项目使用的orm框架为mybatis,在mybatis的PreparedStatementHandler执行sql时,会调用PreparedStatement这个接口的excute()方法,这时,会调用到实现类ShardingPreparedStatement对PreparedStatement这个接口的具体实现(具体实现类的生成则是由AbstractShardingPreparedStatementAdapter来适配的)

ShardingPreparedStatement执行写的一个方法:

image.png

先清理干净prepareStatementExcutor,然后调用

BasePrepareEngine.prepare,根据路由规则来解析sql的逻辑表,以及参数信息,得到该路由映射的真实的库表信息,然后改写sql,然后初始化prepareStatementExcutor,执行prepareStatementExcutor的excute,操作数据库,返回结果集,然后清理结果集对象。

 

如果是查询操作

image.png

会多一步归并结果集的操作。

这个项目只是提供了简单的整合demo,有兴趣深入的可以跟下源码,或者根据业务场景来拓展其他使用。

springboot项目地址https://github.com/yangzhouhu/shardingsphere-springboot 用得着的话点个star啊

另一篇基于sharding-proxy和sharding-scaling不停服数据迁移可以看这里:https://blog.csdn.net/HTslide/article/details/108258562

 

  • 3
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
以下是 Spring Boot 集成 Sharding-JDBC + Mybatis-Plus 实现分库分表的实战代码: 1. 添加依赖 在 `pom.xml` 文件中添加以下依赖: ```xml <dependencies> <!-- Sharding-JDBC --> <dependency> <groupId>io.shardingsphere</groupId> <artifactId>sharding-jdbc-core</artifactId> <version>4.1.1</version> </dependency> <!-- Mybatis-Plus --> <dependency> <groupId>com.baomidou</groupId> <artifactId>mybatis-plus-boot-starter</artifactId> <version>3.4.3</version> </dependency> <!-- MySQL 驱动 --> <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>8.0.24</version> </dependency> </dependencies> ``` 2. 配置数据源 在 `application.yml` 文件中配置数据源: ```yaml spring: datasource: # 主库 master: url: jdbc:mysql://localhost:3306/db_master?useUnicode=true&characterEncoding=utf-8&serverTimezone=Asia/Shanghai username: root password: root driver-class-name: com.mysql.cj.jdbc.Driver # 从库 slave: url: jdbc:mysql://localhost:3306/db_slave?useUnicode=true&characterEncoding=utf-8&serverTimezone=Asia/Shanghai username: root password: root driver-class-name: com.mysql.cj.jdbc.Driver ``` 3. 配置 Sharding-JDBC 在 `application.yml` 文件中配置 Sharding-JDBC: ```yaml spring: shardingsphere: datasource: names: master, slave # 数据源名称 master: type: com.zaxxer.hikari.HikariDataSource slave: type: com.zaxxer.hikari.HikariDataSource config: sharding: tables: user: actualDataNodes: master.user_$->{0..1} # 分表规则,user_0 和 user_1 表 tableStrategy: inline: shardingColumn: id algorithmExpression: user_$->{id % 2} # 分表规则,根据 id 取模 databaseStrategy: inline: shardingColumn: id algorithmExpression: master # 分库规则,根据 id 取模 bindingTables: - user # 绑定表,即需要进行分库分表的表 ``` 4. 配置 Mybatis-Plus 在 `application.yml` 文件中配置 Mybatis-Plus: ```yaml mybatis-plus: configuration: map-underscore-to-camel-case: true # 下划线转驼峰 ``` 5. 编写实体类 创建 `User` 实体类,用于映射数据库中的 `user` 表: ```java @Data public class User { private Long id; private String name; private Integer age; } ``` 6. 编写 Mapper 接口 创建 `UserMapper` 接口,用于定义操作 `user` 表的方法: ```java @Mapper public interface UserMapper extends BaseMapper<User> { } ``` 7. 编写 Service 类 创建 `UserService` 类,用于调用 `UserMapper` 接口中的方法: ```java @Service public class UserService { @Autowired private UserMapper userMapper; public User getById(Long id) { return userMapper.selectById(id); } public boolean save(User user) { return userMapper.insert(user) > 0; } public boolean updateById(User user) { return userMapper.updateById(user) > 0; } public boolean removeById(Long id) { return userMapper.deleteById(id) > 0; } } ``` 8. 测试 在 `UserController` 类中进行测试: ```java @RestController public class UserController { @Autowired private UserService userService; @GetMapping("/user") public User getUser(Long id) { return userService.getById(id); } @PostMapping("/user") public boolean addUser(@RequestBody User user) { return userService.save(user); } @PutMapping("/user") public boolean updateUser(@RequestBody User user) { return userService.updateById(user); } @DeleteMapping("/user") public boolean removeUser(Long id) { return userService.removeById(id); } } ``` 启动应用程序,访问 `http://localhost:8080/user?id=1` 可以得到 `id` 为 1 的用户信息。访问 `http://localhost:8080/user` 并传入用户信息,可以添加用户。访问 `http://localhost:8080/user` 并传入更新后的用户信息,可以更新用户信息。访问 `http://localhost:8080/user?id=1` 并使用 DELETE 方法,可以删除用户。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值