分库分表中间件shardingsphere-proxy实战

ITwenhao

已于 2023-03-02 15:46:07 修改

阅读量664

点赞数 1

分类专栏： shardingsphere 文章标签：中间件数据库 java

于 2022-11-18 14:14:59 首次发布

本文链接：https://blog.csdn.net/ITwenhao/article/details/127921322

版权

shardingsphere 专栏收录该内容

2 篇文章 0 订阅

订阅专栏

前言：

在我的上一篇文章中介绍了如何使用shardingsphere做分库分表 shardingsphere按年月分库分表实战_ITwenhao的博客-CSDN博客我们可以看到，在数据库中存在的是通过分表规则创建的真实表，而我们实际业务中是想通过逻辑表查询数据，此时我们需要借助shardingsphere-proxy中间件，作为数据库的代理服务，他可以定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。他可以兼容MySQL/PostgreSQL 协议的访问客户端，比如navicat，SQLyog等客户端工具

下载地址： Index of /dist/shardingsphere

我这里使用的是4.1.0版本，由于上篇文中分库分表使用的4.x的版本，这里为了避免问题使用了对应版本，下载apache-shardingsphere-4.1.0-sharding-jdbc-bin.tar.gz

由于官网上默认没有mysql连接驱动包，首先我们需要下载一个mysql驱动包放在lib包下

在conf目录下有几个配置文件，主要关注的是server.yaml和config-sharding.yaml

server.yaml配置如下：

authentication:
  users:
    root:
      password: 123456
props:
  max.connections.size.per.query: 1
  acceptor.size: 16
  executor.size: 16
  proxy.frontend.flush.threshold: 128
  proxy.transaction.type: LOCAL
  proxy.opentracing.enabled: false
  proxy.hint.enabled: false
  query.with.cipher.column: true
  sql.show: true
  allow.range.query.with.inline.sharding: false

config-sharding.yaml配置如下：


schemaName: sharding
dataSources:
  default_dataSource:
    url: jdbc:mysql://localhost:3306/sharding?userUnicode=ture&characterEncoding=utf8&serverTimezone=GMT%2B8
    username: root
    password: 123456
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
  2020:
    url: jdbc:mysql://localhost:3306/2020_insurance_order?userUnicode=ture&characterEncoding=utf8&serverTimezone=GMT%2B8
    username: root
    password: 123456
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
  2021:
    url: jdbc:mysql://localhost:3306/2021_insurance_order?userUnicode=ture&characterEncoding=utf8&serverTimezone=GMT%2B8
    username: root
    password: 123456
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
  2022:
    url: jdbc:mysql://localhost:3306/2022_insurance_order?userUnicode=ture&characterEncoding=utf8&serverTimezone=GMT%2B8
    username: root
    password: 123456
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
shardingRule:
  tables:
  //insurance_order 为逻辑表名
    insurance_order:
    //actualDataNodes 是按照inline表达式生成的真实表名
      actualDataNodes: 2020.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2020_${1..9},2020.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2020_${10..12},2021.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2021_${1..9},2021.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2021_${10..12},2022.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2022_${1..9},2022.insurance_order_${['pingan','taibao','yangguang','renbao','renshou']}_2022_${10..12}
      databaseStrategy:
      	//分库策略采用的是standard标准分片策略
        standard:
        //preciseAlgorithmClassName和rangeAlgorithmClassName指定分库实现类的全类名
          preciseAlgorithmClassName: com.caoaman.sharding.DatabaseByYearShardingAlgorithm
          rangeAlgorithmClassName: com.caoaman.sharding.RangeDatabaseShardingAlgorithm
          shardingColumn: createTime //按照createTime字段进行按年分库
        //分表策略采用的是complex复合分片策略
      tableStrategy:
        complex:
        //algorithmClassName指定分表实现类的全类名
          algorithmClassName: com.caoaman.sharding.TableByCodeAndMonthShardingAlgorithm
          shardingColumns: createTime,insurCompanyCode //按照createTime和insurCompanyCode复合字段进行按业务code和月分表
  defaultDataSourceName: default_dataSource

上述配置中的全类名需要将源文件打成jar包放入lib中，不然启动shardingsphere-proxy会报错