Java最新太牛逼了，ShardingJdbc基于Zookeeper实现分布式治理(1)，聊聊Java开发的现状和思考

面试题总结

其它面试题（springboot、mybatis、并发、java中高级面试总结等）

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

spring.shardingsphere.rules.sharding.tables.t_order.actual-data-nodes=ds-KaTeX parse error: Expected group after '_' at position 17: …>{0..1}.t_order_̲->{0…1}

spring.shardingsphere.rules.sharding.tables.t_order.table-strategy.standard.sharding-column=order_id

spring.shardingsphere.rules.sharding.tables.t_order.table-strategy.standard.sharding-algorithm-name=t-order-inline

spring.shardingsphere.rules.sharding.tables.t_order.key-generate-strategy.column=order_id

spring.shardingsphere.rules.sharding.tables.t_order.key-generate-strategy.key-generator-name=snowflake

spring.shardingsphere.rules.sharding.sharding-algorithms.database-inline.type=INLINE

spring.shardingsphere.rules.sharding.sharding-algorithms.database-inline.props.algorithm-expression=ds-$->{user_id % 2}

spring.shardingsphere.rules.sharding.sharding-algorithms.t-order-inline.type=INLINE

spring.shardingsphere.rules.sharding.sharding-algorithms.t-order-inline.props.algorithm-expression=t_order_$->{order_id % 2}

spring.shardingsphere.rules.sharding.sharding-algorithms.t-order-item-inline.type=INLINE

spring.shardingsphere.rules.sharding.sharding-algorithms.t-order-item-inline.props.algorithm-expression=t_order_item_$->{order_id % 2}

spring.shardingsphere.rules.sharding.key-generators.snowflake.type=SNOWFLAKE

spring.shardingsphere.rules.sharding.key-generators.snowflake.props.worker-id=123

增加Zookeeper配置

=============

治理名称(在zookeeper上的节点名称)

spring.shardingsphere.governance.name=sharding-jdbc-split-zookeeper

本地配置是否覆盖配置中心配置。如果可覆盖，每次启动都以本地配置为准.

spring.shardingsphere.governance.overwrite=true

Zookeeper/etcd

spring.shardingsphere.governance.registry-center.type=ZooKeeper

spring.shardingsphere.governance.registry-center.server-lists=192.168.221.131:2181

之所以加下面两个参数，是因为默认的链接超时时间是1500毫秒，由于时间较短导致启动时很容易超时，导致连接失败

重试次数

spring.shardingsphere.governance.registry-center.props.maxRetries=4

重试间隔时间

spring.shardingsphere.governance.registry-center.props.retryIntervalMilliseconds=6000

启动项目进行测试

========

启动过程中看到如下日志，表示配置zookeeper成功，启动的时候会先把本地配置保存到zookeeper中，后续我们可以在zookeeper中修改相关配置，然后同步通知给到相关的应用节点。

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:java.io.tmpdir=C:\Users\mayn\AppData\Local\Temp\

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:java.compiler=

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.name=Windows 10

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.arch=amd64

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.version=10.0

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:user.name=mayn

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:user.home=C:\Users\mayn

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:user.dir=E:\教研-课件\vip课程\第五轮\03 高并发组件\09 ShardingSphere基于Zookeeper实现分布式治理\sharding-jdbc-readwrite-zookeeper

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.memory.free=482MB

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.memory.max=7264MB

2021-07-29 21:31:25.007 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Client environment:os.memory.total=501MB

2021-07-29 21:31:25.009 INFO 112916 — [ main] org.apache.zookeeper.ZooKeeper : Initiating client connection, connectString=192.168.221.131:2181 sessionTimeout=60000 watcher=org.apache.curator.ConnectionState@68e2d03e

2021-07-29 21:31:25.012 INFO 112916 — [ main] org.apache.zookeeper.common.X509Util : Setting -D jdk.tls.rejectClientInitiatedRenegotiation=true to disable client-initiated TLS renegotiation

2021-07-29 21:31:25.020 INFO 112916 — [ main] org.apache.zookeeper.ClientCnxnSocket : jute.maxbuffer value is 1048575 Bytes

2021-07-29 21:31:25.023 INFO 112916 — [ main] org.apache.zookeeper.ClientCnxn : zookeeper.request.timeout value is 0. feature enabled=false

2021-07-29 21:31:25.030 INFO 112916 — [ main] o.a.c.f.imps.CuratorFrameworkImpl : Default schema

接着访问如下接口进行测试。

@RestController

@RequestMapping(“/t-order”)

public class TOrderController {

@Autowired

ITOrderService orderService;

@GetMapping

public void init() throws SQLException {

orderService.initEnvironment();

orderService.processSuccess();

}

}

配置中心的数据结构说明

===========

注册中心的数据结构如下

namespace： 就是spring.shardingsphere.governance.name

namespace

├──users # 权限配置

├──props # 属性配置

├──schemas # Schema 配置

├ ├──${schema_1} # Schema 名称1

├ ├ ├──datasource # 数据源配置

├ ├ ├──rule # 规则配置

├ ├ ├──table # 表结构配置

├ ├──${schema_2} # Schema 名称2

├ ├ ├──datasource # 数据源配置

├ ├ ├──rule # 规则配置

├ ├ ├──table # 表结构配置

rules全局配置规则

===========

可包括访问 ShardingSphere-Proxy 用户名和密码的权限配置

• !AUTHORITYusers: - root@%:root - sharding@127.0.0.1:shardingprovider: type: NATIVE

props属性配置

=========

ShardingSphere相关属性配置

executor-size: 20sql-show: true

/schemas/${schemeName}/dataSources

==================================

多个数据库连接池的集合，不同数据库连接池属性自适配（例如：DBCP，C3P0，Druid, HikariCP）。

ds_0: dataSourceClassName: com.zaxxer.hikari.HikariDataSource props: url: jdbc:mysql://127.0.0.1:3306/demo_ds_0?serverTimezone=UTC&useSSL=false password: null maxPoolSize: 50 connectionTimeoutMilliseconds: 30000 idleTimeoutMilliseconds: 60000 minPoolSize: 1 username: root maxLifetimeMilliseconds: 1800000ds_1: dataSourceClassName: com.zaxxer.hikari.HikariDataSource props: url: jdbc:mysql://127.0.0.1:3306/demo_ds_1?serverTimezone=UTC&useSSL=false password: null maxPoolSize: 50 connectionTimeoutMilliseconds: 30000 idleTimeoutMilliseconds: 60000 minPoolSize: 1 username: root maxLifetimeMilliseconds: 1800000

/schemas/${schemeName}/rule

===========================

规则配置，可包括数据分片、读写分离等配置规则

rules:- !SHARDING defaultDatabaseStrategy: standard: shardingAlgorithmName: database-inline shardingColumn: user_id keyGenerators: snowflake: props: worker-id: ‘123’ type: SNOWFLAKE shardingAlgorithms: t-order-inline: props: algorithm-expression: t_order_KaTeX parse error: Expected '}', got 'EOF' at end of input: …expression: ds-->{user_id % 2} type: INLINE t-order-item-inline: props: algorithm-expression: t_order_item_KaTeX parse error: Expected '}', got 'EOF' at end of input: …lDataNodes: ds-->{0…1}.t_order_$->{0…1} keyGenerateStrategy: column: order_id keyGeneratorName: snowflake logicTable: t_order tableStrategy: standard: shardingAlgorithmName: t-order-inline shardingColumn: order_id

/schemas/${schemeName}/table

============================

表结构配置，暂时不支持动态修改

configuredSchemaMetaData: tables: t_order: columns: order_id: caseSensitive: false dataType: 0 generated: true name: order_id primaryKey: true user_id: caseSensitive: false dataType: 0 generated: false name: user_id primaryKey: false address_id: caseSensitive: false dataType: 0 generated: false name: address_id primaryKey: false status: caseSensitive: false dataType: 0 generated: false name: status primaryKey: falseunconfiguredSchemaMetaDataMap: ds-0: - t_order_complex - t_order_interval - t_order_item_complex

动态生效

====

除了table相关的配置无法动态更改之外，其他配置在zookeeper上修改之后，在不重启应用节点时，都会同步到相关服务节点。

比如，我们修改图9-2所示的红色部分的位置，把t_order_$->\mathrm{0..1}修改成t\_order\_$->{0…4}，这样就会生成4个分片，并且取模规则也做相应更改。

然后点击保存后，在不重启应用节点时，重新发起接口测试请求，就可以看到修改成功后的结果。

http://localhost:8080/swagger-ui.html

图9-2 zookeeper配置中心

注册中心节点

======

在zookeeper服务器上，还存在以下节点信息。

namespace ├──states ├ ├──proxynodes ├ ├ ├──$you{r}_{i}nstanc{e}_i{p}_a@${your_instance_pid_x}@$UUID├├├──${your_instance_ip_b}@$you{r}_{i}nstanc{e}_{p}i{d}_y@${UUID} ├ ├ ├──… ├ ├──datanodes ├ ├ ├──$schem{a}_1├├├├──${ds_0} ├ ├ ├ ├──$d{s}_1├├├──${schema_2} ├ ├ ├ ├──$d{s}_0├├├├──${ds_1} ├ ├ ├──…

这个是注册中心节点，用来保存shardingsphere-proxy中间件的服务器实例信息、以及实例运行情况。

运行实例标识由运行服务器的 IP 地址和 PID 构成。

运行实例标识均为临时节点，当实例上线时注册，下线时自动清理。 注册中心监控这些节点的变化来治理运行中实例对数据库的访问等。

由于注册中心会在后续的内容中讲，所以这里暂时不展开。

分布式治理总结

=======

引入zookeeper这样一个角色，可以协助ShardingJDBC完成以下功能

架构学习资料

由于篇幅限制小编，pdf文档的详解资料太全面，细节内容实在太多啦，所以只把部分知识点截图出来粗略的介绍，每个小节点里面都有更细化的内容！

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

存中…(img-Kt31Hz8x-1715430458874)]

[外链图片转存中…(img-EdcKqYSY-1715430458875)]

[外链图片转存中…(img-9NbN8tld-1715430458875)]

由于篇幅限制小编，pdf文档的详解资料太全面，细节内容实在太多啦，所以只把部分知识点截图出来粗略的介绍，每个小节点里面都有更细化的内容！

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取