sentinelzkdatabase源码解析(限流部分)

已于 2023-08-26 15:21:50 修改
阅读量769 收藏 1
点赞数 1
分类专栏： sentinel 文章标签： java 微服务 sentinel
于 2023-08-26 12:33:58 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_22270363/article/details/132508186
版权

目录

1 项目背景

sentinel没有提供规则持久化的线上实现，只是提供了实现思路。除了api方式外，其他方案都需要添加比较多的代码修改，包括dashboard源码和应用。为避免如此繁琐的行为，采用API+PUSH混合方式实现sentinel zookeeper的持久化。
在这里插入图片描述

2 github项目链接

https://github.com/chlInGithub/sentienlzkdatabase

3 应用启动阶段

3.1 初始化zkClient

CuratorFrameworkFactory.newClient的第二个参数retryPolicy,是指在连接ZK服务过程中重新连接的策略.在它的实现类ExponentialBackoffRetry(int baseSleepTimeMs, int maxRetries)中,baseSleepTimeMs参数代表两次连接的等待时间,maxRetries参数表示最大的尝试连接次数。
在这里插入图片描述

3.2 调用zookeeperDataSource4Flow方法

在这里插入图片描述

3.2.1 ZookeeperDataSource实例化

在这里插入图片描述
在这里插入图片描述

3.2.1.1 initZookeeperListener(serverAddr, authInfos)方法

在这里插入图片描述

在这里插入图片描述

3.2.1.1.1 添加节点监听nodeChanged

在这里插入图片描述
内部调用loadConfig方法，完成从zk读取数据源，并进行格式转换成List类型。

在这里插入图片描述
然后加载到内存中：getProperty().updateValue(newValue);
在这里插入图片描述

3.2.1.1.2 NodeCache实例化及添加监听

在这里插入图片描述
NodeCache作用：使用节点数据作为本地缓存使用。这个类可以对节点进行监听，能够处理节点的增删改事件，数据同步等。 还可以通过注册自定义监听器来更细节的控制这些数据变动操作。

NodeCache实例化：
this.nodeCache = new NodeCache(this.zkClient, this.path);

NodeCache 添加监听：
this.nodeCache.getListenable().addListener(this.listener, ZookeeperDataSource.pool);

ZookeeperDataSource.pool:
public static final ExecutorService pool = new ThreadPoolExecutor(8, 16, 0, TimeUnit.MILLISECONDS,
new ArrayBlockingQueue(100), new NamedThreadFactory(“sentinel-zookeeper-ds-update”),
new ThreadPoolExecutor.DiscardOldestPolicy());

3.2.1.2 loadInitialConfig() 方法
3.2.1.2.1 loadConfig()方法

调用loadConfig()方法，首先调用readSource()方法从zookeeper里面加载配置信息。
在这里插入图片描述
在这里插入图片描述
configInfo信息：

[
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 5, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 20, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 3, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 2, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }
]

将数据进行转换并返回
在这里插入图片描述
convert实际调用的方法：
在这里插入图片描述
在这里插入图片描述

3.2.1.2.2 更新内存配置信息

在这里插入图片描述
在这里插入图片描述
调用DynamicSentinelProperty的updateValue方法，遍历监听器更新本地配置，但由于此时监听器数量为0，所以不会进行配置更新的操作。限流规则将赋值给value，而此时的listeners属性（Set<PropertyListener> listeners = new CopyOnWriteArraySet()），大小仍然为0。
在这里插入图片描述
在这里插入图片描述

3.2.2 FlowRuleManager.register2Property(flowRuleDataSource.getProperty())

3.2.2.1 flowRuleDataSource.getProperty()

获取DynamicSentinelProperty的实例：
在这里插入图片描述

3.2.2.2 初始化FlowRuleManager

在这里插入图片描述
1.调用currentProperty.addListener(LISTENER);此处的LISTENER为FlowRuleManager.FlowPropertyListener。如下图所示：
在这里插入图片描述
addListener方法内部做了2步操作，1是将当前的监听器FlowRuleManager.FlowPropertyListener添加到set集合中
在这里插入图片描述
2是调用listener.configLoad(this.value)方法，对此监听器进行配置加载。但由于value未初始化，为null。所以此步骤相当于没做任何操作。
在这里插入图片描述

3.2.2.3 register2Property方法

在这里插入图片描述
1.从currentProperty里面把FlowRuleManager.FlowPropertyListener这个监听器移除：
currentProperty.removeListener(LISTENER);
在这里插入图片描述
2.对当前传进来的实例DynamicSentinelProperty，添加监听：property.addListener(LISTENER);
在这里插入图片描述
此方法主要做了2步操作，1是将当前FlowRuleManager.FlowPropertyListener这个监听器添加到set集合中
在这里插入图片描述
2是调用listener.configLoad(this.value)方法，完成配置加载到本地：
在这里插入图片描述
3.将property赋值给currentProperty
在这里插入图片描述
在这里插入图片描述

3.2.3 modifyFlowRuleManager(zkClient, zookeeperDataSource, path)

在这里插入图片描述

3.2.3.1 ZKPropertyListener初始化

在这里插入图片描述

3.2.3.2 zookeeperDataSource.getProperty().addListener(flowPropertyListener)

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
调用ZKPropertyListener的configLoad方法
在这里插入图片描述

4 控制台修改配置

在这里插入图片描述

4.1 触发节点更新nodeChanged 方法

在这里插入图片描述

4.1.1 loadConfig方法(同3.2.1.2.1)

在这里插入图片描述

4.1.2 更新内存配置信息

在这里插入图片描述
在这里插入图片描述

4.1.2.1 更新DynamicSentinelProperty实例的value属性

调用DynamicSentinelProperty的updateValue方法。此方法首先是把最新的限流规则赋值给了value：
在这里插入图片描述

4.1.2.2 遍历调用监听器的configUpdate方法

其次获取DynamicSentinelProperty实例的监听器listeners：ZKPropertyListener以及FlowRuleManager.FlowPropertyListener
在这里插入图片描述
然后依次调用其configUpdate方法，将最新的配置加载到内存中:

4.1.2.2.1 FlowRuleManager.FlowPropertyListener:

在这里插入图片描述

4.1.2.2.2 ZKPropertyListener:

在这里插入图片描述
在这里插入图片描述

4.1.2.2.2.1 initPath:

创建存储规则的path，此处的path为 /SENTINEL-RULE/apiGateway/FLOW-DATA
在这里插入图片描述

4.1.2.2.2.2 getLockPath：

此处的lockPath为：
/SENTINEL-RULE/apiGateway/FLOW-DATA/lockHashCode-1656893730
在这里插入图片描述

4.1.2.2.2.3 gainLock:

确保path数据只被一个app node负责更新
在这里插入图片描述

4.1.2.2.2.4 避免重复修改:

判断新值和旧值是否会相等，相等则直接返回，避免重复修改
在这里插入图片描述

4.1.2.2.2.5 最新的规则，保存到zk:

先获取最新的规则数据：
在这里插入图片描述
此处的data为：

[
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 5, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 1, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 20, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }, 
    {
        "clusterConfig": {
            "acquireRefuseStrategy": 0, 
            "clientOfflineTime": 2000, 
            "fallbackToLocalWhenFail": true, 
            "resourceTimeout": 2000, 
            "resourceTimeoutStrategy": 0, 
            "sampleCount": 10, 
            "strategy": 0, 
            "thresholdType": 0, 
            "windowIntervalMs": 1000
        }, 
        "clusterMode": false, 
        "controlBehavior": 0, 
        "count": 3, 
        "grade": 1, 
        "limitApp": "default", 
        "maxQueueingTimeMs": 500, 
        "resource": "HelloWorld", 
        "strategy": 0, 
        "warmUpPeriodSec": 10
    }
]

最新的数据保存到zk:
在这里插入图片描述

4.1.2.2.2.6 releaseLock:

释放lock:
在这里插入图片描述

孤独是人生的修行
关注
专栏目录
Nepxion Discovery学习笔记5 Sentinel流量防卫兵/服务容错综合方案
weixin_42585386的博客
10-23 193
笔记1: Sentinel规则持久化: 通过Dashboard来为每个Sentinel客户端设置各种各样的规则，但是这里有一个问题，就是这些规则默认是存放在内存(一旦服务重启规则就随之删除了)中，极不稳定，所以需要将其持久化。 本地文件数据源会定时轮询文件的变更，读取规则。这样我们既可以在应用本地直接修改文件来更 新规则，也可以通过 Sentinel 控制台推送规则。以本地文件数据源为例，推送过程如下图所示： 首先 Sentinel 控制台通过 API 将规则推送至客户端并更新到内存中，接着注
faiss安装 （CPU版本）
CSDN_WHB的博客
09-20 235
faiss版本 faiss-v1.7.4。
Java项目: 基于SpringBoot+mybatis+maven课程答疑系统(含源码+数据库+毕业论文)
weixin_43860634的博客
09-14 1038
Java项目: 基于SpringBoot+mybatis+maven课程答疑系统(含源码+数据库+毕业论文)
面试突击-多线程和IO专题(至尊典藏版)
人生若只初相见@的博客
09-18 1761
金九银十多线程和IO大厂面试专题
Mybatis-plus进阶篇(四)
₍˄·͈༝·͈˄*₎◞ ̑̑的博客
09-19 1391
nested 方法是 MyBatis-Plus 中用于构建查询条件的高级方法之一，它用于创建一个独立的查询条件块，不带默认的 AND 或 OR 逻辑。last 方法是 MyBatis-Plus 中用于构建查询条件的高级方法之一，它允许你直接在查询的最后添加一个 SQL 片段，而不受 MyBatis-Plus 的查询优化规则影响。exists 方法是 MyBatis-Plus 中用于构建查询条件的高级方法之一，它用于在查询中添加一个 EXISTS 子查询。这个方法特别适用于需要对数值字段进行减量操作的场景。
2024年9月21日---关于Maven
weixin_64513190的博客
09-21 954
1、都是同样的代码，为什么在我的机器上可以编译执行，而在他的机器上就不行？2、为什么在我的机器上可以正常打包，而配置管理员却打不出来?3、项目组加入了新的人员，我要给他说明编译环境如何设置，但是让我挠头的是，有些细节我也记不清楚了。4、我的项目依赖一些jar包，我应该把他们放哪里？放源码库里？5、这是我开发的第二个项目，还是需要上面的那些jar包，再把它们复制到我当前项目的svn库里吧6、现在是第三次，再复制一次吧。----- 这样真的好吗？
Java8的Optional简介
duke_ding2的博客
09-17 1025
Java8的Optional简介
java泛型的概念与好处
yuehua00的专栏
09-19 502
Java泛型是一种强大的类型安全机制，它可以提高代码的复用性和可维护性。通过使用泛型类、泛型方法和泛型接口，开发者可以编写更加清晰、简洁和安全的代码。掌握Java泛型的基本概念和使用方法后，可以进一步探索更高级的泛型特性，如泛型通配符、边界类型等，以实现更加复杂的类型安全需求。
C#基础（11）函数重载
a6s686的博客
09-12 1210
我们通过这些例子的学习，想毕你一定已经掌握了函数重载的相关内容，我相信你只要稍加练习，便能达到很熟练的程度。不过不管知识点难或者简单，还是那句话，学习路上，戒骄戒躁，脚踏实地。请期待我的下一篇博客！
计算机毕业设计 网上书店系统 Java+SpringBoot+Vue 前后端分离 文档报告 代码讲解 安装调试
weixin_19164791635
09-16 1299
本文介绍了一款基于Java、SpringBoot和Vue.js技术的网上书店系统。该系统为管理员、用户和卖家提供了图书信息浏览、订单管理、个人中心管理等功能，旨在打造一个便捷、高效的在线购书平台。系统通过优化图书销售流程，提升用户体验，推动出版行业的数字化转型，促进知识传播和文化交流。
07_Python数据类型_集合
fx_yzjy101的专栏
09-16 1034
可以使用大括号 {} 或者 set() 函数来创建集合。如果使用大括号，则至少需要包含一个元素；如果使用 set()，则可以创建一个空集合。# 创建一个空集合# 创建一个包含一个元素的集合# 创建一个包含几个元素的集合。
基于JAVA的居家办公OA系统
嵌入式行业打工人，不定期更新博客。
09-18 357
使用Spring Boot来搭建一个基础的居家办公OA系统的一部分——例如一个简单的任务管理模块。这个例子将包括创建一个任务的功能，并且能够将任务保存到数据库中。为了简化起见，这里我们只展示核心代码片段，并假设已经设置好了Spring Boot项目环境。以上代码展示了如何用Spring Boot创建一个简单的任务管理API。为了运行这个示例，你需要有一个Spring Boot项目，并且正确配置了数据库连接。此外，前端部分也需要开发，以便用户可以通过Web界面与后端API交互。
【JavaSE】--数组的定义与使用
2303_80341387的博客
09-17 814
数组：可以看成是相同类型元素的一个集合。在内存中是一段连续的空间每个空间有自己的编号，起始位置的编号为0，即数组的下标。
Mybatis自定义TypeHandler，直接存储枚举类对象
最新发布
zcx的博客
09-22 475
Spring自定义TypeHandler，直接保存枚举类 数据库保存数字值
基于SpringBoot+Vue的宠物医院管理系统
计算机学姐的博客
09-20 702
【2025最新】基于Java+SpringBoot+Vue+MySQL的宠物医院管理系统，前后端分离。
【JAVA开源】基于Vue和SpringBoot的企业客户管理系统
杨荧的CSDN博客
09-20 1379
基于Vue.js和SpringBoot的企业客户管理系统是一款高效、安全且易于维护的信息化管理系统，专为提升企业的客户管理和项目管理效率而设计。该系统采用前后端分离的技术架构，前端使用Vue.js构建用户界面，提供直观、友好的操作体验；后端则依托SpringBoot框架，确保系统的高性能和可扩展性。系统支持管理员和普通员工两种角色，每种角色拥有不同的权限和功能模块。
微服务保护之熔断降级
cyt涛的博客
09-15 1540
在微服务架构中，服务之间的调用是通过网络进行的，网络的不确定性和依赖服务的不可控性，可能导致某个服务出现异常或性能问题，进而引发整个系统的故障，这被称为 微服务雪崩。为了防止这种情况发生，常用的一些保护措施包括超时处理、熔断降级、限流、线程池隔离和信号量隔离等。
初始java
wk200411的博客
09-17 417
这个public class Test就是一个类，public static void main这里就是一个main方法，括号里面是一个形参，形参的类型是一个数组，这个也是后面再说到的问题，之后在方法里面的是一个打印hello world的语句，这里要直接输出main方法可以在idea上直接输入main或者psvm然后回车就会直接显示出这个main方法，打印语句的话直接输出sout就可以了。2.在写代码的过程中，我们创建了一个新的项目的话要让类的名字和项目的名字相同。在类中包括着方法，方法里面包括着语句。
入门数据结构JAVA DS——二叉树的介绍 (构建,性质,基本操作等) (1)
cjejwe的博客
09-19 947
说实话,笔者在之前没有系统学习过数据结构之前,看到二叉树是有点害怕的,这也是我写下博客的原因之一,笔者想要告诉大家,它没有这么可怕,只要系统的学习过,有代码底子,是可以入门的,笔者将从如何构建二叉树,二叉树的性质,常见的操作等方面为主,以介绍一部分OJ题目为辅, 希望对你们有帮助当然了,学习二叉树也需要你对于递归,搜索等算法思维有基础.本文大致分成这个几个部分1.二叉树的概念和性质2.二叉树的构建存储与遍历3.二叉树的基本操作各位读者选择自己需要的部分查看即可。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值