ZooKeeper测试

最新推荐文章于 2024-05-12 06:07:37 发布
最新推荐文章于 2024-05-12 06:07:37 发布
阅读量157 收藏
点赞数
分类专栏： Zookeeper 文章标签： 大数据 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/iteye_4064/article/details/82673687
版权

测试环境

测试版本

  •   java version "1.7.0_10" 64位
  •  zookeeper 3.4.5  xmx2G

zookeeper Server 3台

  192.168.100.53  服务端口2181

  192.168.100.54  服务端口2181

  192.168.100.55  服务端口2181

  64G内存，12核 

 

功能测试

 事件消费者

   192.168.100.53  

   192.168.100.54  

   192.168.100.55 

   操作:监听到注册节点的事件做相应的操作。 

 

事件生产者

  192.168.100.53 

  操作:增加节点、删除节点、修改节点数据

 

测试Case:

  • 通过zkServer.sh status命令查看zookeeper角色，停掉leader,zookeeper是可以正常工作,并且重新选举出一个leader。
  •  通过zkServer.sh status命令查看zookeeper角色，停掉follower,zookeeper是可以正常工作。      
  • 停掉任意两台zookeeper Server，zookeeper不能正常工作。
  • 最后一台监控zookeeper Server运行状态。zkServer.sh status
  • 集群B长时间做增加节点、修改节点数据、删除节点操作，集群A能正常监听到B集群事件。
  •  开始: 2013-04-03 20:00:00  结束: 2013-04-07 10:00:00 每次事件间隔:100ms  总事件次数:2932992 
  • 集群A中任意一台重新启动，重新注册到zookeeper集群，并能获取到，集群B最新节点信息。

 性能测试

测试一

3个进程,一个进程开1个连接,50个线程,节点没有订阅

一个进程在一个zk节点下，先create EPHEMERAL node，再delete，create和delete各计一次更新。     

DataSize(字节) totalReq(万次)totalTime(秒)SuccReq(万次)FailReq(万次)avgSuccTPS(次/秒)avgFailTPS(次/秒)
2556001380         600043460
5106001509600039760
10206001536600039060

 

测试二 

一个zk node下3个sub连接，1个pub

一个进程操作33个zk node，执行创建一个EPHEMERAL node，不删除 

一共开启3个进程

DataSize(字节) totalReq(万次)totalTime(秒)SuccReq(万次)FailReq(万次) avgSuccTPS(次/秒)avgFailTPS(次/秒)
25519.8 8319.8 023850
51019.8 8319.8 023850
102019.8 8619.8 023020

   

 

 

 

 

 

 

 

iteye_4064
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Zookeeper读写性能测试
03-23
关于Zookeeper，之前有过几篇文章已经介绍过了，因此本文不赘述。本次小编对单机部署的Zookeeper的读、写进行了一次简单性能测试。性能测试脚本由java完成，具体请看代码清单： 　　关于Zookeeper，之前有过几篇文章已经介绍过了，因此本文不赘述。本次小编对单机部署的Zookeeper的读、写进行了一次简单性能测试。性能测试脚本由java完成，具体请看代码清单： 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455
ZooKeeper性能测试
runzhliu大数据/容器日记
12-15 2640
参考来源如下。 https://github.com/brownsys/zookeeper-benchmark 打包 使用开源工具进行 ZooKeeper 的性能测试，参考官方文档，通过 mvn -DZooKeeperVersion=<version> package 进行打包。但是为了使用方便，我把所有的依赖包都打成一个大的 jar 包了，所以在 pom.xml 文件加上下面的插件，然后再执行命令 mvn assembly:assembly 即可。 <plugin>
2024年网络安全最新ZooKeeper【基础 01】简介+设计目标+核心概念+ZAB协议(1)，2024年最新【深度思考】
最新发布
2401_84544951的博客
05-12 593
在实际的渗透测试过程中，面对复杂多变的网络环境，当常用工具不能满足实际需求的时候，往往需要对现有工具进行扩展，或者编写符合我们要求的工具、自动化脚本，这个时候就需要具备一定的编程能力。当整个服务框架在启动过程中，或者当 Leader 服务器出现异常时，ZAB 协议就会进入恢复模式，通过过半选举机制产生新的 Leader，之后其他机器将从新的 Leader 上同步状态，当有过半机器完成状态同步后，就退出恢复模式，进入消息广播模式。ZAB 协议的消息广播过程使用的是原子广播协议。薪资区间6k-15k。
zookeeper节点数与watch的性能测试
热门推荐
loop in codes
09-21 2万+
zookeeper中节点数量理论上仅受限于内存，但一个节点下的子节点数量受限于request/response 1M数据 (size of data / number of znodes) zookeeper的watch机制用于数据变更时zookeeper的主动通知。watch可以被附加到每一个节点上，那么如果一个应用有10W个节点，那zookeeper中就可能有10W个watch（甚至更多
ZooKeeper系列（一）—— ZooKeeper简介及核心概念
黑白影的博客
06-07 440
一、Zookeeper简介 Zookeeper是一个开源的分布式协调服务，目前由Apache进行维护。Zookeeper可以用于实现分布式系统中常见的发布/订阅、负载均衡、命令服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。它具有以下特性： 顺序一致性：从一个客户端发起的事务请求，最终都会严格按照其发起顺序被应用到Zookeeper中； 原子性：所有事务请求的处理...
Zookeeper安装测试
qq_32421489的博客
03-06 1253
Zookeeper安装测试
zookeeper测试代码
09-28
在“zookeeper测试代码”这个主题中，我们主要关注两个关键概念：Zookeeper的分布式锁和注册发现。 分布式锁是分布式系统中解决并发控制的重要工具。在Zookeeper中，可以通过创建临时节点来实现这一功能。当一个...
zookeeper测试例子.rar
05-17
【标题】：“Zookeeper测试例子.rar” 【描述】：“这个压缩包包含的是我在学习尚硅谷Zookeeper视频教程过程中，自己动手在Windows操作系统上编写的代码测试案例。” 【知识点详解】 Zookeeper是一个分布式协调...
zookeeper测试程序c++
07-30
Zookeeper 是一个分布式协调服务，由 Apache Hadoop 项目开发，广泛应用于分布式系统中的命名服务、配置管理、集群同步和领导者选举等场景。在本文中，我们将深入探讨如何使用 C++ 编程语言来实现 Zookeeper 的核心...
zookeeper测试小程序
04-10
Zookeeper测试小程序是一个基于Apache ZooKeeper的客户端应用，主要用于演示和测试Zookeeper的功能。Apache ZooKeeper是一个分布式的，开放源码的协调服务，它为分布式应用程序提供了高效且可靠的命名服务、配置管理...
5-zookeeper-测试实操
qq_37171694的博客
12-15 452
zookeeper-5
使用JMeter对ZK性能测试时需要安装的插件
03-19
Version: Applicable to JMeter 2.8+(适用JMeter版本) 以下为官方说明: Prepare a simple IdGenerator For security reasons, ZK generates ID randomly. However to perform a record & reply test, it is mandatory to fix the IDs of the components. The IdGenerator here is used to create a predictable component id when testing. ———— 官方描述地址 http://blog.zkoss.org/index.php/2013/08/06/zk-jmeter-plugin/ 编译后的class文件，是需要配合jar包一起用的，用来自动关联uuid和data，jar包里面只解决了dtid。因为官方提供源码，需要自己编译后才可以用，我这里是已经编译好的class。（提供给那些没有条件编译的朋友） ———— 使用方法： 1.解压后classes\foo\jmtest目录 直接覆盖在 被测的ZK平台对应目录中（WEB-INF下）。 2.修改zk.xml文件,添加下面内容（WEB-INF下） foo.jmtest.SimpleIdGenerator 3.安装ZK的JMeter插件 把压缩包中的 zk-jmeter-plugin-0.8.0.jar 文件，复制到 JMETER_HOME\lib\ext. ———— 安装完整，重新打开JMeter，可以添加ZK http 代理，录制脚本试试。 下面录制步骤： Prepare a Test Plan 1.Create a Thread Group in Test Group. 2.Add HTTP Cookie Manager in Thread Group 3.Add HTTP Request Defaults in Thread Group. 4.Add Transaction Controller in Thread Group. 5.Edit HTTP Request Defaults, set the Server Name and Port Number. 6.Create a ZK HTTP Proxy Server (Add > Non-Test Elements) in WorkBench, and edit it as follows Set Target Controller to Test Plan > Thread Group > Transaction Controller 7.Start the ZK HTTP Proxy Server
Zookeeper集群部署以及故障测试
江晓龙的博客
06-26 1万+
1）当ZKServer-1节点启动后，会比较自身的ServerID，目前集群中没有其他节点，因此该节点就认为自己的ServerID是集群中最大的，给自己投一票，但是Leader的选举条件必须是票数超过集群中半数节点，例如三个节点必须至少有2个同意才可以，两个节点的集群中有2票也才可以选举为Leader，由于票数不够的问题，ZkServer-1节点就会处于Follower节点。4）剩下的其余节点在加入集群后，发现已经有Leader节点了，就不会再选举，而是成为Follower节点。
Zooker配置与测试
weixin_64443786的博客
04-08 443
zookeeper
zookeeper学习笔记
CelineT的博客
12-19 630
刚new出来的Zookeeper，它的状态是连接中的状态，还没有准备好，可以通过countDownLatch来等Zookeeper准备完成；因为过半就可以确定消息已经完成写操作，那么就有可能发生，Client读取到的是没有进行写操作的Follower，此时，可以通过sync从leader上同步一下数据。1. new zookeeper的时候，传入的watch，是session级别的，和path、node没有关系。官方压测，zookeeper选择新的leader的时间不到200ms，可以很快进入高可用状态。
zookeeper的安装和测试（Linux）
qq_43743882的博客
06-22 1552
zookeeper的安装和测试（Linux） 环境版本：CentOS-7-x86_64-Everything-2009.iso zookeeper-3.4.9.tar.gz jdk-8u141-linux-x64.tar.gz 如何向Linux中上传文件“rz”命令，如下图。 一、在Linux上部署zookeeper 安装zookeeper前的准备 jdk的安装 查看Linux系统是否有自带的jdk、输入：java -version（我这里是已经安装过了） 发现有输入：rpm
03-Zookeeper典型使用场景实战
zengqingfa123的博客
01-17 9197
幽灵结点是指当客户端创建节点成功后，没有收到服务端的回应，也就是客户端不知道自己已经成功创建了节点。这样就又会尝试创建新的结点，那之前创建的结点就是幽灵结点了。解决：Zookeeper规避的方式就是创建的时候给前面加一个uuid，客户端去创建节点的时候会先按这个uuid找。有的话就不会再创建。
Software Performance Testing - JMeter压测ZooKeeper
了解➔熟悉➔掌握➔精通
08-08 686
分享一个大牛的人工智能教程。零基础！通俗易懂！风趣幽默！希望你也加入到人工智能的队伍中来！请点击http://www.captainbed.net 在JMeter中采用自定义Java请求的方式来实现： 结合自己的业务，搞清楚如何用Java操作ZooKeeper 如何将自己写的jar包让JMeter识别 关于第2点，需要我们在创建类的时候去继承AbstractJavaSamplerClient抽象类或者是实现JavaSamplerClient接口。 AbstractJavaSamplerClient抽
ZooKeeper的一个性能测试
weixin_33713707的博客
07-15 424
3台ZooKeeper服务器。8核64位jdk1.6；log和snapshot放在不同磁盘场景一同一个目录下，先createEPHEMERALnode，再delete；create和delete各计一次更新。没有订阅。一个进程开多个连接，每个连接绑定一个线程，在多个path下做上述操作；不同的连接操作的path不同测试结果数据汇总如下：dataSize(字节)totalReq...
zookeeper测试脚本
04-25
以下是一个简单的ZooKeeper测试脚本示例： ```python from kazoo.client import KazooClient # 创建一个ZooKeeper客户端 zk = KazooClient(hosts='127.0.0.1:2181') # 连接到ZooKeeper服务器 zk.start() # 创建...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值