elasticsearch性能压测工具esrally —— 筑梦之路

官方仓库地址:GitHub - elastic/rally: Macrobenchmarking framework for Elasticsearch

参考资料:【最佳实践】esrally:Elasticsearch 官方压测工具及运用详解-阿里云开发者社区

 

环境说明:

centos 7 

1. 安装依赖

yum  install python3 python3-devel

2. 安装esrally

#最新版urllib3不兼容 需要指定版本高于1.20 低于1.26
pip3 install urllib3==1.24.1 -i https://pypi.douban.com/simple

pip3 install esrally -i https://pypi.douban.com/simple


3. 查看配置

esrally configure

4. 查看当前可用的

esrally list tracks

5. 查看当前可用的

esrally list cars

6. 查看可用的

esrally list races

7. 查砍当前已有的

esrally list pipline

8. 测试已有集群

esrally race --pipeline=benchmark-only --target-hosts=127.0.0.1:9200 --cluster-health=yellow --track=nyc_taxis --challenge=append-no-conflicts



esrally 的压测流程主要分为以下三个步骤:

1、 根据参数设定自行编译或者下载 es 可执行实例,然后根据 car 的约定,创建并启动 es 集群。如果使用 benchmark-only 的pipeline,则该步骤省略。
2.、根据指定 track 去下载数据,然后按照指定的 challenge 进行操作。
3.、记录并输出压测结果数据。

压测结果关注的指标:

1、throughput 每个操作的吞吐量,比如 index、search等
2、latency 每个操作的响应时长数据
3、Heap used for x 记录堆栈的使用情况

先搞懂每个 metric 的含义,然后根据自己的需求去确认自己要关注的指标

 

 

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
性能压测是评估和验证系统在高负载或并发情况下运行效率和稳定性的过程,通常用于检测瓶颈并优化系统设计。Elasticsearch是一个分布式搜索和分析引擎,它的性能压测涉及多个关键指标,这些指标可以帮助你理解系统的运行状况: 1. **吞吐量(Throughput)**:指在单位时间内系统处理请求的数量。高吞吐量表示系统能快速响应查询。 2. **延迟(Latency)**:从请求到达至响应返回的时间。理想情况下,低延迟意味着更快的响应速度。 3. **QPS(Queries Per Second)**:每秒处理的查询次数,衡量系统的实时处理能力。 4. **CPU 使用率**:Elasticsearch占用的CPU资源,过高可能表明资源不足或查询效率低下。 5. **内存使用**:包括堆内存和非堆内存的使用情况,内存消耗过大可能影响性能。 6. **磁盘I/O**:读写操作速率,对于索引和数据存储至关紧要。 7. **碎片率(Fragmentation)**:数据在索引中的分布均匀程度,高碎片可能导致查询性能下降。 8. **线程池状态**:检查Elasticsearch中线程池的活跃度和饱和程度,过多的阻塞可能会导致性能瓶颈。 9. **索引和文档数**:过大或过小都可能影响查询速度,需要保持合理的规模。 10. **缓存命中率**:缓存(如搜索结果缓存、Fielddata缓存等)的使用效率,高命中率有利于提高查询速度。 在执行性能压测时,你需要监控这些指标的变化,并根据测试结果调整配置、优化查询或增加硬件资源。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值