elk之压测

集群规模:共4台机器组成elasticsearch集群
a)
master节点:1台
单机逻辑CPU:24
单机内存:64G
b)
data节点:3台
单机逻辑CPU:24
单机内存:64G
单机磁盘类型:SATA
单机磁盘个数:1
单机磁盘容量:200GB
c)调优
elasticsearch的JVM调整为24GB
index.number_of_shards调整为3(默认5,根据磁盘数调整)
index.number_of_replicas调整为0(默认1)


压测工具:
a) 压测工具:logstash
b) 压测规模:5-7台logstash
c) 数据来源:input的file插件
d) 单message大小:约500字节
e) index按照小时切割
f) 注:通过内网写入elasticsearch,数据只写到data节点


压测结果1:
a) 时长:1个小时
b) 写入数据:约15GB
c) 写入效率:约9000/s
d) Load Average:3-5波动
e) 磁盘I/O:从刚开始压测的100%下降至60%左右
f) JVM:使用率约5%


压测结果2:
a) 时长:18个小时
b) 写入数据:约200GB
c) 写入效率:约9000/s
d) Load Average:3-5波动
e) 磁盘I/O:从刚开始压测的100%下降至60%左右
f) JVM:使用率上升至至20%



关于满负荷:
使用5台logstash进行压测时,qps约9000,

使用7台logstash进行压测时,qps约9000,无明显变化。




关于高性能集群:http://blog.csdn.net/daiyudong2020/article/details/51195213

发布了257 篇原创文章 · 获赞 134 · 访问量 92万+
展开阅读全文

没有更多推荐了,返回首页

©️2019 CSDN 皮肤主题: 大白 设计师: CSDN官方博客

分享到微信朋友圈

×

扫一扫,手机浏览