- 博客(2)
- 收藏
- 关注
RSS订阅原创 小量topic消费延迟问题排查
项目场景：量级不大的topic突然出现延迟情况问题描述：topic 发生消费延迟，但其数据量较小，不清楚为何延迟原因分析：观察发现，该消费者机器上所有topic里只有该topic延迟，所以应该不是机器级别的，可能是消费配置或者es那边该索引有问题查看logstash 消费日志，发现该索引报一下错误 retrying failed action with response code: 503 ({“type”=>“unavailable_shards_exception”, “r
2022-02-17 10:51:53
900
原创 logstash消费延迟瓶颈排查
项目场景：logstash某个topic最近消费总是延迟问题描述：logstash某个topic消费总是延迟，调整了topic partition和消费进程数之后 改善也不大原因分析：逐项排查：排查kafka机器的磁盘和网卡是否瓶颈磁盘iostat -d -k 1 10 #查看TPS和吞吐量信息iostat -d -x -k 1 10 #查看设备使用率（%util）、响应时间（await）iostat -c 1 10 #查看cpu状态根据磁盘io util和await判
2022-02-09 11:46:02
5957
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人