本文介绍如何计算Kafka主题中消息的总大小及平均每条消息的大小。首先通过du-sh命令获取各分区.log文件的大小，然后利用KafkaManager工具安装和配置来查看总offset，最终得出平均消息大小。
1.总消息大小
假设主题名为monitor_data_to_hbase，共3个分区，分别分布在3个brokers上，都只有1个副本。
monitor_data_to_hbase_0分区分布在broker1，
monitor_data_to_hbase_1分区分布在broker2，
monitor_data_to_hbase_2分区分布在broker3。
进入monitor_data_to_hbase_0目录，执行
du -shc *.log
可以看到输出的总大小为
依次类推，再分别计算1、2号分区的大小，最后相加。
2.平均每条消息大小
1.安装KafkaManager
具体安装方式请参照其他博文
安装并配置好后，进入如下界面，查看总offset
2.计算平均大小
平均大小=总消息大小/总offset
扫一扫
1061
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
