调研kafka的监控组件
安装kafkaManager管理工具:
下载地址:(链接2永久有效)
链接1:http://pan.baidu.com/s/1bQ3lkM 密码:c251
链接2:链接:https://pan.baidu.com/s/17q6CrdD8SlWmro-MzyBbSQ
提取码:xhna
–来自百度网盘超级会员V3的分享
安装zip解压工具:
yum install -y zip unzip
解压命令
unzip kafka-manager-1.3.0.7.zip -d /opt/
重命名
mv kafka-manager-1.3.0.7 kafka-manager
解压后配置文件:
application.conf
23行左右 kafka-manager.zkhosts="test001:2181,test002:2181,test003:2181" 设置zk
想要看到读取,写入速度需要开启JMX,
********最新测试不配置kafka-server-start.sh这块也能启动*********
修改kafka-server-start.sh 添加一行即可:添加JMX端口8999
加入下面内容到kafka的配置文件中,需要重启kafka集群
if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
export JMX_PORT="8999"
fi
启动:
注意这里设置的8080是访问kafkaManager的端口号
在bin目录下执行:
nohup kafka-manager -Dconfig.file=conf/application.conf -Dhttp.port=8080 &
在kafka-manager目录下执行:
nohup bin/kafka-manager -Dconfig.file=conf/application.conf -Dhttp.port=8080 &
如果不是第一次启动的话,要把这个文件删除掉再启动:
这是第一次启动产生的文件,会影响第二次启动。不然启动不起来!
kafka进程的名字:
ProdServerStart
访问kafkaManager:
test001:8080
后面通过web界面配置需要监控的kafka
主要参考:
参考一:添加链接描述
参考二:添加链接描述
参考三:添加链接描述
参考四:添加链接描述