kafka-eagle（EFAK）添加新集群后brockers内存，cpu及版本信息未正常显示问题记录（v2.0.8）

最新推荐文章于 2024-08-14 15:28:41 发布
最新推荐文章于 2024-08-14 15:28:41 发布
阅读量1.4k 收藏
点赞数
文章标签： kafka big data 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiujianxiao/article/details/122307359
版权
本文介绍了如何解决Kafka与监控工具Kafka-Eagle集成时遇到的JMX连接异常。主要解决方案包括：开放Kafka的JVM_PORT端口，启动时指定`java.rmi.server.hostname`为本机IP，以及在Kafka-Eagle配置中添加`efak.jmx.uri`配置。通过这些步骤，可以避免Kafka-Eagle后台频繁报空指针异常并确保正确获取JVM信息。
摘要由CSDN通过智能技术生成

网上可查的解决方案一：

开放kafka的JVM_PORT端口，我使用的是cdh部署kafka，默认开放9393

网上可查的解决方案二：

kafka启动时指定java.rmi.server.hostname为本机IP

CDH版本对应配置 Additional Broker Java Options 项，分别修改各个节点原配置中127.0.0.1为本机ip，并重启kafka

自查发现问题解决方案：

检测kafka-eagle的配置文件 ${KE_HOME}/conf/system-config.properties

其中新增集群的 efak.jmx.uri 项未配置（老版本配置名为 kafka.eagle.jmx.uri ），该配置没有默认项，不写的话kafka-eagle无法正确解析JVM端口获得的JVM信息，并在后台频繁报空指针异常，补充配置后重启kafka-eagle即可（service:jmx:rmi:///jndi/rmi://%s/jmxrmi）

xiujianxiao
关注
【Kafka】Kafka eagle 监控界面无数据
九师兄
09-25 1939
1.背景 1.场景1 在docker下有四个容器，如下 kafkanode1 kafkanode2 kafkanode3 kafkaeagle 这几个节点，kafka eagle中配置如下 kafka.eagle.zk.cluster.alias=cluster1 cluster1.zk.list=zk1:2181,zk2:2181,zk3:2181 kafka.eagle.driver=com.mysql.jdbc.Driver kafka.eagle.url=jdbc:mysql://mysql_
纯手动搭建大数据集群架构_记录015_安装部署kafka3.0.0集群_配置kafka群起脚本_安装配置kafka_eagle监控大屏_群起脚本失效解决---大数据之Hadoop3.x工作笔记0176
添柴程序猿的专栏
03-24 171
然后再来配置一下zookeeper.connect,zk的集群位置,这里注意,后面加个/kafka,意思是让zk管理的时候,做个区分,把管理kafka的数据,都放到kafka这个文件夹中,这样比较清晰。可以看到我们去启动kafka就可以, 这里注意,要手动的启动,集群中所有的机器上的kafka,这样比较麻烦,后面我们做一个脚本来实现群起.首先这个broker.id=0 broker.id=1...这里我们就配置成0,1,2,3,...这样就可以了,在集群中这样配置。
kafka-eagle 的JMX 可以显示端口但是不显示版本号
qq_43220022的博客
08-10 673
问题：tar 包配置了JMX 只出现端口号，不显示版本号 解决如下： /bin/kafka-run-class.sh 文件下 加入 开头加入 JMX_PORT=9999 # JMX settings if [ -z "$KAFKA_JMX_OPTS" ]; then KAFKA_JMX_OPTS="-Dcom.sun.management.jmxremote -Djava.rmi.server.hostname=10.0.5.136 -Dcom.sun.management.jmxremote.a
kafka可视化操作工具kafka-Eagle安装部署
最新发布
weixin_64332654的博客
08-14 666
kafka-Eagle安装部署
安装kafka的efak时web界面没有显示kafka集群信息( ERROR - Get broker jmx info from ids has error,msg is java.lang.)
qq_52868288的博客
06-07 1477
明显看出集群正常启动但是登录web界面没有显示kafka集群信息，查了查日志。报错信息为仔细在网上找了找 ，发现加一个配置代码就行了，具体原理还没理解进入kafka/bin目录下，修改kafka-run-class.sh文件，在文件的首行增加 然后重启所有的kafka节点再次重启kafka-eagle程序，最后发现可以监控到kafka信息。...
kafka-eagle搭建中遇到的问题
三血狼
11-18 1994
1. 启动监控 sh /opt/module/kafka-eagle-web-1.3.7/bin/ke.sh start 没有什么提示 解决：当我sh /opt/module/kafka-eagle-web-1.3.7/bin/ke.sh stop停止监控发现虚拟机上的内存空间不足，至少1.5G 2. 访问404 Version 1.3.7 ******************************************************************* * Kaf..
kafka-eagle无法获取kafka cluster info
jiashenshi的博客
11-22 2704
###################################### # multi zookeeper & kafka cluster list ###################################### kafka.eagle.zk.cluster.alias=cluster1 cluster1.zk.list=hadoop101:2181,hadoop102:2181,hadoop103:2181 #cluster2.zk.list=xdn10:2181,xdn1..
kafka-eagle 使用
09-10
mv efak-web-2.0.8-bin kafka-eagle 3. 进入kafka-eagle的bin目录，并修改kafka-server-start.sh脚本文件。你可以使用以下命令进入bin目录并编辑文件： cd kafka-eagle/bin vim kafka-server-start.sh 4. 在...
Docker安装kafka-eagle和kafka
07-27
- *3* [（一）docker镜像制作案例——关于kafka-eagle-2.0.8（EFAK）版本的kafka管理工具实现镜像制作及发布](https://blog.csdn.net/yprufeng/article/details/121236167)[target="_blank" data-report-click={"spm...
安装kafka、eagle监控、avro注册表
qq_19291205的博客
11-05 218
1.安装kafka 1.1 安装环境 CenterOS、JDK-1.8、依赖zookpeer集群 1.2 下载kafka #切换存放路径 cd /home #下载 curl -o https://dlcdn.apache.org/kafka/3.0.0/kafka_2.13-3.0.0.tgz #解压 tar -xzf kafka_2.13-3.0.0.tgz 1.3 设置kafka、zookpeer集群机器hostname和hosts #集群内每台机器都需要进行该操作 #================
【Kafka-3.x-教程】-【五】Kafka-监控-Eagle
weixin_53543905的博客
01-10 1289
Kafka-Eagle 框架可以监控 Kafka 集群的整体运行情况，在生产环境中经常使用。 1）MySQL 环境准备 Kafka-Eagle 的安装依赖于 MySQL，MySQL 主要用来存储可视化展示的数据。如果集群中之前安装过 MySQL 可以跨过该步。
（一）docker镜像制作案例——关于kafka-eagle-2.0.8（EFAK）版本的kafka管理工具实现镜像制作及发布
厉害哥哥的博客
11-09 4119
前言 本节我们主要介绍一款kafka集群常用的管理工具kafka-eagle，实现kafka-eagle的docker镜像制作及发布,由于其官方没有提供docker镜像，我们自行构建一个镜像并发布运行。以下是其镜像制作的详细过程。效果如下： 正文 下载kafka-eagle软件包并上传到centos服务器 ps:本文默认用户已经搭建好了docker的运行环境。 ①官网下载地址：Download - EFAK ②上传到服务器 使用vi编辑器创建镜像脚本Dockerfi.
Kafka监控EFAK(Kafka-eagle)部署与踩坑详细记录
哇哇哇，真的学到了！！！
12-28 7370
因为你要通过它自动化创建的话，要调整的地方还比较多，还要兼顾有些jdbcurl是域名形式的，域名形式的没有端口，那它读端口的代码你也得改，总之，个人尝试了下去改，改动地方还比较多，然后能在本地跑通，而跑RDS时，某些sql语句（内置的）还执行不了：我遇到的是建立索引的alter语句，最后还是手动执行了。但是如果使用RDS或其他云服务器等形式上的Mysql，服务启动就会出问题，而且，，，，说实话，你不知道服务已经有问题，因为没有相关日志。这是你开了efak分布式部署配置，但实际并未分布式部署，此端口不通。
Centos7安装启动kafkaEagle遇到问题整理
Stone.鱼儿的博客
05-19 3463
首先安装kafkaEagle之前，需要要依次安装启动好jdk、zookeeper、kafka，网上相关文章很多，就不在此啰嗦了！ 说明安装成功！！！ 首先我遇到的问题： 1.启动kafkaEagle是web页面显示不出来一直报404，查看kafkaEagle日志： [2018-12-11 21:13:46,490] INFO Registered kafka:type=kafka.Log4jController MBean (kafka.utils.Log4jControllerReg..
kafka-eagle查询不到kafka信息
奔跑入坑大数据
04-02 2870
一般搭建kafka监控的时候kafka和zk都已经搭建好了这里需要主意一个地方 1.kafka需要开启JMX端口 找到kafka安装路径，进入到bin文件夹，修改下面的地方。 vi kafka-server-start.sh if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC -XX:...
kafka学习记录—Kafka-Eagle监控
qq_53320067的博客
05-16 822
kafka学习记录—Kafka-Eagle监控 安装MySQL 略 kafka环境 关闭kafka集群 修改内存，一个G不够 [root@hadoop101 bin] vim kafka-server-start.sh if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC -XX:MaxGCPauseMillis
kafka-eagle 使用配置及远程jmx端口设置遇到的问题
u013568834的专栏
08-18 7860
关于安装kafka-eagle网上已经有好多资源，这里就不再赘述 安装过程很简单几乎没遇到问题，就是jmx配置遇到了些问题。下面就直接说 kafka-server-start.sh 配置export JMX_PORT="9999" 只有这个是大部分博主直接在文档里写明的。 这就会在配置多主机kafka集群监控的时候导致如下问题。 create has error,msg is java.rmi.ConnectException cannot be cast to javax.managemen.
kafka-eagle安装与入门
weixin_44371237的博客
10-11 513
kafka-eagle安装与入门
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值