KAFKA监控： Kafka - eagle

最新推荐文章于 2022-04-08 11:22:53 发布
最新推荐文章于 2022-04-08 11:22:53 发布
阅读量285 收藏
点赞数
分类专栏： 监控 文章标签： kafka zookeeper
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_46589706/article/details/106797397
版权
本文档详细介绍了如何在CentOS 7.5环境中安装Kafka Eagle 1.4.5，包括修改Kafka启动命令、上传及解压安装包、配置文件修改、添加环境变量，以及启动和登录监控页面的步骤。
摘要由CSDN通过智能技术生成

序：软件版本

  • VMware：VMware-15.5.1
  • Linux：CentOS-7.5-x86_64
  • JDK:jdk-1.8-linux-x64
  • Hadoop：hadoop-3.1.3
  • Kafka：2.4.1
  • Kafka-eagle ：1.4.5

目录

1.  修改kafka启动命令

2. 上传压缩包kafka-eagle-bin-1.4.5.tar.gz到集群/opt/software目录

3. 解压到本地

4. 进入刚才解压的目录

5. 将kafka-eagle-web-1.3.7-bin.tar.gz解压至/opt/module

6. 修改名称（可不改）

7. 给启动文件执行权限

8. 修改配置文件

9. 添加环境变量

10. 启动

11. 登录页面查看监控数据

1.  修改kafka启动命令

修改kafka-server-start.sh命令中

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

修改为

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC
 -XX:MaxGCPauseMillis=200 -XX:ParallelGCThreads=8 -XX:ConcGCThreads=5 -XX:InitiatingHeapOccupancyPercent=70"
    export JMX_PORT="9999"
    #export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

注意：修改之后在启动Kafka之前要分发之其他节点

2. 上传压缩包kafka-eagle-bin-1.4.5.tar.gz到集群/opt/software目录

3. 解压到本地

[user@hadoop102 software]$ tar -zxvf kafka-eagle-bin
最低0.47元/天 解锁文章
慵懒的程序猿007
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Kafka 之 监控 Eagle
weixin_49063354的博客
08-29 403
Kafka 监控之 Eagle 1）修改kafka启动命令 修改kafka-server-start.sh命令中 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G" fi 为 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX
Kafka监控（Kafka Eagle）
GC
03-08 4386
1）修改kafka启动命令 修改kafka-server-start.sh命令中 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G" fi 为 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC -XX:MaxG
安装kafka eagle监控kafka集群
hongtaolong的博客
06-03 498
安装kafka eagle监控kafka集群 1、下载kafka eagle的压缩包并解压 wget https://github.com/smartloli/kafka-eagle-bin/archive/v1.2.7.tar.gz 解压 tar -zxvf xxx 2、配置环境变量 需要配置JAVA_HOME和KE_HOME的环境变量 在自己的home目录下面的.bash_profile文件里面增加如下内容 export JAVA_HOME=/usr/local/jdk1.8.0_151 #add ka
Kafka监控工具kafka-eagle安装使用
码上中年的博客
03-02 311
1. 修改Kafka启动脚本kafka-server-start.sh，并分发到各节点 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2g -XX:PermSize=128m -XX:+UseG1GC -XX:MaxGCPauseMillis=200 -XX:ParallelGCThreads=8 -XX:ConcGCThreads=5 -XX:InitiatingHeapOccup
kafka消息可视化查看工具
04-11
1.可用于查看kafka内的消息数据，消息的偏移量，消费分组数等信息。 2.主要用于开发调试，勿过于依赖辅助工具，命令使用才是根本。
kafka-eagle-bin-2.1.0.tar.gz
07-05
1. **监控与报警**：Kafka Eagle提供实时监控Kafka集群的性能指标，如Broker状态、Partition信息、Topic详情等。当监控指标超过预设阈值时，系统会触发报警，确保及时处理问题。 2. **图形化管理**：通过简洁的用户...
5、kafka监控工具Kafka-Eagle介绍及使用
最新发布
05-29
Kafka-Eagle 是针对 Kafka 集群设计的一款高效、易用的监控工具，旨在提供对 Kafka 的深度监控和管理。 Kafka-Eagle 的主要特点包括： 1. **全面监控**：它能够监控 Kafka 的关键指标，如 Broker 的状态、Topic 的...
kafka-eagle-bin-2.0.1.tar.gz
08-10
4. **启动服务**：执行`bin/kafka-eagle-start.sh`启动服务，访问配置的Web端口（默认8080）即可看到Kafka Eagle的登录界面。 5. **用户管理**：初次使用需设置管理员账号，之后可创建更多用户并分配权限。 四、...
kafka-eagle-bin-2.0.5.tar.gz
07-07
- **配置文件**：修改conf/kafka-eagle-site.xml，配置Kafka集群地址、Zookeeper地址以及其它相关参数。 - **启动服务**：执行bin/kafka-eagle-start.sh脚本启动服务，然后在浏览器中输入http://服务器IP:8080...
kafka-eagle-bin-1.3.2.tar.gz
01-24
《Kafka Eagle 1.3.2：一站式Kafka监控与管理工具》 Kafka Eagle，作为一款针对Apache Kafka的高效、直观的管理和监控工具，为运维人员提供了强大的功能，帮助他们更好地理解和控制Kafka集群的运行状态。本文将深入...
kafka监控--kafka-eagle
02-05
kafka-eagle的安装使用，在网上找好了好久都没有找到完整资源，自己安装试验了好久，希望能对大家有帮助
Kafka 监控
程序员学习圈
09-20 1229
KafkaCluster 在使用 Kafka 低阶消费者时，可以通过 KafkaCluster 类实现 offset 向 ZooKeeper 的提交 和获取。 Kafka 协议非常简单，只有六个核心客户端请求 API: 元数据(Metadata) - 描述当前可用的代理，主机和端口信息，并提供有关哪个代理主机分区的信息。 发送(Send) -...
【kafka】Kafka 可视化工具Kafka Eagle安装和使用
michaelwoshi的博客
04-08 2万+
一、背景 Kafka产线环境需要管理的Topic和Consumser越来越多，使用命令行工具进行管理会非常繁杂。因此，大数据平台上需要一套Kafka的管理监控系统，Kafka-Eagle。 Kafka Eagle是一个用于监控和管理kafka的开源组件，可以同时监控多个kafka集群。 Kafka Eagle提供了完善的监控页面和kafka常用操作的管理界面，便于管理员对kafka集群进行运维管理。 Kafka Eagle提供了KSQL操作的可视化界面，让你可以非常快速的查看kafka中的消息。 K
Kafka Eagle安装及使用简介（详细教程）
热门推荐
足迹
09-26 3万+
1.kafka-eagle-bin-1.2.4.tar.gz 安装包下载，官网 或者在我百度网盘中下载。点击下载 2.我们直接按照步骤详细说明下安装步骤，JDK一定要安装必须知道JDK的安装路径 21.安装包拷贝至服务器解压安装包 tar -zxf kafka-eagle-bin-1.2.4.tar.gz 2.2设置全局变量，设置JDK的全局变量JAVA_HOME和本应用的KE_HOME...
Kafka 监控系统Eagle 使用教程 V1.4.0
Edwin's blog
11-21 1315
1. 下载安装zookeeper 2. 下载安装kafka 3. 下载安装kafka-eagle http://download.kafka-eagle.org/ tar -zvxfkafka-eagle-bin-1.4.0.tar.gz 4.配置JAVA_HOME和KE_HOME 检查自己JAVA 和 Kafka eagle 的安装目录，配置JAVA_HOME,JRE_HOM...
Kafka Eagle 监控-安装
qq_22049773的博客
01-22 262
1、修改 kafka 启动命令 修改 kafka-server-start.sh 命令中 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G" fi 修改为 if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP...
使用kafka-eagle监控kafka
敲天
07-27 4719
kafka-eagle(/'iːg(ə)l/)是一款简单高效的监控系统，用以监控kafka的偏移量、元数据等信息，它还提供了邮件、钉钉、微信报警功能。本篇假设已经存在一个可用的kafka集群，并介绍kafka-eagle搭建与使用。 官网：https://www.kafka-eagle.org/ github：https://github.com/smartloli/kafka-eagle 前...
查看kafka消息队列的积压情况
bobozai86的博客
09-20 1万+
查看消息的堆积情况，执行命令： ./kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --group rule LogEndOffset 下一条将要被加入到日志的消息的位移 CurrentOffset 当前消费的位移 LAG 消息堆积量 消息堆积量：消息中间件服务端中所留存的消息与消费掉的消息之间...
kafka监控（一）：kafka-eagle
桃花惜春风
08-15 6116
kafka-eagle是一款kafka监控软件，是笔者在接触kafka这几年来，使用的最好的一款开源监控工具。它可以同时监控多个集群，监控 Kafka 集群中 Topic 被消费的情况。包含 Lag 的产生，Offset 的变动，Partition 的分布。并且包含KafkaMonitor 和 Kafka Manager 的相关功能。可以说是既可以管理集群，又可以监控kafka的性能和消费情况，同...
Kafka-Eagle监控工具：安装与使用指南
"本文主要介绍了Kafka监控工具Kafka-Eagle的使用，包括其简介、部署和验证。Kafka-Eagle是一款开源免费的Kafka集群监控工具，能够监控offset、lag变化、partition分布和owner等关键信息。文章还提到了开启Kafka JMX...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值