Kafka（三）——eagle监控器配置

最新推荐文章于 2024-08-03 09:41:04 发布

我在燕京有把刀

最新推荐文章于 2024-08-03 09:41:04 发布

阅读量414

点赞数 1

分类专栏： kafka 大数据

本文链接：https://blog.csdn.net/qq_42672132/article/details/116057273

版权

大数据同时被 2 个专栏收录

8 篇文章 0 订阅

订阅专栏

kafka

5 篇文章 0 订阅

订阅专栏

本文详细介绍了如何通过修改Kafka启动命令、配置Eagle监控并设置环境变量，实现高效监控与问题排查。涉及步骤包括调整heap大小、设置JMX端口、配置Zookeeper连接和Kafka Eagle参数。

摘要由CSDN通过智能技术生成

四、Kafka监控——Eagle

1、修改kafka启动命令

kafka/bin vim kafka-server-start.sh

修改
if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

为:
if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC -XX:MaxGCPauseMillis=200 -XX:ParallelGCThreads=8 -XX:ConcGCThreads=5 -XX:InitiatingHeapOccupancyPercent=70"
    export JMX_PORT="9999"
    #export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

2、解压

3、给权限

进kafka-eagle/bin

chmod 777 ke.sh

4、修改配置文件

这一步要注意：

先看Kafka的配置

kafka/bin/
vim server.properties

在这里插入图片描述

看看自己配置的什么

复制后面的几个参数

然后进kafka-eagle/conf

vim system-config.properties 

######################################
# multi zookeeper&kafka cluster list
######################################
kafka.eagle.zk.cluster.alias=cluster1

#注意：下面这个就是kafka中server.properties中的配置
cluster1.zk.list=hadoop102:2181,hadoop103:2181,hadoop104:2181/kafka

######################################
# kafka offset storage
######################################
cluster1.kafka.eagle.offset.storage=kafka

######################################
# enable kafka metrics
######################################
kafka.eagle.metrics.charts=true
kafka.eagle.sql.fix.error=false

######################################
# kafka jdbc driver address
######################################
kafka.eagle.driver=com.mysql.jdbc.Driver
kafka.eagle.url=jdbc:mysql://hadoop102:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
kafka.eagle.username=root
kafka.eagle.password=000000