Kafka的性能监控

Kafka Eagle

1.修改 Kafka 启动命令
修改 kafka-server-start.sh 命令中

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

为

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
 export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G 
 -XX:PermSize=128m 
 -XX:+UseG1GC 
 -XX:MaxGCPauseMillis=200 
 -XX:ParallelGCThreads=8 
 -XX:ConcGCThreads=5 
 -XX:InitiatingHeapOccupancyPercent=70"
 export JMX_PORT="9999"
 #export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
fi

2.上传压缩包 kafka-eagle-bin-1.3.7.tar.gz 到 Linux。
3.解压到本地。

tar -zxvf kafka-eagle-bin-1.3.7.tar.gz

4.进入刚才解压的目录，将 kafka-eagle-web-1.3.7-bin.tar.gz 解压至/opt/module。

tar -zxvf kafka-eagle-web-1.3.7-bin.tar.gz -C /opt/module/

5.修改名称。

mv kafka-eagle-web-1.3.7/ eagle

6.进入 eagle/bin 目录下，给启动文件 ke.sh 执行权限。

chmod 777 ke.sh

7.修改 eagle/conf 目录下配置文件 system-config.properties。
修改的内容：

######################################
# multi zookeeper&kafka cluster list
######################################
kafka.eagle.zk.cluster.alias=cluster1
cluster1.zk.list=master:2181,slave1:2181,slave2:2181

######################################
# kafka offset storage
######################################
cluster1.kafka.eagle.offset.storage=kafka

######################################
# enable kafka metrics
######################################
kafka.eagle.metrics.charts=true
kafka.eagle.sql.fix.error=false

######################################
# kafka jdbc driver address
######################################
kafka.eagle.driver=com.mysql.jdbc.Driver
kafka.eagle.url=jdbc:mysql://slave1:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
kafka.eagle.username=root
kafka.eagle.password=123456

8.配置环境变量。

vim /etc/profile

（1）添加以下内容

#KAFKA EAGLE
export KE_HOME=/opt/module/eagle
export PATH=$PATH:$KE_HOME/bin

（2）使配置文件生效

source /etc/profile

10.启动

ke.sh start

11.登录查看