kafka监控之kafka-eagle安装部署

Kafka-eagle监控服务部署

注：前提已经启动zookeeper，kafka，mysql
1、 解压安装包

wget https://github.com/smartloli/kafka-eagle-bin/archive/v1.2.7.tar.gz
tar -zxvf v1.2.7
cd kafka-eagle-bin-1.2.7
tar -zxvf kafka-eagle-web-1.2.7-bin.tar.gz -C /opt/bigdata/
cd /opt/bigdata/
mv kafka-eagle-web-1.2.7/kafka-eagle

2、 配置环境变量

vim /etc/profile

文末加入

#kafka-eagle
export KE_HOME=/opt/kafka-eagle
export PATH=$PATH:$KE_HOME/bin

加入完成后，执行source加载环境变量

source /etc/profile

3、 修改配置

cd /opt/bigdata/kafka-eagle
vim conf/system-config.properties

######################################
# multi zookeeper&kafka cluster list
######################################
#kafka.eagle.zk.cluster.alias=cluster1,cluster2
kafka.eagle.zk.cluster.alias=cluster1
cluster1.zk.list=192.168.31.241:2181,192.168.31.242:2181,192.168.31.243:2181
#cluster2.zk.list=xdn10:2181,xdn11:2181,xdn12:2181

######################################
# zk client thread limit
######################################
kafka.zk.limit.size=25

######################################
# kafka eagle webui port
######################################
kafka.eagle.webui.port=8048

######################################
# kafka offset storage
######################################
cluster1.kafka.eagle.offset.storage=kafka
#cluster2.kafka.eagle.offset.storage=zk

######################################
# enable kafka metrics
######################################
kafka.eagle.metrics.charts=false

######################################
# alarm email configure
######################################
kafka.eagle.mail.enable=false
kafka.eagle.mail.sa=alert_sa
kafka.eagle.mail.username=alert_sa@163.com
kafka.eagle.mail.password=mqslimczkdqabbbh
kafka.eagle.mail.server.host=smtp.163.com
kafka.eagle.mail.server.port=25

######################################
# delete kafka topic token
######################################
kafka.eagle.topic.token=keadmin

######################################
# kafka sasl authenticate
######################################
kafka.eagle.sasl.enable=false
kafka.eagle.sasl.protocol=SASL_PLAINTEXT
kafka.eagle.sasl.mechanism=PLAIN

######################################
# kafka jdbc driver address
######################################
kafka.eagle.driver=com.mysql.jdbc.Driver
kafka.eagle.url=jdbc:mysql://localhost:3306/ke?createDatabaseIfNotExist=true&useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
kafka.eagle.username=root
kafka.eagle.password=123456
#kafka.eagle.driver=org.sqlite.JDBC
#kafka.eagle.url=jdbc:sqlite:/opt/modules/kafka-eagle/db/ke.db
#kafka.eagle.username=root
#kafka.eagle.password=smartloli

4、 启动服务

bin/ke.sh start

5、 页面查看

http://ip:8048/ke

注：如果要获取kafka的详细数据流信息，需要开启kafka的JMX端口