Kafka-Eagle安装及连接成功web端登陆不了问题解决

kafka自身并没有集成监控管理系统,因此对kafka的监控管理比较不便,好在有大量的第三方监控管理系统来使用,常见的有:

  • Kafka Eagle
  • KafkaOffsetMonitor
  • Kafka Manager(雅虎开源的Kafka集群管理器)
  • Kafka Web Console
  • 还有JMX接口自开发监控管理系统
    以下是3.1.0版TV页面
    在这里插入图片描述
    Kafka-Eagle安装
    安装包下载地址: http://download.kafka-eagle.org/
    官方文档地址:https://docs.kafka-eagle.org/
    环境准备:zookeeper+kafka健康可用
  1. 上传,解压
  2. 配置环境变量:JAVA_HOME 和KE_HOME
vi /etc/profile

-- 之前配过了就不用再配了
export JAVA_HOME=/opt/apps/jdk1.8.3_9u19
export PATH=$PATH:$JAVA_HOME/bin

export KE_HOME=/opt/apps/efak-web-3.1.0
export PATH=$PATH:$KE_HOME/bin
  1. 配置KafkaEagle
cd ${KE_HOME}/conf
vi system-config.properties

修改如下内容:
######################################
# multi zookeeper & kafka cluster list
# Settings prefixed with 'kafka.eagle.' will be deprecated, use 'efak.' instead
######################################
efak.zk.cluster.alias=cluster1
cluster1.zk.list=linux01:2181,linux02:2181,linux03:2181

######################################
# broker size online list
######################################
cluster1.efak.broker.size=3

######################################
# kafka sqlite jdbc driver address
######################################
efak.driver=org.sqlite.JDBC
efak.url=jdbc:sqlite:/opt/data/kafka-eagle/db/ke.db
efak.username=root
efak.password=www.kafka-eagle.org

######################################
# kafka mysql jdbc driver address
######################################
#efak.driver=com.mysql.cj.jdbc.Driver
#efak.url=jdbc:mysql://linux01:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
#efak.username=root
#efak.password=123456

其中主要修改部分

efak.zk.cluster.alias=cluster1
cluster1.zk.list=linux01:2181,linux02:2181,linux03:2181
cluster1.efak.broker.size=3

注意要将这部分注释解开

efak.driver=org.sqlite.JDBC
efak.url=jdbc:sqlite:/opt/data/kafka-eagle/db/ke.db
efak.username=root
efak.password=www.kafka-eagle.org

如果你的system-config.properties配置是使用的默认的sqlite,那么你必须创建/hadoop/kafka-eagle/db

mkdir -p /hadoop/kafka-eagle/db

这里我将其放到了自己创建的路径下,efak.url=jdbc:sqlite:/opt/data/kafka-eagle/db/ke.db所以手动创建
mkdir -p /opt/data/kafka-eagle/db即可
若没有手动创建则会出现登陆成功但web端无法连接的情况,这是因为在官方文档中可以看到

It is important to note that the ‘/hadoop/kafka-eagle/db’ path must
be exist.

所以这个文件夹必须存在,执行mkdir -p /opt/data/kafka-eagle/db,然后重启你的kafka-eagle。就可以连接web端了

如果使用MySQL 提前在mysql中创建指定的数据库 mysql> CREATE DATABASE IF NOT EXISTS ke
DEFAULT CHARSET utf8 COLLATE utf8_general_ci;
并打开
#efak.driver=com.mysql.cj.jdbc.Driver
#efak.url=jdbc:mysql://linux01:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
#efak.username=root
#efak.password=123456
的注释

  1. 配置kafka服务端的JMX端口【选配】
    这部分就不作详细介绍了
  2. 配置KE_HOME 环境变量,上面已配置好
  3. 启动KafkaEagle
cd ${KE_HOME}/bin--- 这是cd 到 bin 目录下
chmod +x ke.sh
./ke.sh start
  1. 访问web界面
    http://192.168.111.33:8048(也可以直接linux01:8048,即安装到的虚拟机上名字+其端口号)
    账号密码:Account:admin ,Password:123456
    在这里插入图片描述在这里插入图片描述

注意,当你还连接不成功时,注意检查防火墙

### Kafka-Eagle 安装指南 Kafka-Eagle 是一种用于管理和监控 Apache Kafka 集群的工具,提供了友好的图形化界面。以下是基于已有引用内容和其他专业知识整理出的一份完整的安装指南。 #### 1. 环境准备 确保满足以下前提条件: - Java 开发环境 (JDK >= 1.8)[^2]。 - 已经正确安装并运行了 Kafka 和 ZooKeeper[^3]。 - 至少拥有 3GB 的可用内存以保障正常运行。 - 可访问的 MySQL 数据库服务(可以是本地或者远程),如果尚未安装 MySQL,则需先完成安装并配置好远程连接权限[^3]。 #### 2. 下载与解压 前往官方仓库获取最新版本的 Kafka-Eagle 压缩包,并按照如下方式操作: ```bash cd /export/softwares/ wget https://github.com/ChenJun2hao/Kafka-Eagle/releases/download/v1.3.2/kafka-eagle-bin-1.3.2.tar.gz tar -zxvf kafka-eagle-bin-1.3.2.tar.gz -C /export/servers/ cd /export/servers/kafka-eagle-bin-1.3.2/ tar -zxvf kafka-eagle-web-1.3.2-bin.tar.gz mv kafka-eagle-web-1.3.2/ .. cd ../kafka-eagle-web-1.3.2/ ``` 上述命令实现了从指定位置下载软件包、解压缩至目标目录的操作过程[^1]。 #### 3. 设置环境变量 通过修改全局 profile 文件增加对 Kafka-Eagle 所依赖路径的支持: ```bash vi /etc/profile ``` 向其中追加以下几行代码片段: ```bash export JAVA_HOME=/usr/src/jdk1.8.0_144 export PATH=$PATH:$JAVA_HOME/bin:/export/servers/kafka-eagle-bin-1.4.0/kafka-eagle-web-1.4.0/bin export KE_HOME=/export/servers/kafka-eagle-bin-1.4.0/kafka-eagle-web-1.4.0 source /etc/profile ``` 此部分完成了对于必要环境变量定义的同时也激活更改使之立即生效[^2]。 #### 4. 数据库初始化 利用附带 sql 脚本来构建所需的数据表结构,在终输入下面指令实现自动化建模工作流: ```sql mysql -u root -p <<EOF CREATE DATABASE IF NOT EXISTS kafka_eagle CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci; USE kafka_eagle; SOURCE /path/to/your/sql/file/init_kafka_eagle.sql; EOF ``` 这里假设您已经替换了 `/path/to/your/sql/file` 成真实存在的绝对路径指向 init_kafka_eagle.sql 这个文件的位置[^5]。 #### 5. 编辑配置文件 调整位于 `conf/ke.properties` 中的各项参数使其匹配当前系统的实际情况,重点注意以下几个选项: - **ke.store.type**: 将其设为 mysql (`ke.store.type=mysql`)。 - **ke.zk.list**: 提供 zookeeper 地址列表形式如 localhost:2181。 - **ke.broker.list**: 列举所有 broker 节点地址形似 localhost:9092。 - **ke.db.driver**, **ke.db.url**, **ke.db.user**, and **ke.db.password**: 对应填写刚才设置好的 RDBMS 访问凭证信息。 例如: ```properties ke.store.type=mysql ke.zk.list=localhost:2181 ke.broker.list=localhost:9092 ke.db.driver=com.mysql.cj.jdbc.Driver ke.db.url=jdbc:mysql://localhost:3306/kafka_eagle?useSSL=false&serverTimezone=UTC ke.db.user=root ke.db.password=my-secret-pw ``` #### 6. 启动服务 最后一步就是启动 Kafka-Eagle 自身的服务进程啦!只需简单执行下列语句即可完成整个流程的最后一环: ```bash sh bin/start-kafka-eagle.sh ``` 默认情况下应该能够通过浏览器访问 http://<hostname>:8048 来验证是否成功部署完毕[^1]。 --- ### 注意事项 - 若在任何阶段遭遇失败提示,请仔细阅读对应产生的 log 日志定位具体问题所在。 - 更多高级特性的探索比如 Prometheus/Grafana 整合等内容则需要额外查阅专门文档继续深挖学习[^2]。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值