Kafka-Eagle中的ke数据库创建

最新推荐文章于 2024-03-27 10:14:21 发布
最新推荐文章于 2024-03-27 10:14:21 发布
阅读量1.2k 收藏 4
点赞数 5
分类专栏： SQL linux 文章标签： 数据库 kafka mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/twi_twi/article/details/126835900
版权
linux 同时被 2 个专栏收录
38 篇文章 2 订阅
订阅专栏
SQL
5 篇文章 0 订阅
订阅专栏

在Kafka-Eagle的安装前，需要在MySQL中创建ke数据库，否则在http://192.168.10.102:8048/登录时会报出405的错误。

下面是创建ke数据库的代码。

CREATE TABLE IF	NOT EXISTS `ke_alarm_crontab` (
		`id` BIGINT ( 20 ) NOT NULL,
		`type` VARCHAR ( 64 ) NOT NULL,
		`crontab` VARCHAR ( 32 ) DEFAULT NULL,
		`is_enable` VARCHAR ( 2 ) DEFAULT 'Y',
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`modify` VARCHAR ( 32 ) DEFAULT NULL,
		PRIMARY KEY ( `id`, `type` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_metrics` (
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`broker` text DEFAULT NULL,
		`type` VARCHAR ( 32 ) DEFAULT NULL,
		`key` VARCHAR ( 64 ) DEFAULT NULL,
		`value` VARCHAR ( 128 ) DEFAULT NULL,
		`timespan` BIGINT ( 20 ) DEFAULT NULL,
		`tm` VARCHAR ( 16 ) DEFAULT NULL 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_p_role` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`name` VARCHAR ( 64 ) CHARACTER 
		SET utf8 NOT NULL COMMENT 'role name',
		`seq` TINYINT ( 4 ) NOT NULL COMMENT 'rank',
		`description` VARCHAR ( 128 ) CHARACTER 
		SET utf8 NOT NULL COMMENT 'role describe',
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB AUTO_INCREMENT = 4 DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_alarm_clusters` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`type` VARCHAR ( 32 ) DEFAULT NULL,
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`server` text DEFAULT NULL,
		`alarm_group` VARCHAR ( 128 ) DEFAULT NULL,
		`alarm_times` INT ( 11 ),
		`alarm_max_times` INT ( 11 ),
		`alarm_level` VARCHAR ( 4 ),
		`is_normal` VARCHAR ( 2 ) DEFAULT 'Y',
		`is_enable` VARCHAR ( 2 ) DEFAULT 'Y',
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`modify` VARCHAR ( 32 ) DEFAULT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_alarm_consumer` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`group` VARCHAR ( 128 ) DEFAULT NULL,
		`topic` VARCHAR ( 128 ) DEFAULT NULL,
		`lag` BIGINT ( 20 ) DEFAULT NULL,
		`alarm_group` VARCHAR ( 128 ) DEFAULT NULL,
		`alarm_times` INT ( 11 ),
		`alarm_max_times` INT ( 11 ),
		`alarm_level` VARCHAR ( 4 ),
		`is_normal` VARCHAR ( 2 ) DEFAULT 'Y',
		`is_enable` VARCHAR ( 2 ) DEFAULT 'Y',
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`modify` VARCHAR ( 32 ) DEFAULT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_connect_config` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`cluster` VARCHAR ( 64 ),
		`connect_uri` VARCHAR ( 128 ),
		`version` VARCHAR ( 32 ),
		`alive` VARCHAR ( 16 ),
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`modify` VARCHAR ( 32 ) DEFAULT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_resources` (
		`resource_id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`name` VARCHAR ( 255 ) CHARACTER 
		SET utf8 NOT NULL COMMENT 'resource name',
		`url` VARCHAR ( 255 ) NOT NULL,
		`parent_id` INT ( 11 ) NOT NULL,
		PRIMARY KEY ( `resource_id` ) 
	) ENGINE = INNODB AUTO_INCREMENT = 17 DEFAULT CHARSET = utf8mb4;
 
CREATE TABLE IF	NOT EXISTS `ke_metrics_offline` (
		`cluster` VARCHAR ( 64 ) NOT NULL,
		`key` VARCHAR ( 128 ) NOT NULL,
		`one` VARCHAR ( 128 ) DEFAULT NULL,
		`mean` VARCHAR ( 128 ) DEFAULT NULL,
		`five` VARCHAR ( 128 ) DEFAULT NULL,
		`fifteen` VARCHAR ( 128 ) DEFAULT NULL,
		PRIMARY KEY ( `cluster`, `key` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
 
 
CREATE TABLE IF	NOT EXISTS `ke_logsize` (
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`topic` VARCHAR ( 64 ) DEFAULT NULL,
		`logsize` BIGINT ( 20 ) DEFAULT NULL,
		`diffval` BIGINT ( 20 ) DEFAULT NULL,
		`timespan` BIGINT ( 20 ) DEFAULT NULL,
		`tm` VARCHAR ( 16 ) DEFAULT NULL 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_consumer_group_summary` (
		`cluster` VARCHAR ( 64 ) NOT NULL,
		`group` VARCHAR ( 128 ) NOT NULL,
		`topic_number` VARCHAR ( 128 ) NOT NULL,
		`coordinator` VARCHAR ( 128 ) DEFAULT NULL,
		`active_topic` INT ( 11 ) DEFAULT NULL,
		`active_thread_total` INT ( 11 ) DEFAULT NULL,
		PRIMARY KEY ( `cluster`, `group` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_consumer_bscreen` (
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`group` VARCHAR ( 128 ) DEFAULT NULL,
		`topic` VARCHAR ( 64 ) DEFAULT NULL,
		`logsize` BIGINT ( 20 ) DEFAULT NULL,
		`difflogsize` BIGINT ( 20 ) DEFAULT NULL,
		`offsets` BIGINT ( 20 ) DEFAULT NULL,
		`diffoffsets` BIGINT ( 20 ) DEFAULT NULL,
		`lag` BIGINT ( 20 ) DEFAULT NULL,
		`timespan` BIGINT ( 20 ) DEFAULT NULL,
		`tm` VARCHAR ( 16 ) DEFAULT NULL 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_users` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`rtxno` INT ( 11 ) NOT NULL,
		`username` VARCHAR ( 64 ) NOT NULL,
		`password` VARCHAR ( 128 ) NOT NULL,
		`email` VARCHAR ( 64 ) NOT NULL,
		`realname` VARCHAR ( 128 ) NOT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB AUTO_INCREMENT = 2 DEFAULT CHARSET = utf8mb4;

CREATE TABLE IF	NOT EXISTS `ke_sql_history` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`cluster` VARCHAR ( 64 ) DEFAULT NULL,
		`username` VARCHAR ( 64 ) DEFAULT NULL,
		`host` VARCHAR ( 128 ) DEFAULT NULL,
		`ksql` text DEFAULT NULL,
		`status` VARCHAR ( 16 ) DEFAULT NULL,
		`spend_time` BIGINT ( 20 ) DEFAULT NULL,
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`tm` VARCHAR ( 16 ) DEFAULT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_consumer_group` (
		`cluster` VARCHAR ( 64 ) NOT NULL,
		`group` VARCHAR ( 128 ) NOT NULL,
		`topic` VARCHAR ( 128 ) NOT NULL,
		`status` INT ( 11 ) DEFAULT NULL,
		PRIMARY KEY ( `cluster`, `group`, `topic` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF 	NOT EXISTS `ke_alarm_config` (
		`cluster` VARCHAR ( 64 ) NOT NULL,
		`alarm_group` VARCHAR ( 128 ) NOT NULL,
		`alarm_type` VARCHAR ( 16 ) DEFAULT NULL,
		`alarm_url` text DEFAULT NULL,
		`http_method` VARCHAR ( 16 ) DEFAULT NULL,
		`alarm_address` text DEFAULT NULL,
		`created` VARCHAR ( 32 ) DEFAULT NULL,
		`modify` VARCHAR ( 32 ) DEFAULT NULL,
		PRIMARY KEY ( `cluster`, `alarm_group` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;
 
CREATE TABLE IF	NOT EXISTS `ke_user_role` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`user_id` INT ( 11 ) NOT NULL,
		`role_id` TINYINT ( 4 ) NOT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB AUTO_INCREMENT = 2 DEFAULT CHARSET = utf8mb4;
	
CREATE TABLE IF	NOT EXISTS `ke_role_resource` (
		`id` BIGINT ( 20 ) NOT NULL AUTO_INCREMENT,
		`role_id` INT ( 11 ) NOT NULL,
		`resource_id` INT ( 11 ) NOT NULL,
		PRIMARY KEY ( `id` ) 
	) ENGINE = INNODB AUTO_INCREMENT = 19 DEFAULT CHARSET = utf8mb4;
	
ALTER TABLE `ke_consumer_bscreen` ADD INDEX `idx_timespan` ( `timespan` );
ALTER TABLE `ke_logsize` ADD INDEX `idx_timespan` ( `timespan` );
ALTER TABLE `ke_logsize` ADD INDEX `idx_tm_topic` ( `tm`, `topic` );
ALTER TABLE `ke_logsize` ADD INDEX `idx_tm_cluster_diffval` ( `tm`, `cluster`, `diffval` );
ALTER TABLE `ke_consumer_bscreen` ADD INDEX `idx_tm_cluster_diffoffsets` ( `tm`, `cluster`, `diffoffsets` );
INSERT INTO `ke_users`
VALUES
	( '1', '1000', 'admin', '123456', 'admin@email.com', 'Administrator' );;
CREATE TABLE IF	NOT EXISTS `ke_topic_rank` (
		`cluster` VARCHAR ( 64 ) NOT NULL,
		`topic` VARCHAR ( 64 ) NOT NULL,
		`tkey` VARCHAR ( 64 ) NOT NULL,
		`tvalue` BIGINT ( 20 ) DEFAULT NULL,
		PRIMARY KEY ( `cluster`, `topic`, `tkey` ) 
	) ENGINE = INNODB DEFAULT CHARSET = utf8mb4;;
INSERT INTO `ke_user_role`
VALUES
	( '1', '1', '1' );;
 
INSERT INTO `ke_p_role`
VALUES
	( '1', 'Administrator', '1', 'Have all permissions' ),
	( '2', 'Devs', '2', 'Own add or delete' ),
	( '3', 'Tourist', '3', 'Only viewer' );
	
INSERT INTO `ke_role_resource`
VALUES
	( '1', '1', '1' ),
	( '2', '1', '2' ),
	( '3', '1', '3' ),
	( '4', '1', '4' ),
	( '5', '1', '5' ),
	( '6', '1', '7' ),
	( '7', '1', '8' ),
	( '8', '1', '10' ),
	( '9', '1', '11' ),
	( '10', '1', '13' ),
	( '11', '2', '7' ),
	( '12', '2', '8' ),
	( '13', '2', '13' ),
	( '14', '2', '10' ),
	( '15', '2', '11' ),
	( '16', '1', '14' ),
	( '17', '1', '15' ),
	( '18', '1', '16' ),
	( '19', '1', '18' ),
	( '20', '1', '19' ),
	( '21', '1', '20' ),
	( '22', '1', '21' ),
	( '23', '1', '22' ),
	( '24', '1', '23' ),
	( '25', '1', '24' );
INSERT INTO `ke_resources`VALUES
	( '1', 'System', '/system', '-1' ),
	( '2', 'User', '/system/user', '1' ),
	( '3', 'Role', '/system/role', '1' ),
	( '4', 'Resource', '/system/resource', '1' ),
	( '5', 'Notice', '/system/notice', '1' ),
	( '6', 'Topic', '/topic', '-1' ),
	( '7', 'Message', '/topic/message', '6' ),
	( '8', 'Create', '/topic/create', '6' ),
	( '9', 'Alarm', '/alarm', '-1' ),
	( '10', 'Add', '/alarm/add', '9' ),
	( '11', 'Modify', '/alarm/modify', '9' ),
	( '12', 'Cluster', '/cluster', '-1' ),
	( '13', 'ZkCli', '/cluster/zkcli', '12' ),
	( '14', 'UserDelete', '/system/user/delete', '1' ),
	( '15', 'UserModify', '/system/user/modify', '1' ),
	( '16', 'Mock', '/topic/mock', '6' ),
	( '18', 'Create', '/alarm/create', '9' ),
	( '19', 'History', '/alarm/history', '9' ),
	( '20', 'Manager', '/topic/manager', '6' ),
	( '21', 'PasswdReset', '/system/user/reset', '1' ),
	( '22', 'Config', '/alarm/config', '9' ),
	( '23', 'List', '/alarm/list', '9' ),
	( '24', 'Hub', '/topic/hub', '6' );
MarcyTheLibrarian
关注
专栏目录
Kafka运维监控：Kafka-Eagle安装
m0_53400772的博客
06-08 1254
kafka自身并没有集成监控管理系统，因此对kafka的监控管理比较不便，好在有大量的第三方监控管理系统来使用，常见的有：Kafka Manager（雅虎开源的Kafka集群管理器）还有JMX接口自开发监控管理系统。
Kafka-eagle 安装教程
qq_23095607的博客
01-12 960
解释：Kafka-eagle 后来更名为 EFAK ，所以打开官网会显示EFAK。
kafka-eagle-2.0.3的ke数据库脚本
12-10
kafka-eagle-2.0.3安装如果发现eagle不会自动建库建表是，可以下载该sql脚本，自己建库建表
kafka-eagle 配置文件修改使用自带的数据库
最新发布
xiaoshitou_s的博客
03-27 1245
efak.password=t密码。
大数据平台分布式搭建 - Kafka之监测Kafka-Eagle部署
Santorinisu Blogs
11-15 798
Section I: 文件清单 kafka-eagle-bin-1.4.0.tar.gz Section II: 下载链接 [Kafka-Eagle 下载链接]：https://www.kafka-eagle.org/ Section III: Kafka-Eagle部署 总览，集群信息： 节点角色 Master Slave1 Slave2 IP 192.168.137.128...
kafka-eagle版本
11-06
包括kafka-eagle1.1.0和1.1.3两个版本，由于官网下载慢，顾提供
kafka-eagle
08-23
2. **主题管理**：用户可以通过Kafka Eagle轻松创建、修改和删除主题，查看主题的详细信息，如分区数、副本数、ISR状态等。此外，还可以进行数据清理，例如清除过期或无效的数据。 3. **消费者管理**：Kafka Eagle...
kafka-eagle工具安装部署
Mr_Yang888的博客
03-22 1万+
kafka-eagle工具安装部署 文章目录kafka-eagle工具安装部署1、kafka-eagle概述2、环境和安装1、环境要求2、安装步骤2.1、下载源码包2.2、解压2.3、准备数据库2.4、修改kafak-eagle配置文件5、配置环境变量6、启动kafka-eagle7、主界面 1、kafka-eagle概述 为了简化开发者和服务工程师维护Kafka集群的工作有一个监控管理工具，叫做...
kafka-eagle（EFAK）搭建
qq_34324703的博客
08-25 211
9 $KE_HOME/bin/ke.sh start 启动，用户名 admin 密码 123456。7 开启JMX vim bin/kafka-server-start.sh中修改为。8 如果Kafka开启了安全认证如则需要修改sasl设置。4 mysql中创建 ke数据库。2 下载kafka-eagle。
Kafka入门，mysql5.7 Kafka-Eagle部署（二十五）
weixin_43205308的博客
07-10 708
创建名为ke数据库,新版本会自动创建，不会创建的话，自己手动创建，不然会报查不到相关表信息错误。初始化账号密码 admin 123456。这里使用的是2.0.8。
Kafka安装与配置
上善若水 厚德载物
05-04 1万+
1.下载Kafka2.13-3.1.0 最新版为kafka_2.13-3.1.0.tgz 下载Zookeper 最新版为zookeeper-3.8.0 2.单机安装zookeper Kafka依赖于zookeeper,官方承诺将来会移除. 解压文件: tar zxvf apache-zookeeper-3.8.0-bin.tar.gz -C /opt/ mv /opt/apache-zookeeper-3.8.0-bin/ /opt/zookeeper 在/opt/zookeepe....
Centos7.9搭建kafka-3.2.0集群，三台机器组成，并安装安装eagle 监控
fyihdg的专栏
07-03 1323
Centos7.9搭建kafka-3.2.0集群，三台机器组成，并安装安装eagle 监控
kafka eagle/efak ke.bat命令 系统找不到指定的路径/不是内部或外部命令
qq_41357191的博客
03-21 1043
把整个文件夹移动到另外一个不带空格的目录下，再重新配置system-config.properties文件中的路径（或者配置软连接，比较麻烦不考虑）原因是一样的，除了可能真的没有配置java系统变量，还有的可能就是java_home路径包含空格，类似的做法也是移动到不带空格的位置。类似的问题可能还包括本地kafka的启动，提示找不到java_home。原因：efak安装目录带空格，路径读取错误。
选它准没错，Kafka可视化监控之Eagle
zjjcchina的博客
08-21 226
Kafka Eagle 提供了完善的管理页面，很方便的去管理和可视化Kafka集群的一些信息，例如Broker详情、性能指标趋势、Topic集合、消费者信息等，选它准没错，赶快安装试试吧。-rw-rw-r--. 1 bigdata bigdata 81062577 10月 13 00:00 efak-web-2.0.8-bin.tar.gz。echo " --------启动 $i Kafka-------"echo " --------停止 $i Kafka-------"#4. 判断文件是否存在。
数据库Table‘*****‘doesn‘t exist问题的解决
疯狂学习的青年
04-14 1万+
刚下载了navicat15，想着开始用，但是刚打开就出现了如下的问题 把数据库删除了重新连接也不行，还是打不开 后来查阅资料 解决办法如下 1.先确定自己的MySQL安装在什么地方，我的实在D盘 2.打开cmd进入这个目录，cmd打开时默认是c盘，输入D:后会进入D盘 3.进入你自己的mysql文件的bin目录 4.输入mysql_upgrade -u root -p --force 他会让你输入密码，输入你得mysql的密码后 出现这些信息后，问题解决 ...
Kafka eagle的介绍及安装（基于linux环境）
jack__love的博客
10-14 1829
Kafka eagle的介绍及安装（基于linux环境）
kafka eagle 踩坑windows安装
qq_43163943的博客
09-14 3246
使用场景：安装kafka eagle windows环境，一直没有反应，报如下错： The KE_HOME environment variable is not defined correctly 说一直找不到KE_HOME文件路径，直接cmd，输入命令查找%KE_HOME%也报一样的错 总结了下应该是配置环境变量的问题，以下是我的环境变量配置（自认为没有问题，有问题可踢我）： 然后一直启动不成功，后面，既然使用%KE_HOME%找不到指定文件，那么我就使用的手动修改，具体操作如下，..
kafka-eagle数据库脚本，表结构和数据
miaohui8023的博客
04-05 2306
1.表结构 CREATE TABLE ke_metrics( `cluster` varchar(500), `broker` varchar(500), `type` varchar(500), `key` varchar(500), `value` varchar(500), `timespan` varchar(500), `tm` varchar(500)); CR...
Metrics介绍和Spring的集成
热门推荐
鸟窝
08-11 3万+
Metrics可以为你的代码的运行提供无与伦比的洞察力。作为一款监控指标的度量类库，它提供了很多模块可以为第三方库或者应用提供辅助统计信息， 比如Jetty, Logback, Log4j, Apache HttpClient, Ehcache, JDBI, Jersey, 它还可以将度量数据发送给Ganglia和Graphite以提供图形化的监控。 Metrics提供了Gauge、Counter、Meter、Histogram、Timer等度量工具类以及Health Check功能。
Kafka-Eagle监控工具：安装与使用指南
"本文主要介绍了Kafka监控工具Kafka-Eagle的使用，包括其简介、部署和验证。Kafka-Eagle是一款开源免费的Kafka集群监控工具，能够监控offset、lag变化、partition分布和owner等关键信息。文章还提到了开启Kafka JMX...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值