大数据
文章平均质量分 76
饭桶也得吃饭
合抱之木,生于毫末;九层之台,起于累土;千里之行,始于足下。
展开
-
推荐一个开源的kafka可视化客户端GUI工具(Kafka King)
Kafka King原创 2024-08-21 18:31:59 · 633 阅读 · 0 评论 -
Zookeeper知识点整理
## 基础篇-----**1、zookeeper是什么**Zookeeper,一种分布式应用的协作服务,是Google的Chubby一个开源的实现,是Hadoop的分布式协调服务,它包含一个简单的原语集,应用于分布式应用的协作服务,使得分布式应用可以基于这些接口实现诸如同步、配置维护和分集群或者命名的服务。zookeeper是一个由多个service组成的集群,一个leader,多...原创 2019-05-14 10:19:05 · 196 阅读 · 0 评论 -
Kafka查看topic、consumer group状态命令
最近工作中遇到需要使用kafka的场景,测试消费程序启动后,要莫名的过几十秒乃至几分钟才能成功获取到到topic的partition和offset,而后开始消费数据,于是学习了一下查看kafka broker里topic和consumer group状态的相关命令,这里记录一下。命令参考自《Kafka: The Definitive Guide》 Chapter 9 Administratin...原创 2018-07-31 15:17:52 · 201 阅读 · 0 评论 -
Kafka使用小结
一、查看Kafka版本kafka没有提供version命令,不确定是否有方便的方法,但你可以进入kafka/libs文件夹,或者:find/-namekafka_\*|head-1|grep-o'\kafka[^\n]*'你应该看到像kafka_2.10-0.8.2-beta.jar这样的文件,其中2.10是S...原创 2017-11-06 17:58:57 · 97 阅读 · 0 评论 -
K8S环境部署 seatunnel 服务
说明SeaTunnel是一个非常易用、超高性能的分布式数据集成平台,支持海量数据的实时同步。每天可稳定高效同步数百亿数据,已被近百家企业应用于生产。为什么我们需要SeaTunnelSeaTunnel专注于数据集成和数据同步,主要旨在解决数据集成领域的常见问题:数据源多样:常用数据源有数百种,版本不兼容。随着新技术...原创 2024-04-09 17:17:54 · 742 阅读 · 0 评论 -
K8S环境部署 seatunnel Web服务
说明Apache SeaTunnel 提供两种提交任务的方法:SeaTunnel Web:这是一种创建和提交 SeaTunnel 任务的可视化方法。命令行: SeaTunnel还提供了用于任务提交的命令行方法。关于 SeaTunnel Web开源 Web 控制台,用于管理您的 Seatunnel 脚本,并将它...原创 2024-04-09 18:05:12 · 841 阅读 · 0 评论 -
strimzi operator 部署kafka集群(可外部访问)
strimzi operator 部署kafka集群原创 2024-08-02 11:33:48 · 1119 阅读 · 0 评论