Kafka
文章平均质量分 57
码上富贵
在我手里就不可能有隔夜的BUG,因为隔夜我就忘了。
展开
-
docker-compose快速部署Kafka集群
文章目录概述脚本管理页面基础命令概述单节点移步 ==> docker-compose快速部署Kafka,以及常见问题解决注意事项不要配置restart: always,如果有问题,会一直重启。将数据挂载到本地并指定路径,可能会有Permission denied问题。KAFKA_CFG_LISTENERS=CLIENT://:9092,端口前不要加IP,否则无法启动。kafka3需要jdk11,容器内置。脚本docker-compose.ymlversion: '2'ser原创 2022-04-14 00:28:09 · 2541 阅读 · 0 评论 -
docker-compose快速部署Kafka,以及常见问题解决
文章目录一、概述二、服务不修改端口修改端口常用命令三、常见错误docker未启动报错:pull不下来启动容器报错java 端不识别容器名java 端获取topic超时一、概述二、服务Kafka-manager使用docker-compose配置,遇到comsumers没有数据问题,生产版本不存在问题,故不深究。不修改端口# 包含了zk,采用默认端口2181,9092$ curl -sSL https://raw.githubusercontent.com/bitnami/bitnami-dock原创 2022-04-11 22:16:05 · 4500 阅读 · 2 评论 -
彻底删除Kafka和zookeeper数据
文章目录一、停止所有服务二、重置zookeeper三、重置Kafka一、停止所有服务停止客户端连接停止所有Kafka节点停止所有zk节点二、重置zookeeper清除所有zookeeper数据,数据目录在zoo.cfg中# 快照路径(集群下有myid文件,需要保留)# dataDir=/home/zk/data# 增量日志路径(默认没有dataLogDir,需要指定)# dataLogDir=/home/zk/logsrm -rf /home/zk/datarm -rf /hom原创 2022-04-11 00:57:57 · 9782 阅读 · 0 评论 -
Docker快速部署Kafka、kafka-manager
文章目录一、概述官方网站版本说明二、Kafka1.下载镜像2.Docker参数说明三、kafka-manager启用 JMX 轮询1.Kafka开放JMX2.kafka-manager开启JMX四、常用命令topicconsumerproducer一、概述官方网站不要访问中文官网,信息落后很多。英文官网:https://kafka.apache.org/版本说明目前最新版本3.0.0,不支持Java 8 和 Scala 2.12。Kafka2.8 中弃用Zookeeper,使用Raft协原创 2014-02-14 09:27:54 · 3722 阅读 · 0 评论 -
Zookeeper基础
文章目录一、概述应用场景:版本说明:官方网站:配置文件:二、服务端查看状态三、客户端启动客户端查看节点创建节点四、节点类型无序持久节点(默认)有序持久节点无序临时节点有序临时节点五、监听器事件机制:监听测试:六、权限控制scheme:permission:world模式auth模式digest模式**ip**模式八、其他基础命令一、概述ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现。应用场景:分布式协调分布式锁元数据/配原创 2021-11-17 07:48:51 · 1291 阅读 · 0 评论 -
Kafka修改分区、副本数量
文章目录一、概述二、修改分区三、修改副本1.指定Topic2.生成分配计划3.修改分配计划4.执行分配计划5.查看分配进度6.查看新的副本一、概述无需重启服务二、修改分区方式一:直接用软件重新分区Kafka Manager:方式二:命令行分区–zookeeper已经过时,使用–bootstrap-server# 查看分区bin/kafka-topics.sh --describe --bootstrap-server 172.25.18.45:9092,172.25.18.原创 2021-09-13 12:13:25 · 3565 阅读 · 0 评论