![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
文章平均质量分 53
胖胖胖胖胖虎
这个作者很懒,什么都没留下…
展开
-
kafka latest 模式消费偏移丢数据
flink kafka原创 2023-09-25 11:07:23 · 521 阅读 · 0 评论 -
kafka leader -1
【代码】kafka leader -1。原创 2023-06-01 18:08:10 · 381 阅读 · 1 评论 -
kafka java.io.IOException: Connection to 1 was disconnected before the response was read.
【代码】kafka java.io.IOException: Connection to 1 was disconnected before the response was read.原创 2023-05-29 15:12:23 · 1441 阅读 · 0 评论 -
Kafka重启报错:Corrupt time index found, time index file has non-zero size
前4个字节是这个消息相对于该log segment第一个消息offset的相对偏移量,后4个字节是这个消息在log文件中的物理位置;Kafka启动时加载log的步骤:以一个partition log目录为例::<1> 首先删除所有后缀名为.cleaned和.delete的文件:<2> 对于.swp结尾的文件,如果是log文件则直接恢复(去掉.swp, 变为.log);如果是index文件直接删掉(然后rebuild index文件);转载 2023-05-23 11:08:20 · 333 阅读 · 0 评论 -
Kafka ERROR Error while deleting the clean shutdown file in dir
kafka 问题记录原创 2023-02-18 00:37:03 · 400 阅读 · 0 评论 -
kafka 日志清除
kafka 日志清除转载 2022-12-02 11:32:58 · 2097 阅读 · 0 评论 -
kafka auto.offset.reset latest earliest 详解
kafka latest earliest转载 2022-11-24 16:36:27 · 3496 阅读 · 0 评论 -
flink关于 kafka source 偏移量
flink kafka 偏移量转载 2022-11-06 11:49:55 · 1431 阅读 · 0 评论 -
kafka 数据顺序性
kafka数据顺序转载 2022-08-17 10:01:43 · 621 阅读 · 0 评论 -
Kafka 问题记录
1、Found a corrupted index file due to requirement failed: Corrupt index foundbroker 所在虚拟机异常关机、kafka 服务启动关闭,日志报错如下:删除: kafka logs文件夹,再次启动原创 2022-04-20 11:07:07 · 3363 阅读 · 10 评论 -
Kafka mirror
Kafka 跨集群处理方案原创 2021-12-29 16:02:48 · 1463 阅读 · 0 评论 -
logstash input 添加多个kafka报错解决
[WARN ][org.apache.kafka.common.utils.AppInfoParser] Error registering AppInfo mbeanjavax.management.InstanceAlreadyExistsException: kafka.consumer:type=app-info,id=test-0logstash input 添加多个kafka会出现这个报错。是因为clientid唯一。换了N个版本kafka和logstash 网上也找不到解决方法 记录一转载 2021-12-22 17:22:51 · 1085 阅读 · 0 评论 -
常用kafka shell
常用Kafka shell原创 2021-12-22 16:35:59 · 231 阅读 · 0 评论 -
Kafka博客记录
Kafka记录博客原创 2021-12-10 17:48:18 · 158 阅读 · 0 评论 -
Kafka 1 partitions have leader brokers without a matching listener, including [xxxxx-0]
[root@nufront-worker-04 data]# kafka-console-consumer --topic eauLog-14.30-source-topic --from-beginning --group ga1 --bootstrap-server nufront-worker-04:909221/06/03 10:22:16 WARN clients.NetworkClient: [Consumer clientId=consumer-1, groupId=ga1] 1 p...原创 2021-06-03 11:38:48 · 3728 阅读 · 0 评论 -
kafka Commit cannot be completed since the group has already rebalanced and assigned the partitions
k8s helm 部署 kafka集群,启动一个producer ,再起一个consumer, 报错如下root@kafka-0:/# kafka-console-consumer --topic test --bootstrap-server kafka-headless.flink.svc.cluster.local:9092[2021-12-10 06:20:04,901] ERROR [Consumer clientId=consumer-1, groupId=console-consumer转载 2021-12-10 14:54:01 · 700 阅读 · 0 评论