kafka
文章平均质量分 64
放弃与坚持,成就与无为!
Turn X7
不息!
展开
-
本机启动kafka server端注意事项
1.Windows下编译Kafka源码,‘gradlew‘不是内部或外部命令经查询,是kafka下的wrapper.gradle配置中,删除了windows批处理文件gradlew.bat,原因是官方未在windows下进行测试构建。但实际上windows下是可以进行测试构建的。为了保留gradlew.bat,需要将wrapper.gradle配置中最后一行remove指令注释。最后在项目根目录下执行 gradle wrapper 命令 gradlew.bat文件生成。2.启...原创 2022-01-12 17:14:25 · 1176 阅读 · 1 评论 -
Kafka集群分区副本设置为1,当分区所在broker宕掉引发的该分区不可用的问题
问题表象:业务进程中的kafka生产者线程报错:put suc offset:-1 partition:1 topic: test_topicorg.apache.kafka.common.errors.TimeoutException:Expiring 13 record(s) for test_topic-1:3000 ms has passed since last append于是查看kafka日志发现有如下告警:[org.springframework.kafka.KafkaLi原创 2020-08-12 01:32:40 · 1944 阅读 · 0 评论 -
kafka 集群部署(同一个zookeeper 集群管理不同的kafka集群)
同一个zookeeper 集群管理不同的kafka集群,不同的kafka 依赖于同一个zookeeper集群,只需要修改server.properties 文件中的zookeeper.connect 配置,其他的配置可以不变。如上述配置,只需要修改zookeeper.connect=dn1:2181,dn2:2181,dn3:2181/kafka2将kafka集群的元素据保存在zook.........原创 2020-04-05 01:24:41 · 2222 阅读 · 9 评论 -
使用IDEA搭建kafka源码环境
本文主要讲述的是如何搭建Kafka的源码环境,主要针对的Windows操作系统下IntelliJ IDEA编译器,其余操作系统或者IDE可以类推。1.安装和配置JDK确认JDK版本至少为1.7,最好是1.8及以上。使用java -version命令来查看当前JDK的版本,示例如下:2.下载并安装配置Gradle下载地址为:https://gradle.org/releases/,......原创 2020-03-31 22:43:36 · 4316 阅读 · 0 评论