kafka部署二

最新推荐文章于 2024-08-01 23:15:09 发布

炼气散人

最新推荐文章于 2024-08-01 23:15:09 发布

阅读量2.3w

点赞数

分类专栏： # kafka 文章标签： kafka

本文链接：https://blog.csdn.net/csfreebird/article/details/48225599

版权

在尝试使用Kafka内置命令行工具发送数据时遇到了'leader is not valid'的错误，导致无法添加消息到Kafka。问题源于启动时broker在Zookeeper中注册的IP与producer配置中metadata.broker.list的IP不一致。解决方案是在server.properties中设置'hostname'属性以明确注册的IP。调整后，虽然仍有警告，但数据已能成功读取。后续将深入讨论更多实践中的Kafka问题。

摘要由CSDN通过智能技术生成

现在来测试一下，使用kafka内置的命令行工具发送数据，结果出现问题

bin/kafka-console-producer.sh --broker-list 10.149.11.151:9092 --topic vehicle_test
[2015-09-05 14:18:50,877] WARN Property topic is not valid (kafka.utils.VerifiableProperties)

无法将消息添加到kafka中，报错为leader is not valid,

之后用consumer读取也出错

bin/kafka-console-consumer.sh --zookeeper 10.149.11.146:2181/vehicle_kafka --from-beginning --topic vehicle_test
[2015-09-05 14:41:07,630] WARN [console-consumer-72151_10-149-11-147-1441435267500-9d20d013], no brokers found when trying to rebalance. (kafka.consumer.ZookeeperConsumerConnector)

这个原因可以参考kafka FAQ

https://cwiki.apache.org/confluence/display/KAFKA/FAQ