0.8.2kafka集群配置

最新推荐文章于 2024-02-26 14:23:03 发布

正义飞

最新推荐文章于 2024-02-26 14:23:03 发布

阅读量1.9k

点赞数 1

分类专栏： hadoop 文章标签： kafka 生产者消费者 kafka集群

本文链接：https://blog.csdn.net/u011308691/article/details/51980662

版权

本文档介绍了Kafka集群的配置步骤，包括修改broker id、设置Zookeeper地址列表和广播参数。同时提供了生产者和消费者的示例代码，适用于内外网环境的配置注意事项。

摘要由CSDN通过智能技术生成

hadoop,spark,kafka交流群：224209501

1，kafka配置

kafka官网的配置参数基本已经满足大家的需求了。

# Replication configurations
num.replica.fetchers=4
replica.fetch.max.bytes=1048576
replica.fetch.wait.max.ms=500
replica.high.watermark.checkpoint.interval.ms=5000
replica.socket.timeout.ms=30000
replica.socket.receive.buffer.bytes=65536
replica.lag.time.max.ms=10000
replica.lag.max.messages=4000

controller.socket.timeout.ms=30000
controller.message.queue.size=10

# Log configuration
num.partitions=8
message.max.bytes=1000000
auto.create.topics.enable=true
log.index.interval.bytes=4096
log.index.size.max.bytes=10485760
log.retention.hours=168
log.flush.interval.ms=10000
log.