Kafka创建主题并制定分区数和副本数

在这里插入图片描述


1.指令

[root@hadoop101 kafka_2.11-2.4.0]# bin/kafka-topics.sh --zookeeper hadoop102:2181  --create --replication-factor 2 --partitions 10  --topic course_learn


2.参数解读
kafka-topics.sh:kafka自带主题相关操作shell脚本

–zookeeper hadoop102:2181/kafka_2.4:指明zookeeper主机端口

–create:创建主题指令

–replication-factor 2:指定2个副本

–partitions 10:指定10个分区

–topic course_learn:指定主题名字为course_learn

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
A:要设置kafka消费者的分区副本,可以在创建topic进行设置。使用kafka的命令行工具kafka-topics.sh,可以通过以下命令设置分区副本: ``` kafka-topics.sh --create --zookeeper <zk_host:zk_port> --replication-factor <replication_factor> --partitions <num_partitions> --topic <topic_name> ``` 其中,zk_host为Zookeeper的主机名, zk_port为Zookeeper的端口号;replication_factor是副本,num_partitions是分区,topic_name是要创建的topic名称。 例如,要创建一个名为test_topic的topic,它有3个分区和2个副本,可以使用以下命令: ``` kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 2 --partitions 3 --topic test_topic ``` 创建成功后,就可以在消费者中使用topic名称来订阅消息了。在消费者的配置中,一般只需要指定Kafka的服务地址和订阅的topic名称即可开始消费消息。例如,在Java中可以使用Kafka的Java API来创建和设置消费者: ``` Properties props = new Properties(); props.put("bootstrap.servers", "localhost:9092"); props.put("group.id", "test_group"); props.put("enable.auto.commit", "true"); props.put("auto.commit.interval.ms", "1000"); props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props); consumer.subscribe(Arrays.asList("test_topic")); ``` 在上述代码中,使用了KafkaConsumer的subscribe()方法来订阅名为test_topic的topic。Kafka会根据该topic的分区自动分配给消费者进行消费。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

海若[MATRIX]

鼓励将是我最大的动力!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值