kafka 指定partition两种方式&Consumer不消费消息的几个原因

需求

1.随机生成IP数字,将奇数、偶数数据分在不同的Partition
2.通过KafkaAPI实现一个消费组中多消费者,为了是验证同组的不同消费者是否一一对应不同的Patition
3.打包部署在Linux中运行

解决办法

方法1:
在producer发送消息时指定partition,ProducerRecord的构造方法可以有四个参数,分别是topic,int类型的partition值,key,value,我们直接指定传入的第二个参数即可
当我们不指定第二个参数,使用三个参数的构造方式时,会根据传入的key自动分区,传入key为空时消息不分区,会传到同一个partition中

producer.send(new ProducerRecord<>(topic,partition,ip, msg));

方法2:
自定义Partitioner,重写partition方法

@Override
    public int partition(String topic, Object key, byte[] arg2, Object value
  • 3
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值