kafka自定义分区器无法接收到数据

最新推荐文章于 2024-06-27 17:17:45 发布

一嗷

最新推荐文章于 2024-06-27 17:17:45 发布

阅读量1.9k

点赞数

文章标签： kafka

本文链接：https://blog.csdn.net/weixin_46231937/article/details/123962311

版权

本文记录了一次关于kafka自定义分区器遇到的问题，即自定义分区器无法接收到数据。经过排查，发现问题出在分区数量上，原本只创建了一个分区，导致数据接收异常。调整为三个分区后，问题得到解决。此经验提醒作者在编程时需要更加细心。

摘要由CSDN通过智能技术生成

记录一下大无语事件，今天看尚硅谷的kafka自定义分区器，结果自己编写得分区器kafka一直接收不到数据，idea里也终端没有语句输出，找了好久才发现问题。

自定义分区器代码：

import org.apache.kafka.clients.producer.Partitioner;
import org.apache.kafka.common.Cluster;

import java.util.Map;

public class MyPartition implements Partitioner {
    public int partition(String topic, Object key, byte[] keyBytes, Object value,         
                         byte[] valueBytes, Cluster cluster) {
        // 获取消息
        String myValue = value.toString();
        // 创建 partition
        int partition;
     
        if (myValue.contains("test")){
            partition = 0;
        }else {
            partition = 1;
        }
        // 返回分区号
        return partition;
    }
    // 关闭资源
    public void close() {
    }
    // 配置方法
    public void configure(Map<String, ?> configs) {
    }
}

主方法：