kafka-自定义分区器（partitioner）_06

最新推荐文章于 2024-08-06 09:09:33 发布

置顶

Mr_yang_tao

最新推荐文章于 2024-08-06 09:09:33 发布

阅读量1.2k

点赞数

分类专栏： kafka kafka 文章标签： kafka

本文链接：https://blog.csdn.net/u014801432/article/details/82530641

版权

本文介绍了如何创建自定义的Kafka分区器，通过一个简单的示例展示了如何根据累加数字key进行取余分区。虽然通常使用默认分区器可实现负载均衡，但在特定场景下，自定义分区器能更好地满足需求。

摘要由CSDN通过智能技术生成

上一篇文章讲了kafka的默认的分区器（DefaultPartitioner）源码，这里我们写一个自定义分区器的小例子

生产者代码如下：

/**
 * kafka生产者
 * 使用自定义的分片器发送消息
 */
public class PartitionerProducer {
   

    public static final String TOPIC_NAME = "producer-0"; 
    private  static Properties props = new Properties();

    static{
         props.put("bootstrap.servers", "192.168.1.3:9092,192.168.1.128:9092,192.168.1.130:9092");
         props.put("acks", "all");
         props.put("retries", 0);
         props.put("batch.size", 16384);
         props.put("linger.ms", 1);
         props.put("buffer.memory", 33554432)