通过偏移量删除kafka主题中的消息

最新推荐文章于 2024-05-28 20:30:50 发布

失散Lost

最新推荐文章于 2024-05-28 20:30:50 发布

阅读量1.1k

点赞数 1

分类专栏： kafka

本文链接：https://blog.csdn.net/jason_9527/article/details/107322313

版权

使用java程序的方法删除kafka的消息

摘要由CSDN通过智能技术生成

kafka在0.10之后的版本做日志清理有三个策略
分别是时间，大小，和起始偏移量
使用偏移量做消息的管理，常见的是通过脚本去做
参考：https://blog.csdn.net/u013256816/article/details/80418297
脚本方式参考：https://blog.csdn.net/waneyongfu/article/details/78983820
如果想用java API去实现，可以采用下面的方法

package com.censoft.kafkaAdmin;

import org.apache.kafka.clients.admin.*;
import org.apache.kafka.common.KafkaFuture;
import org.apache.kafka.common.TopicPartition;

import java.sql.*;
import java.util.HashMap;
import java.util.Map;
import java.util.Properties;
import java.util.concurrent.ExecutionException;

/**
 * @author zy Zhang
 * @version : 1.0
 * @Description
 * @since 2020/7/13 16:02
 */
public class DeleteReordsByOffset {
    public static void main(String[] args) throws ClassNotFoundException {
        // 1.创建kafkaAdminClient
        Properties properties = new Properties();
        properties.put("bootstrap.servers","192.168.27.111:9092"