Kafka Topic全局和单个过期时间

全局设置:

1)需要修改server.properties配置如下:

log.retention.hours=168 ( 168h(7天) 配置该参数即可)
log.cleanup.policy=delete (默认,可不配置)

2) 修改配置后重启kafka服务生效,该种设置消息过期时间的优点是可以对所有topic全部生效,缺点是需要重启kafka服务,
造成服务短暂的不可用!

特定Topic设置:

可以不停服针对kafka中数据量较大的topic可以单独设置过期时间,而且不需要重启kafka

下面以数据较多的 mytopic为例, 全局默认消息过期时间为7天,现在将其调整为1天

1) 操作命令

bin/kafka-configs.sh --zookeeper localhost:2181 --alter --entity-name mytopic 
--entity-type topics --add-config retention.ms=86400000

`时间设置一天 86400000ms = 1`

查看设置:
bin/kafka-configs.sh --zookeeper node03,node04,node05:2181 --describe --entity-name mytopic --entity-type topics

Configs for topics:wordcounttopic are retention.ms=86400000


立即删除某个topic下的数据

./kafka-topics.sh --zookeeper localhost:2181 --alter --topic mytopic --config cleanup.policy=delete

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值