- 博客(3)
- 资源 (2)
- 问答 (1)
- 收藏
- 关注
转载 整理kafka相关的常用命令
整理kafka相关的常用命令管理## 创建主题(4个分区,2个副本)bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 2 --partitions 4 --topic test查询## 查询集群描述bin/kafka-topics.sh --describe --zookeeper #...
2018-04-12 12:10:10 411
转载 kafka数据清理
Kafka将数据持久化到了硬盘上,允许你配置一定的策略对数据清理,清理的策略有两个,删除和压缩。数据清理的方式删除log.cleanup.policy=delete启用删除策略直接删除,删除后的消息不可恢复。可配置以下两个策略:清理超过指定时间清理: log.retention.hours=16超过指定大小后,删除旧的消息:log.retention.bytes=1073741824为了避免在删...
2018-04-12 10:49:57 4009
转载 Kafka 如何读取offset topic内容 (__consumer_offsets)
Kafka 如何读取offset topic内容 (__consumer_offsets) 众所周知,由于Zookeeper并不适合大批量的频繁写入操作,新版Kafka已推荐将consumer的位移信息保存在Kafka内部的topic中,即__consumer_offsets topic,并且默认提供了kafka_consumer_groups.sh脚本供用户查看consumer信息。 不过依...
2018-04-12 10:02:25 1320
如何划分package?
2012-07-29
TA创建的收藏夹 TA关注的收藏夹
TA关注的人