Kafka主题、分区、副本

一、主题Topic

 主题Topic在kafka中是个逻辑的概念,kafka通过topic将消息进行分类,不同的Topic会被订阅该Topic的消费者消费。但是有个问题,如果说这个topic中的消息非常多,多到需要用几T来存,因为消息是会被保存到log日志文件中的,为了解决这个文件过大的问题,kafka提出了Partition分区的概念。

二、分区Partition
通过partition将⼀个topic中的消息分区来存储(分段存储topic),这样的好处有多个:
1.分区存储,可以解决统一存储文件过大的问题。
2.提高了读写的吞吐量:读和写可以同时在多个分区(文件)中进行。

创建多分区的主题:指定 --partitions 为2

$ bin/kafka-topics.sh --create --zookeeper localhost:2181  --replication-factor 1 --partitions 2 --topic hello

查看kafka本地日志目录下看到生成两个topic分区的文件夹


                
  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值