一本正经的说kafka的结构

            Kafka 从字面意思,可以看出来就是 ka  f  ka    是一个有序的 文件 消息队列进什么出什么 ! 

         Kafka 从logo上可以看到   他是一个分布式的结构   一个大节点 管理几个小节点

         一个 zookeeper 管理    和    多个 broker 进程节点  (多台机器)  

         一个 Topic                    和     多个 Partition (多个Broker上)

         一个Partition主副本      和     多个副本Partition(不同的Broker上)

         一个Partition副本         和      多个Segment

         最终的数据  Segment = file.log + file.index+ file.timeindex

                一般我们说数据可能都是以.db文件存储 file 为什么kafka是 .log? 前段时间服务器上压测,磁盘不够。运维人直接删除了服务器上的.log 但他万万没有想到的是,此.log 非一般.log

        他就是我的业务数据啊啊啊啊。。。

                 一本正经的猜测:可能是kafka在设计之时,是应用于linkin 系统的日志采集处理处理。所以他的格式都是.log 能不能改了?能:改kafka源码!反正人家是开源的!

         

         

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值