CC00062.kafka——|Hadoop&kafka.V47|——|kafka.v47|日志存储索引|偏移量索引|时间戳索引.v02|

一、偏移量索引
### --- 位置索引保存在index文件中

~~~     log日志默认每写入4K(log.index.interval.bytes设定的),会写入一条索引信息到index文件中,
~~~     因此索引文件是稀疏索引,它不会为每条日志都建立索引信息。
~~~     log文件中的日志,是顺序写入的,由message+实际offset+position组成
~~~     索引文件的数据结构则是由相对offset(4byte)+position(4byte)组成,
~~~     由于保存的是相对第一个消息的相对offset,只需要4byte就可以了,可以节省空间,
~~~     在实际查找后还需要计算回实际的offset,这对用户是透明的。
~~~     稀疏索引,索引密度不高,但是offset有序,二分查找的时间复杂度为O(lgN),
~~~     如果从头遍历时间复杂度是O(N)。
### --- 示意图如下:
~~~     偏移量索引由相对偏移量和物理地址组成。
<
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

yanqi_vip

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值