kafka是存储到本地磁盘么_Kafka存储（为什么Kafka使用磁盘作为存储介质？）

一、存储结构概述

image

每一个partion(文件夹)相当于一个巨型文件被平均分配到多个大小相等segment(段)数据文件里。但每一个段segment file消息数量不一定相等，这样的特性方便old segment file高速被删除。(默认情况下每一个文件大小为1G)

每一个partiton仅仅须要支持顺序读写即可了。segment文件生命周期由服务端配置參数决定。

1.partiton中segment文件存储结构

segment file组成：由2大部分组成。分别为index file和data file，此2个文件一一相应，成对出现，后缀”.index”和“.log”分别表示为segment索引文件、数据文件.

segment文件命名规则：partion全局的第一个segment从0开始，兴许每一个segment文件名称为上一个segment文件最后一条消息的offset值。

数值最大为64位long大小。19位数字字符长度，没有数字用0填充。

itcast@Server-node:/mnt/d/kafka_2.12-2.2.1$ ll /tmp/kafka/log/heima-0/

total 20480

drwxr-xr-x 1 itcast sudo 512 Aug 29 09:38 ./

drwxrwxrwx 1 dayuan dayuan 512 Aug 29 09:41 ../

-rw-r--r-- 1 itcast sudo 10485760 Aug 29 09:38 00000000000000000000.index

-rw-r