【硬刚Kafka】KAFKA基础（三）：Kafka架构深入(1) Kafka工作流程及文件存储机制

本文是对《【硬刚大数据之学习路线篇】从零到大数据专家的学习指南(全面升级版)》的Kafka部分补充。

1 Kafka工作流程及文件存储机制

　　Kafka 中消息是以 topic 进行分类的，生产者生产消息，消费者消费消息，都是面向 topic的。

　　topic 是逻辑上的概念，而 partition 是物理上的概念，每个 partition 对应于一个 log 文件，该 log 文件中存储的就是 producer 生产的数据。

　　Producer 生产的数据会被不断追加到该log 文件末端，且每条数据都有自己的 offset。

　　消费者组中的每个消费者，都会实时记录自己消费到了哪个 offset，以便出错恢复时，从上次的位置继续消费。