本文主要探讨Kafka 0.10.0.1版本的源码，特别是其核心模块`core`。涉及admin模块的topic和partition管理，api模块的数据交互，client模块的元数据获取，cluster模块的重要类定义，consumer模块，controller的选举和副本分配，coordinator的协调功能，javaapi的使用，log模块的消息持久化，message模块的消息集合，metrics的监控，network的网络处理，producer的发送机制，security.auth的安全认证，serializer的序列化工具，server的启动内容，以及工具和通用工具模块的介绍。
Kafka源码依赖于Scala环境，首先需要安装scala，这块请自行百度进行安装。
当然，我们要分析源码，需要下载源码，请自行从github上面下载。
说明：本文使用的kafka版本为0.10.0.1，这是目前公司使用的版本。
下面说明下kafka源码的工程结构：
下面主要对core目录模块进行说明，这块是kafka的核心。
- admin：管理员模块，操作和管理topic，paritions相关，包含create,delete topic,扩展patitions
- api：这块主要负责数据的组装，客户端和服务端数据交互的组装
- client：这个模块比较简单，只有一个类，主要是获取一些元数据，包括topic、broker等
- cluster：该模块定义了几个在kafka中比较重要的类：Broker，BrokerEndPoint，Cluster，EndPoint，Partition，Replica等，后续我们会对他们之间的关系进行分析
- common：通用类，定义了一些异常类等等
- consumer：comsu
最低0.47元/天 解锁文章
893
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
