Kafka 是什么
(1)在流式计算中,Kafka 一般用来缓存数据,Storm 通过消费 Kafka 的数据进行计算。
(2)Apache Kafka 是一个开源消息系统,由 Scala 写成。是由 Apache 软件基金会开发的一个开源消息系统项目。
(3)该项目的目标是为处理实时数据提供一个统一、高通量、低等待的平台。
(4)Kafka 是一个分布式消息队列。Kafka 对消息保存时根据 Topic 进行归类,发送消息者称为 Producer,消息接受者称为 Consumer,此外 kafka 集群由多个 kafka 实例组成,每个实例(server)成为 broker。
5)无论是 kafka 集群,还是 producer 和 consumer 都依赖于 zookeeper 集群保存一些meta 信息,来保证系统可用性。
消息队列内部实现原理
未完待续。。。