Apache Kafka是一种分布式发布-订阅消息系统，最初由LinkedIn开发，现为Apache顶级项目。本文介绍了Kafka的基本架构，包括Producer、Broker、Consumer和Zookeeper的角色，阐述了Kafka的分布式原理、执行流程和主要特性，如高吞吐量、低延迟、可扩展性和持久性。此外，还探讨了Kafka在日志收集、消息系统、用户活动跟踪等场景的应用。
一、简介
Apache Kafka是分布式发布-订阅消息系统，在 kafka官网上对 kafka 的定义：一个分布式发布-订阅消息传递系统。 它最初由LinkedIn公司开发，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区的和可复制的提交日志服务。
几种分布式系统消息系统的对比：
二、Kafka基本架构
它的架构包括以下组件：
1、话题（Topic）：是特定类型的消息流。消息是字节的有效负载（Payload），话题是消息的分类名或种子（Feed）名；
2、生产者（Producer）：是能够发布消息到话题的任何对象；
3、服务代理（Broker）：已发布的消息保存在一组服务器中，它们被称为代理（Broker）或Kafka集群；
4、消费者（Consumer）：可以订阅一个或多个话题，并从Broker拉数据，从而消费这些已发布的消息；
最低0.47元/天 解锁文章
扫一扫
2744
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
