Kafka是LinkedIn开源的分布式消息系统，具备分布式、多分区、多副本、高性能和持久性等特点。它包括Producer、Consumer和Consumer Group等核心概念，数据存储在Partition中，通过Replication确保数据可靠性。Kafka广泛应用于消息队列、日志收集、流处理等领域，并支持消息事务和零拷贝等高级特性。
什么是Kafka
由LinkedIn在11年开源，还有例如：分布式数据同步系统Databus、高性能计算引擎Cubert、Java异步处理框架ParSeq。
Kafka基本概念
- Producer：消息和数据的生产者，向Kafka的一个topic发布消息的进程/代码/服务
- Consumer：消息和数据的消费者，订阅数据（Topic）并且处理其发布的消息的进程/代码/服务。
- Consumer Group：逻辑概念，对于同一个topic，会广播给不同的group，一个group中，只有一个consumer可以消费该消息。
- Broker：物理概念，Kafka集群中的每个Kafka节点。
- Topic：逻辑概念ÿ
最低0.47元/天 解锁文章
扫一扫
2023
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
