Kafka个人总结

本文详细介绍了Kafka的基本概念、作用,如应用解耦、异步处理和流量削峰,并深入探讨了Kafka的生产、存储和消费流程,包括分区规则、消息存储策略、消费者消费模式以及Kafka与Zookeeper的关系。此外,还讨论了Kafka中的关键问题,如同步和异步推送、消费者API、offset存储和消费者组的功能。
摘要由CSDN通过智能技术生成
*刚学kafka2天,老师安排的作业让把这两天学的内容自己总结一下发一篇博客,所以才写的,肯定很多问题,大佬们勿喷。*

1 Kafka是什么?

简单来说,Kafka就是一个消息系统/消息中间件,虽然Kafka新增了流处理(统计分析计算)的新特性,但是我们一般还是使用Spark,Flink等作为流处理的软件.

2 Kafka的作用是什么?

1)应用解耦:多个应用可通过消息队列对消息进行处理,应用之间相互独立,互不影响.
图例:在这里插入图片描述

2)异步处理:相比于串行和井行处理,异步处理可以减少处理的时间.
在这里插入图片描述

3)流量削峰:流量高峰期,可通过消息队列来控制流量, 避免流量过大而引起应用系统崩溃.

4)消息通信:实现点对点消息队列,或者多对多的消息队列.

3 Kafka的生产,消息存储,消费流程细节

1) 生产者流程细节

1.生产者发送消息到Kafka集群使用的是推送模式

2.生产者发送消息到Kafka需要连接到任意一台Kafka节点

3.每一条消息会被封装为一个Record记录对象,里面可以包含主题、分区(可选)

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值