Kafka基本概念--Topic

最新推荐文章于 2023-07-18 08:30:00 发布

weixin_43409307

最新推荐文章于 2023-07-18 08:30:00 发布

阅读量320

点赞数

文章标签： kafka 分布式

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/weixin_43409307/article/details/130066935

版权

可以理解Topic是一个类别的名称，同类消息发送到同一个Topic下面。对于每一个Topic ，下面可以有多个分区(Partition)日志文件:

Partition是一个有序的message序列，这些message按顺序添加到一个叫做commit log的文件中。每个partition中的消息都有一个唯一的编号，称之为offset，用来唯一标示某个分区中的message。每个partition ，都对应一个commit log文件。一个partition中的message的offset都是唯一的，但是不同的partition 中的message的offset可能是相同的。

每个consumer是基于自己在commit log中的消费进度(offset)来进行工作的。在kafka中，消费offset由consumer自己来维护；一般情况下我们按照顺序逐条消费commit log中的消息，当然我可以通过指定offset来重复消费某些消息，或者跳过某些消息。

查看topic相关信息

leader节点负责给定partition的所有读写请求。

replicas 表示某个partition在哪几个broker上存在备份。不管这个几点是不是”leader“ ，甚至这个节点挂了，也会列出。

isr 是replicas的一个子集，它只列出当前还存活着的，并且已同步备份了该partition的节点。

消息日志文件主要存放在分区文件夹里的以log结尾的日志文件里

weixin_43409307

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
Kafka基本概念--Topic

Partition是一个有序的message序列，这些message按顺序添加到一个叫做commit log的文件中。每个partition中的消息都有一个唯一的编号，称之为offset，用来唯一标示某个分区中的message。一个partition中的message的offset都是唯一的，但是不同的partition 中的message的offset可能是相同的。isr 是replicas的一个子集，它只列出当前还存活着的，并且已同步备份了该partition的节点。
复制链接

扫一扫

weixin_43409307 CSDN认证博客专家 CSDN认证企业博客

码龄6年

5: 原创

175万+: 周排名

193万+: 总排名

1240: 访问

: 等级

52: 积分

0: 粉丝

2: 获赞

4: 评论

1: 收藏

私信

关注

热门文章

最新评论

Kafka HW 与LEO笔记
CSDN-Ada助手: 恭喜您写出了第四篇博客，标题看上去很有意思！从您的博客中可以看出您对Kafka HW 与LEO有深入的了解，非常值得学习。希望您能继续保持创作热情，分享更多有价值的知识。如果可以的话，我们期待您在下一篇博客中能够分享一些实践经验或者案例，这样读者们可以更加直观地理解您的观点。再次感谢您的分享！ CSDN 会根据你创作的前四篇博客的质量，给予优秀的博主博客红包奖励。请关注 https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply4 看奖励名单。
Kafka基本概念--Consumer
CSDN-Ada助手: 恭喜您能够持续创作，这篇关于Kafka Consumer的博客阐述了基本概念，让读者更加深入了解Kafka。希望您能够继续扩展这个主题，例如深入探讨Consumer Group、Consumer Offset等方面的知识点，让读者更加全面地了解Kafka。期待您的下一篇作品。 CSDN 正在通过评论红包奖励优秀博客，请看红包流：https://bbs.csdn.net/?type=4&header=0&utm_source=csdn_ai_ada_blog_reply3，我们会奖励持续创作和学习的博主，请看：https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply3
Kafka基本概念--Topic
CSDN-Ada助手: 非常感谢您分享这篇关于Kafka基本概念的博客，对于想要了解Kafka的人来说，这篇文章非常有价值。除了Partition、Offset和ISR等基本概念，您可以继续深入到Kafka的Producer和Consumer的工作原理、Kafka集群的配置和监控等方面，这些内容也是非常有用的。希望您能继续分享您的Kafka学习心得，让更多人受益。如何写出更高质量的博客，请看该博主的分享：https://blog.csdn.net/lmy_520/article/details/128686434?utm_source=csdn_ai_ada_blog_reply2
Kafka基本概念
CSDN-Ada助手: 推荐云原生入门技能树：https://edu.csdn.net/skill/cloud_native?utm_source=AI_act_cloud_native

您愿意向朋友推荐“博客详情页”吗？

强烈不推荐
不推荐
一般般
推荐
强烈推荐

提交

最新文章

目录

评论 1

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。