Kafka
Kafka
随风去。
莫道浮云终蔽日,严冬过尽春蓓蕾。
展开
-
kafka消息存储与partition副本原理
消息的存储原理: 消息的文件存储机制: 前面我们知道了一个 topic 的多个 partition 在物理磁盘上的保存路径,那么我们再来分析日志的存储方式。通过 ll /tmp/kafka-logs/testTopic-0/ 命令找到对应 partition 下的日志内容: kafka 是通过分段的方式将 Log 分为多个 LogSegment,LogSegment 是一个...原创 2018-12-20 17:05:00 · 1203 阅读 · 0 评论 -
kafka消息的分发与消费
关于 Topic 和 Partition: Topic: 在 kafka 中,topic 是一个存储消息的逻辑概念,可以认为是一个消息集合。每条消息发送到 kafka 集群的消息都有一个类别。物理上来说,不同的 topic 的消息是分开存储的,每个 topic 可以有多个生产者向它发送消息,也可以有多个消费者去消费其中的消息。 Partition: 每个 topi...原创 2018-12-19 13:58:00 · 1160 阅读 · 0 评论 -
kafka 的安装部署及整合springboot
Kafka 的简介: Kafka 是一款分布式消息发布和订阅系统,具有高性能、高吞吐量的特点而被广泛应用与大数据传输场景。它是由 LinkedIn 公司开发,使用 Scala 语言编写,之后成为 Apache 基金会的一个顶级项目。kafka 提供了类似 JMS 的特性,但是在设计和实现上是完全不同的,而且他也不是 JMS 规范的实现。 kafka 产生的背景: kafka 作为一...原创 2018-12-18 14:33:00 · 1013 阅读 · 0 评论