kafka的外在表现很像消息系统,允许发布和订阅消息流,但是它和传统的消息系统有很大的差异:
- 首先,kafka是个现代分布式系统,以集群的方式运行,可以自由伸缩
- 其次,kafka可以按照要求存储数据,保存多久都可以
- 第三,流式处理将数据处理的层次提示到了新高度,消息系统只会传递数据。kafka的流式处理能力可以让我们用很少的代码就能动态的处理派生流和数据集。所以,kafka不仅仅是个消息中间件
kafka不仅仅是个消息中间件,同时它是个流平台,这个平台上可以发布和订阅数据流(kafka的流,有一个单独的包stream的处理),并把它们保存起来,进行处理,这个就是kafka作者的设计理念。
不装了大神了,上面说的这些都是这位大牛的手写kafka笔记里的,看完之后万分膜拜,所以今天小编也想分享出来给大伙瞧瞧,话不多说,上目录(内容有点多,先来看下,大概了解一下)。
注意:如果需要这份下载完整的手写笔记可【查看文末】
01 kafka入门
1.1 什么是kafka
1.2 kafka中的基本概念
- 1.2.1 消息和批次
- 1.2.2 主题和分区
- 1.2.3 生产者和消费者、偏移量、消费者群组
- 1.2.4 Broker和集群
- 1.2.5 保留消息
02 为什么选择kafka
2.1 优点
2.2 常见场景
- 2.2.1 活动跟踪
- 2.2.2 传递消息
- 2.2.3 收集指标和日志
- 2.2.4 提交日志
- 2.2.5 流处理
03 kafka的安装、管理和配置
3.1 安装
- 3.1.1 预备环境
- 3.1.2 下载和安装kafka<