2.原理分析
-
整体架构
-
元数据的更新
3.重要的生产者参数
三、消费者
=====
1.消费者与消费组
2.客户端开发
-
必要的参数配置
-
订阅主题与分区
-
反序列化
-
消息消费
-
位移提交
-
控制或关闭消费
-
指定位移消费
-
再均衡
-
消费者拦截器
-
多线程实现
-
重要的消费者参数
四、主题与分区
===========
1.主题的管理
-
创建主题
-
分区副本的分配
-
查看主题
-
修改主题
-
配置管理
-
主题端参数
-
删除主题
2.初识KafkaAdminCilent
-
基本使用
-
主题合法性验证
3.分区的管理
-
优先副本的选举
-
分区重分配
-
复制限流
-
修改副本因子
4.如何选择合适的分区数
-
性能测试工具
-
分区数越多吞吐量就越高吗
-
分区数的上限
-
考量因素
五、日志存储
==========
1.文件目录布局
2.日志格式的演变
-
v0版本
-
v1版本
-
消息压缩
-
变长字段
-
v2版本
3.日志索引
-
偏移量索引
-
时间戳索引
4.日志清理
-
日志删除
-
日志压缩
5.磁盘存储
-
页缓存
-
磁盘I/O流程
-
零拷贝
六、深入服务端
===========
1.协议设计
2.时间轮
3.延时操作
4.控制器
5.参数解密
七、深入客户端
===========
1.分区分配策略
2.消费者协调器和组协调器
3._consumer_offsets剖析
4.事务
![图片](https://img-blog.csdnimg.cn
需要文中资料的朋友,可以加我\/信获取:vip1024b 备注Java
/img_convert/db0c5a5759331905e38f65540a84c389.png)
八、可靠性探究
===========
1.副本剖析
2.日志同步机制
3.可靠性分析
九、Kafka应用
=============
1.命令行工具
2.Kafka Connect
3.Kafka Mirror Maker
4.Kafka Streams
Kafka实战笔记
关于这份笔记,为了不影响大家的阅读体验,我只能在文章中展示部分的章节内容和核心截图
- Kafka入门
- 为什么选择Kafka
- Karka的安装、管理和配置
- Kafka的集群
- 第一个Kafka程序
afka的生产者
- Kafka的消费者
- 深入理解Kafka
- 可靠的数据传递
- Spring和Kalka的整合
- Sprinboot和Kafka的整合
- Kafka实战之削峰填谷
- 数据管道和流式处理(了解即可)
- Kafka实战之削峰填谷
- Kafka的集群
- 第一个Kafka程序
- [外链图片转存中…(img-c1wYvKsx-1716343577817)]
afka的生产者
[外链图片转存中…(img-XcKBW6WY-1716343577817)]
- Kafka的消费者
- 深入理解Kafka
- 可靠的数据传递
[外链图片转存中…(img-hzZDeqzi-1716343577817)]
[外链图片转存中…(img-HrcmwpEH-1716343577817)]
- Spring和Kalka的整合
- Sprinboot和Kafka的整合
- Kafka实战之削峰填谷
- 数据管道和流式处理(了解即可)
[外链图片转存中…(img-sjpjfiUZ-1716343577818)]
- Kafka实战之削峰填谷
[外链图片转存中…(img-6GSzwAQx-1716343577818)]