使用Docker部署Spring-Boot项目,先收藏了

本文详细介绍了如何使用Docker部署Spring-Boot项目,并深入探讨了Kafka的技术细节,包括Kafka的基本概念、生产者与消费者的实现、主题与分区管理、日志存储原理以及Kafka与Spark的集成。同时,文章提供了学习路线和面试刷题建议,旨在帮助读者提升技术能力和面试准备。
摘要由CSDN通过智能技术生成

前言

学习某一门技术或者框架的时候,第一步当然是要了解下面这几样东西。

  1. 是什么?
  2. 有哪些特点?
  3. 有哪些应用场景?
  4. 有哪些成功使用的案例?

为了让你更好地了解 Netty 以及它诞生的原因,先从传统的网络编程说起吧!

一、对Kafka的认识

1.Kafka的基本概念

image

2.安装与配置

image

3.生产与消费

image

4.服务端参数配置

image

二、生产者

1.客户端开发

  • 必要的参数配置
  • 消息的发送
  • 序列化
  • 分区器
  • 生产者拦截器

image

2.原理分析

  • 整体架构
  • 元数据的更新

image

3.重要的生产者参数

image

三、消费者

1.消费者与消费组

image

2.客户端开发

  • 必要的参数配置
  • 订阅主题与分区
  • 反序列化
  • 消息消费
  • 位移提交
  • 控制或关闭消费
  • 指定位移消费
  • 再均衡
  • 消费者拦截器
  • 多线程实现
  • 重要的消费者参数

image

四、主题与分区

1.主题的管理

  • 创建主题
  • 分区副本的分配
  • 查看主题
  • 修改主题
  • 配置管理
  • 主题端参数
  • 删除主题

image

2.初识KafkaAdminCilent

  • 基本使用
  • 主题合法性验证

image

3.分区的管理

  • 优先副本的选举
  • 分区重分配
  • 复制限流
  • 修改副本因子

image

4.如何选择合适的分区数

  • 性能测试工具
  • 分区数越多吞吐量就越高吗
  • 分区数的上限
  • 考量因素

image

五、日志存储

1.文件目录布局

image

2.日志格式的演变

  • v0版本
  • v1版本
  • 消息压缩
  • 变长字段
  • v2版本

image

3.日志索引

  • 偏移量索引
  • 时间戳索引

image

4.日志清理

  • 日志删除
  • 日志压缩

image

5.磁盘存储

  • 页缓存
  • 磁盘I/O流程
  • 零拷贝

image

六、深入服务端

1.协议设计

image

2.时间轮

image

3.延时操作

image

4.控制器

image

5.参数解密

image

七、深入客户端

1.分区分配策略

image

2.消费者协调器和组协调器

image

3._consumer_offsets剖析

image

4.事务

image

八、可靠性探究

1.副本剖析

image

2.日志同步机制

image

3.可靠性分析

image

九、Kafka应用

1.命令行工具

image

2.Kafka Connect

image

3.Kafka Mirror Maker

image

4.Kafka Streams

image

十、Kafka监控

1.监控数据的来源

image

2.消费滞后

image

3.同步失效分区

image

4.监控指标说明

image

5.监控模块

image

十一、高级应用

1.过期时间(TTL)

image

2.延时队列

image

3.死信队列和重试队列

image

4.消息路由

image

5.消息轨迹

image

6.消息审计

image

7.消息代理

image

8.消息中间件选型

image

十二、Kafka与Spark的集成

1.Spark的安装及简单应用

image

2.Spark编程模型

image

3.Spark的运行结构

image

4.Spark Streaming简介

image

5.Kafka与Spark Streaming的整合

image

6.Spark SQL

image

7.Structured Streaming

image

8.Kafka与Structured Streaming的整合

image

最后我们该如何学习?

1、看视频进行系统学习

这几年的Crud经历,让我明白自己真的算是菜鸡中的战斗机,也正因为Crud,导致自己技术比较零散,也不够深入不够系统,所以重新进行学习是很有必要的。我差的是系统知识,差的结构框架和思路,所以通过视频来学习,效果更好,也更全面。关于视频学习,个人可以推荐去B站进行学习,B站上有很多学习视频,唯一的缺点就是免费的容易过时。

另外,我自己也珍藏了好几套视频资料躺在网盘里,有需要的我也可以分享给你:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

2、读源码,看实战笔记,学习大神思路

“编程语言是程序员的表达的方式,而架构是程序员对世界的认知”。所以,程序员要想快速认知并学习架构,读源码是必不可少的。阅读源码,是解决问题 + 理解事物,更重要的:看到源码背后的想法;程序员说:读万行源码,行万种实践。

Spring源码深度解析:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

Mybatis 3源码深度解析:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

Redis学习笔记:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

Spring Boot核心技术-笔记:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

3、面试前夕,刷题冲刺

面试的前一周时间内,就可以开始刷题冲刺了。请记住,刷题的时候,技术的优先,算法的看些基本的,比如排序等即可,而智力题,除非是校招,否则一般不怎么会问。

关于面试刷题,我个人也准备了一套系统的面试题,帮助你举一反三:

1年半经验,2本学历,Curd背景,竟给30K,我的美团Offer终于来了

只有技术过硬,在哪儿都不愁就业,“万般带不去,唯有业随身”学习本来就不是在课堂那几年说了算,而是在人生的旅途中不间断的事情。

人生短暂,别稀里糊涂的活一辈子,不要将就。

资料领取方式:点击蓝色传送门免费领取上述资料

文章内容中涉及到的Java面试题、源码文档,技术笔记等学习资料,均可以免费分享给大家学习,只需你动动手多多支持即可!

,刷题的时候,技术的优先,算法的看些基本的,比如排序等即可,而智力题,除非是校招,否则一般不怎么会问。

关于面试刷题,我个人也准备了一套系统的面试题,帮助你举一反三:

[外链图片转存中…(img-URzg9y4O-1620274578487)]

只有技术过硬,在哪儿都不愁就业,“万般带不去,唯有业随身”学习本来就不是在课堂那几年说了算,而是在人生的旅途中不间断的事情。

人生短暂,别稀里糊涂的活一辈子,不要将就。

资料领取方式:点击蓝色传送门免费领取上述资料

文章内容中涉及到的Java面试题、源码文档,技术笔记等学习资料,均可以免费分享给大家学习,只需你动动手多多支持即可!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值