50个kafka常见面试题及答案，撸完阿里P7见(1)

于 2024-04-28 05:39:43 发布
阅读量505 收藏 10
点赞数 14
分类专栏： 程序员 文章标签： kafka 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83977546/article/details/138264828
版权

16. 当你使用kafka-topics.sh创建（删除）了一个topic之后，Kafka背后会执行什么逻辑？

创建:在zk上/brokers/topics/下节点 kafkabroker会监听节点变化创建主题

删除:调用脚本删除topic会在zk上将topic设置待删除标志，kafka后台有定时的线程会扫描所有需要删除的topic进行删除

17. topic的分区数可不可以增加？如果可以怎么增加？如果不可以，那又是为什么？

可以

18. topic的分区数可不可以减少？如果可以怎么减少？如果不可以，那又是为什么？

不可以

19. 创建topic时如何选择合适的分区数？

根据集群的机器数量和需要的吞吐量来决定适合的分区数

20. Kafka目前有那些内部topic，它们都有什么特征？各自的作用又是什么？

__consumer_offsets 以下划线开头，保存消费组的偏移

21. 优先副本是什么？它有什么特殊的作用？

优先副本 会是默认的leader副本 发生leader变化时重选举会优先选择优先副本作为leader

22. Kafka有哪几处地方有分区分配的概念？简述大致的过程及原理

创建主题时

如果不手动指定分配方式 有两种分配方式

消费组内分配

23. 简述Kafka的日志目录结构

每个partition一个文件夹，包含四类文件.index .log .timeindex leader-epoch-checkpoint

.index .log .timeindex 三个文件成对出现 前缀为上一个segment的最后一个消息的偏移 log文件中保存了所有的消息 index文件中保存了稀疏的相对偏移的索引 timeindex保存的则是时间索引

leader-epoch-checkpoint中保存了每一任leader开始写入消息时的offset 会定时更新

follower被选为leader时会根据这个确定哪些消息可用

24. Kafka中有那些索引文件？

如上

25. 如果我指定了一个offset，Kafka怎么查找到对应的消息？

1.通过文件名前缀数字x找到该绝对offset 对应消息所在文件

2.offset-x为在文件中的相对偏移

3.通过index文件中记录的索引找到最近的消息的位置

4.从最近位置开始逐条寻找

26. 如果我指定了一个timestamp，Kafka怎么查找到对应的消息？

原理同上 但是时间的因为消息体中不带有时间戳 所以不精确

27. 聊一聊你对Kafka的Log Retention的理解

kafka留存策略包括 删除和压缩两种

删除: 根据时间和大小两个方式进行删除 大小是整个partition日志文件的大小

超过的会从老到新依次删除 时间指日志文件中的最大时间戳而非文件的最后修改时间

压缩: 相同key的value只保存一个 压缩过的是clean 未压缩的dirty 压缩之后的偏移量不连续 未压缩时连续

**28. 聊一聊你对Kafka的Log Compaction的理解

29. 聊一聊你对Kafka底层存储的理解（页缓存、内核层、块层、设备层）

30. 聊一聊Kafka的延时操作的原理

31. 聊一聊Kafka控制器的作用

32. 消费再均衡的原理是什么？（提示：消费者协调器和消费组协调器）

33. Kafka中的幂等是怎么实现的**

pid+序号实现，单个producer内幂等

33. Kafka中的事务是怎么实现的（这题我去面试6家被问4次，照着答案念也要念十几分钟，面试官简直凑不要脸。实在记不住的话…只要简历上不写精通Kafka一般不会问到，我简历上写的是“熟悉Kafka，了解RabbitMQ….”）

**34. Kafka中有那些地方需要选举？这些地方的选举策略又有哪些？

35. 失效副本是指什么？有那些应对措施？

36. 多副本下，各个副本中的HW和LEO的演变过程

37. 为什么Kafka不支持读写分离？

38. Kafka在可靠性方面做了哪些改进？（HW, LeaderEpoch）

39. Kafka中怎么实现死信队列和重试队列？

40. Kafka中的延迟队列怎么实现**（这题被问的比事务那题还要多！！！听说你会Kafka，那你说说延迟队列怎么实现？）

**41. Kafka中怎么做消息审计？

42. Kafka中怎么做消息轨迹？

43. Kafka中有那些配置参数比较有意思？聊一聊你的看法

44. Kafka中有那些命名比较有意思？聊一聊你的看法

45. Kafka有哪些指标需要着重关注？**

生产者关注MessagesInPerSec、BytesOutPerSec、BytesInPerSec 消费者关注消费延迟Lag

46. 怎么计算Lag？(注意read_uncommitted和read_committed状态下的不同)

参考 如何监控kafka消费Lag情况

47. Kafka的那些设计让它有如此高的性能？

零拷贝，页缓存，顺序写

**48. Kafka有什么优缺点？

49. 还用过什么同质类的其它产品，与Kafka相比有什么优缺点？

50. 为什么选择Kafka?**

吞吐量高，大数据消息系统唯一选择。

最后：学习总结——MyBtis知识脑图（纯手绘xmind文档）

学完之后，若是想验收效果如何，其实最好的方法就是可自己去总结一下。比如我就会在学习完一个东西之后自己去手绘一份xmind文件的知识梳理大纲脑图，这样也可方便后续的复习，且都是自己的理解，相信随便瞟几眼就能迅速过完整个知识，脑补回来。下方即为我手绘的MyBtis知识脑图，由于是xmind文件，不好上传，所以小编将其以图片形式导出来传在此处，细节方面不是特别清晰。但可给感兴趣的朋友提供完整的MyBtis知识脑图原件（包括上方的面试解析xmind文档）

image

除此之外，前文所提及的Alibaba珍藏版mybatis手写文档以及一本小小的MyBatis源码分析文档——《MyBatis源码分析》等等相关的学习笔记文档，也皆可分享给认可的朋友！

可给感兴趣的朋友提供完整的MyBtis知识脑图原件（包括上方的面试解析xmind文档）

[外链图片转存中…(img-fZm8YD2W-1714253965749)]

除此之外，前文所提及的Alibaba珍藏版mybatis手写文档以及一本小小的MyBatis源码分析文档——《MyBatis源码分析》等等相关的学习笔记文档，也皆可分享给认可的朋友！

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

2401_83977546
关注
  • 14
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
win10系统java环境变量配置
m0_62367187的博客
05-31 1139
添加path： %JAVA_HOME%\bin;七、添加变量名: JAVA_HOME 变量值（jdk安装路径，上面有提到过）八：验证java环境变量是否配置好：cmd 输入 java -version。三、双击exe安装jdk。cmd 输入 java。二、下载jdk安装包。
java安装教程
小白学CS
05-06 9万+
java安装教程
Java核心技术【二】Win10安装Java 配置环境变量
技术管理修行
06-01 4432
java环境变量配置是进行java语言研究学习的第一步，接下来的文章，将研究学习java最基础、最重要的部分。在未来工作的工作中，无论是代码的质量还是学习新的技术都需要牢固的java基础知识作支撑。
JDK下载与安装教程
热门推荐
墨笙弘一
06-18 117万+
学习JAVA，必须得安装一下JDK(java development kit java开发工具包)，配置一下环境就可以学习JAVA了，下面是下载和安装JDK的教程： 1.JDK下载地址： http://www.oracle.com/technetwork/java/javase/downloads/index.html点开链接你应该看到如下图所示的界面： 2.点击上图中箭头所指的地方，会出
IDEA热部署插件JRebel使用解决方案
weixin_51702416的博客
06-08 9103
JRebel是一款JVM插件，它使得Java代码修改后不用重启系统，立即生效。IDEA上原生是不支持热部署的，一般更新了 Java 文件后要手动重启整个项目，才能生效，使用JRebel后，可以不用重启便可将修改加载进web页面，非常的高效。目前对于idea热部署最好的解决方案就是安装JRebel插件。2. 安装插件这一步很重要！点击下面的链接；并复制这个生成的URL（其他的攻略都很复杂，这个可以一键生成GUID对应的URL）生成 GUID 的网址 https://www.guidgen.com/用这个网址
32道常见的Kafka面试题及答案.pdf
04-25
Kafka 面试题及答案总结 Kafka 是一种基于发布/订阅模式的消息系统，主要应用于大数据处理、实时数据处理和流式处理等场景。下面是 Kafka 的一些重要知识点： 1. Kafka 的特点： * 高吞吐量、低延迟：Kafka 每秒...
Kafka最新面试题2021年，常见面试题及答案汇总.md
最新发布
07-27
Kafka最新面试题2021年，常见面试题及答案汇总
Kafka常见面试题.docx
10-18
【Kafka面试题详解】 1. 如何提升Kafka生产者的吞吐量？ Kafka生产者的吞吐量优化主要涉及几个关键配置参数： - `buffer.memory`：这是生产者用于存储待发送消息的缓冲区大小，默认是32MB。如果消息发送速率...
Kafka最新面试题及答案附答案汇总.md
07-27
Kafka最新面试题及答案附答案汇总
程序员热门面试题及解析Kafka篇（1）
04-11
程序员找工作面试题大集锦，收集整理了包括Android、C#、Java、Dubbo、 Elasticsearch、HTML、HTTP、JavaScript、JVM、Kafka、Linux、Memcached、 MongoDB、MyBatis、MySQL、Netty、Nginx、Oracle、Python、RabbitMQ...
秒杀系统java实现
06-19
java实现秒杀系统@Controller @RequestMapping("seckill")//url:/模块/资源/{id}/细分 /seckill/list public class SeckillController { private final Logger logger = LoggerFactory.getLogger(this.getClass()); @Autowired private SeckillService seckillService; @RequestMapping(value="/list",method = RequestMethod.GET) public String list(Model model){ //获取列表页 List list=seckillService.getSeckillList(); model.addAttribute("list",list); //list.jsp+model = ModelAndView return "list";//WEB-INF/jsp/"list".jsp } @RequestMapping(value = "/{seckillId}/detail",method = RequestMethod.GET) public String detail(@PathVariable("seckillId") Long seckillId, Model model){ if (seckillId == null){ return "redirect:/seckill/list"; } Seckill seckill = seckillService.getById(seckillId); if (seckill == null){ return "forward:/seckill/list"; } model.addAttribute("seckill",seckill); return "detail"; } //ajax json @RequestMapping(value = "/{seckillId}/exposer", method = RequestMethod.POST, produces = {"application/json;charset=UTF-8"}) @ResponseBody public SeckillResult exposer(@PathVariable("seckillId") Long seckillId){ SeckillResult result; try { Exposer exposer =seckillService.exportSeckillUrl(seckillId); result = new SeckillResult(true,exposer); } catch (Exception e) { logger.error(e.getMessage(),e); result = new SeckillResult(false,e.getMessage()); } return result; } @RequestMapping(value = "/{seckillId}/{md5}/execution", method = RequestMethod.POST, produces = {"application/json;charset=UTF-8"} ) @ResponseBody public SeckillResult execute(@PathVariable("seckillId")Long seckillId,
Java实现电商秒杀项目
09-07
电商秒杀项目设计方案 项目启动时将商品库存信息缓存到redis 当前用户秒杀商品时，首先去redis查询用户是否秒杀商品，没秒杀过，再去数据库查询，若该用户已秒杀过商品则不能，在参与秒杀同样商品。 若用户没有参与过秒杀商品，则去redis缓存预减库存，库存数量少于0，则返回错误信息。 预减库存成功后，将订单任务发送到MQ。 MQ收到订单消息后，到数据库预减库存。 若数据库库存减成功，生成订单和秒杀订单并将订单信息缓存到redis，否则将错误信息缓存到数据库里。 前端通过用户id和商品id，轮询查看秒杀结果，后端先去redis查询订单信息不存在，就去数据库查询，查询成功则返回秒杀结果信息。 若缓存和数据库都查询失败，则继续去redis查询是否有秒杀订单失败信息比如库存不足等信息，若存在则返回秒杀失败，否则返回该订单下单正在排队中。 接口
JAVA 商品秒杀demo
08-04
实现商品秒杀
java高并发买秒杀完整代码
06-12
Java 高并发 spring springMVC mybatis bootstrap js readis 存储过程 mysql
SpringBoot热部署插件原理分析及实战演练
kxkxyzyz的博客
05-29 390
以 Tomcat 为例，它首先校验是否开启了热部署，并且发生了修改，它有一个后台线程，定期进行 reload 检测，如果检测需要重新部署，即热部署，则先停止，然后启动，这期间会清理 session，清空内存。在没有使用热部署的情况下，一个稍微大点的项目启动就要七八秒甚至十几秒的启动时间，当然这取决于你的机器性能，不过毫无疑问，不管你的机器性能如何强大，也耗不过日益增长的项目体量，所以迫切需要无需重新启动项目也能将代码的增加修改同步到服务器的手段。所以，在我们使用这个工具前，需要做到知其然知其所以然。
Java秒杀系统
WM_CARA的博客
07-23 1545
目录 第一章 项目框架搭建 第二章 实现登录功能 数据库设计 明文密码两次MD5处理 JSR303参数校验+全局异常处理器 分布式session 第三章 实现秒杀功能 数据库设计 商品列表页 商品详情页 秒杀功能实现 订单详情页 第四章 JMeter压测 JMeter入门 自定义变量模拟多用户 JMeter命令行使用 Redis的压测工具redis-benchm...
pmp考试是什么？
m0_60428752的博客
11-22 1975
由美国项目管理学会（Project Management Institute，缩略为PMI）举办的。PMI 从1984年就推出了项目管理专业人员的认证（PMP），他们注重知识的完整性，在达到了从事项目管理工作时间和数量的基本要求上，1987年他们推出了项目管理知识体系指南（Project Management Body of Knowledge），简称PMBOK，也就是现在的考试教科书，目前是用《PMBOK 》第六版，第七版已经出来，相信过不了不久就会更新了。pmp 旧考纲。
资深kafka专家面试题及答案
05-31
好的，以下是一些资深Kafka专家可能会被问到的面试问题及其答案： 1. 什么是Kafka的消息模型？ Kafka的消息模型是基于发布订阅模式，生产者（Producer）将消息发布到Topic中，消费者（Consumer）从Topic中订阅并消费消息。 2. Kafka的消息持久化机制是什么？ Kafka的消息持久化机制是将消息存储在磁盘上，同时也支持将消息保存在内存中以提高读写性能。 3. Kafka的数据分区机制是什么？ Kafka的数据分区机制是将Topic中的消息分成多个分区（Partition），每个分区可以被单独管理和复制到多个Broker中。 4. Kafka的消息生命周期是什么？ Kafka的消息生命周期包括消息的生产、存储、分发和消费，同时还包括消息的删除和过期等操作。 5. Kafka的高可用性如何实现？ Kafka的高可用性是通过数据的副本机制来实现的，每个Partition都有多个副本（Replica），其中一个副本被选为Leader，其他副本作为Follower。当Leader失效时，Follower能够自动选举一个新的Leader来继续服务。 6. Kafka的性能瓶颈是什么？ Kafka的性能瓶颈通常是由于网络带宽、磁盘读写速度、CPU和内存等因素导致的。为了提高性能，可以使用多个分区和多个Broker来扩展集群。 7. Kafka的安全性如何实现？ Kafka的安全性包括身份认证和数据加密两个方面。身份认证可以使用SSL/TLS证书、Kerberos或OAuth等机制来实现，数据加密则可以使用SSL/TLS或SASL/PLAIN等机制来加密。 以上是一些可能会被问到的资深Kafka专家面试题及其答案，希望能对你有所帮助。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值