Kafka宕机引发的高可用问题
问题要从一次Kafka的宕机开始说起。
笔者所在的是一家金融科技公司,但公司内部并没有采用在金融支付领域更为流行的RabbitMQ,而是采用了设计之初就为日志处理而生的Kafka,所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后,系统内部使用的Kafka一直运行稳定,没有出现不可用的情况。
但最近系统测试人员常反馈偶有Kafka消费者收不到消息的情况,登陆管理界面发现三个节点中有一个节点宕机挂掉了。但是按照高可用的理念,三个节点还有两个节点可用怎么就引起了整个集群的消费者都接收不到消息呢?
要解决这个问题,就要从Kafka的高可用实现开始讲起。
学习内容大致内容:
1、架构师筑基(Linux基础与进阶+Netty框架+Mysql+并发编程+JVM性能调优+Tomcat)
2、开源框架(主要涉及SSM框架)
3、高性能架构(Mysql高性能存储实战+Redis缓存数据库+Zookpeer分布式+消息中间件+Kafka)
4、微服务(Docker+Dubbo+Spring Cloud+SpringBoot)
5、B2C商城项目实战
架构师筑基
大致学习路线
1、Linux
2、Netty
3、深入浅出MySQL
4、并发编程
5、JVM
6、Tomcat
开源框架
1、Spring高级源码阅读
2、Spring MVC源码分析以及实践
3、Mybatis源码分析
高性能架构
(Mysql高性能存储实战+Redis缓存数据库+Zookpeer分布式+消息中间件+Kafka)
1、Mysql高性能存储实战
2、Redis缓存数据库
3、Zookpeer分布式
4、RabbitMQ
5、Kafka
微服务
1、Docker
2、Spring Cloud Aibaba
3、Spring Cloud
4、SpringBoot
最后
各位读者,由于本篇幅度过长,为了避免影响阅读体验,下面我就大概概括了整理了,需要的话请**点赞后点击这里免费下载文章资料!**
外链图片转存中…(img-RTiZ5hKB-1618479717628)]
[外链图片转存中…(img-xEkuGRjQ-1618479717628)]
[外链图片转存中…(img-jseiOopI-1618479717629)]