![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
中间件
文章平均质量分 68
小杨树林
新的开始-记录工作中的所学所思所想
展开
-
消息队列-kafka入门详解
本文适用于初学者,学习kafka之前 应该都知道它是消息队列,但是和我们印象中数据结构的队列不同的是,它持久化到磁盘上。1、我们首先从定义来看Kafka 一个分布式的、分区化、可复制提交的日志服务,我们先来想想什么是分区,好比图书馆的书,会分成好几个区。那么kafka也是这样的,他会把消息分成几个区,0-100寸到A区,100-200 存到B区。这个专有名词就叫做partition。可复制说的就是主从节点之前的复制了。2、那么此时你会不会有疑问,我们为什么需要中间件,为什么会用到kafka呢?...原创 2021-05-25 15:05:37 · 502 阅读 · 0 评论 -
Kafka消费者重复消费
碎碎念:两年没有更新博客了,今天是新的开始,想记录下自己工作之后的成长。写在前面:前段时间开周会的时候,其他组同步一个问题,就是在压测的时候出现了kafka的消费者重复消费的问题。我比较好奇为什么会出现这种问题,知道问题肯定不是出在kafka,每秒几十万的吞吐量,怎么可能是消息队列本身的问题呢我们代码里kafka配置<!--定义consumer的参数 --> <bean id="consumerProperties" class="java.util.HashMap"&g.原创 2021-05-25 10:55:10 · 456 阅读 · 0 评论