![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
PursueDreamZ
这个作者很懒,什么都没留下…
展开
-
关于kafka发送消息过大导致的异常的解决方式
在kafka发送消息的时候,如果消息过大超过了max.request.size的默认大小(1M),就会报下面的异常:这个时候我们如果单独调整max.request.size参数的大小可能不起作用,因为在broker端和consumer端同样对消息的大小存在限制,我们在调整的时候要同时调整这三个参数,不然可能是broker接受不了producter端的消息,要不就是consumer端消费不了消息。调整如下:producer端:max.request.size=5242880(5M)broke原创 2020-05-29 14:12:47 · 5423 阅读 · 1 评论 -
kafka消费过程中失败,kafka重试补偿
今天遇到一个kafka的问题,在生产者发送消息之后,消费者会消费多次。在网上查询了很久,最终是在这个博客的引导下发现了问题:http://www.dalbll.com/Group/Topic/JAVA/5162,里面提到了kafka中的配置enable.auto.commit 是 true,这个会自动提交,然后是当我们的配置是自动提交的时候,消费者的消息投递保证有可能是at least o...原创 2019-03-25 20:55:18 · 29810 阅读 · 0 评论