![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
iteye_4064
这个作者很懒,什么都没留下…
展开
-
Kafka平台问题总结
总结一下运营kafka平台过程中遇到的问题。 网络限制 新扩容的机器在由于其他原因导致在交换机上做了流量限制,出只能达到300+Mb,这个问题很隐蔽,不容易被发现。解决方式也很容易直接去掉限流即可。 Zookeeper连接上限 基于kafka客户端做了一层包装,某些版本上有bug会导致zookeeper连接有泄漏,很...原创 2015-11-16 21:35:30 · 124 阅读 · 0 评论 -
kafka high-level consumer 多线程访问异常
在使用kafka high-level的consumer,使用多线程消费数据时报错,简单分析一下原因,ConsumerIterator取不到消息时会阻塞,并且将内部状态置为FAILED,当其他线程访问时就会抛出异常。 def hasNext(): Boolean = { if(state == FAILED) //处于FAILED状态时...原创 2016-10-31 23:56:33 · 205 阅读 · 0 评论