jstorm kafkaspout未能实现fail机制重发功能
问题的发现是zookeeper kafka的消费offset很久没有更新,通过打日志发现
lastoffset其实是从发送的保存了所有发送的offset的pendingOffsets(源码里只是个treeset,阿里实现了ack,fail的异步,居然没用ConcurrentSkipListSet)中获取的,而该pendingOffsets删除数据,是ack后才调用的;如果某个offset...
原创
2018-08-15 10:06:45 ·
883 阅读 ·
0 评论