sparkstreaming对接kafka出现的数据积压问题
kafka数据积压问题1. 问题描述 生产环境开发了一套sparkstreaming对接kafka,并进行数据处理的程序。刚开始程序运行的很好,kafka集群被人动过之后,重启spark程序时出现如下报警信息:18/06/20 15:29:21 WARN kafka010.KafkaUtils: overriding enable.auto.commit to false...
原创
2018-06-21 12:55:26 ·
17571 阅读 ·
4 评论