问题:集群实时的sparkstreaming:flume+kafka消息被sparkstreaming实时消费,数据从data-->到flumedata却没有被标注.COMPLETED
原因:多次执行造成flume里面的数据挤压,以至于导致一份数据并未完成状态。堵塞了。
解决:
查看flume日子,分析问题
重启flume,消费掉里面的数据,稍等便可以传递数据了。
问题:集群实时的sparkstreaming:flume+kafka消息被sparkstreaming实时消费,数据从data-->到flumedata却没有被标注.COMPLETED
原因:多次执行造成flume里面的数据挤压,以至于导致一份数据并未完成状态。堵塞了。
解决:
查看flume日子,分析问题
重启flume,消费掉里面的数据,稍等便可以传递数据了。