kafka没有消费数据或者是flume消息没有完成.completed/.COMPLETED

问题:集群实时的sparkstreaming:flume+kafka消息被sparkstreaming实时消费,数据从data-->到flumedata却没有被标注.COMPLETED

原因:多次执行造成flume里面的数据挤压,以至于导致一份数据并未完成状态。堵塞了。

解决:

查看flume日子,分析问题

重启flume,消费掉里面的数据,稍等便可以传递数据了。

 

 

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值