Could not complete the operation. Number of retries has been exhausted.

Flink任务失败,其实是个小问题,但是看不到真正的日志误导,你都不会发现是哪里除了问题,直到你怀疑自己。

由于通过跳转机登录的一个服务器,然后无法查看Flink运行的task日志,只有在flink目录下的log,但是这个log只有部分日志,代码输出日志级别不够也是看不到,而且还是通过flink-per-job的方式提交的。

解决:

切换到yarn-session方式,这样就算是跳转机的那个,只要能访问的那个IP上可以看到flink的运行日志就可以确定异常问题是什么原因造成的,最后是数据源硬编码改了,hbase表的结构也变了,但是在flinkUI的日志里都可以看到这些信息。

总结:

        如果代码出现未知的异常,就找日志,日志不全就得想办法找到更详细的日志,只有打印出了所有的详细日志才能处理。有时候打印的日志只是部分日志,按逻辑来,不急,so easy

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 3
    评论
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

꧁꫞ND꫞꧂

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值