flink
文章平均质量分 88
LaZY_apple
这个作者很懒,什么都没留下…
展开
-
Flink内核源码解析
参考提交流程程序入口yarn-per-job模式:运行程序后启动的进程:Clifrontend(相当于client)Yarnjobclusterentrypoint(相当于JM)Taskexecutorrunner(相当于TM)程序入口:Org. Apache. Flink. Client cli. Clifrontend...原创 2021-05-06 17:53:18 · 526 阅读 · 0 评论 -
flink作业多次挂掉,代码逻辑没有问题
由于代码为公司内部资源,不可以泄露,所以不能提供代码和截图。现象:在一次修改线上代码后,能够执行正常业务,但是作业经常频繁挂掉。在日志中没有提示代码逻辑有问题,显示的是系统资源不足。经过两天的频繁挂掉后,问了相关人士。最后反馈结果:反馈结果为:在业务代码中,使用了字符拼接代码,由于数据量大,字符串本身占用内存大,所以消耗大量系统资源,最终导致作业挂掉。解决办法:加内存。...原创 2019-08-19 21:04:34 · 1270 阅读 · 0 评论