flink
贼帅的阿佑
这个作者很懒,什么都没留下…
展开
-
Flink提交运行中常见问题总结
问题描述:我这边运行了一段时间后,taskmanager总是挂掉。配置的是standalone模式,solt是32,并发度是3。看日志错误提示是Task ‘Source: Custom Source -> Map -> Map -> to: Row -> Map -> Sink: Unnamed (1/3)’ did not react to cancelling...原创 2019-07-04 17:57:39 · 4201 阅读 · 1 评论 -
flink运行出现的问题---kafka中找不到Rate$这个类
在flink的配置文件中,添加设置metrics.fetcher.update-interval: 0,使flink不监控kafka指标原创 2019-07-30 09:26:00 · 316 阅读 · 0 评论 -
Flink运行任务中,出现节点挂掉的现象--已解决
Flink App抛出The assigned slot container_e08_1539148828017_15937_01_003564_0 was removed.此类异常,通过查看日志,一般就是某一个Flink App内存占用大,导致TaskManager(在Yarn上就是Container)被Kill掉。如果代码写的没问题,就确实是资源不够了,其实1G Slot跑多个Task(Slo...原创 2019-07-23 10:10:15 · 5390 阅读 · 0 评论 -
flink 性能影响
添加参数配置XX:HeapDumpPath=/home/task/Flink/flink-1.7.2/oomdump -XX:ReservedCodeCacheSize=2048M比没有添加此参数的性能提升很多很多。原创 2019-08-07 18:01:56 · 212 阅读 · 0 评论