在Flink 1.12.5中，启动大数据作业时遇到'partition not found'错误。这可能是由于大型作业的State过大或加载大型维表导致的GC问题。当达到最大回退时间后，作业可能会失败并需要重启才能正常运行。参考Apache Flink的JIRA issue FLINK-9413和GitHub PR 6103，调整K8s的网络参数如增大连接超时时间可以解决此问题。
文章目录
1.概述
flink 1.12.5 启动作业报 partition not found的问题， 可能是什么原因导致的
启动作业就有这个问题，特别是耗费资源一百多g的大作业出现的更频繁
基本每个作业都出现， flink 1.12.5 native k8s模式
是不是有些算子state很大或者要load非常大的维表之类的，gc的话会无法响应下游的partition request，到达max backoff之后还连不上就会触发这个？
是的，这种情况一般每个内存耗费一二百g的作业启动必出现一次，然后失败重启策略之后作业才能正常运行
参考：https://issues.apache.org/jira/browse/FLINK-9413
之前批作业，也遇到过这种的情况，同样是资源占用多的作业出现
订阅专栏 解锁全文
2302
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
