LizhiQiang

Flink minicluster报错，因为JDK版本引起的错误

水一篇 flink 1.14 上传文件的源码流程为了方便查找，用 ⭐️⭐️⭐️ 标注了。上传文件核心源码就是 io 流的读写。1.10 和 1.14 大致相同，只有细微细节不同。从网上借个图。// YarnClusterDescriptor 类里面，有启动 startAppMaster 方法。private ApplicationReport startAppMaster( Configuration configuration, String appli

一、内存分布图部分配置文件 flink-conf.yamljobmanager.rpc.address: bigdata1# The RPC port where the JobManager is reachable.jobmanager.rpc.port: 6123# The total process memory size for the JobManager.## Note this accounts for all memory usage within the Job

错误如下 :Exception in thread "main" java.lang.NoSuchMethodError: org.apache.flink.optimizer.plantranslate.JobGraphGenerator.addUserArtifactEntries(Ljava/util/Collection;Lorg/apache/flink/runtime/jobgraph/JobGraph;)V at org.apache.flink.streaming.api.graph.S

正片文章分两个阶段来分析。第一阶段在 AbstractUdfStreamOperator 中将 userFunction 指向 UserDefineSource， env.addSource(new UserDefineSource) 为入口。第二阶段在 StreamSource 中 通过 userFunction.run() 调用了 UserDefineSource 中的 run 方法。第一阶段用户自定义的类 def main(args: Array[String]): Unit =