Flink on yarn模式部署

目录

1. 基于docker部署cdh

2. 遇到的异常

2.1 flink下缺少hadoop相关依赖

2.2 jdk7造成的错误

3. 启动flink on yarn模式

3.1 调整yarn集群可用内存大小

3.2指定flink submit端口库，固定下来

4. 启动flink on yarn的wordcount例子

---

1. 基于docker部署cdh

基于Docker搭建CDH单机单节点集群_litlit023的专栏-CSDN博客

---

2. 遇到的异常

2.1 flink下缺少hadoop相关依赖

基于docker 部署cdn后，启动flink on yarn模式，报了以下错误

./bin/yarn-session.sh -n 2 -jm 1024 -tm 1024
报了以下错误

Error: A JNI error has occurred, please check your installation and try again
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
        at java.lang.Class.getDeclaredMethods0(Native Method)
        at java.lang.Class.privateGetDeclaredMethods(Class.java:2701)
        at java.lang.Class.privateGetMethodRec