piaoken5588的博客

在hadoop环境下运行flink的batch程序：./flink run /home/hadoop/proj/wordcount.jar --input hdfs://mycluster/flinkProjectData/111.txt一段时间后，flink的web界面上，taskmanager和jobmanager下的logs分别出现error：taskmanager：ER...

执行yarn-session.sh后，分配taskmanager不起作用：无论分配多少taskmanager，并行度设置得少，只在一个host上运行，但是每次的host不一定相同；并行度设置得多，才在不同的host上运行。比如：-n 3，-s 4，照理说并行度-p 6就应该在2个taskmanager上运行了，但是直到-p 20+才在第二个taskmanager上运行，说明-n 3，-...

使用yarn-session在yarn集群上启动一个flink集群：./yarn-session.sh -n 4 -jm 1024 -tm 1024 -s 2此时，在master:8088的界面看到多了一个application，但是running containers数量为1；【为何不是分配的4】然后，继续在yarn上提交flink的jar包运行：./flink run -p...