【Flink】提交yarn AccessControlException: Permission denied: user=flink, access=WRITE, inode=“/user“hdfs

一杯咖啡半杯糖

已于 2022-12-07 17:30:34 修改

阅读量1.1k

点赞数

分类专栏： Flink实战文章标签： mysql flink big data

于 2021-11-30 15:42:08 首次发布

本文链接：https://blog.csdn.net/sinat_23225111/article/details/121634212

版权

Flink实战专栏收录该内容

95 篇文章 123 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

当使用flink客户端尝试将任务提交到YARN时，遇到了`AccessControlException`，错误显示flink用户无权写入`/user`目录。解决此问题需要通过HDFS命令切换到hdfs用户，并调整`/user`目录的权限，赋予flink用户写入权限，从而允许flink在执行时能创建所需目录。

摘要由CSDN通过智能技术生成

问题背景：新创建了flink客户端并想把flink提交到yarn上进行执行出现如下问题

The program finished with the following exception:

org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Could not deploy Yarn job cluster.
	at org.apache.flink.client.program.PackagedProgram.callMainMethod(PackagedProgram.java:366)
	at org.apache.flink.client.program.PackagedProgram.invokeInteractiveModeForExecution(PackagedProgram.java:219)
	at org.apache.flink.client.ClientUtils.executeProgram(ClientUtils.java:114)
	at org.apache.flink.client.cli.CliFrontend.executeProgram(CliFrontend.java:812)
	at org.apache.flink.client.cli.CliFrontend.run(CliFrontend.java:246)
	at org.apache.flink.client.cli.CliFrontend.parseAndRun(CliFrontend.java:1054)
	at org.apache.flink.client.cli.CliFro