最近在学习kafka上传hdfs的过程中,遇到了一系列的问题,通过上网查资料,看了一下别人的方法等,最后终于解决了,废话不多说,先把我遇到的问题以及解决的措施在此和大家分享一下,希望能够对大家有所帮助!
1.出现的错误:org.apache.hadoop.security.AccessControlException: Permission denied: user=fd, access=WRITE, inode="/input/fd.txt":root:supergroup:drwxr-xr-x
解决错误的方式:网上查到的是修改权限或者修改配置文件hdfs-site.xml,我采用的是第二种(自己在下面学习用的)
在 hdfs-site.xml 总添加参数:
<property>
<name>dfs.permissions</name>
<value>false</value>
</property>
2.出现的错误是Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executablenull\bin\winutils.exe in the Hadoop binaries.