【hadoop】一 hdsf开启restful API访问文件系统 之 webHDFS 以及 remoteException问题

hdfs开启resutful API 有两种方式

一 ： web HDFS 是hdfs文件系统自带的
二 ：httpFS 非自带需要额外下载包安装

web HDFS 与 httpFS 使用区别

有HA时，因namenode 的地址动态分配，不方便随时修改，推荐使用httpFS；

web HDFS 自带，在高并发、大数据文件下比httpFS性能好，因为httpFS是帮忙代理转发数据流都会集中通过httpFS访问的那一台机器进行传输；

（均是通过restful 的http访问请求，底层封装调用namenode 的rpc访问，下面谈到的RemoteException也是与此有关）

webHDFS 开启

①hdfs-site.xml 文件中 开启webHDFS的功能

<property>
      <name>dfs.webhdfs.enabled</name>
       <value>true</value>
</property>

②hdfs-sit.xml文件 中 关闭 验证功能（很恶心的最好关闭，反正我没开启）

<property>
     <name>dfs.permissions</name>
     <value>false</value>
</property>

webHDFS 验证