使用NFS网关功能将HDFS挂载到本地系统

一,配置HDFS

配置HDFS需要配置如下内容:

core-site.xml,新增配置项 以及 hdfs-site.xml,新增配置项

开启portmap、nfs3两个新进程

在node1进行如下操作

1. 在core-site.xml 内新增如下两项

  <property>
    <name>hadoop.proxyuser.hadoop.groups</name>
    <value>*</value>
  </property>

  <property>
    <name>hadoop.proxyuser.hadoop.hosts</name>
    <value>*</value>
  </property>

2. 在hdfs-site.xml中新增如下项

  <property>
    <name>nfs.superuser</name>
    <value>hadoop</value>
  </property>
  <property>
    <name>nfs.dump.dir</name>
    <value>/tmp/.hdfs-nfs</value>
  </property>
  <property>
    <name>nfs.exports.allowed.hosts</name>
    <value>192.168.88.1 rw</value>
  </property>

这里192.168.88.1是你自己配置虚拟机的IP地址

二,启动NFS功能

1. 将配置好的core-site.xml和hdfs-site.xml分发到node2和node3

2. 重启Hadoop HDFS集群(先stop-dfs.sh,后start-dfs.sh)

3. 停止系统的NFS相关进程

  a. systemctl stop nfs; systemctl disable nfs     关闭系统nfs并关闭其开机自启

  b. yum remove -y rpcbind    卸载系统自带rpcbind

4. 启动portmap(HDFS自带的rpcbind功能)(必须以root执行):

        hdfs --daemon start portmap

5. 启动nfs(HDFS自带的nfs功能)(必须以hadoop用户执行):

        hdfs --daemon start nfs3

三,检查NFS是否正常

以下操作在node2或node3执行(因为node1卸载了rpcbind,缺少了必要的2个命令)

执行:rpcinfo -p node1,正常输出如下 有mountd和nfs出现

执行:showmount -e node1 可以看到 / 192.168.88.1

四,在Windows挂载HDFS文件系统

1. 开启Windows的NFS功能(需要专业版)

2.在Windows命令提示符(CMD)内输入:net use X: \\192.168.88.101\!

3.完成后即可在文件管理器中看到盘符为X的网络位置

4.点击右键客户断开连接

这里我最后一步一直出现问题,所以我也配置出来,如果有大神看到,请指导我一下,谢谢!

  • 17
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值