熟悉常用的HDFS操作(shell)

一、实验环境

  1. 操作系统:Linux
  2. 实验软件:VMware
  3. Hadoop版本:3.1.3
  4. JDK版本:1.8
    (注意:Hadoop3.1.3要求JDK版本在1.8及以上)

(Hadoop伪分布式安装教程)

二、实验内容

shell命令方式:
hadoop fs:适用于任何不同的文件系统
hadoop dfs:适用于HDFS文件系统
hdfs dfs:适用于HDFS文件系统

1. 启动Hadoop并查看
cd /usr/local/hadoop
sbin/start-dfs.sh
jps

在这里插入图片描述

2. fs查看支持的命令
bin/hadoop fs

在这里插入图片描述

3. 查看帮助命令
bin/hadoop fs -help push

在这里插入图片描述

4. 创建用户目录(已创建省略该步骤)
bin/hdfs dfs -mkdir -p /user/hadoop

在这里插入图片描述

5. 新建目录并查看
bin/hdfs dfs -mkdir test
bin/hdfs dfs -ls

在这里插入图片描述

6. 删除目录并查看
bin/hdfs dfs -rm -r test  #-r参数级联删除
bin/hdfs dfs -ls

在这里插入图片描述

7. 将本地文件系统文件上传到HDFS文件系统中
vim local.txt
cat local.txt
ls
bin/hdfs dfs -mkdir test
bin/hdfs dfs -ls test

在这里插入图片描述
在这里插入图片描述

bin/hdfs dfs -put /usr/local/hadoop/loacl.txt test
bin/hdfs dfs -ls test
bin/hdfs dfs -cat test/local.txt

在这里插入图片描述

8. 将HDFS中文件下载到本地
sudo rm local.txt  #首先将本地文件删除

在这里插入图片描述

bin/hdfs dfs -get test/local.txt /usr/local/hadoop

在这里插入图片描述

9. 拷贝文件
bin/hdfs dfs -mkdir test2
bin/hdfs dfs -cp test/local.txt test2

在这里插入图片描述

10. web界面管理HDFS

浏览器打开:http://localhost:9870
在这里插入图片描述

结束!希望对每一个奋斗的你有所帮助~
  • 1
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Clovers_ffzz

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值