Hadoop Shell 的基本操作

一、实验原理

调用文件系统(FS)Shell命令
使用 hadoop fs <args>形式。

所有的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path

对于HDFS文件系统，scheme是hdfs，对于本地文件系统，scheme是file。其中scheme和authority参数都是可选的，如果未加指定，就会使用配置中指定的默认scheme。一个HDFS文件或目录比如/parent/child可以表示成hdfs://namenode:namenodeport/parent/child，或者更简单的/parent/child（假设你配置文件中的默认值是namenode:namenodeport）。大多数FS Shell命令的行为和对应的Unix Shell命令类似，出错信息会输出到stderr，其他信息输出到stdout。

二、实验环境

macOS 11.2.3
Hadoop-3.1.4

三、实验内容

1.学习开启、关闭Hadoop

2.学习在Hadoop中创建、修改、查看、删除文件夹及文件

3.学习改变文件的权限及文件的拥有者

4.学习使用shell命令提交job任务

5.Hadoop安全模式的进入与退出

四、实验过程

1.切换到Hadoop路径下，使用start-all.sh启动相关进程。

使用jps查看进程启动情况。

2.使用hadoop fs -mkdir /test1 在根目录下创建一个test1目录

使用hadoop fs -touchz /test1/file.txt 在刚刚创建的目录下新建一个file.txt

使用hadoop fs -ls -R / 递归地查看根目录下的文件