Shell命令操作

HDFS的基本命令

命令格式：

hdfs dfs -操作命令 参数

1、 创建存放数据文件的目录
（1） 列出目录结构

hdfs dfs –ls 目录路径`

例：查看HDFS根目录下的文件

hdfs dfs –ls  /

（2） 创建文件夹

hdfs dfs –mkdir 文件夹名称
hdfs dfs –mkdir -p 多层文件夹名称

例：在根目录下创建HDFSShell文件夹，用来存放数据文件

hdfs dfs –mkdir /HDFSShell

2、 将数据上传到HDFS并进行管理
（1） 上传文件

hdfs dfs –put | copyFromLocal | moveFromLocal 本地路径 HDFS存放路径

例：Linux系统当中/home/hadoop/data/的mobile.txt，上传到HDFSShell文件夹下。

hdfs dfs –put /home/hadoop/data/mobile.txt /HDFSShell
hdfs dfs –copyFromLocal /home/hadoop/data/mobile.txt /HDFSShell
hdfs dfs –moveFromLocal /home/hadoop/data/mobile.txt /HDFSShell

（2） 查看文件

hdfs dfs –text|cat HDFS上的文件存放路径

例：查看刚刚上传在HDFSShell目录下的mobile.txt的文件的内容

hdfs dfs –text|cat  /HDFSShell/mobile.txt

注意：text或者cat都是用来查看文件内容的命令。

（3） 下载文件

hdfs dfs –get|copyToLocal |moveToLocal HDFS文件路径 本地存放路径

例：想要把在HDFSShell没有目录下的mobile.txt下载到Linux本地

hdfs dfs –get  /HDFSShell/mobile.txt /home/hadoop
hdfs dfs –copyToLocal /HDFSShell/mobile.txt /home/hadoop
hdfs dfs –moveToLocal /HDFSShell/mobile.txt /home/hadoop

（4） 统计目录下文件大小

hdfs dfs –du 目录路径

例：查看HDFSShell目录下各个文件的大小

hdfs dfs –du /HDFSShell

（5） 删除文件

hdfs dfs –rm|rmr 文件存放的路径

例：删除/HDFSShell/mobile.txt文本

hdfs dfs –rm  /HDFSShell/mobile.txt

注意：在生产环境下，也就说在公司,等机构里，慎用-rmr参数，慎用-rmr参数，慎用-rmr参数

3、HDFS的帮助命令
(1) 在HDFS shell使用过程中，可以使用help命令去寻找帮助

hdfs dfs –help 命令

例：查看rm 命令的帮助

hdfs dfs –help rm