HDFS常用命令操作
启动Hadoop集群
创建单层目录
执行命令:hdfs dfs -mkdir /ied
产看UI界面上是否创建目录
创建多层目录
执行命令:hdfs dfs -mkdir /luzhou/lzy,但是呢会报错,因为没有luzhou这个目录
解决办法:①可以先创建luzhou这个文件目录在创建lzy
②也可以哟美好-p来解决这个问题
执行命令:hdfs dfs -mkdir -p /luzhou/lzy
在UI界面产看我们创建的多蹭目录
产看目录
执行命令:hdfs dfs -l / ,可以查看根目录
执行命令:hdfs dfs -ls -R /
,递归查看/
目录(采用递归算法遍历树结构)
上传本地文件到HDFS
创建test.txt文件,执行命令:echo "hello hadoop world" > test.txt
上传test.txt
文件到HDFS的/ied
目录,执行命令:hdfs dfs -put test.txt /ied
利用UI界面查看是否创建成功
查看文件内容:执行命令:hdfs dfs -cat /ied/test.txt
下载HDFS文件到本地
先删除本地的test.txt
文件
下载HDFS文件系统的/ied/test.txt
到本地当前目录不改名,执行命令:hdfs dfs -get /ied/test.txt
-
可以将HDFS上的文件下载到本地指定位置,并且可以更改文件名
-
执行命令:
hdfs dfs -get /ied/test.txt /home/exam.txt
-
删除HDFS文件
执行命令:hdfs dfs -rm /ied/test.txt
使用通配符,可以删除满足一定特征的文件
命令:hdfs dfs -rm /ied/t*
删除HDFS目录
执行命令:hdfs dfs -rmdir /luzhou
提示-rmdir
命令删除不了非空目录
要递归删除才能删除非空目录:hdfs dfs -rm -r /luzhou
(-r:recursive)
移动目录或文件
-mv
命令兼有移动与改名的双重功能
将/ied
目录更名为/ied01
,执行命令:hdfs dfs -mv /ied /ied01
利用Hadoop WebUI查看是否更名成功
将/ied01/exam.txt
更名为/ied/test.txt
,执行命令:hdfs dfs -mv /ied01/exam.txt /ied01/test.txt
创建/ied02
目录,将ied01/test.txt
移动到/ied02
目录,并且改名为exam.txt
在Hadoop WebUI界面查看