Hadoop_HDFS_shell命令

cd /opt/module/hadoop-2.9.2/

常用命令操作：

1）启动hadoop集群

hadoop101：sbin/start-dfs.sh
hadoop102：sbin/start-yarn.sh

2）-help：输出命令使用参数

hadoop fs -help rm

3）-ls：显示目录信息

hadoop fs -help rm

4）-mkdir：创建目录

hadoop fs -mkdir -p /yunan

5）-copyFromLocal：从本地拷贝到HDFS

hadoop fs -copyFromLocal /root/.ssh/id_rsa /yunan

6）-moveFromLocal：从本地移动到HDFS

7）-copyToLocal：从HDFS拷贝到本地

8）-appendToFile：追加一个文件到已经存在的文件末尾

hadoop fs -appendToFile /root/.ssh/id_rsa /yunan/id_rsa

9）-cat：显示文件内容

10）-chgrp、-chmod、-chown：修改文件所属权限

11）-cp：从HDFS的一个路径拷贝到HDFS的另一个路径

12）-mv：从HDFS目录中移动文件

13）-get：等同于copyToLocal

14）-getmerge：合并下载多个文件（比如多个log文件会合并成一个log文件下载下来）

15）-put：等同于copyFromLocal

16）-tail：显示一个文件的末尾，后几行的信息

17）-rm：删除文件或文件夹

18）-rmdir：删除空目录

19）-du：统计文件夹的大小信息

20）-setrep：设置HDFS中文件的副本数量