HDFS--文件管理

文件管理

命令：hdfs dfs

[root@node-01 hadoop-2.6.0-cdh5.14.0]# hdfs dfs
Usage: hadoop fs [generic options]
        [-appendToFile <localsrc> ... <dst>]
        [-cat [-ignoreCrc] <src> ...]
        [-checksum <src> ...]
        [-chgrp [-R] GROUP PATH...]
        [-chmod [-R] <MODE[,MODE]... | OCTALMODE> PATH...]
        [-chown [-R] [OWNER][:[GROUP]] PATH...]
        [-copyFromLocal [-f] [-p] [-l] <localsrc> ... <dst>]
        [-copyToLocal [-p] [-ignoreCrc] [-crc] <src> ... <localdst>]
        [-count [-q] [-h] [-v] [-x] <path> ...]
        [-cp [-f] [-p | -p[topax]] <src> ... <dst>]
        [-createSnapshot <snapshotDir> [<snapshotName>]]
        [-deleteSnapshot <snapshotDir> <snapshotName>]
        [-df [-h] [<path> ...]]
        [-du [-s] [-h] [-x] <path> ...]
        [-expunge]
        [-find <path> ... <expression> ...]
        [-get [-p] [-ignoreCrc] [-crc] <src> ... <localdst>]
        [-getfacl [-R] <path>]
        [-getfattr [-R] {-n name | -d} [-e en] <path>]
        [-getmerge [-nl] <src> <localdst>]
        [-help [cmd ...]]
        [-ls [-C] [-d] [-h] [-q] [-R] [-t] [-S] [-r] [-u] [<path> ...]]
        [-mkdir [-p] <path> ...]
        [-moveFromLocal <localsrc> ... <dst>]
        [-moveToLocal <src> <localdst>]
        [-mv <src> ... <dst>]
        [-put [-f] [-p] [-l] <localsrc> ... <dst>]
        [-renameSnapshot <snapshotDir> <oldName> <newName>]
        [-rm [-f] [-r|-R] [-skipTrash] <src> ...]
        [-rmdir [--ignore-fail-on-non-empty] <dir> ...]
        [-setfacl [-R] [{-b|-k} {-m|-x <acl_spec>} <path>]|[--set <acl_spec> <path>]]
        [-setfattr {-n name [-v value] | -x name} <path>]
        [-setrep [-R] [-w] <rep> <path> ...]
        [-stat [format] <path> ...]
        [-tail [-f] <file>]
        [-test -[defsz] <path>]
        [-text [-ignoreCrc] <src> ...]
        [-touchz <path> ...]
        [-usage [cmd ...]]

列举

hdfs dfs -ls 路径

删除

hdfs dfs -rm 【-r】 你要删除的文件或者目录
-r：表示递归，用于删除目录
-skipTrash：不经过回收站，直接删除

复制

hdfs dfs -cp ${source} ${target}

剪切或者移动或者重命名

hdfs dfs -mv $source $target

创建目录

hdfs dfs -mkdir 【-p】 你要创建的 路径
-p：表示递归创建

修改权限

hdfs dfs -chmod 你要修改的权限 你要修改谁
hdfs  dfs   -chmod  777   /tmp/test

上传

hdfs dfs -put 本地文件系统的文件 HDFS文件系统

下载

hdfs dfs -get HDFS文件系统的文件 本地文件系统

回收站

开启了回收站，并自动定期清理回收站，单位为分钟，7天，默认为0，表示不开启回收站
<property>
        <name>fs.trash.interval</name>
        <value>10080</value>
</property>

手动清空

hdfs  dfs  -expunge

关于hdfs访问的相对路径以及绝对路径

Linux

• 绝对路径：从/开始逐级访问

more /etc/hosts

• 相对路径：相对当前位置开始访问
  以当前路径作为基础来访问

cd /etc
more hosts

HDFS

• 绝对路径：从/开始逐级访问
• 相对路径：与Linux不一样
  相对路径指的是当前用户在hdfs上的家目录

/user/root
hdfs dfs -mkdir test123