HDFS命令行使用

最新推荐文章于 2022-09-02 15:34:07 发布

sparename

最新推荐文章于 2022-09-02 15:34:07 发布

阅读量147

点赞数

分类专栏：大数据文章标签： hdfs linux bash

本文链接：https://blog.csdn.net/weixin_51830687/article/details/122482580

版权

13 篇文章 6 订阅

订阅专栏

帮助命令

hdfs dfs -help

在这里插入图片描述

新建目录

hdfs dfs -mkdir <path>

在这里插入图片描述
创建多级目录

#-p递归创建
hdfs dfs -mkdir -p <path>

在这里插入图片描述

新建一个空文件

hdfs dfs -touchz <filename>

# -h 以更友好的方式列出，主要针对文件大小显示成相应单位K、M、G等
# -r 递归列出,类似于linux中的tree命令
hdfs dfs -ls [-h] [-r] <path>

在这里插入图片描述

查看文件内容

hdfs dfs -cat <hdfsfile>

查看文件末尾的1KB数据

hdfs dfs -tail [-f] <hdfsfile>

在这里插入图片描述

上传本地文件到hdfs

# -f 如果hdfs上已经存在要上传的文件，则覆盖
hdfs dfs -put [-f]  <local src> ...  <hdfs dst>

在这里插入图片描述

l从hdfs剪切粘贴到本地

hdfs dfs -moveToLocal  <local src> ...  <hdfs dst>

在这里插入图片描述

将文件从源路径移动到目标路径。这个命令允许有多个源路径，此时目标路径必须是一个目录。不允许在不同的文件系统间移动文件。

hdfs dfs -mv  <src>  <dst>

在这里插入图片描述

删除文件和目录

# -r 递归删除目录下的所有文件
# -f为直接删除，不予提示
# -skipTrash为彻底放入文件，不放入回收站
hdfs dfs -rm [-r] [-f] [-skipTrash] <hdfs path>

在这里插入图片描述

将hdfs文件下载到本地

hdfs dfs -get < hdfs path> < localpath>

在这里插入图片描述
将hdfs文件合并起来下载到本地
hdfs hdfs -getmerge [-nl]
举例：将hdfs的/config/hadoop目录下的所有文件合并下载到本地的config.txt中

hdfs dfs -getmerge /config/hadoop config.txt

将文件从源路径复制到目标路径。这个命令允许有多个源路径，此时目标路径必须是一个目录。

hdfs dfs -cp <src>  <dst>

在这里插入图片描述

关注