hadoop HDFS常用的命令

先简单理解:
用法我先理解为,类似于 linux 命令前面加个hadoop fs -
如,hadoop fs -ls ,hadoop fs -mkdir

显示目录下文件 ls

hadoop fs -ls

查看文件内容 cat

hadoop fs -cat test.txt

建目录 mkdir

hadoop fs -mkdir log_data

拉 hdfs 上的文件到本地 get

hadoop fs -get hdfs路径 本地路径
type hadoop 可获取 hadoop 的绝对路径

合并文件到本地 getmerge

好用!
getmerge 拉下来后,直接就把所有的 part-XXX 的内容合并到一起了。
hadoop fs -getmerge hdfs路径/文件夹 本地路径
hadoop fs -getmerge -nl hdfs路径/文件夹 本地路径 加 nl,合并到本地文件中的 hdfs 文件之间会空出一行。

上传本地文件到 hdfs put

hdfs fs -put 本地文件 hdfs路径

查文件数量 count

hdfs fs -count 文件夹路径
显示为路径下目录个数,文件个数,文件总计大小 (是 B 吧),输入路径

显示文件的大小 du

显示路径下所有文件的大小,或者当只指定一个文件时,显示此文件的大小。

删除

删除的时候谨慎
hadoop fs -rm 删除文件
hadoop fs -rmr 删除文件夹
删除后会放到回收站 (Moved to trash)

  • 2
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值