Hadoop—FS Shell

    文件系统 (FS) shell 包括各种类似的命令直接与 Hadoop Distributed File System (HDFS)交互。hadoop也支持其它文件系统,比如 Local FS, HFTP FS, S3 FS等。 FS shell命令应使用bin/hadoop fs <args>的形式。所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统,scheme是hdfs,对本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配置中指定的默认scheme。一个HDFS文件或目录比如/parent/child可以表示成hdfs://namenode:namenodeport/parent/child,或者更简单的/parent/child(假设你配置文件中的默认值是namenode:namenodeport)。大多数FS Shell命令的行为和对应的Unix Shell命令类似,不同之处会在下面介绍各命令使用详情时指出。出错信息会输出到stderr,其他信息输出到stdout

    appendToFile

    用法: hadoop fs -appendToFile <localsrc> ... <dst>    添加单个src,或则多个srcs从本地文件系统到目标文件系统。从标准输入读取并追加到目标文件系统。

    hadoop fs -appendToFile localfile1 localfile2 /user/hadoop/hadoopfile

    cat

    用法:hadoop fs -cat URI [URI …]    将路径指定文件的内容输出到stdout

    hadoop fs -cat hdfs://host1:port1/file1 hdfs://host2:port2/file2 

    hadoop fs -cat file:///file3 /user/hadoop/file4

    checksum

    用法:hadoop fs -checksum URI    返回文件的校验信息。

    hadoop fs -checksum hdfs://nn1.example.com/file1

    chgrp

    用法:hadoop fs -chgrp [-R] GROUP URI [URI …]     改变文件所属的组。使用-R将使改变在目录结构下递归进行。命令的使用者必须是文件的所有者或者超级用户

    chmod

    用法:hadoop fs -chmod [-R] <MODE[,MODE]... | OCTALMODE> URI [URI ...]    改变文件的权限. 使用-R 将使改变在目录结构下递归进行。命令的使用者必须是文件的所有者或者超级用户。

    chown

    用法:hadoop fs -chown [-R] [OWNER][:[GROUP]] URI [URI ]    改变文件的所有者,使用-R将使改变在目录结构下递归进行。命令的使用者必须是文件的所有者或者超级用户。

    copyFromLocal

    用法:hadoop fs -copyFromLocal <localsrc> URI    类似put命令, 需要指出的是这个限制是本地文件。

    copyToLocal

    用法:hadoop fs -copyToLocal [-ignorecrc] [-crc] URI <localdst>    与get命令类似, 除了限定目标路径是一个本地文件外。

    c

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值