通过shell访问HDFS常用命令以及类型。
HDFS 是 Hadoop 平台的核心组成之一。熟悉使用 Hadoop 平台需要熟练访问HDFS。
HDFS 的访问方式有多种:可通过 Web 访问,也可通过 Shell 方式或者 API 方式访问。
基本操作有对文件的读、写、追加、删除等。新建文件夹、删除文件夹等,还可显示文件及文件夹的属性。
命令分为一下类型:
环境呢作者这边是完全分布式的,伪分布模式也可以进行测试这些命令,如果只是想测试命令可在伪分布模式下进行。
本博客就只对前两类进行说明了,如果对其它命令感兴趣可参考其它博客或者更多资源。
1、掌握常用 hdfs 操作命令(hdfs dfs),执行并查看结果(可以在终端输入 hdfsdfs -help 查询命令用法)。
先通过 vi 在本地创建三个文本文件:txt1.txt、txt2.txt、txt3.txt。文件文件里面随意输入些内容。
并且作者使用的hdfs上的例子目录为mydemo1-5。
(1) 列出子目录或子文件