HDFS的基本操作

最新推荐文章于 2024-06-30 18:06:15 发布

陈十一yi

最新推荐文章于 2024-06-30 18:06:15 发布

阅读量3.5k

点赞数 1

分类专栏：大数据文章标签： docker mysql rancher

本文链接：https://blog.csdn.net/weixin_46329906/article/details/121517395

版权

本文介绍了如何在Hadoop HDFS环境中进行基本操作，包括创建目录、查看文件内容、追加文件、复制、移动、删除文件，以及使用`hdfs dfs`命令进行文件管理。此外，还详细阐述了启用目录快照、创建快照、查看快照列表以及利用快照恢复删除文件的流程。

摘要由CSDN通过智能技术生成

前提要求：已成功搭建Hadoop集群
【实验描述】
Hadoop提供也hadoop分布式文件系统交互的命令，通过了解Hadoop shell命令的用法。掌握对hadoop分布式系统的操作；以下是一些基础命令操作。

查看hdfs分布式系统根目录下所有文件和文件夹信息

[root@hadoop1 ~]# hdfs dfs -ls /

利用hdfs dfs –mkdir 命令在hdfs上创建test1、test2和test3目录。

[root@hadoop1 ~]# hdfs dfs -mkdir /test1
[root@hadoop1 ~]# hdfs dfs -mkdir /test2
[root@hadoop1 ~]# hdfs dfs -mkdir /test3
[root@hadoop1 ~]# hdfs dfs -ls /
Found 3 items
drwxr-xr-x   - root supergroup          0 2021-11-12 10:18 /test1
drwxr-xr-x   - root supergroup          0 2021-11-12 10:18 /test2
drwxr-xr-x   - root supergroup          0 2021-11-12 10:20 /test3

在本地系统编辑文件test1.txt，操作命令如下：

[root@hadoop1 ~]# vim test1.txt
添加以下内容：
filename test1.txt

#同样操作创建test2.txt和test3.txt文件。
#利用hdfs dfs –put命令上传文件test1.txt到hdfs的/test1目录；上传文件test2.txt到hdfs的/test2.txt目录；上传文件test3.txt到hdfs的/test3.txt目录，操作命令如下：
[root@hadoop1 ~]# hdfs dfs -put test1.txt /test1
[root@hadoop1 ~]# hdfs dfs -put test2.txt /test2
[root@hadoop1 ~]# hdfs dfs -put test3.txt /test3

#上传成功后，利用hdfs dfs –ls命令进行查看
[root@hadoop1 ~]# hdfs dfs -ls /test1