大数据基础考试复习一：在Hadoop分布式文件系统 (HDFS) 上进行文件操作（如创建文件夹、上传文件、下载文件等）

一、创建文件夹

要在HDFS上创建文件夹，可以使用 mkdir 命令。例如，创建一个名为 /user/hive/warehouse/employees 的文件夹：

hadoop fs -mkdir -p /user/hive/warehouse/employees

-p 选项表示创建父目录（如果它们不存在）。

二、上传文件

将本地文件上传到HDFS上，可以使用 put 命令。例如，将本地文件 /path/to/your/employees.csv 上传到 HDFS 文件夹 /user/hive/warehouse/employees：

hadoop fs -put /path/to/your/employees.csv /user/hive/warehouse/employees/

三、下载文件

从HDFS下载文件到本地文件系统，可以使用 get 命令。例如，将 HDFS 上的文件 /user/hive/warehouse/employees/employees.csv 下载到本地文件系统：

hadoop fs -get /user/hive/warehouse/employees/employees.csv /path/to/your/local/directory/

四、查看文件夹和文件

查看 HDFS 文件夹的内容，可以使用 ls 命令。例如，查看 /user/hive/warehouse/employees 文件夹的内容：

hadoop fs -ls /user/hive/warehouse/employees

五、显示文件内容

显示 HDFS 上文件的内容，可以使用 cat 命令。例如，显示 /user/hive/warehouse/employees/employees.csv 文件的内容：

hadoop fs -cat /user/hive/warehouse/employees/employees.csv

六、删除文件和文件夹

删除 HDFS 上的文件或文件夹，可以使用 rm 命令。例如，删除文件 /user/hive/warehouse/employees/employees.csv：

hadoop fs -rm /user/hive/warehouse/employees/employees.csv

删除非空文件夹需要使用 -r 选项。例如，删除 /user/hive/warehouse/employees 文件夹及其内容：

hadoop fs -rm -r /user/hive/warehouse/employees

完整示例

以下是一个完整的示例，包括创建文件夹、上传文件、查看内容、下载文件和删除文件夹：

# 创建文件夹
hadoop fs -mkdir -p /user/hive/warehouse/employees

# 上传文件
hadoop fs -put /path/to/your/employees.csv /user/hive/warehouse/employees/

# 查看文件夹内容
hadoop fs -ls /user/hive/warehouse/employees

# 显示文件内容
hadoop fs -cat /user/hive/warehouse/employees/employees.csv

# 下载文件
hadoop fs -get /user/hive/warehouse/employees/employees.csv /path/to/your/local/directory/

# 删除文件夹及其内容
hadoop fs -rm -r /user/hive/warehouse/employees

这些命令可以帮助你在HDFS上进行基本的文件和目录操作。确保你有足够的权限来执行这些操作，并且Hadoop环境已正确配置。

最后考试加油哦！！！