大数据基础平台——HDFS文件系统

1.实验目的

1. 了解与熟悉HDFS文件系统；
2. 掌握HDFS的常用操作。

2.实验内容及结果截屏

1. HDFS常用操作

①使用hdfs dfs -mkdir命令在HDFS上创建文件夹test，这里使用了相对路径，绝对路径为/user/<用户名>/test：

 

②使用hdfs dfs -put命令从本地文件系统复制文件(夹)到HDFS，其中第1个参数表示本地源文件，文件名可以使用通配符，第2个参数表示HDFS目标文件夹：

 

③使用hadfs dfs -ls 命令文件(夹) 统计信息：

④使用hdfs dfs -cat命令显示文件内容。由于内容较多，在命令末尾添加管道和head命令仅显示前几行：

 

⑤使用hdfs dfs -cp命令在HDFS中复制文件(夹)，其中第1个参数表示HDFS源文件(夹)，第2个参数表示HDFS目标文件(夹)：

 

⑥使用hdfs dfs -get命令从HDFS复制文件(夹)到本地文件系统：

 

⑦使用hdfs dfs -rm命令删除文件(夹)，选项-r表示删除文件夹和文件夹下的所有文件：

 

3.实验分析及小结

       在此次实验过程中，我了解了HDFS文件系统，初步掌握了HDFS的常用操作。由于步步紧跟指导，我的实验过程十分顺利，仅在使用hdfs dfs -cat命令显示文件内容时，因粗心打错字而报错了一次。在之后的实验中，我会更加细心地对待，尽可能减少粗心导致的错误。