Hadoop(04) HDFS编程实践操作_使用vim编辑器,在本地linux文件系统的“ home hadoop ”目录下创建一个文件

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以点击这里获取!

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

./bin/hdfs dfs -ls /user/hadoop


![](https://img-blog.csdnimg.cn/3edb5768f69b4f0da32173939b4656fa.png)


如果要列出HDFS上的所有目录,可以使用如下命令:



./bin/hdfs dfs -ls


![](https://img-blog.csdnimg.cn/80221250120348e28fc7b49b92cca7ad.png)


下面,可以使用如下命令创建一个input目录: 



./bin/hdfs dfs -mkdir input22222


![](https://img-blog.csdnimg.cn/ad6d6fa86403442abe12a0dfb260c26e.png)


在创建个input目录时,采用了相对路径形式,实际上,这个input目录创建成功以后,它在HDFS中的完整路径是“/user/hadoop/input”。


![](https://img-blog.csdnimg.cn/78128ab99a76474caa09d85d5530f482.png)


如果要在HDFS的根目录下创建一个名称为input的目录,则需要使用如下命令:



./bin/hdfs dfs -mkdir /input33333


![](https://img-blog.csdnimg.cn/53ba024bd00243ef9e8e97206f39aa92.png)


 列出hdfs根目录下文件的命令:



./bin/hdfs dfs -ls /


![](https://img-blog.csdnimg.cn/2a2e50c67f894db795163ba542cf26a2.png)


#### 1.1.3 删除目录


可以使用rm命令删除一个目录,比如,可以使用如下命令删除刚才在HDFS中创建的“/input33333”目录(不是“/user/hadoop/input22222”目录):



./bin/hdfs dfs -rm -r /input33333


上面命令中,“-r”参数表示如果删除“/input”目录及其子目录下的所有内容,如果要删除的一个目录包含了子目录,则必须使用“-r”参数,否则会执行失败。


![](https://img-blog.csdnimg.cn/4032d86b686940f08d3b5d6c4418a778.png)


### 1.2 文件操作


在实际应用中,经常需要从本地文件系统向HDFS中上传文件,或者把HDFS中的文件下载到本地文件系统中。  
 首先,使用vim编辑器,在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件myLocalFile.txt,里面可以随意输入一些单词,比如,输入如下三行:



> 
> Hadoop
> 
> 
> Spark
> 
> 
> JavaWeb
> 
> 
> 


####  1.2.1 本地上传文件到HDFS


然后,可以使用如下命令把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下,也就是上传到HDFS的“/user/hadoop/input/”目录下: 



hdfs dfs -put /home/hadoop/myLocalFile.txt input22222 # 设置了PATH变量的话可以直接使用hdfs命令
hdfs dfs -ls input22222 # 查看文件是否上传成功


![](https://img-blog.csdnimg.cn/12a3c1aa81a841fbad65108e24dd93ba.png)


 查看input22222文件夹中的内容:



hdfs dfs -ls input22222


查看HDFS中的myLocalFile.txt这个文件的内容: 



hdfs dfs -cat input22222/myLocalFile.txt

如果没有设置PATH路径,使用如下命令
cd /usr/local/hadoop-3.3.6
./bin/ hdfs dfs -cat input22222/myLocalFile.txt


![](https://img-blog.csdnimg.cn/339d1221de854b86ab6756af7b4720cc.png)


#### 1.2.2 将文件从HDFS下载到本地主机



./bin/hdfs dfs -ls input22222
./bin/hdfs dfs -get input22222/myLocalFile.txt /home/hadoop/Downloads/
cd /home/hadoop/Downloads/
ls -l
cat myLocalFile.txt


![](https://img-blog.csdnimg.cn/c0b342dcee74461f9fbf26852b8452dd.png)


#### 1.2.3 文件在HDFS中拷贝


了解一下如
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值