大数据之Hadoop(HDFS写文件)

HDFS写文件操作原理图

HDFS写文件

HDFS写文件过程讲解

1.客户端向NameNode请求上传a.txt文件
2.NameNode会进行校验【所传的目录是否存在,是否存的下该文件…】
3.验证成功,会告知客户端可以上传
4.客户端将要上传的文件切块
5.客户端会携带block1与其最近的DN建立连接,并验证是否可以上传数据
6.若可以,会从该DN向其他的DN进行请求是否可存数据
7.都可以存放,则从最后一个DN向前依次存放数据,并带回反馈(ack确认码)
8.最后从首个DN处回应客户端,若反馈数(ack确认码数)等于DN总数,则表示完成
9.重复该过程,将其他block存放
10.结束后,客户端调用close()方法,结束hdfs写文件的过程

HDFS写文件的命令呈现

hdfs dfs -put 文件所在的路径 去处的路径
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值