HDFS --- 基础操作应用

 --- HDFS客户端操作 ---
      HDFS提供了两种客户端操作SHELL命令和JAVA接口都可以和HDFS系统交互!用户可以上传,下载,读取,追加数据内容,删除,移动......

namenode
1)用于记录文件存储的元数据  对象(NameNode将这些数据的元数据信息记录在内存中,并且将这些元数据信息定期的序列化到本地磁盘上), 记录用户操作的行为日志 .记录用户存储的文件的大小、切分的块数、每一块的副本数和存储在DataNode上的位置
2)接收客户端的请求,给datanode'分配存储任务 , 或者是给客户端请求数据的元信息
3)namenode老大 , 维护集群中的节点的数量,接收datanode的注册, 维护了一个统一的集群版本
4)维护集群中数据的负载均衡和副本个数
5)接收datanode的心跳汇报
6)接收datanode的数据的汇报 , 更新节点映射(元数据)


datanode
datanode节点是HDFS系统正在查处用户数据的节点
1 存储数据,将数据以物理切块的形式存储在本地指定的磁盘目录中
2 处理客户端的请求
3 接收namenode 分配的任务
4 接收namenode的指令完成容错工作 , 副本的复制 移动
5 定期的向namenode心跳响应请求,默认每间隔3s一次
6 汇报自己存储的数据数据1h


** 用户可以使用HDFS系统存储海量数据 , 读取数据 , 删除数据 **

  • 3
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值