hdfs
Steven - y
这个作者很懒,什么都没留下…
展开
-
hdfs读数据流程
读数据流程 namenode记录元数据信息 数据的实际位置 虚拟目录----->实际位置 /data/a,txt 3 300M(虚拟位置) a.txt_block0 0 128M [linux001 002 004] a.txt_block1 128M 128M [001 002 003] a.txt_block2 256M 44M [03 04 06] 客户端请求namenode读取/data/a.txt namenode返回数据的元信息 选择一个近的节点请求下载第一个数据块 解析 存原创 2021-06-17 09:42:43 · 122 阅读 · 0 评论 -
HDFS架构nn dn交互,上传数据写数据流程
HDFS架构 准备工作:三台机器(datanode)注册并汇报储存资源,主机器每三秒心跳感应 客服端请求namenode存储数据到集群 校验 返回存储位置 存储默认三个副本 物理切块 增加从节点 注册扩容1.接受汇报 2.管理集群(节点列表,每个节点的存储资源) ...原创 2021-06-16 22:04:52 · 284 阅读 · 0 评论