HDFS Hadoop分布式文件系统

本质文件存储系统,相当于磁盘上的磁盘,可以看成磁盘一体。作用三个重要作用:存储超大的文件、采用流式的数据访问方式、运行于商业硬件上架构架构分为1.X和 2.X架构 2.X解决了1.X的问题1.X架构2.X高可用架构1.X和2.X对比1、namenode 存储块儿的元数据、接收客户端的读写请求、获取block快的位置2、datanode 存储block、存储bloc...
摘要由CSDN通过智能技术生成

本质

Hadoop Distributed File System Hadoop文件存储系统,相当于磁盘上的磁盘,可以看成磁盘一体。

作用

三个重要作用:存储超大的文件、采用流式的数据访问方式、运行于商业硬件上

架构

架构分为1.X和 2.X架构 2.X解决了1.X的问题

1.X架构
啊发发发发发
2.X高可用架构
在这里插入图片描述

1.X和2.X对比

在这里插入图片描述
1、namenode

	存储块儿的元数据、接收客户端的读写请求、获取block快的位置

2、datanode

	存储block、存储block副本、处理客户端的读写块儿的请求

3、secondaryNamenode(1.x有的,2.x去掉)

主要进行进行镜像文件和操作日志的合并工作
fsimage 元数据镜像文件
edits log 数据的操作日志

4、Client:就是客户端。

文件切分。文件上传 HDFS 的时候,Client 将文件切分成 一个一个的Block,然后进行存储。
与 NameNode 交互,获取文
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值