HDFS
山间浓雾有路灯,风雨漂泊有归舟
学无止境
展开
-
浅谈大数据之HDFS(2)
关于HDFS1.0的知识可以看看这篇文章 浅谈大数据之HDFS(1) 下面我们根据HDFS2.0的一些新特性,从HA(高可用)、Federatio(联邦)、快照、缓存、ACL(权限)等方面来聊聊 HA(高可用) 首先我们要知道HA,是为了解决什么问题呢? 这是为了解决单点故障的问题,虽然HDFS1.0中有SNN(SecondaryNameNode),但是并不可靠,在HDFS2.0中,使用两个Nam...原创 2019-06-30 17:17:19 · 142 阅读 · 0 评论 -
浅谈大数据之HDFS(1)
先从HDFS1.0开始说起吧 HDFS1.0由三部分组成,分别是NameNode,SecondaryNameNode,DataNode,如图所示 下面针对几个组件详细讲解一下 NameNode 1.管理着文件系统命名空间,维护着文件系统树及树中的所有文件和目录 2.存在于主节点上,存储一些元数据信息 1)元数据存储在内存中,目的是为了快速响应请求,提高性能,但是也有一定的风险:关机重启时,数据丢...原创 2019-06-30 11:47:32 · 217 阅读 · 0 评论