hdfs
文章平均质量分 87
gao634209276
这个作者很懒,什么都没留下…
展开
-
hadoop2.7.2分布式集群搭建和生态系统配置
本文只介绍apache版hadoop2.7.2集群环境安装配置,其中的功能使用不做过多说明.详情参考其他资料 集群没有配置HA,详情参考其他资料,或本人接下来的文章 一 根据官方说明,匹配合适的版本: hadoop使用的是目前比较新的稳定版本 hive 27 June 2015 : release 1.2.1 available This release works with Hadoop 1.x.y, 2.x.y原创 2016-05-15 21:07:35 · 761 阅读 · 0 评论 -
简单HDFS使用Journalnode HA部署
基于之前hadoop集群,实验Journal共享实现namenode的高可用,本篇只配置Hadoop的HDFS,其他Yarn,zookeeper,等均不关系. 节点hadoop,hadoop1,hadoop2,之前的集群namenode为hadoop,这里设置hadoop1,和hadoop2为Active和Standby NN,并使用JournalNode实现共享 在集群基础上改变一下内容原创 2016-05-18 15:41:33 · 6611 阅读 · 2 评论 -
部署hadoop2.7.2 集群 基于zookeeper配置HDFS HA+Federation
hadoop1的核心组成是两部分,即HDFS和MapReduce。在hadoop2中变为HDFS和Yarn。新的HDFS中的NameNode不再是只有一个了,可以有多个(目前只支持2个)。每一个都有相同的职能。 两个NameNode 当集群运行时,只有active状态的NameNode是正常工作的,standby状态的NameNode是处于待命状态的,时刻同步active状态NameNode的原创 2016-05-19 14:16:21 · 9947 阅读 · 1 评论