hadoop
ProfoundOx
不谋全局者,不足以谋一域;不谋万世者,不足以谋一时;
展开
-
hadoop 1.2.0集群搭建
修改网卡的名称:cd /etc/udev/rules.d/ vim 70-persistent-net.rules Hadoop1.2.0集群搭建 目标 : 一台master(实现NameNode Jobtracker),两台slave(实现DataNode taskTracker)集群环境准备 安装ssh软件。(yum install ssh\* -y )实现每个机器的名称管理(原创 2016-12-03 13:09:39 · 600 阅读 · 0 评论 -
HBase HA 集群搭建
在真正进行安装前,我们先对全局节点进行一个整理,具体如下: 大体配置思路:指定hdfs(由于hbase依赖于hdfs,因此只开启hdfs即可。可以不需要开启yarn),指定ZooKeeper,指定regionserver。各节点组件划分如下下图所示: 安装的Hbase的前提是ZooKeeper和hadoop的集群已经搭建完毕。(ZooKeeper和hadoop具体安装细节细节可原创 2016-12-22 22:46:38 · 687 阅读 · 0 评论 -
hadoop2.7.3 HA高可用集群安装
hadoop2.7.3 HA高可用集群安装 HDFS高可用性(NameNode) NN必须实现共享元数据才能保证无缝切换;共享元数据可以采用Linux提供的NFS服务,也可以使用Hadoop提供的JournalNode;JournalNode采用多数派理论,保证半数以上的节点写成功即认为成功。 NN要实现自动切换(不需要手工切换),就必须实现实时监控每个节原创 2016-12-20 22:16:25 · 2313 阅读 · 0 评论