huntersudo

编译hadoop-2.2.0（ubuntux86_64）###############################################1.一些准备sudo apt-get install cmake make -ysudo apt-get install g++sudo apt-get install gccsudo apt-get install bu

在集群hadoop2.2.0( 无HA)+zookeeper-3.3.5+hbase-0.96.0-hadoop2正常运行的情况下，添加kerberos认证。 一.部署目录/opt用于存放*.keytab文件mkdir -p /opt 节点部署Master1Master2Master3Master4

说明： 本文档实现hdfs的HA功能，其中zookeeper的配置不变，hbase的配置略作修改，同时启用backup master主要是修改hadoop的配置，相关内容：参见：1-0三台PC集群的搭建（noHA）。 1.HADOOP 修改实现HDFS的HA的搭建，部署目录：/opt/hadoop-2.2.0(1)创建目录（变化）Namenode节点（maste

MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。简单地说，MapReduce就是"任务的分解与结果的汇总"。　　在Hadoop中，用于执行MapReduce任务的机器角色有两个：一个是JobTracker；另一个是TaskTracker，JobTracker是用于调度工作的，TaskTr

安装前：# yum -y install  lzo-devel zlib-devel  gcc autoconf automakelibtool 1.(all) 在集群的所有节点上安装Lzo库，tar -zxvf lzo-2.06.tar.gzcd lzo-2.06  # export CFLAGS=-m64#./configure --enable-shared 

1.编译打包#创建一个放 class 文件的目录$ mkdir class #编译 WordCount 源文件javac -classpath/opt/hadoop-2.2.0/share/hadoop/common/hadoop-common-2.2.0.jar:/opt/hadoop-2.2.0/share/hadoop/mapreduce/hadoop-map

Hadoop-2.2.0伪分布式和hbase-0.96.0-hadoop2伪分布式搭建1. 部署（1）主机名gedit /etc/hostname   master1sudo gedit /etc/hosts  127.0.0.1 master1（2）SSHsudo apt-get install sshmkdir /home/hadoop/

1.部署搭建方案(no_HA)：projecthadoophadoopHbasezookeeper主机master1Namenodedatanode（NM）HMasterHRegionServerzkslave1

Ganglia3.6.0监控hadoop-2.20集群和hbase-0.96.0集群ganglia介绍：Ganglia 是 UC Berkeley 发起的一个开源监视项目，设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据（如处理器速度、内存使用量等）的名为 gmond 的守护进程。它将从操作系统和指定主机中收集。接收所有度量数据的主机可以显示这些数据并且可以将这些数据的精