hadoop2.5.2+zookeeper3.4.6+hbase0.99.2

一、hadoop安装参考

http://blog.csdn.net/bahaidong/article/details/41865943

二、zookeeper安装

用户为hadoop，安装目录为/opt下面

上传安装文件到/opt下面

root用户解压
[root@master opt]$ tar -zxvf zookeeper-3.4.6.tar.gz 

修改用户及属组

[root@master opt]# chown -R hadoop:hadoop zookeeper-3.4.6

创建数据文件夹并修改属组

[root@master zookeeper-3.4.6]# mkdir /data/zookeeper
[root@master zookeeper-3.4.6]# chown -R hadoop:hadoop /data/zookeeper
[root@master zookeeper-3.4.6]# ls -ll /data
总用量 0
drwxr-xr-x 5 mysql  mysql  153 12月 23 15:28 mysql
drwxr-xr-x 2 hadoop hadoop   6 12月 24 11:06 zookeeper
[root@master zookeeper-3.4.6]# 

切换用户并修改文件zoo.cfg

[root@master zookeeper-3.4.6]# su hadoop
[hadoop@master zookeeper-3.4.6]$ cd conf/
[hadoop@master conf]$ ls
configuration.xsl  log4j.properties  zoo_sample.cfg
[hadoop@master conf]$ mv zoo_sample.cfg zoo.cfg
[hadoop@master conf]$ vim zoo.cfg

dataDir=/data/zookeeper  #修改数据文件夹自定
server.1=master:2888:3888  #添加服务器
server.2=slave1:2888:3888  #添加服务器
server.3=slave2:2888:3888  #添加服务器

:wq    #保存并退出

// server.X=A:B:C

其中X是一个数字,表示这是第几号server.

A是该server所在的IP地址.

B配置该server和集群中的leader交换消息所使用的端口.

C 配置选举leader 时所使用的端口

进入数据文件夹创建myid为1

[hadoop@master conf]$ cd /data/zookeeper/
[hadoop@master zookeeper]$ vim myid
[hadoop@master zookeeper]$
.将配置到的zookeeper拷贝到其他电脑（slave1,slave2）上

[hadoop@master opt]$ scp -r zookeeper-3.4.6 root@slave1:/opt/

修改属组
[root@master opt]# chown -R hadoop:hadoop zookeeper-3.4.6
配置环境变量

[hadoop@slave1 zookeeper]$ su
密码：
[root@slave1 zookeeper]# vim /etc/profile
[root@slave1 zookeeper]# . /etc/profile

export ZOOKEEPER_HOME=/opt/zookeeper-3.4.6
export PATH=$PATH:$ZOOKEEPER_HOME/bin

启动，在三台机器上执行

[hadoop@slave2 zookeeper-3.4.6]$ bin/zkServer.sh start

判断是否启动成功

[hadoop@slave2 zookeeper-3.4.6]$ jps
19358 QuorumPeerMain

或者查看进程

[hadoop@slave2 zookeeper-3.4.6]$ ps -aux | grep 'zookeeper'    #有信息则启动成功

最好查看日志

[hadoop@slave2 zookeeper-3.4.6]$ tail -f -n 500 zookeeper.out #查看是否报错

关闭

[hadoop@slave2 zookeeper-3.4.6]$ bin/zkServer.sh stop


三、修改hadoop配置

1、修改core-site.xml

[hadoop@slave2 hadoop]$ vim core-site.xml

添加

        <!--指定zookeeper地址-->
        <property>
                <name>ha.zookeeper.quorum</name>
                <value>master:2181,slave1:2181,slave2:2181</value>
        </property>

四、安装Hbase

下载解压

[root@master opt]# tar -zxvf hbase-0.99.2-bin.tar.gz
修改属组

[root@master opt]# chown -R hadoop:hadoop hbase-0.99.2

修改hbase-env.sh

[root@master opt]# su hadoop
[hadoop@master opt]$ cd hbase-0.99.2/
[hadoop@master hbase-0.99.2]$ cd conf
[hadoop@master conf]$ ls
hadoop-metrics2-hbase.properties  hbase-env.cmd  hbase-env.sh  hbase-policy.xml  hbase-site.xml  log4j.properties  regionservers
[hadoop@master conf]$

[hadoop@master conf]$ vim hbase-env.sh

修改

export JAVA_HOME=/usr/java/jdk1.7.0_71   #视安装路径耳钉

export HBASE_MANAGES_ZK=false

修改vim hbase-site.xml

[hadoop@master conf]$ vim hbase-site.xml
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://master:9000/hbase</value>
    </property>
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
    <property>
        <name>hbase.master</name>
        <value>master:60000</value>
    </property>
    <property>
        <name>hbase.master.port</name>
        <value>60000</value>
        <description>The port master should bind to.</description>
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>master,slave1,slave2</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/data/zookeeper</value>
    </property>

修改regionservers

[hadoop@master conf]$ vim regionservers

slave1
slave2

复制到另两台机器slave1与slave2

[hadoop@master opt]$ scp -r hbase-0.99.2 root@slave1:/opt/


修改属组

[root@slave1 opt]# chown -R hadoop:hadoop hbase-0.99.2/

启动master上的hbase

[hadoop@master bin]$ bin/start-hbase.sh

jps查看

[hadoop@master logs]$ jps
14594 HMaster

[hadoop@slave1 opt]$ jps
14945 Jps
8260 NodeManager
8118 DataNode
13877 QuorumPeerMain
14873 HRegionServer
[hadoop@slave1 opt]$ 

进入hbase shell

[hadoop@master hbase-0.99.2]$ bin/hbase shell

关闭

[hadoop@master bin]$ bin/stop-hbase.sh

hbase web界面http://master:16030