vmware+centos6搭建Hbase集群

1. 安装Hbase集群之前的准备

1.1 安装介质的准备

1.1.1 三台centos6虚拟机（配置好静态IP）

1.1.2 配置hostname (master slave1 slave2)

1.1.3 修改三台机器的/etc/hosts文件

1.1.4 创建hadoop组与hadoop用户

• 创建组hadoop
  # addgroup hadoop
• 创建用户hadoop
  # adduser –ingroup hadoop hadoop
• 检查用户
  # id hadoop
  根目录下新建hadoop目录，用于存放hadoop、zookeeper、hbase安装包和解压后的文件包，并更改此hadoop目录属组和属主
  # chmod hadoop:hadoop /hadoop

1.1.5 配置免密码登陆

第一种：

• 切换到master主机
  # cd /
  # mkdir hadoop
  # su - hadoop
  # ssh-keygen -t rsa -N “”
  # ls -a
  # cd .ssh
  # cat id_rsa.pub >> authorized_keys
  # cat authorized_keys (复制内容)
• 切换到另外两台虚拟机，分别操作
  # cd /
  # mkdir hadoop
  # su - hadoop
  # mkdir .ssh
  # cd .ssh (无内容)
  # vim authorized_keys （并且复制内容黏贴）
  wq 保存
• 至此 主节点可直接登陆其他节点机器（需要输入一遍密码）

第二种：

# ssh-keygen -t rsa
# ssh-copy-id 192.168.84.136 （本机IP）
# ssh-copy-id 192.168.84.** （集群其它IP）

1.1.6 安装配置jdk（可参考如下链接：）

http://blog.csdn.net/daxiangqqcom/article/details/70230636
- 同步到其他主机
# rsync -avz /hadoop/jdk slave1:/hadoop/jdk
# rsync -avz /hadoop/jdk slave2:/hadoop/jdk
- 配置环境变量
# vim /etc/profile

1.1.7 安装配置 hadoop(可能需要编译安装，可参考另外一篇)

http://blog.csdn.net/daxiangqqcom/article/details/70259950

• 主节点安装hadoop
• 修改hadoop-2.7.3/etc/hadoop/下文件
  
  • hadoop-env.sh (直接写出jdk路径)
  • mapred-env.sh (直接写出jdk路径)
  • core-site.xml
    
  • hdfs-site.xml
    
  • mapred-site.xml （此处用yarn 不需要用到mapreduce）
    
  • yarn-site.xml
  • slaves
    
• 主节点格式化HDFS文件系统的namenode
  # bin/hdfs namenode -format (配置环境变量就不需要前缀bin/)
• 启动hdfs命令如下：
  # sbin/start-dfs.sh （可能deprecated）
• 成功的话输入jps （java的命令），检查进程
• 或者通过浏览器访问： http://master:50070/
• 停止hdfs命令如下：
  # sbin/stop-dfs.sh
• 同步到其他主机
  # rsync -avz /hadoop/hadoop-2.7.3 slave1:/hadoop/hadoop-2.7.3
  # rsync -avz /hadoop/hadoop-2.7.3 slave2:/hadoop/hadoop-2.7.3

1.1.8 安装配置zookeeper

# tar -zxvf zookeeper-3.4.10.tar.gz -C /hadoop
# cd /hadoop/
# ln -sv zookeeper-3.4.10/ zookeeper
# cd /hadoop/zookeeper
# mkdir zookdata
# cd /hadoop/zookeeper/conf
# cp zoo_sample.cfg zoo.cfg
# vim zoo.cfg

# cd /hadoop/zookeeper/zookdata
# vim myid (内容就写1，其它两台分别2和3)
wq保存
# cd /hadoop/zookeeper/conf
# vim zoo.cfg (末尾添加)

- 同步到其它节点
# rsync -avz /hadoop/zookeeper-3.4.10 slave1:/hadoop/zookeeper-3.4.10
# rsync -avz /hadoop/zookeeper-3.4.10 slave2:/hadoop/zookeeper-3.4.10
# cd /hadoop/zookeeper/zookdata/
# vim myid (分别修改2和3)
- 启动停止zookeeper

1.1.9 安装HBase

• 确保HDFS处于启动状态
• 在主节点解压缩Hbase
• 修改HBase的环境变量配置文件hbase-env.sh
• 修改hbase-site.xml
  
• 修改regionservers
  slave1
  slave2
• 同步两个从节点
• 启动Hbase
  # start-hbase.sh
• 检查启动是否成功
  # jps
• 利用客户端连接到HBase
  # ./hbase shell
• 创建测试表、查看、插入数据