Hadoop(三)HBase环境搭建

前言

每一颗璀璨的钻石,都曾被泥土和杂草埋没过,但正是因为这些,它才显得弥足珍贵。——我自己。

本文不打算介绍HBase的任何资料,旨在通过简洁明了的叙述,在最短时间内搭建一个可以运行的伪分布式环境。

下载HBase

Apache官网下载hbase-0.92.1,解压到linux用户目录中。并且设置权限

tar -zxvf /mnt/hgfs/PublicData/hbase-0.92.1.tar.gz -C/home/hadoop

chmod -R 777 ~/hbase-0.92.1

配置HBase

  1. 修改~/.bashrc文件,添加( 可能需要去掉HIVE相关的部分)

    export JAVA_HOME=/usr/java/jdk1.7.0_51

    export HADOOP_HOME=/home/hadoop/hadoop-0.20.2

    export HIVE_HOME=/home/hadoop/hive-0.6.0

    export HBASE_HOME=/home/hadoop/hbase-0.92.1

    export PATH=$HIVE_HOME/bin/:$HBASE_HOME/bin/:$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH

    export CLASSPATH=$HADOOP_HOME:$HADOOP_HOME/lib:$HBASE_HOME:$HBASE_HOME/lib:$CLASSPATH

  2. 复制$HADOOP_HOME下的hadoop-0.20.2-core.jar到$HBASE_HOME/lib下。并且删除(覆盖)原来的hadoop的版本。
  3. 修改$HBASE_HOME/conf/hbase-env.sh,添加如下内容:

    # The java implementation to use. Java 1.6 required.

    export JAVA_HOME=/usr/java/jdk1.

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要搭建hadoop3.1.4、spark、hive、hbase和flink集成环境,可以按照以下步骤进行: 1. 首先,从官网下载并安装hadoop3.1.4版本。解压缩并配置hadoop的环境变量,包括JAVA_HOME、HADOOP_HOME、HADOOP_CONF_DIR等。 2. 接下来,下载并安装Apache Spark。解压缩后,设置SPARK_HOME环境变量,并在spark-defaults.conf文件中配置hadoop相关的路径,如hadoop.home.dir和spark.yarn.stagingDir等。 3. 下载并安装Apache Hive。解压缩后,设置HIVE_HOME环境变量,并在hive-site.xml文件中配置hadoop相关的路径,如hadoop.home.dir和hive.metastore.warehouse.dir等。 4. 下载并安装Apache HBase。解压缩后,设置HBASE_HOME环境变量,并在hbase-site.xml文件中配置hbase.rootdir和hbase.zookeeper.quorum等相关参数。 5. 最后,下载并安装Apache Flink。解压缩后,设置FLINK_HOME环境变量,并在flink-conf.yaml文件中配置hadoop相关的路径,如fs.defaultFS和yarn.resourcemanager.address等。 完成上述步骤后,可以启动hadoop、spark、hive、hbase和flink的相关服务,并确保它们能够相互通信和集成。可以通过运行相应的启动脚本,如start-dfs.sh、start-yarn.sh、start-master.sh和start-worker.sh来启动相关服务。 总结:以上就是搭建hadoop3.1.4、spark、hive、hbase和flink集成环境的基本步骤。通过配置各自的环境变量和相关配置文件,并启动相应的服务,即可实现它们之间的集成和通信。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值