Phoenix整合HBase安装部署、HBase整合Phoenix安装部署

已于 2022-02-11 17:07:27 修改
阅读量6.7k 收藏 22
点赞数 4
文章标签： hbase 数据库 database 大数据
于 2022-01-26 15:09:26 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40751062/article/details/122695887
版权

Phoenix整合HBase安装部署

前言

相信很多小伙伴在安装phoenix连接hbase的时候被版本和配置问题困扰过，那么这篇文章可以很好的帮助你解决这个问题。

如果之前安装过hbase，要删除重装的话，需要清除zookeeper中hbase的信息，可以参考 https://blog.csdn.net/morning_pig/article/details/8924333

PS:HBase和Phoenix均采用较新的稳定版本

Phoenix采用5.12版本
HBase采用2.4.9稳定版

一、安装HBase、Phoenix

1、 安装包百度网盘链接： https://pan.baidu.com/s/100bYNyWy4LQt2f5qbgHf8Q
       提取码：mpev

2、 HBase官方下载地址：http://archive.apache.org/dist/hbase/

在这里插入图片描述
在这里插入图片描述
3、 Phoenix官方下载地址：https://phoenix.apache.org/download.html
在这里插入图片描述

二、安装

1.HBase安装

1.解压安装包
在这里插入图片描述
2.修改文件名
修改文件名

## 解压hbase 到opt/module目录
tar -zxvf hbase-2.4.9-bin.tar.gz -C /opt/module
## 修改文件名
mv hbase-2.4.9/ hbase

2.Phoenix安装

1、解压安装包
在这里插入图片描述
2、修改文件名
在这里插入图片描述

## 解压安装包到指定路径
tar -zxvf phoenix-hbase-2.4-5.1.2-bin.tar.gz -C /opt/module/
## 修改文件名
phoenix-hbase-2.4-5.1.2-bin/ phoenix

3.部署

1.配置HBase

一、配置hbase-env.sh文件
在这里插入图片描述在这里插入图片描述

## 添加jdk环境
export JAVA_HOME=/usr/local/jdk1.8.0_241
## 不让HBase 管理ZooKeeper
export HBASE_MANAGES_ZK=FALSE
## 默认是true，默认会让ZooKeeper 随HBase 一起启停，并管理类似myid 等信息
## 但大数据系统中的ZooKeeper 集群还可能管理着别的框架，所以不能让其只跟HBase 绑定在一起
## 如没在hbase-site.xml 中配置hbase.zookeeper.quorum 则HBase 会启动自带的mini_ZooKeeper

二、配置hbase-site.xml文件
在这里插入图片描述
在文件中添加如下配置

<configuration>
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://hadoop105:8020/hbase</value>
  </property>

  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>

  <property>
    <name>hbase.master.port</name>
    <value>16000</value>
  </property> <!-- Zookeeper元数据的存储目录，需要和Zookeeper的zoo.cfg 配置的一致 -->
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/opt/module/zookeeper-3.5.7/zkData</value>
  </property>
  
 <property>
    <name>hbase.zookeeper.quorum</name>
    <value>hadoop105,hadoop106,hadoop107</value>
  </property>
  
<!-- 指定HBase Master Web页面访问端口，默认端口号16010 -->
  <property>
    <name>hbase.master.info.port</name>
    <value>16010</value>
  </property>

<!-- 指定HBase RegionServer Web页面访问端口，默认端口号16030 -->
  <property>
    <name>hbase.regionserver.info.port</name>
    <value>16030</value>
  </property>
  
<!-- 解决启动HMaster无法初始化WAL的问题 -->
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
  </property>

 <property>
    <name>hbase.wal.provider</name>
    <value>filesystem</value>
  </property>
  
    <!-- Phoenix 支持HBase 命名空间映射 -->
  <property>
    <name>phoenix.schema.isNamespaceMappingEnabled</name>
    <value>true</value>
  </property>

  <property>
    <name>phoenix.schema.mapSystemTablesToNamespace</name>
    <value>true</value>
  </property>
  
<!-- Zookeeper 端口，默认2181 -->
  <property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
  </property>
</configuration>

三、配置regionservers文件
在这里插入图片描述

# 告诉bin/start-hbase.sh 及bin/stop-hbase.sh 脚本Region 的节点有哪几个
hadoop105
hadoop106
hadoop107

在这里插入图片描述
四、软连接hadoop文件
在这里插入图片描述

cd /opt/module/hbase/conf/
# 软连接，如已存在则覆盖
ln -sf /opt/module/hadoop-3.1.3/etc/hadoop/core-site.xml
ln -sf /opt/module/hadoop-3.1.3/etc/hadoop/hdfs-site.xml

在这里插入图片描述
五、添加压缩包到lib文件
在这里插入图片描述

##进入phoenix目录
cd /opt/module/phoenix/

##将phoenix中的jar包复制到hbase的目录下
cp phoenix-pherf-5.1.2.jar phoenix-server-hbase-2.4-5.1.2.jar /opt/module/hbase/lib/

整合Phoenix

一、将phoeinx中的jar包拷贝到hbase
在这里插入图片描述

#进入phoenix文件夹
cd /opt/module/phoenix/
#拷贝jar文件到hbase的lib文件夹
cp phoenix-pherf-5.1.2.jar phoenix-server-hbase-2.4-5.1.2.jar /opt/module/hbase/lib/

二、软连接hbase-site.xml
在这里插入图片描述

## 进入bin目录
cd /opt/module/phoenix/bin/
##软连接hbase-site.xml文件
ln -sf /opt/module/hbase/conf/hbase-site.xml

在这里插入图片描述
三、配置环境变量

sudo vim /etc/profile.d/my_env.sh
## 添加环境变量
#phoenix
export PHOENIX_HOME=/opt/module/phoenix
export PHOENIX_CLASSPATH=$PHOENIX_HOME
export PATH=$PATH:$PHOENIX_HOME/bin

#HBase
export HBASE_HOME=/opt/module/hbase
export PATH=$PATH:$HBASE_HOME/bin

在这里插入图片描述

分发集群文件

在这里插入图片描述
在这里插入图片描述

cd /opt/module/
##分发hbase到集群
xsync hbase/
##分发phoenix到集群
xsync phoenix/

分发脚本xsync链接：https://blog.csdn.net/wwm_wang_wen/article/details/120778119

至此前期安装部署工作全部完成，最后，让我们启动hbase和phoenix。

启动验证

一、先启动hadoop集群，和zookeeper

二、启动hbase
在这里插入图片描述

cd /opt/module/hbase/
##启动hbase
bin/start-hbase.sh

二、启动phoenix 在这里插入图片描述

cd /opt/module/phoenix/
##启动phoenix
bin/sqlline.py

总结

以上就是今天要讲的内容，本文仅仅介绍了hbase和phoenix的安装部署和使用，如果大家在安装的过程中遇到问题可以留言。

微微有风
关注
  • 4
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 9
    评论
hbase SQL 框架phoenix使用
puyangmengxue的专栏
07-27 1万+
1  简介     hbase 提供很方便的shell脚本以及java API等方式对Hbase进行操作，但是对于很对已经习惯了关系型数据库操作的开发来说，有一定的学习成本，如果可以像操作mysql等一样通过sql实现对Hbase的操作，那么很大程度降低了Hbase的使用成本。Apache Phoenix 组件就完成了这种需求，官方注解为 “Phoenix -we put the SQL b
Hbase和Phoenix安装和配置
weixin_44793467的博客
03-25 1033
Hbase和Phoenix安装和配置Hbase安装和配置1. Hbase安装包下载2. 安装3. 配置`JAVA_HOME`环境变量4. (可选)配置 `hbase.tmp.dir ` 属性5. 启动HbasePhoenix安装和配置1. Hbase安装包下载2. 安装3. 配置4. 运行外网或者内网其他主机连接Phoenix（重点！！！）1. 下载安装Phoenix可视化工具SQuirrel2. 配置SQuirrel3. 问题解决 Hbase安装和配置 1. Hbase安装包下载 点击进入Hbase官网
Phoenix安装、连接Hbase、配置
北京小辉
02-06 8340
目录：一、Phoenix安装二、Phoenix安装及连接Hbase三、phoenix 配置—————————————————————————————一、Phoenix安装1、首先去官网下载Phoenix的压缩包 下载地址：http://mirror.bit.edu.cn/apache/phoenix/ 由于我们系统的Hbase版本是1.1版本的，故下载4.7版本的Phoenix。
HBase分布式数据库
qq_52280090的博客
04-18 766
首先确认是否安装Hadoop，关闭顺序与启动顺序相反：先关闭HBase，之后再关闭Hadoop。7.检查JPS含有 HMaster、HRegionServer、HQuorumPeer 进程。， 需要放行 16919 端口。8.访问Web页面，
Hbase之phoenix的介绍与使用
lslslslslss的博客
01-05 7752
目录 一、phoenix的简介 二、phoenix的安装与基本操作 Phoenix Shell操作 表的映射 视图映射 表映射 数字类型 JDBC操作 Phoenix二级索引 全局索引 包含索引 本地索引（localindex） 一、phoenix的简介 Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。 1）容易集成：如Spark，Hive，Pig...
2024年最全基于 HBase &amp； Phoenix 构建实时数仓（3）—— Phoenix 安装
最新发布
2401_84182507的博客
05-03 403
Phoenix 相对于 HBase 来说就是一个支持 SQL 的客户端软件，为能在集群环境中任何节点上都能使用 Phoenix 命令行，在所有节点上都安装。如果要在 Phoenix 中操作直接在 HBase 中创建的表，则需要在 Phoenix 中进行表的映射。默认情况下，直接在 HBase 中创建的表，通过 Phoenix 是查看不到的。，本篇介绍在同一环境中安装 Phoenix，并连接上篇部署的 HBase 集群。在所有节点上执行下面第1、2步操作，在 node1 节点上执行第3步操作。
Hadoop基础之《（9）—整合HBase+Phoenix+Hive—安装HBase》
csj50的专栏
02-03 1106
数据行具有可排序的键和任意数量的列。该表存储稀疏，因此如果用户喜欢，同一表中的行可以具有疯狂变化的列。（4）最终理解HBase数据模型的关键在于稀疏、分布式、多维、排序的映射。Apache HBase是以HDFS为数据存储的，一种分布式、可扩展的NoSQL数据库（非关系型，以k,v的形式存储数据）。Bigtable是一个稀疏的、分布式的、持久的多维排序map（代码里的hashmap是单维的，并且一定是有序的）。映射中的每个值都是一个未解释的字节数组。HBase可以认为是以HDFS为存储的数据库。
浅谈Phoenix在HBase中的应用
weixin_30412013的博客
01-28 839
一、前言 业务使用HBase已经有一段时间了，期间也反馈了很多问题，其中反馈最多的是HBase是否支持SQL查询和二级索引，由于HBase在这两块上目前暂不支持，导致业务在使用时无法更好的利用现有的经验来查询HBase。虽然HBase本身不支持SQL，但业界还是有现成的方案来支持，如Hive、Impala、Phoenix等。众多方案各有各的优势，本文主要对Phoenix作一个大概的介绍。 Phoe...
HBase整合Phoenix
热门推荐
lydms的博客
12-03 1万+
1）官网地址：http://phoenix.apache.org/Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。优点：使用简单，直接能写sql。缺点：效率没有自己设计rowKey再使用API高，性能较差。
大数据入门之如何利用Phoenix访问Hbase
TONG哥的专栏
04-12 2116
HBase和Phoenix可谓是一对黄金搭档。HBase以其高效的列式存储和强大的数据扩展能力，成为大数据存储领域的佼佼者；而Phoenix则以其SQL化的操作方式，简化了对HBase的访问过程。今天，就让我们一起看看如何利用Phoenix轻松访问HBase。
HBase学习-------Phoenix学习
weixin_54342458的博客
09-08 912
Phoenix详细解析
phoenix-hbase-2.4-5.1.2
03-09
"phoenix-hbase-2.4-5.1.2-bin"压缩包包含了Phoenix的二进制文件，用户可以直接解压部署。配置时，需要将Phoenix的JAR文件添加到HBase的类路径中，然后在HBase的配置文件中指定Phoenix的相关参数，如连接URL、...
springboot 集成 phoenix+hbase整合，完整demo
03-21
springboot 集成 phoenix+hbase整合，完整demo。 springboot集成phoenix+hbase 完整demo！！！！！！！ springboot phoenix hbase
springboot集成phoenix+hbase
10-26
而Phoenix是一个开源的SQL层，它构建在HBase之上，提供了高性能的数据库查询能力。本示例将详细解释如何将Spring Boot与Phoenix和HBase集成，以创建一个完整的数据访问解决方案。 首先，我们需要在Spring Boot项目...
hadoop2.7.1+zk3.5+hbase2.1+phoenix 安装部署环境打包
07-01
本压缩包提供了这些组件的安装部署资源，便于快速搭建一个完整的Hadoop2.7.1、ZK3.5、HBase2.1和Phoenix5.1.0的基础环境。 首先，Hadoop是Apache开源项目，它提供了分布式文件系统（HDFS）和MapReduce计算框架，...
phoenix-hbase各个版本的下载地址
11-28
phoenix-hbase各个版本源码的下载地址，由于phoenix对hbase的版本有要求，所以大家根据自己环境的情况下载
【Phoenix】目录结构
陈戏猿
11-12 417
phoenix项目基本目录结构。
【Hbase】hbase和phoenix的整合（6）
hx1156477702的博客
10-03 1327
hbase和phoenix的整合，phoenix安装部署，phoenix的使用，HBase的命名空间，列簇设计，版本设计，数据压缩，ROWKEY设计原则，设置预分区，Phoenix的视图，二级索引。
Phoenix搭建及其使用
xiaoyue bigdata的博客
04-10 454
Phoenix1、Phoenix搭建1、关闭hbase集群，在master中执行2、上传解压配置环境变量3、将phoenix-4.15.0-HBase-1.4-server.jar复制到所有节点的hbase lib目录下4、启动hbase ， 在master中执行2、Phoenix使用1、连接sqlline2、常用命令3、phoenix表映射3.1、视图映射3.2、表映射3、Phoenix二级索引1、开启索引支持2、创建索引2.1、全局索引2.2、本地索引2.3、覆盖索引4、JDBC Hbase适合存储大
docker 安装phoenix连接hbase
04-01
要在Docker中安装Phoenix连接HBase，需要执行以下步骤： 1. 首先，需要安装Docker和Docker Compose。请参考官方文档安装。 2. 下载HBase和Phoenix的Docker镜像。可以通过以下命令下载： ``` docker pull apache/hbase docker pull apache/phoenix ``` 3. 创建一个Docker Compose文件，用于启动HBase和Phoenix容器。可以使用以下示例： ``` version: '3' services: hbase: image: apache/hbase container_name: hbase ports: - "2181:2181" - "16010:16010" phoenix: image: apache/phoenix container_name: phoenix depends_on: - hbase environment: HBASE_ZOOKEEPER_QUORUM: hbase ports: - "8765:8765" ``` 4. 保存文件为docker-compose.yml，并在同一目录下运行以下命令启动容器： ``` docker-compose up ``` 5. 现在可以使用Phoenix连接HBase了。可以使用以下命令连接到Phoenix： ``` docker exec -it phoenix bash /opt/phoenix/bin/sqlline.py localhost:2181:/hbase-unsecure ``` 这将打开一个SQL Shell，可以在其中执行SQL命令。例如，可以使用以下命令创建一个表： ``` CREATE TABLE mytable (id VARCHAR PRIMARY KEY, name VARCHAR); ``` 然后，可以使用以下命令插入数据： ``` UPSERT INTO mytable (id, name) VALUES ('1', 'John'); ``` 最后，可以使用以下命令查询数据： ``` SELECT * FROM mytable; ``` 这将返回： ``` +---+------+ | ID| NAME | +---+------+ | 1 | John | +---+------+ ```

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 9
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值