【Hbase】hbase和phoenix的整合（6）

已于 2022-10-03 20:57:53 修改
阅读量1.3k 收藏 3
点赞数 1
文章标签： hbase 大数据 数据库
于 2022-10-03 20:56:58 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hx1156477702/article/details/127154848
版权

phoenix是Apache 出的一个全文检索，能够更清晰的帮助hbase存储数据

长篇幅预警！！！这一篇东西有点多，大家可以收藏学习！

目录

apache phoenix简介

简介

olap和oltp

Phoenix的作用

apache phoenix安装

下载

上传到服务器

解压

修改hbase的配置文件

复制依赖包

分发hbase配置文件

将配置好的hbase-site.xml文件复制到phoenix客户端也就是hadoop01的phoenix的bin目录下

重启hbase

启动phoenix客户端

查看hbase的web ui

phoenix的使用

需求

创建表

查看表的详情

删除表

大小写的问题

插入数据

查询数据

更新数据

删除数据

HBase的命名空间

简介

创建命名空间

查看命名空间列表

查看命名空间

删除命名空间

在指定命名空间下创建表

添加数据到命名空间表

列簇设计

版本设计

数据压缩

压缩算法

查看表的压缩方式

设置数据压缩

创建新表的时候

修改已有的表

ROWKEY设计原则

避免使用递增行键/时序的数据

避免rowkey和列的长度过大

使用long等类型比String类型更节省空间

rowkey唯一性

避免数据热点

热点

预分区

start key和end key

预分区的个数

rowkey避免数据热点设计

设置预分区

指定start key和end key来分区

创建预分区

hbase的web ui查看分区的占用情况

指定分区的数量、分区策略

创建预分区

hbase的web ui查看分区的占用情况

分区数量

分区策略

Phoenix的视图

 创建视图

查询数据

二级索引

索引分类

 全局索引

本地索引

覆盖索引

函数索引

创建索引

根据索引查询数据

删除索引

查看索引

apache phoenix简介

简介

 Apache Phoenix让hadoop支持oltp和业务操作分析

olap和oltp

  1. olap：在线分析处理系统，hadoop、hbase
  2. oltp：在线事务处理系统，传统的关系数据库支持的

sql：结构化查询语言

acid：原子性、一致性、独立性和持久性

Phoenix的作用

  1. 提供标准的sql和acid事务支持
  2. 让NoSQL数据库具备了有模式的方式读取数据，可以使用sql来创建表、插入、修改和删除数据
  3. Phoenix通过协处理器在服务器端执行操作，无侵入式
  4. 可以很好的与其他hadoop生态组件整合，例如spark、hive、flume、flink以及MR

apache phoenix安装

下载

同样自取

https://pan.baidu.com/s/1JcvAQhQZqgQDD9-GHPZGog?pwd=1234  提取码：1234

上传到服务器

解压

修改hbase的配置文件

复制依赖包

复制phoenix的服务端jar包到master和worker的hbase的lib文件夹

复制phoenix的客户端jar包到phoenix客户端也就是hadoop01的phoenix的bin文件夹下

分发hbase配置文件

将配置好的hbase-site.xml文件复制到phoenix客户端也就是hadoop01的phoenix的bin目录下

重启hbase

启动phoenix客户端

cd /export/servers/phoenix-hbase-2.4-5.1.2-bin

bin/sqlline.py hadoop001:2181

查看hbase的web ui

到这里phoenix的安装部署就结束了，接下来是使用知识介绍

phoenix的使用

需求

使用之前的订单数据，但是用phoenix来创建表，并进行数据的增删改查操作。

https://pan.baidu.com/s/1gjZWaOp5C5srC1_UeYXX0g?pwd=1234  提取码：1234

列名

说明

ID

订单id

STATUS

状态

PAY_MONEY

支付金额

PAY_WAY

支付方式

USER_ID

用户id

OPERATION_DATE

操作时间

CATEGORY

商品类别

创建表

语法：

create table if not exists 表名(

rowkey名称 类型 primary key,

列簇.列名 类型,

……

) ;

先用vscode之类的编辑工具，写好创建表的语句

 再复制到phoenix客户端执行

 在hbase的web ui查看刚创建的表

 同时也可以看到表默认只有一个分区Region，也就是没有分区

查看表的详情

语法：

!desc ORDER_DETAIL

 注意：一定要加上！

删除表

语法：

drop table if exists 表名;

大小写的问题

如果在使用列簇、列名的时候没有添加双引号，Phoenix会自动转换为大写。

最低0.47元/天 解锁文章
星欲冷hx
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
springboot 集成 phoenix+hbase整合，完整demo
03-21
springboot 集成 phoenix+hbase整合，完整demo。 springboot集成phoenix+hbase 完整demo！！！！！！！ springboot phoenix hbase
springboot集成phoenix+hbase
10-26
本示例将详细解释如何将Spring Boot与Phoenix和HBase集成，以创建一个完整的数据访问解决方案。 首先，我们需要在Spring Boot项目中添加相应的依赖。对于Spring Boot，我们需要包含`spring-boot-starter-web`来启用...
HBase学习-------Phoenix学习
weixin_54342458的博客
09-08 908
Phoenix详细解析
【HBase】HBase系列之HBase集成Phoenix及简单使用
码小白.
10-18 1198
zlp Phoenix集成安装基本使用 Phoenix集成 Phoenix是构建在HBase上的一个SQL层，能让我们用标准的JDBC API而不是HBase客户端API来创建表，插入数据和对HBase数据进行查询。Phoenix完全使用Java编写，作为HBase内嵌的JDBC驱动。Phoenix查询引擎会将SQL查询转换为一个或多个HBase扫描，并编排执行以生成标准的JDBC结果集。下载apache-phoenix-4.10.0-HBase-1.2-bin.tar.gz,注意下载的Phoenix版本必
基于 HBase &amp； Phoenix 构建实时数仓（3）—— Phoenix 安装(1)
最新发布
2401_84181145的博客
05-11 806
【代码】基于 HBase &Phoenix 构建实时数仓（3）—— Phoenix 安装(1)
使用phoneix连接hbase
weixin_43930865的博客
11-09 2326
1：phoneix介绍 官网 1.1：简介 Phoenix是构建在HBase上的一个SQL层，专为HBase研发。能让我们用标准的JDBC API而不是HBase客户端APIs来创建表，插入数据和对HBase数据进行查询。 Phoenix完全使用Java编写，作为HBase内嵌的JDBC驱动。 1：下载安装 Download：http://phoenix.apache.org/download.html，下载hbase对应版本的phoenix；解压bin.tar.gz包，拷贝phoenix server j
hbase整合pheonix
我的祖传代码
07-01 993
Phoenix，由saleforce.com 开源的一个项目，后又捐给了Apache。它相当于一个Java 中间件，帮助开发者，像 使用jdbc 访问关系型数据库一样，访问NoSql 数据库HBase。 Apache Phoenix 与其他Hadoop 产品完全集成，如Spark，Hive，Pig，Flume 和MapReduce。 一.安装pheonix 1.1 下载pheonix htt...
Hadoop基础之《（9）—整合HBase+Phoenix+Hive—安装HBase》
csj50的专栏
02-03 1099
数据行具有可排序的键和任意数量的列。该表存储稀疏，因此如果用户喜欢，同一表中的行可以具有疯狂变化的列。（4）最终理解HBase数据模型的关键在于稀疏、分布式、多维、排序的映射。Apache HBase是以HDFS为数据存储的，一种分布式、可扩展的NoSQL数据库（非关系型，以k,v的形式存储数据）。Bigtable是一个稀疏的、分布式的、持久的多维排序map（代码里的hashmap是单维的，并且一定是有序的）。映射中的每个值都是一个未解释的字节数组。HBase可以认为是以HDFS为存储的数据库。
Phoenix Hbase springjdbc整合 demo
10-29
Phoenix Hbase springjdbc整合 demo Phoenix最早是saleforce的一个开源项目，后来成为Apache基金的顶级项目。 Phoenix是构建在HBase上的一个SQL层，能让我们用标准的JDBC APIs而不是HBase客户端APIs来创建表，插入...
phoenix+spring+hbase
12-31
phoenix +hbase+spring 整合技术 phoenix +hbase+spring 整合技术 phoenix +hbase+spring 整合技术 根据需要 下载 集成的jar phoenix-core-4.13.0-HBase-0.98.jar
phoenix-hbase-2.2-5.1.2-bin.tar.gz
05-07
Phoenix和HBase是大数据领域中重要的数据库解决方案，它们在处理大规模、分布式存储和查询上有着卓越的表现。本文将深入探讨这两个技术及其结合体`phoenix-hbase-2.2-5.1.2-bin.tar.gz`的详细内容。 首先，HBase...
HBase之Phoenix与HBase简介以及安装部署和使用
热门推荐
君永夜
06-04 1万+
文章目录1.HBase与Phoenix简介2.HBase入们2.1 (重要)版本选择2.2 单点部署2.2.1 解压2.2.2 修改hbase-env.sh 配置2.2.3 修改hbase-site.sh 配置2.2.4 添加环境变量2.2.5 启动以及命令行使用2.3 HBase shell窗口命令简单使用2.4HBase的读写流程3.Phoenix入们3.1 (重要)版本选择3.2部署3.2....
Hbase高手之路 -- 第七章 -- HBase和Phoenix（全文检索）整合
kc44601的博客
05-02 2431
1.phoneix的简介与安装 2.phoneix的使用 3.hbase命名空间 4.列簇设计和版本设计 5.数据压缩 6.ROWKEY设计原则 7.Phoneix视图 8.二级索引
HBase的数据库与Apache Phoenix的集成
禅与计算机程序设计艺术
01-18 944
1.背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。它是Hadoop生态系统的一部分，可以与HDFS、ZooKeeper等组件集成。HBase的数据模型是稀疏的多维数组，数据存储在HDFS上，并通过HBase自身的存储引擎进行管理和访问。 Apache Phoenix是一个针对HBase的SQL查询引擎，它允许用户使用标准的SQL语句来查...
Hbase之phoenix的介绍与使用
lslslslslss的博客
01-05 7709
目录 一、phoenix的简介 二、phoenix的安装与基本操作 Phoenix Shell操作 表的映射 视图映射 表映射 数字类型 JDBC操作 Phoenix二级索引 全局索引 包含索引 本地索引（localindex） 一、phoenix的简介 Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。 1）容易集成：如Spark，Hive，Pig...
Hbase 整合Phoenix
weixin_44966780的博客
12-23 945
Hbase 整合Phoenix Phoenix简介 Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。 Phoenix特点 1)容易集成：如Spark, Hive, Pig, Flume和Map Reduce; 2)操作简单：DML命令以及通过DDL命令创建和操作表和版本化增量更改; 3)支持HBase二级索引创建。 Phoenix架构 Phoenix快速入门 Phoenix安装 1）官网地址：https://phoe
Phoenix批量导入数据至Hbase中
Stay Focused And Work Hard !!!
07-14 8363
笔者环境：hdp2.5.3 + centos6.9 + phoenix4.7 官网文档： Phoenix provides two methods for bulk loading data into Phoenix tables: Single-threaded client loading tool for CSV formatted data via the psql command...
[Canal] Apache Phoenix从MySQL同步数据
wenjun_xiao的博客
05-14 436
问题 canal提供了从MySQL订阅数据组件，并默认支持了同步到hbase等适配器，但是没有支持直接同步到Phoenix的功能，如果是Phoenix的表，只同步到hbase会有二级索引以及存在字段编码的问题，为此需要一个从MySQL直接同步到Phoenix的适配器。 解决方案 开发canal-phoenix-adapter用于解决canal同步到Phoenix的问题。 可以直接下载编译好的适配器https://github.com/wenjunxiao/canal-phoenix-adapter/rele
HBase之一月速成：整合phoenix
weixin_46490924的博客
05-19 426
HBase整合phoenix+rowkey设计原则+避免数据热点＋二级索引
hbase二级索引es和phoenix
06-06
HBase二级索引是指在HBase中建立的索引，用于加速数据的查询和检索。ES和Phoenix都可以作为HBase的二级索引，但它们的实现方式和使用场景略有不同。 ES（Elasticsearch）是一种基于Lucene的搜索引擎，可以快速地索引和搜索大量的数据。在HBase中使用ES作为二级索引，可以将HBase中的数据同步到ES中，然后通过ES的搜索功能来查询数据。这种方式适用于需要进行全文搜索或复杂查询的场景。 Phoenix是一种基于SQL的查询引擎，可以将HBase中的数据映射为关系型数据表，并支持SQL语句的查询。在HBase中使用Phoenix作为二级索引，可以通过Phoenix的查询语句来查询HBase中的数据。这种方式适用于需要进行简单的SQL查询的场景。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

星欲冷hx

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值