cdh phoenix java api_CDH安装phoenix

最新推荐文章于 2023-11-29 16:22:50 发布

小号一枚

最新推荐文章于 2023-11-29 16:22:50 发布

阅读量350

点赞数

文章标签： cdh phoenix java api

本文链接：https://blog.csdn.net/weixin_31893893/article/details/114513931

版权

一、准备文件

https://archive.cloudera.com/phoenix/6.2.0/csd/PHOENIX-1.0.jar

https://archive.cloudera.com/phoenix/6.2.0/parcels/PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel

https://archive.cloudera.com/phoenix/6.2.0/parcels/PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel.sha

https://archive.cloudera.com/phoenix/6.2.0/parcels/manifest.json

[root@node01 phoenix]# pwd

/var/www/html/phoenix

[root@node01 phoenix]# ll

total 392808

-rw-r--r--. 1 root root 2478 Jul 31 16:09 manifest.json

-rw-r--r--. 1 root root 5306 Aug 1 2019 PHOENIX-1.0.jar

-rw-r--r--. 1 root root 402216960 Jul 31 16:12 PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel

-rw-r--r--. 1 root root 41 Jul 31 16:07 PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcel.sha

二、配置安装

将文件放入 /opt/cloudera/csd 目录下

[root@node01 csd]# mv /var/www/html/phoenix/PHOENIX-1.0.jar .

[root@node01 csd]# ll

total 8

-rw-r--r--. 1 root root 5306 Aug 1 2019 PHOENIX-1.0.jar

重启 cloudera-scm-server 服务

[root@node01 ~]# systemctl restart cloudera-scm-server

打开CM 添加的服务

0d96a61946d2

image.png

[root@node01 html]# python -m SimpleHTTPServer 8900

Serving HTTP on 0.0.0.0 port 8900 ...

0d96a61946d2

image.png

0d96a61946d2

image.png

在管理页面中部署hbase客户端配置

0d96a61946d2

image.png

0d96a61946d2

image.png

[root@node02 conf]# pwd

/etc/hbase/conf

[root@node02 conf]# vim hbase-site.xml

phoenix.schema.isNamespaceMappingEnabled

true

phoenix.schema.mapSystemTablesToNamespace

true

Phoenix 表映射

Phoenix 表和 HBase 表的关系

默认情况下, 直接在 HBase 中创建的表通过 Phoenix 是查不到

hbase-shell

hbase(main):009:0> create 'test','name','company'

Created table test

Took 0.7872 seconds

=> Hbase::Table - test

hbase(main):010:0> list

TABLE

SYSTEM:CATALOG

SYSTEM:FUNCTION

SYSTEM:LOG

SYSTEM:MUTEX

SYSTEM:SEQUENCE

SYSTEM:STATS

test

7 row(s)

Took 0.0066 seconds

=> ["SYSTEM:CATALOG", "SYSTEM:FUNCTION", "SYSTEM:LOG", "SYSTEM:MUTEX", "SYSTEM:SEQUENCE", "SYSTEM:STATS", "test"]

phoenix

0: jdbc:phoenix:node03,node04,node05:2181> !tables

+------------+--------------+-------------+---------------+----------+------------+----------------------------+-----------------+--------------+-----------------+---------------+---------------+----------+

如果要在 Phoenix 中操作直接在 HBase 中创建的表，则需要在 Phoenix 中进行表的映射。

映射方式有两种： 1. 视图映射 2. 表映射

视图映射

Phoenix 创建的视图是只读的, 所以只能用来查询, 无法通过视图对数据进行修改等操作

在Phoenix上创建test表视图

0: jdbc:phoenix:node03,node04,node05:2181> create view "test" (empid varchar primary key,"name"."firstname" varchar,"name"."lastname" varchar,"company"."name" varchar,"company"."address" varchar);

No rows affected (6.491 seconds)

0: jdbc:phoenix:node03,node04,node05:2181> !tables

hbase shell 上插入数据

hbase(main):006:0> put 'test','001','name:firtname','hello'

Took 0.1830 seconds

hbase(main):007:0> put 'test','001','name:firstname','hello'

Took 0.0244 seconds

hbase(main):008:0> put 'test','001','name:name','hello phonix'

Took 0.0071 seconds

hbase(main):009:0> put 'test','001','company:name','saleforce'

Took 0.0133 seconds

在Phoenix上查看视图test

0: jdbc:phoenix:node03,node04,node05:2181> select * from "test";

+--------+------------+-----------+------------+----------+

+--------+------------+-----------+------------+----------+

+--------+------------+-----------+------------+----------+

1 row selected (0.05 seconds)

表映射

使用 Phoenix创建对 HBase 的表映射，有两种方法：

2.1. 当 HBase 中已经存在表时，可以以类似创建视图的方式创建关联表，只需要将create view改为create table即可。在 HBase 中创建表:

hbase(main):010:0> create 'test1', 'name', 'company'

Created table test1

0: jdbc:phoenix:node03,node04,node05:2181> create table "test1"

(empid varchar primary key,

"name"."firstname" varchar,

"name"."lastname" varchar,

"company"."name" varchar,

"company"."address" varchar)

column_encoded_bytes=0;

说明: 添加这个参数之后, 在 HBase 中添加的数据在 Phoenix 中也可以查询到. 否则 HBase 中添加的数据在 Phoenix 中查询不到

hbase(main):015:0> put 'test1','001','name:firstname','test1'

Took 0.0062 seconds

0: jdbc:phoenix:node03,node04,node05:2181> select * from "test1";

+--------+------------+-----------+-------+----------+

+--------+------------+-----------+-------+----------+

| 001 | test1 | | | |

+--------+------------+-----------+-------+----------+

2.2 当 HBase 中不存在表时，可以直接使用create table指令创建需要的表,系统将会自动在 Phoenix 和 HBase 中创建 person_infomation 的表，并会根据指令内的参数对表结构进行初始化。

2.3 视图映射和表映射的对比与总结

相比于直接创建映射表，视图的查询效率会低，原因是：创建映射表的时候，Phoenix 会在表中创建一些空的键值对，这些空键值对的存在可以用来提高查询效率。

使用create table创建的关联表，如果对表进行了修改，源数据也会改变，同时如果关联表被删除，源表也会被删除。但是视图就不会，如果删除视图，源数据不会发生改变。

Phoenix 图形化工具: Squirrel

选择 java 打开方式

一路 next 安装

配置 Squirrel

4.1 复制 jar 包

复制 Phoenix 的 phoenix-4.14.2-HBase-1.3-client.jar 到 Squirrel 的安装目录下: 安装目录\lib

4.2 启动 Squirrel

4.3 配置 Driver

0d96a61946d2

Snipaste_2020-08-04_17-48-22.png

Name=Phoenix

Example URL = jdbc:phoenix:node03,node04,node05:2181

JavaClass Path phoenix-4.14.2-HBase-1.3-client.jar

Class Name = org.apache.phoenix.jdbc.PhoenixDriver

4.4 配置Alias

0d96a61946d2

Snipaste_2020-08-04_17-50-57.png

squirrel 连接Phoenix遇到的问题

error

dev_phoenix: ERROR 2007 (INT09): Outdated jars. Newer Phoenix clients can't communicate with older Phoenix servers. The following servers require an updated phoenix-[version]-server.jar to be put in the classpath of HBase: region=SYSTEM:CATALOG,,1596513241693.d18d6a556415cdf92d4e5220871f43f2., hostname=node02,16020,1596512982029, seqNum=2

class java.sql.SQLException: ERROR 2007 (INT09): Outdated jars. Newer Phoenix clients can't communicate with older Phoenix servers. The following servers require an updated phoenix-[version]-server.jar to be put in the classpath of HBase: region=SYSTEM:CATALOG,,1596513241693.d18d6a556415cdf92d4e5220871f43f2., hostname=node02,16020,1596512982029, seqNum=2

分析原因

Phoenix 版本5.0-Hbase-2.0 跟客户端driver phoenix-4.14.2-HBase-1.3 没对应上

解决方法

下载跟Phoenix 对应的版本，解压获取phoenix-5.0.0-HBase-2.0-client.jar 替代Squirrel 目录lib文件夹中的 phoenix-4.14.2-HBase-1.3-client.jar

http://phoenix.apache.org/download.html

error

test: ERROR 726 (43M10): Inconsistent namespace mapping properties. Cannot initiate connection as SYSTEM:CATALOG is found but client does not have phoenix.schema.isNamespaceMappingEnabled enabled

class java.sql.SQLException: ERROR 726 (43M10): Inconsistent namespace mapping properties. Cannot initiate connection as SYSTEM:CATALOG is found but client does not have phoenix.schema.isNamespaceMappingEnabled enabled

分析原因

缺少isNamespaceMappingEnabled 配置

解决方法

使用WinRAR 打开 phoenix-5.0.0-HBase-2.0-client.jar

0d96a61946d2

image.png

获取和hbase-default.xml ，添加配置

0d96a61946d2

image.png

phoenix.schema.isNamespaceMappingEnabled

true

phoenix.schema.mapSystemTablesToNamespace

true

把hbase-default.xml 移动到 phoenix-5.0.0-HBase-2.0-client.jar 覆盖配置

重新squirrel连接测试成功

0d96a61946d2

image.png

小号一枚

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
cdh phoenix java api_CDH安装phoenix

一、准备文件https://archive.cloudera.com/phoenix/6.2.0/csd/PHOENIX-1.0.jarhttps://archive.cloudera.com/phoenix/6.2.0/parcels/PHOENIX-5.0.0-cdh6.2.0.p0.1308267-el7.parcelhttps://archive.cloudera.com/phoenix/...
复制链接

扫一扫

cdh phoenix java api_CDH安装phoenix

“相关推荐”对你有帮助么？