通过phoenix与Hbase整合的方式实现通过jdbc的方式去查询Hbase当中的数据
一、下载Phoenix并安装
- 下载地址:http://archive.apache.org/dist/phoenix/
- 将安装包上传到服务器,解压到指定安装目录即可
cd /temp/soft/
tar -zxvf apache-phoenix-4.14.0-cdh5.14.2-bin.tar.gz -C /temp/install/
二、修改Phoenix配置
- 拷贝jar包:
将Phoenix目录下的phoenix-4.8.2-HBase-1.2-server.jar、phoenix-core-4.8.2-HBase-1.2.jar拷贝到各个 hbase的lib目录下。
cd /temp/install/apache-phoenix-4.14.0-cdh5.14.2-bin
scp phoenix-4.14.0-cdh5.14.2-server.jar phoenix-core-4.14.0-cdh5.14.2.jar node01:/temp/install/hbase-1.2.0-cdh5.14.2/lib/
scp phoenix-4.14.0-cdh5.14.2-server.jar phoenix-core-4.14.0-cdh5.14.2.jar node02:/temp/install/hbase-1.2.0-cdh5.14.2/lib/
scp phoenix-4.14.0-cdh5.14.2-server.jar phoenix-core-4.14.0-cdh5.14.2.jar node03:/temp/install/hbase-1.2.0-cdh5.14.2/lib/
- 修改配置文件:
将HBase的配置文件hbase-site.xml、Hadoop目录下的配置文件core-site.xml、hdfs-site,xml放到Phoenix/bin/下,替换Phoenix原来的配置文件
cp /temp/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/core-site.xml /temp/install/apache-phoenix-4.14.0-cdh5.14.2-bin/bin/
cp /temp/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/hdfs-site.xml /temp/install/apache-phoenix-4.14.0-cdh5.14.2-bin/bin/
cp /temp/install/hbase-1.2.0-cdh5.14.2/conf/hbase-site.xml /temp/install/apache-phoenix-4.14.0-cdh5.14.2-bin/bin/
- 重启HBase集群,使得Phoenix的jar包生效
cd /temp/install/hbase-1.2.0-cdh5.14.2/
bin/stop-hbase.sh
bin/start-hbase.sh
- 验证
在Phoenix/bin下输入命令,进入到命令行,就可以操作Phoenix了
cd /temp/install/apache-phoenix-4.14.0-cdh5.14.2-bin/
bin/sqlline.py node01:2181
三、批处理方式的使用
1. 批处理的方式使用
- 选择Phoenix安装节点node02,创建user_phoenix.sql文件
mkdir -p /temp/install/phoenixsql
cd /temp/install/phoenixsql/
vim user_phoenix.sql
create table if not exists user_phoenix
(
state varchar(10) NOT NULL,
city varchar(20) NOT NULL,
population BIGINT CONSTRAINT my_pk PRIMARY KEY (state, city)
);
- node02执行以下命令,创建user_phoenix.csv数据文件
cd /temp/install/phoenixsql/
vim user_phoenix.csv
NY,New York,8143197
CA,Los Angeles,3844829
IL,Chicago,2842518
TX,Houston,2016582
PA,Philadelphia,1463281
AZ,Phoenix,1461575
TX,San Antonio,1256509
CA,San Diego,1255540
TX,Dallas,1213825
CA,San Jose,912332
- 创建user_phoenix_query.sql文件
cd /temp/install/phoenixsql
vim user_phoenix_query.sql
select state as