- 博客(3)
- 收藏
- 关注
原创 spark streaming写入有kerberos的phoenix (hbase)7天后token过期问题
应用情景: 集群的hdfs,hbase,都安装了kerberos,且hadoop版本低于2.9.0,并做了HA高可用 1.spark streaming程序submit时不通过--keytab --principal指定keytab 文件和principal,程序内部不用UserGroupInformation对kerberos认证。 提交程序前,需要在提交客户端服务器klist查看票据是否...
2019-03-21 16:17:08 2555
原创 hive整合phoenix-创建外表注意事项
1.phoenix端创建表并插入一条数据 CREATE TABLE export_hive( id decimal(10, 0) not null, branch_no varchar(6) CONSTRAINT pk PRIMARY KEY (id) ); upsert into export_hive (id,branch_no) values (11111,'33333'); 2.hiv...
2018-08-28 14:00:37 2597 8
原创 PHOENIX查询不到数sparkstreaming写入的数据,hbase可以查到
最近做到一个项目用到了kafka,SparkStreaming,PHOENIX,测试集群发布测试一切正常,但是在生产集群提交的时候发现在PHOENIX用select * 查不到数据,但是在hbase做scan可以查到有很多数据。仔细检查提交命令(使用了--jars指定外部依赖)和集群环境发现测试环境和生产环境版本不一样,测试用的phoenix-core-4.8.0,集群是4.14版本的。 更换依赖...
2018-07-20 15:11:31 1372
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人