php连接impala,Impala ODBC/JDBC性能不佳 - 与NN相比,远程服务器的行提取速度很慢

没有提及使用的JDBC连接器版本。

集群中可能有多台运行Impala守护程序的服务器,请在您的JDBC连接URL中分别更改 并验证这些服务器上的性能。

最新的JDBC驱动程序,相应的蜂巢0.13,提供了黑斑羚查询 显着的性能改进,返回 大的结果集。 Impala 2.0及更高版本与Hive 0.13驱动程序兼容。如果已安装旧版JDBC驱动程序并运行Impala 2.0或更高版本,请考虑升级到最新的 Hive JDBC驱动程序,以获得JDBC应用程序的最佳性能。

由于您使用的是远程计算机访问黑斑羚,请参阅本信息也:

如果您在CDH 集群外部主机使用支持JDBC的应用程序,您不能使用CDH在非CDH 主机上安装过程。在至少一个CDH主机上安装JDBC驱动程序....然后, 将JAR文件下载到将使用JDBC的每个客户端计算机,并使用 Impala ...

如果不提前完成,请更新JDBC连接器,并确保所有impalad实例正在运行。 然后比较ODBC和JDBC的性能结果。

更新1:

作为参考建议,尝试添加下面的参数到JDBC连接字符串并检查日志:

; LogLevel = 6,LOGPATH = /路径/到/目录

SET disable_codegen = TRUE;

更新2:我想你已经有这些下文提到的罐子中的至少一个黑斑羚服务器群集中。

commons-logging-X.X.X.jar

hadoop-common.jar

hive-common-X.XX.X-cdhX.X.X.jar

hive-jdbc-X.XX.X-cdhX.X.X.jar

hive-metastore-X.XX.X-cdhX.X.X.jar

hive-service-X.XX.X-cdhX.X.X.jar

httpclient-X.X.X.jar

httpcore-X.X.X.jar

libfb303-X.X.X.jar

libthrift-X.X.X.jar

log4j-X.X.XX.jar

slf4j-api-X.X.X.jar

slf4j-logXjXX-X.X.X.jar

请将这些jar复制到您尝试通过JDBC代码访问Impala的机器。确保这些罐子在您的类路径中并执行JDBC代码。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值