impala-3.2.0-cdh6.3 + kudu-1.10.0-cdh6.3 创建kudu内部表的时候会报异常 “ERROR: IllegalArgumentException: null”
解决:这个版本的impala 创建kudu表需要用到HMS(Hive MetaStore Server),所以impala的hive-site.xml文件里要配上hive.metastore.uris
impala wiki文档地址(好东西多多)
https://cwiki.apache.org/confluence/display/IMPALA/Building+Impala
impala 报/tmp/impala-scratch 目录找不到错误
当impala做大量的排序,聚合,join查询的时候会在–scratch_dirs配置指定的目录下创建临时文件,默认的目录就是/tmp/impala-scratch 。
这个问题的解决:
创建一个目录,赋予读写权限,把–scratch_dirs配置修改为这个目录。重启impala即可。
impala有专门的测试集吗?
可以用tcp-ds测试,参考
https://github.com/cloudera/impala-tpcds-kit
https://blog.csdn.net/qq_36096641/article/details/90401121
impala集成hbase后查询hbase表报错
报错信息
AnalysisException: Failed to load metadata for table: 'customer_hbase' CAUSED BY: TableLoadingException: Failed to load metadata for HBase table: customer_hbase CAUSED BY: IOException: java.lang.reflect.InvocationTargetException CAUSED BY: InvocationTargetException: null CAUSED BY: NoClassDefFoundError: io/netty/channel/EventLoopGroup CAUSED BY: ClassNotFoundException: io.netty.channel.EventLoopGroup
解决方法
用hbaselib下的nettyjar包 HBASE_HOME/lib/netty-all-4.0.23.Final.jar 替换impala lib目录下的netty jar包
impala的时区问题
问题分析
默认impala配置不是中国的时区,所以在用from_unixtime的时候,有八个小时的时间差。
问题解决
vim /etc/default/impala 加入如下配置
-use_local_tz_for_unix_timestamp_conversions=true
修改后如图所示
最后重启impala生效配置