![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Impala
撸码小丑
BUG制造商
展开
-
Impala负载均衡方案
概述Impala分为是三个组件,statestored/catalogd和impalad,其中statestored和catalogd是单点的,没有高可用的需求,因为这两个实例是无状态的,本身不存储任何数据,例如catalogd的数据存储在第三方数据库(例如mysql中),statestore的数据全都存储在内存中,可以通过简单的主备的方式来实现高可用,本文最后会提到。正常情况下只有maste...转载 2018-08-21 16:11:28 · 433 阅读 · 0 评论 -
impala常用日期函数
增加月份add_months(timestamp date, int months)add_months(timestamp date, bigint months)Return type: timestampusage:add_months(now(),1)增加日期adddate(timestamp startdate, int days), adddate(timestamp s...转载 2018-08-21 15:50:39 · 19221 阅读 · 0 评论 -
Impala时区问题
默认impala配置不是中国的时区,所以在用from_unixtime的时候,有八个小时的时间差。解决方案1: impala启动时加 -use_local_tz_for_unix_timestamp_conversions=true。 在cdh里面,impala->配置->mpala Daemo ->Impala Daemon 命令行参数高级配置代码段(安全阀) ...原创 2018-08-21 15:54:39 · 5185 阅读 · 4 评论 -
impala-shell命令行参数
转发 https://my.oschina.net/weiqingbin/blog/190929你可以在启动 impala-shell 时设置以下选项,用于修改命令执行环境。 Note:这些选项与 impalad 守护进程的配置选项不同。关于 impalad 选项,参见 Modifying Impala Startup Options。 选项 描述 ...转载 2018-09-05 17:58:49 · 2575 阅读 · 0 评论 -
impala使用sql笔记
#修改分隔符alter table firstround.person_aaa_crime_criminalperson1 set SERDEPROPERTIES('field.delim'='\001'); #查看建表语句show CREATE TABLE firstround.banklog_decrypt#修改字段类型ALTER TABLE data_market.last_p...原创 2018-09-11 20:40:03 · 6278 阅读 · 0 评论 -
Spark算子里面使用JDBC连接Impala的时候报错: ExecuteStatement failed: out of sequence response
Caused by: org.apache.thrift.TApplicationException: ExecuteStatement failed: out of sequence response 到IVE-6893] out of sequence error in HiveMetastore server - ASF JIRAhttps://issues.apache.org/...原创 2018-09-20 10:57:31 · 8507 阅读 · 0 评论 -
Cloudera Impala 常见问题(翻译)
Cloudera Impala 常见问题下面是 Clouder Impala 产品常见问题的目录。继续阅读:Trying Impala Impala System Requirements Supported and Unsupported Functionality In Impala How do I? Impala Performance Impala Use Case...转载 2018-10-19 11:02:31 · 3461 阅读 · 0 评论 -
使用Impala合并小文件
1.文档编写目的 Fayson在前面的文章《如何在Hadoop中处理小文件》里面介绍了多种处理方式。在Impala表中使用小文件也会降低Impala和HDFS的性能,本篇文章Fayson主要介绍如何使用Impala合并小文件。 内容概述 1.环境准备2.Impala合并小文件实现3.验证小文件是否合并 测试环境说明 1.CM5.15.0和CDH5.1...转载 2018-10-23 16:00:45 · 2460 阅读 · 0 评论