![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hive
文章平均质量分 57
Java小田
这个作者很懒,什么都没留下…
展开
-
hive临时目录清理
hive临时目录清理原创 2023-03-01 15:27:29 · 1271 阅读 · 0 评论 -
一个Hive curator-client.jar包冲突问题排查解决
java.lang.NoSuchMethodError: org.apache.curator.shaded.com.google.common.util.concurrent.MoreExecutors.sameThreadExecutor()Lorg/apache/curator/shaded/com/google/common/util/concurrent/ListeningExecutorService原创 2022-07-05 10:28:54 · 1787 阅读 · 0 评论 -
审计日志导致hiveserver2内存泄露的问题排查解决
记录一次hiveserver2内存泄露问题排查原创 2022-06-06 10:40:38 · 1057 阅读 · 0 评论 -
spark sql读取不到orc格式hive表数据问题
1、问题在做spark数据对账时,对于部分orc格式的hive表,会有spark sql读取表数据为空的情况排查过程中发现是因为使用了tez作为hive的执行引擎,然后执行insert select union all 时,对应的hdfs数据路径,不是直接存放数据文件,而是先有子目录HIVE_UNION_SUBDIR_x,子目录下再存放数据文件参考文章:https://support.huaweicloud.com/cmpntguide-mrs/mrs_01_2309.htmlhttps://bl原创 2022-03-04 18:37:45 · 7974 阅读 · 0 评论 -
【备忘】统计hive事务表数量
因为一些原因,要清点一下线上hive事务表有多少几千个表一个个去看得累死人灵机一动可以通过元数据来查嘛这里记录一下:#事务表的库名、表名、创建时间SELECT d.`NAME` db_name,t.TBL_NAME,FROM_UNIXTIME(t.CREATE_TIME) create_time FROM `TABLE_PARAMS` tpINNER JOIN TBLS t on tp.TBL_ID=t.TBL_IDINNER JOIN DBS d on t.DB_ID=d.DB_IDWH原创 2022-03-03 16:39:29 · 1726 阅读 · 0 评论