hive
文章平均质量分 88
技术小事
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
container is running 9441280B beyond the ‘PHYSICAL‘ memory limit问题处理
报错: [2021-08-09 16:10:02.211]Container [pid=92799,containerID=container_e01_1625131199794_0236_01_000005] is running 9441280B beyond the ‘PHYSICAL’ memory limit. Current usage: 1.0 GB of 1 GB physical memory used; 2.5 GB of 2.1 GB virtual memory used. Kil原创 2021-08-09 17:08:20 · 834 阅读 · 0 评论 -
impala读不到hive导入的数据(或者表找不到)
处理办法: 重新加载所有库中的所有表 INVALIDATE METADATA 重新加载指定的某个表 INVALIDATE METADATA 表名称 原因主要是使用hive建表时,表的metadata没有同步,数据及索引也没有同步导致的数据查不到 ...原创 2020-09-24 14:09:04 · 1165 阅读 · 0 评论 -
hive表数据去重
根据user name查重 SELECT test_user_name, count(*) c from default.test GROUP BY test_user_name HAVING c> 1; 根据id查重 SELECT id ,count(*) c FROM default.test GROUP BY id HAVING c >1; 去重:注意min用法,取相同数据的最小id,去重的重点 INSERT OVERWRITE table default.test partition(t原创 2020-06-03 17:33:42 · 984 阅读 · 0 评论 -
Could not initialize class org.xerial.snappy.Snappy
注意hue连接的是hiveserver2服务,查看其所在服务器,重新挂载服务器的/tmp目录,添加可执行exec权限即可 sudo mount /tmp -o remount,exec snappy默认使用/tmp做为数据临时目录 ...原创 2020-04-29 15:56:53 · 1384 阅读 · 0 评论 -
hive删除数据insert overwrite
hive 删除数据写法 insert overwrite table t_card_info select * from t_card_info where 1=2; insert overwrite table w原创 2020-02-19 14:40:17 · 3993 阅读 · 1 评论 -
org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode
hive 使用问题 hive select count(*) from tb 报错 org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="/user":hdfs:supergroup:drwxr-xr-x org.apache.hadoop.s...原创 2020-02-19 14:34:05 · 1239 阅读 · 2 评论
分享