![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Hive
Hive 学习
盛夏光年hs
不写,就无法思考 -- 卢曼
展开
-
Hive SQL触发MR的情况
Hive是否触发作业跟hive.fetch.task.conversion这个参数有关参数分类:noneminimalmore(默认)可以在hive-default.xml.template 中查看测试语句:desc student;select * from student;select * from student where id in (“1”, “3”);select count(1) from student;select user, count(1) as原创 2020-11-30 00:32:20 · 893 阅读 · 0 评论 -
Hive 异常,长期更新帖
问题:进入安全模式了 Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /tmp/hive/root/8de73222-3958-4810-a179-19b0ba64fddd. ...原创 2019-09-05 11:16:16 · 117 阅读 · 0 评论 -
Hive中的日期函数使用总结
论做什么数据,都离不开日期函数的使用。这里转载一下Hive的日期函数的使用,写的相当完整。1.日期函数UNIX时间戳转日期函数: from_unixtime语法:from_unixtime(bigint unixtime[, string format])返回值: string说明: 转化UNIX时间戳(从1970-01-01 00:00:00 UTC到指定时间的秒数)到当前时区的时间格式...转载 2019-09-05 14:47:22 · 708 阅读 · 0 评论 -
Hive建表以后不让数据移动的方法
需求和遇到的问题现在手里要做一些数据统计,本来使用的是Ignite,但是发现挺慢的,可能是我的本本配置太低了,执行一条语句得很久.所以还是使用hive来进行统计.但是在加载数据的时候总是会出现上传的数数据被移动.看了很多博客,也算知道了原因,记录一下采坑的过程解决方式:两种情况数据如果在本地,直接load的时候加上local关键字数据如果在hdfs 上在创建表的时候指定location "...原创 2019-09-05 18:40:00 · 686 阅读 · 0 评论