Hive
Little-D
滴水穿石,坚持的人才能创造奇迹。。。
展开
-
hive sql语句转换成mapreduce
转:https://www.cnblogs.com/yaojingang/p/5446310.html 1.hive是什么? 2.MapReduce框架实现SQL基本操作的原理是什么? 3.Hive怎样实现SQL的词法和语法解析? 连接:http://www.aboutyun.com/thread-20461-1-1.html Hive是基于Hadoop的一个数据仓库系统,在各大公司都有...转载 2018-12-06 15:10:07 · 952 阅读 · 1 评论 -
Hive的基本操作和一些注意事项
转:https://www.cnblogs.com/smartloli/p/4354291.html 1.概述 来介绍Hive的基本操作和一些注意事项。 2.基本操作 2.1Create Table 2.1.1介绍 CREATE TABLE 创建一个指定名字的表。如果相同名字的表已经存在,则抛出异常;用户可以用 IF NOT EXIST 选项来忽略这个异常。 EXTERN...转载 2018-12-06 15:13:22 · 420 阅读 · 0 评论 -
Hive性能优化
1.概述 Hive优化介绍,转:http://www.cnblogs.com/smartloli/p/4356660.html 2.介绍 首先,我们来看看Hadoop的计算框架特性,在此特性下会衍生哪些问题? 数据量大不是问题,数据倾斜是个问题。 jobs数比较多的作业运行效率相对比较低,比如即使有几百行的表,如果多次关联多次汇总,产生十几个jobs,耗时很长。原因是map re...转载 2018-12-06 15:17:47 · 142 阅读 · 0 评论 -
Hive-数据仓库工具,特性介绍
一、Hive的存储 Hive是基于Hadoop分布式文件系统的,它的数据存储在HDFS中。Hive本身是没有专门的数据存储格式,也没有为数据建立索引,只需要在创建表的时候告诉Hive数据中的列分隔符和行分隔符,Hive就可以解析数据。所以往Hive表里面导入数据只是简单的将数据移动到表所在的目录中。 数据组织方式: Table:每个表存储在HDFS上的一个目录下 Pa...原创 2018-12-06 20:32:54 · 1333 阅读 · 0 评论