Hive学习随笔
CatherineHuangTT
这个作者很懒,什么都没留下…
展开
-
Hive的概念
1.Hive的概念 Hive 由Facebook 实现并开源, 基于Hadoop 的一个数据仓库工具,可以将结构化的数据映射为一张数据库表,并提供HQL(Hive SQL)查询功能, 底层数据是存储在HDFS 上。 Hive的本质是将 HQL 语句转换为 MapReduce 任务运行,使不熟悉MapReduce 的用户很方便地利用HQL进行数据转载 2017-11-06 11:24:00 · 1032 阅读 · 0 评论 -
Hive中的命令
quit; exit;当我们在CLI或者Beeline下,我们可以用quit或者exit命令来退出交互式的shell。set;在交互式shell中输入 上面的命令可以查看用户和Hive重写的配置文件的变量;set =在交互式shell中设置参数,set mapred.reduce.tasks=32;这里具体列举下参数配置的三种方式:(1)在Hive的配置文件hive-site翻译 2017-12-01 11:48:35 · 3894 阅读 · 0 评论 -
Hive调优篇
1.java heap space异常如果仅设置set mapred.map.child.java.opts=-Xmx2048m;(默认值:mapred.map.child.java.opts=-Djava.net.preferIPv4Stack=true -Xmx1610612736)set mapred.reduce.child.java.opts=-Xmx2048m;(默认值:mapre...原创 2018-04-13 10:30:49 · 654 阅读 · 0 评论
分享