![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hive
xiaomin_____
努力~~
展开
-
Hive 安装
1 、下载Hive-0.11.0http://apache.cs.utah.edu/hive/hive-0.11.0/ 2、解压安装 Hive原则上可以安装在集群上的任何一台机器上面,但是考虑到 master节点的负荷比较大,我们选择一台机器性能较好的datanode来安装hive。在我们的集群中选择cloud003来安装hive。另外,在我们的安装中采用M...原创 2016-04-30 17:29:48 · 71 阅读 · 0 评论 -
org.apache.hadoop.hive.ql.exec.MoveTask. org.apache.hadoop.security.AccessContro
Running:load data local inpath '/home/share/a.txt' into table aajava.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec....原创 2017-05-12 10:33:37 · 403 阅读 · 0 评论 -
大数据时代--Hive技术原理解析
本文旨在讲解Hive的运行原理,帮助使用者更好的了解在使用的过程中它做了些什么工作,深入的理解他的工作机制,提高开发人员理论层面的知识。后面会逐渐推出Hive使用、Hbase原理与使用等大数据专题类文章,敬请关注。什么是Hive? Hive是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和...原创 2017-05-12 10:33:21 · 132 阅读 · 0 评论 -
Hive基本原理
一、Hive基本原理 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。 Hive将元数据存储在数...原创 2017-05-12 10:28:13 · 217 阅读 · 0 评论 -
区分 hdfs hbase hive hbase适用场景
摘要: hdfs hbase hive hbase适用场景Hive不想用程序语言开发MapReduce的朋友比如DB们,熟悉SQL的朋友可以使用Hive开离线的进行数据处理与分析工作。注意Hive现在适合在离线下进行数据的操作,就是说不适合在挂在真实的生产环境中进行实时的在线查询或操作,因为一个字“慢”。相反起源于FaceBook,Hive在Hadoop中扮演数据仓库的...原创 2017-05-12 10:28:01 · 456 阅读 · 0 评论 -
User root is not allowed to impersonate anonymous
使用HiveServer2 and Beeline模式运行时,启动好HiveServer后运行beeline -u jdbc:hive2://localhost:10000 -n root 连接server时出现java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.s...原创 2017-05-11 16:49:56 · 146 阅读 · 0 评论 -
Hive的内置服务和hiveserver/hiveserver2的比较
一:Hive的几种内置服务 执行bin/hive --service help 如下: [master@master1 hive]$ bin/hive --service helpls: 无法访问/opt/spark/lib/spark-assembly-*.jar: 没有那个文件或目录Usage ./hive <paramete...原创 2017-05-11 15:07:43 · 462 阅读 · 0 评论 -
Hive四种数据导入方式
Hive四种数据导入方式文档参考:http://blog.csdn.net/lifuxiangcaohui/article/details/40588929Hive的几种常见的数据导入方式这里介绍四种:(1)、从本地文件系统中导入数据到Hive表;(2)、从HDFS上导入数据到Hive表;(3)、从别的表中查询出相应的数据并导入到Hive表中;(4)、在创建表的时候通过从别的表中查询出相应的记录...原创 2017-05-03 18:53:08 · 448 阅读 · 0 评论 -
hive-mysql的关系(Hive集成Mysql作为元数据)
Hive是一个基于Hadoop的数据仓库平台。通过hive,我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言:HQL,能 够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。Hive是Facebook 2008年8月刚开源的一个数据仓库框架,其系统目标与 Pig 有相似之处,但它有一些Pig目前还不支持的机制,比如:更丰富的类型系统、更类似SQL...原创 2016-04-30 17:30:19 · 285 阅读 · 0 评论 -
java使用jdbc调用hive出现The query did not generate a result set!
使用Java通过jdbc调用Hive,执行hive sql时出现如下异常: Exception in thread "main" java.lang.reflect.InvocationTargetException at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.r...原创 2017-05-15 10:02:10 · 278 阅读 · 0 评论