Hive
文章平均质量分 70
jinyonglu168
海阔凭鱼跃天高任鸟飞
展开
-
hive第一个字段为null
在hive中创建表后,将准备好的数据导入到该表中,如果第一个字段是int类型时,你通过select * from tablename;查询该表时候,第一个字段返回的是null的.解决方法:如果你出现的问题和上面的一样,很可能是你定义表的第一个字段是int类型,将其该成string类型后就可以了。先给出解决方法,具体原因有待分析。...2014-03-20 23:17:02 · 388 阅读 · 0 评论 -
Spark SQL操作Hive数据库
本次例子通过scala编程实现Spark SQL操作Hive数据库!Hadoop集群搭建:[url]http://kevin12.iteye.com/blog/2273532[/url]Spark集群搭建:[url]http://kevin12.iteye.com/blog/2273532[/url][b]数据准备[/b]在/usr/local/sparkApps/SparkS...原创 2016-04-13 22:37:39 · 1595 阅读 · 0 评论 -
Spark SQL内置函数应用
[b]简单说明[/b] 使用Spark SQL中的内置函数对数据进行分析,Spark SQL API不同的是,DataFrame中的内置函数操作的结果返回一个Column对象,而DataFrame天生就是“A distributed collection of data organized into named columns”,这就为数据的复杂分析建立了坚实的基础并提供了极大的方便性,...原创 2016-04-22 07:00:36 · 407 阅读 · 0 评论 -
Hive1.2.1安装和使用(基于Hadoop2.6.0)
安装hive,这里使用mysql作为hive的metastore;[b]Ubuntu 15.10虚拟机中安装mysql方法请看:[/b][url]http://kevin12.iteye.com/admin/blogs/2280771[/url][b]Hadoop2.6.0集群安装:[/b][url]http://kevin12.iteye.com/blog/2273532[/url]...原创 2016-03-05 20:22:05 · 402 阅读 · 0 评论 -
Hive使用默认数据库derby报错及解决方法
在使用derby数据库时,遇到了很多错误,报错信息和解决方法如下,记录下来:[b]一,配置问题[/b][code="java"]Logging initialized using configuration in jar:file:/usr/local/hive/apache-hive-1.2.1-bin/lib/hive-common-1.2.1.jar!/hive-log4j.prop...原创 2016-03-05 21:19:16 · 1303 阅读 · 0 评论 -
Hive分析搜索引擎的数据(搜狗实验室数据)
搜狗实验室:[url]http://www.sogou.com/labs/resources.html[/url]用户查询日志:[url]http://www.sogou.com/labs/dl/q.html[/url][img]http://dl2.iteye.com/upload/attachment/0115/7437/85656402-5732-3811-8bb3-aadc2e...原创 2016-03-13 12:48:59 · 937 阅读 · 0 评论 -
Spark SQL on hive配置和实战
spark sql 官网:[url]http://spark.apache.org/docs/latest/sql-programming-guide.html#starting-point-sqlcontext[/url]首先要配置好hive,保存元数据到mysql中,参考:[url]http://kevin12.iteye.com/blog/2280777[/url]然后配置S...原创 2016-03-26 18:40:52 · 451 阅读 · 0 评论