hive+hadoop+mysql
文章平均质量分 78
dalaoadalaoa
这个作者很懒,什么都没留下…
展开
-
基于Hive的hadoop日志的分析及错误排解(eclipse上运行出现错误:Access denied for user ... (using password: YES))
基于Hive的hadoop集群日志的分析及错误排解(eclipse上运行出现错误:Access denied for user 'hivenew'@'172.16.2.36' (using password: YES)); 设计思路:利用hive的方法将hadoop中的指定日志存放在hive表中,然后再把hive表中保存的数据进行筛选后导入mysql数据库(对外可以访问的主机上),以供其他人进行访问。(本文主要是建立过程和执行程序的一些细节展示,包含eclipse和hadoop集群运行程序的情况以及错误排解原创 2015-03-24 11:17:45 · 1772 阅读 · 0 评论 -
Hive的UDAF编程:计算几何平均值
Hive的UDAF编程:计算几何平均值 (1)eclipse上创建Map/Reduce工程,命名为GeoMeanPro,在创建前,先把hive/lib目录下的jar包复制到hadoop/lib目录下面; (2)在创建的工程上添加class,新建包com.hive.geomean.udaf,并在包下建立GeoMean.java; (3)GeoMean.java代码见如下; (4)将工程export出jar包,并命名为geomean.jar,然后上传到/home/hadoop/class目录下; (5)Hive原创 2015-03-23 22:43:44 · 1315 阅读 · 0 评论