![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 69
bigdata121
学习学习再学习 实践实践再实践 总结总结再总结
展开
-
Hive 外部表 分区表
之前主要研究oracle与mysql,觉得hive其实就是一种数据仓库的框架,也没有太多另类,所以主要精力都在研究hadoop,hbase,sqoop,mahout,最近稍微用心看了下hive,其实hive还是比我想象中好用的多,心里有点点暗爽,不论是与hadoop的衔接,还是在对外查询分析,定期hsql生成报表方面,都非常方便,可以不用mapreduce,直接用hive生成报表。真是方便。原创 2015-06-12 14:17:33 · 2636 阅读 · 0 评论 -
MapReduce 单元测试工具 MRUnit 使用
首先下载MRUnitjar包,地址:https://repository.apache.org/content/repositories/releases/org/apache/mrunit/mrunit/,选择和你使用的hadoop对应版本,将jar包导入项目。MRUnit的使用很简单,流程如下:1:根据业务要求编写Map类,Reduce类2:编写测试类。3:运行测试,得原创 2016-07-27 14:53:30 · 3333 阅读 · 0 评论