Hadoop
apple001100
这个作者很懒,什么都没留下…
展开
-
hive小文件合并问题
背景Hive query将运算好的数据写回hdfs(比如insert into语句),有时候会产生大量的小文件,如果不采用CombineHiveInputFormat就对这些小文件进行操作的话会产生大量的map task,耗费大量集群资源,而且小文件过多会对namenode造成很大压力。所以Hive在正常job执行完之后,会起一个conditional task,来判断是否需要合并小文件,转载 2017-03-16 12:29:55 · 1707 阅读 · 0 评论 -
六大数据采集工具
http://blog.csdn.net/yeruby/article/details/51003445转载 2017-05-22 17:17:46 · 12392 阅读 · 0 评论 -
ambari安装hadoop
http://www.jianshu.com/p/6e59df5f2461转载 2017-07-10 14:47:09 · 240 阅读 · 0 评论 -
hadoop2.7单机搭建
http://www.cnblogs.com/woxpp/p/6248370.html转载 2017-08-21 16:28:26 · 216 阅读 · 0 评论 -
hadoop系列教程
https://blog.csdn.net/nsrainbow/article/details/36396007转载 2018-04-18 16:08:00 · 712 阅读 · 0 评论 -
史上最详细的Hadoop环境搭建
https://blog.csdn.net/hliq5399/article/details/78193113转载 2018-05-02 13:45:33 · 279 阅读 · 0 评论 -
CDH认证考试
https://www.cnblogs.com/davidzhu/category/1344548.html转载 2019-04-28 10:47:21 · 2493 阅读 · 0 评论