![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
圆圆一直在修炼
叫圆圆不是因为我胖
展开
-
Hadoop2.2.0伪分布式环境搭建(附:64位下编译Hadoop-2.2.0过程)
Hadoop2.2.0伪分布式环境搭建: 写在前面:Hadoop2.2.0默认是支持32位的OS,如果想要在64位OS下运行的话,可以通过在64位OS下面编译Hadoop2.2.0来实现,编译的操作步骤在最后面呈现。 1: 操作:下载软件; 文件:Hadoop-2.2.0.tar.gz 步骤: 到http://mirrors.cnnic.cn/apache/hadoo原创 2014-07-17 15:31:01 · 3508 阅读 · 0 评论 -
深度分析如何在Hadoop中控制Map的数量
目录(?)[+] 深度分析如何在Hadoop中控制Map的数量 InputFormat介绍FileInputFormat中影响Map数量的因素如何调整Map的数量减小Map-Reduce job 启动时创建的Mapper数量 输入文件size巨大但不是小文件输入文件数量巨大且都是小文件 增加Map-Reduce job 启动时创建的Mapper数量转载 2014-09-30 11:47:01 · 589 阅读 · 0 评论 -
关于使用 MongoDB Connector for Hadoop 的经验和教训
参考文章: Mongo hadoop connector https://github.com/mongodb/mongo-hadoop wiki https://github.com/mongodb/mongo-hadoop/wiki ppt http://www.slideshare.net/mongodb/hadoop-webinar?from_embed_lead_cta=t原创 2015-06-26 22:37:57 · 7348 阅读 · 6 评论