hadoop
canglingye
这个作者很懒,什么都没留下…
展开
-
Hadoop学习知识点记录
1、实现map和reduce函数要采用继承的方式2、一定咬住以,reduce的函数声明是reduce(KEY key,Iterable values,Context context),要注意,是Iterable,而不是Iterator原创 2014-03-23 10:22:44 · 522 阅读 · 0 评论 -
hadoop自定义输入格
关于hadoop的自定义输入格式:之前在网上找过很多教程,但是大多数都是在不支持分片的前提下进行自定义输入。本文实现了一种在能够分片的基础上支持自定义输入格式的方法。先贴代码:import java.io.IOException;import org.apache.commons.logging.Log;import org.apache.commons.logging.LogF原创 2014-03-23 19:20:50 · 1621 阅读 · 1 评论 -
在windows基于Eclipse编写hadoop时,遇到的 WARN util.NativeCodeLoader问题
问题全文如下:原创 2014-09-14 10:53:56 · 1705 阅读 · 0 评论 -
Hadoop的分布式缓存DistributedCache使用方法
本人hadoop使用环境:在本机用原创 2014-09-14 20:36:02 · 4374 阅读 · 3 评论