![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop源码
文章平均质量分 84
ghuilee
这个作者很懒,什么都没留下…
展开
-
WordCount 分析
学编程第一个肯定是hello world,Hadoop也不例外,它的hello world就是Wordcount,单词统计例子package example;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import or原创 2015-04-20 21:52:18 · 445 阅读 · 0 评论 -
Mapper类详解
public class Mapper { public class Context extends MapContext { public Context(Configuration conf, TaskAttemptID taskid, RecordReader reader, RecordWr原创 2015-05-14 01:36:35 · 2226 阅读 · 0 评论 -
IntWritable详解
1.Hadoop数据类型如下图: 由上图的Writable层次结构图可以看到绝大多数的数据类型都实现了Writable、WritableComparable接口,在此先分析一下这两个接口情况。自顶下下逐步分析。Writable接口的定义如下:package org.apache.hadoop.io;import java.io.DataOutput;im原创 2015-05-14 00:42:46 · 25794 阅读 · 1 评论 -
Configuration类详解
1.configuration类简介 Hadoop没有使用java.util.Properties管理配置文件,也没有使用Apache Jakarta Commons Configuration管理配置文件,而是使用了一套独有的配置文件管理系统,并提供自己的API,即使用org.apache.hadoop.conf.Configuration处理配置信息。这个类是作业的配置信息类,任何作用原创 2015-05-16 20:30:23 · 17465 阅读 · 0 评论