- 博客(4)
- 收藏
- 关注
RSS订阅原创 [Hadoop源码解读]（五）MapReduce篇之Writable相关类
[size=large][/size][color=blue] 当要在进程间传递对象或持久化对象的时候，就需要序列化对象成字节流，反之当要将接收到或从磁盘读取的字节流转换为对象，就要进行反序列化。Writable是Hadoop的序列化格式，Hadoop定义了这样一个Writable接口。 [html] view plaincopyprint? 1.public int...
2013-09-02 11:49:06
123
原创 Hadoop Core 学习笔记(一) SequenceFile文件写入和读取Writable数据
[color=red][color=blue] [size=xx-large] 刚接触Hadoop时,对SequenceFile和Writable还产生了一点联想,以为是什么神奇的东西.后来也明白,不过就是自己IO的一些协议,用于自己的输入输出.这里介绍下如何从sequence file中读出和写入Writable数据. Writable类似传输的数据,相对于Java来说等同于对象,只...
2013-09-02 11:14:47
131
原创 hadoop io
从基础的IO包开始阅读。 IO：表示层，将各种数据编码/解码，方便于在网络上传输。 下图是一个大致的结构图，可以看出，大部分的类都是以Writable结 尾的数据结构和基本数据类型。 一、基本数据类型 Hadoop 中，并没有使用java自带的基本类型类（Integer、Float等）而是使用了自己开发的类IntWritable、FloatWritable、Boolea...
2013-09-02 10:57:18
135
原创 MyElicpse自己的注册码
import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; public class MyEclipseGen { private static final String LL = "Decompiling this copyrighted software i...
2013-08-05 09:26:02
619
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人