hadoop
文章平均质量分 81
kukuyaoye
这个作者很懒,什么都没留下…
展开
-
Hadoop Core 学习笔记(一) SequenceFile文件写入和读取Writable数据
本博客属原创文章,转载请注明出处:http://guoyunsky.iteye.com/blog/1265944 刚接触Hadoop时,对SequenceFile和Writable还产生了一点联想,以为是什么神奇的东西.后来也明白,不过就是自己IO的一些协议,用于自己的输入输出.这里介绍下如何从sequence file中读出和写入Writable数据. Writ转载 2015-01-08 21:47:52 · 602 阅读 · 0 评论 -
Hadoop Core 学习笔记(二) lzo文件的写入和读取
zhuanzi :http://guoyunsky.iteye.com/blog/1266226 压缩是绕不开的话题,因为当今很多程序的压力还是在IO.特别是Hadoop这种分布式存储和运算框架,单台机器的IO,网络通信IO都是压力和挑战.关于Hadoop为什么要用Lzo来压缩而没有选用传统的压缩方法,我这里不再阐述.相关资料很多.有兴趣的可以查看cloudera这篇博客:http:转载 2015-01-08 22:02:36 · 1068 阅读 · 1 评论