2013年12月_batilei

12月 11月 10月 09月 08月 07月 05月 03月

转载 Jackson Streaming API To Read And Write JSON

Jackson supports>Streaming APIs document for detail explanation on the benefit of using streaming API.Jackson’s streaming processing is high-performance, fast and convenient, but it’s also diffi

2013-12-26 05:10:04 1148

转载 Hadoop集群配置 - 于Ubuntu上使用VMare

转载自http://blog.csdn.net/hguisu/article/details/7237395，不确定这个是不是原作，但是anyway感谢原作者。。1 先决条件确保在你集群中的每个节点上都安装了所有必需软件：sun-JDK ，ssh，HadoopJavaTM1.5.x，必须安装，建议选择Sun公司发行的Java版本。ssh 必须安装并

2013-12-14 12:06:20 898

转载 Hadoop全排序中的Sampler采样器

在Partitioner组件的设计与实现中，我们已经了解过Partitioner组件的其中一个和全排序相关的实现类——TotalOrderPartitioner。我们知道，在Hadoop中，最终的处理结果集中的数据，除非就由一个Reduce Task处理，否则结果数据集只是局部有序而非全排序。这节我们来学习在Hadoop中进行全排序操作中除了TotalO

2013-12-12 23:42:12 1348

原创 Eclipse为Hadoop类设置Javadoc显示

入门时候，能在Eclipse通过javadoc看到hadoop相应函数的文档是非常有帮助的。对于菜鸟不知道怎么设置eclipse中javadoc，下面链接给了很简单的方案。http://stackoverflow.com/questions/11463360/hadoop-documentation-for-eclipse

2013-12-10 07:11:11 1151