chenxia5645-CSDN博客

埃拉托斯特尼筛法，简称埃氏筛或爱氏筛，是一种由希腊数学家埃拉托斯特尼所提出的一种简单检定素数的算法。要得到自然数n以内的全部素数，必须把不大于根号n的所有素数的倍数剔除，剩下的就是素数。给出要筛数值的范围n，找出以内的素数。先用2去筛，即把2留下，把2的倍数剔除掉；再用下一个质数，也...

2016-04-13 16:12:00 113

在这儿做个记录吧 org.apache.hadoop.io.file.tfile.TFile @Public @Evolving ATFileisacontainerofkey-valuepairs.Bothkeysandvalues...

2016-04-13 16:12:00 105

通过上一篇的讲述，我们知道hadoop中的Text类，跟java中的String类很相似，在其定义的方法上，也多有相近之处，当然，由于用途、UTF编码的不同，两者之间还是有很大的区别。下面要讲实例除了测试Text的方法之外，着重跟java.lang.String进行比较。 1、首先...

2016-04-13 16:12:00 147

写操作根据上一篇的介绍，在hadoop2.x之后，hadoop中的SequenceFile.Writer将会逐渐摒弃大量的createWriter（）重载方法，而整合为更为简洁的createWriter()方法，除了配置参数外，其他的参数统统使用SequenceFile.Wri...

2016-04-13 16:12:00 97

先来看下类图（hadoop2.7.1）：对照类图，对每一种压缩算法做个简单介绍： DeflateCodec（DEFLATE） hadoop2.7.1中实际上就是DefaultCodec。它同时使用了LZ77算法与哈夫曼编码（Huffman Coding）的...

2016-04-13 16:12:00 72

有的小伙伴在问我如何在windows下搭建一个eclipse的hadoop源码阅读环境，今天就以hadoop2.7.2为例，简单介绍下如何搭建。环境及工具如下： 1、系统：windows7 2、eclipse版本：eclipse-jee-mars-1-win32 3、jd...

2016-04-13 16:12:00 77

源码： package test1.string;import java.util.ArrayList;import java.util.List;public class Split { public static void main(String[] args) { ...

2016-04-13 16:12:00 94

首先先引入hadoop2.7.1中的一个工具类GenericsUtil，顾名思义，是用来处理java泛型的一个工具类，这个类很简单，但很实用，不多说，直接上源码： package org.apache.hadoop.util;import java.lang.reflect.Arra...

2016-04-13 16:12:00 92

先来看下org.apache.hadoop.io.serializer的类图（hadoop2.7.1）：由类图看：接口三个： 1、Deserializer：定义反序列化接口； 2、Serializer：定义序列化接口； 3、Serialization：定义了一系列和序列化相...

2016-04-13 16:12:00 134

用到的开源工具包：hamcrest，junit IDE：MyEclipse 2013 SR1 用到的工具： 1、String java.lang.String.format(Locale l,String format,Object... args) 使用指定的语言环境...

2016-04-13 16:12:00 109

MapFile 是排序后的SequenceFile，MapFile由两部分组成，分别是data和index。 index 文件的数据索引，主要记录了每个Record的key值，以及该Record在文件中的偏移位置。在MapFile被访问的时候,索引文件会被加载到内存，通...

2016-04-13 16:12:00 149