hadoop的API Configuration

Configuration

public class Configuration

extends Object

implements Iterable<Map.Entry<String,String>>, Writable

Hadoop没有使用Java.util.Properties管理配置文件，而是使用了一套独有的配置文件管理系统，并提供自己的API，即使用org.apache.hadoop.conf.Configuration处理配置信息。

Hadoop配置文件采用XML格式，由于Hadoop的配置文件都是很小的文件，因此Configuration使用DOM处理XML。DOM的其工作方式是：首先将XML文档一次性装入内存；然后根据文档中定义的元素和属性在内存中创建一个“树形结构”，也就是一个文档对象模型，将文档对象化，文档中每个节点对应着模型中一个对象；然后使用对象提供的编程接口，访问XML文档进而操作XML文档。

在Configuration中，每个属性都是String类型的，但是值类型可能是多种类型，使用Hadoop Configuration进行编程的时候，当使用addResource加载xml中配置文件时，一些属性有可能不会被覆盖掉（注意，final的属性总是不可以覆盖），此时一定要注意。

可以使用Configuration中的toString查看各个xml文件的加载顺序，使用dumpConfiguration打印每个属性的来源及isFinal属性值，如果有两个配置文件，也就是两个资源，如core-default.xml和core-site.xml，通过Configuration类的loadResources()方法，把它们合并成一个配置。代码如下：

1.  Configurationconf = new Configuration();  

2.  conf.addResource("core-default.xml");  

3.  conf.addResource("core-site.xml"); 

使用Configuration类的一般过程是：构造Configuration对象，并通过类的addResource()方法添加需要加载的资源；然后就可以使用get*方法和set*方法访问/设置配置项，资源会在第一次使用的时候自动加载到对象中。   

转载于:https://my.oschina.net/u/3251280/blog/848999