Hadoop Filesystem closed Exception

  FileSystem.get(uri, conf)方法会根据conf.getBoolean(disableCacheName, false)的值决定是创建FileSystem还是从cache中获取FileSystem, 而默认情况下conf.getBoolean(disableCacheName, false)值为flase(除非特别指定disableCacheName 值为true), 即从cache获取. 问题正是出在这里，我们的oozie作业是小时任务，并由多个action节点组成，每个action节点执行时从cache中获取FileSystem, 有可能该FileSystem因为网络原因或者其他原因已经被closed, 但仍旧被cache, 导致拿到该FileSystem的action在使用时发生IOException异常.

      定位到问题原因后就需要设法改进，方法也很简单，只要使conf.set("fs.hdfs.impl.disable.cache","true");   为true即可，这样每次都会重新创建一个FileSystem, 也就不会从cache中拿到失效的FileSystem了.