hadoop下载文件出现的问题java.lang.NullPointerException

最新推荐文章于 2022-12-13 19:04:52 发布

mqingo

最新推荐文章于 2022-12-13 19:04:52 发布

阅读量825

点赞数

分类专栏： Hadoop 文章标签： hadoop

本文链接：https://blog.csdn.net/mqingo/article/details/104023345

版权

在执行Hadoop下载文件操作时遇到`java.lang.NullPointerException`，问题根源在于缺失hadoop.dll或winutils.exe。常规解决方案是在Hadoop的bin目录下添加相应文件，但实际测试中此方法无效。正确的解决方法是不仅在bin目录，还需在C:WindowsSystem32下添加hadoop.dll，通过此方法可以成功解决上述错误。

摘要由CSDN通过智能技术生成

hadoop下载文件代码如下：

package week01;

import java.io.FileInputStream;

import java.io.IOException;
import java.net.URI;
import java.net.URISyntaxException;

import org.apache.commons.io.IOUtils;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.junit.Before;
import org.junit.Test;

public class HdfsUtil {

	
	
	FileSystem fs = null;
	
	@Before
	public void init() throws IOException, InterruptedException, URISyntaxException{
		
		Configuration conf = new Configuration();
		conf.set("fs.defaultFS", "hdfs://week01:9000");
		
		//fs = FileSystem.get(conf);
		fs = FileSystem.get(new URI("hdfs://week01:9000"), conf, "hadoop");

	}
	
	
	
	/**
	 * 下载文件  使用封装好的方法  
	 * @throws Exception 
	 * @throws IllegalArgumentException 
	 */
	@Test
	public void download() th