Hadoop Problem : Wrong FS: hdfs://localhost:9000/output, expected: file:///

在遵循《Hadoop实战》教程编写程序时遇到了'Wrong FS'问题。问题根源在于在单机环境下配置FileSystem的方式与伪分布式环境不同。尝试通过复制hadoop的conf目录中的hdfs-site.xml和core-site.xml到项目目录来解决,但未成功,可能是路径配置问题。
摘要由CSDN通过智能技术生成

照着《Hadoop实战》写了一个程序:

package my;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileStatus;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;

public class PutMerge {

	/**
	 * @param args
	 * @throws IOException 
	 */
	public static void main(String[] args) throws IOException {
		
		Path inputDir = new Path("C:\\hjfiles\\tmpdir");
		Path hdfsFile = new Path("hdfs://localhost:9000/output/merge");

		
		Configuration conf = new Configuration();
		
		FileSystem hdfs = FileSystem.get(conf);<span style="white-space:pre">				</span>//问题出在这。
		FileSystem local = FileSystem.getLocal(conf);
		
		FileStatus[] inputFiles = local.listStatus(inputDir);
		FSDataOutputStream out = hdfs.create(hdfsF
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值