到另一个文件夹 复制hdfs上的文件_将HDFS上的文件拷贝到本地的实现

publicclassFIleSystemCat {/***@paramargs

*@throwsIOException*/static{//这句是为了让程序识别hdfs协议而进行的设置//setURLStreamHandlerFactory:设置url流处理器工厂URL.setURLStreamHandlerFactory(newFsUrlStreamHandlerFactory());

}publicstaticvoidmain(String[] args)throwsIOException {//TODO Auto-generated method stubString path1="hdfs://localhost:9000/user/hadoop/photo/DSC01283.JPG";

String path2="/home/hadoop/qiu.jpg";

InputStream in=null;

OutputStream out=null;

in=newURL(path1).openStream();

out=newFileOutputStream(path2);

IOUtils.copyBytes(in, out,4096,false);

}

}在某些情况下设置URLStreamHandlerFactory的方式并不一定回生效。在这种情况下,需要用FileSystem API来打开一个文件的输入流。

文件的位置是使用Hadoop Path呈现在Hadoop中的,与java.io中的不一样。

有两种方式获取FileSystem的实例:

public static FileSystem get(Configuration conf) throws IOException

public s

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值