对HDFS文件系统文件的读、写、删操作

HDFS文件系统是Hadoop的分布式文件系统,HadoopAPI中提供了一些方法,以便在编程的时候向HDFS中写入和读出文件。

下面通过一个例子来说明:

    public static void readAndWrite(){

       Configuration conf = new Configuration();//获得conf对象,以便能够获得配置文件的信息

       FileSystem fs;

           try {

              fs = FileSystem.get(

                     URI.create(conf.get("fs.default.name")), conf); 

//读取HDFS系统中的一个文件

           InputStream input =fs.open(new Path("/user/root/urlLib/ftpurl"));

byte [] b= new byte[1024];

            input.read(b, 0,b.length);       

            String s =new String(b);

            system.out.println(s);

             input.close();

//将刚刚读出来的字符串再写入到HDFS系统中

OutputStream out = fs.create(new Path(/user/root/urlLib/ftpurl2), true);

           out.write(s.getBytes());

           out.flush();

           out.close();

//user/root/urlLib/ftpurl这个文件删除

fs.delete(new Path("/user/root/urlLib/ftpurl") , true);

          

           } catch (IOException e) {

              // TODO Auto-generated catch block

              e.printStackTrace();

           }

}

这个过程和普通的文件读写类似,唯一不同的就是通过HadoopFileSystem来获取读写流,以便在读写的时候能够将文件写入到HDFS系统中。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值