HDFS---客户端入门 API

  封装工具类

public class DoitUtils {
    /**
     * 返回操作hdfs://linux01:8020/ 文件系统的客户端对象
     * @return
     * @throws Exception
     */
    public static  FileSystem getFs() throws Exception {
        return FileSystem.newInstance(new URI("hdfs://linux01:8020/"), new Configuration(),"root") ;

    }

}

上传  

public class UploadDemo {
    public static void main(String[] args) throws Exception {
        //创建文件系统对象
        Configuration conf = new Configuration();
        FileSystem fs = FileSystem.newInstance(new URI("hdfs://linux01:8020"), conf, "root");

        //本地路径 待上传内容
        Path path = new Path("D:\\hadoop-2.8.1.zip");
        //HDFS系统路径
        Path path2 = new Path("/doit17/hdp/");
        fs.copyFromLocalFile(path,path2);//没有返回值
        /**
         * 参数一 是否删除上传文件  默认 是false  不删除  true 删除(剪切)
         * 参数二 是否覆盖HDFS中已存在的内容  默认 true
         * 参数三  本地路径 待上传内容
         * 参数四  HDFS系统路径
         */

        fs.copyFromLocalFile(true,true,path,path2);

        //关闭对象 释放资源
        fs.close();
    }
}

 下载

public class DownDemo {
    public static void main(String[] args) throws Exception {
        //使用工具类调用  获取客户端对象
        FileSystem fs = DoitUtils.getFs();

        //HDFS系统路径
        Path path = new Path("/doit17/hdp/hadoop-2.8.1.zip");
        //本地路径
        Path path2 = new Path("d://");

        /**
         * 参数一  HDFS系统路径
         * 参数二  本地路径
         */

        fs.copyToLocalFile(path,path2);
        /**
         * 参数一 是否删除HDFS中下载的文件  默认 false
         * 参数二  HDFS 系统路径
         * 参数三  本地路径
    
  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值