Java操作HDFS

准备工作:
Hadoop环境变量配置
jdk环境变量配置
不详细演讲
下面直接演示代码:(如下):

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
import org.junit.Before;
 
import java.io.File;
import java.io.FileOutputStream;
import java.io.InputStream;
import java.net.URI;
import org.apache.hadoop.fs.FileSystem;
import org.junit.Test;
 
/**
 * @ClassName:Java_HDFS
 * @Description:TODO
 * @author:Li Wei Ning
 * @Date:2022/4/16 8:40
 */
public class Java_HDFS {
    /**
     * 定义文件系统,类变量
     */
    FileSystem fs = null;
 
    /**
     * 预处理,@Test之前
     */
    @Before
    public void init(){
        try {
 
            fs = FileSystem.get(new URI("hdfs://192.168.47.128:9000"),new Configuration(),"root");
 
        }catch (Exception e){
            e.printStackTrace();
        }finally {
            System.out.println("成功!!!");
        }
    }
 
    /**
     * 打印文件系统
     */
    @Test
    public void printFs(){
        System.out.println(fs);
    }
 
    /**
     * 创建文件
     */
    @Test
    public void mkdir(){
        try {
            boolean ret = fs.mkdirs(new Path("/abc"));
            System.out.println(ret);
        }catch (Exception e){
            e.printStackTrace();
        }
    }
    /**
     * 上传文件
     */
    public void put(){
        try {
            fs.copyFromLocalFile(new Path("D:/1.txt"),new Path("/1.txt"));
        }catch (Exception e){
            e.printStackTrace();
        }
    }
    /**
     * 重命名
     */
    @Test
    public void rename(){
        try {
            if(fs.exists(new Path("/s1.txt"))){
                System.out.println(fs.rename(new Path("s1.txt"),new Path("/s2.txt")));
            }
        }catch (Exception e){
            e.printStackTrace();
        }
    }
 
    /**
     * 下载
     */
    public void downLoad(){
        try {
            InputStream in = fs.open(new Path("/123.txt"));
            FileOutputStream out = new FileOutputStream(new File("D:/123.txt"));
            IOUtils.copyBytes(in,out,2048,true);
        }catch (Exception e){
            e.printStackTrace();
        }
    }
}

————————————————
版权声明:本文为CSDN博主「华宇不怀疑」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/m0_60704770/article/details/124392204

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值