java操作HDFS

package com.imooc.hdfs;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.*;
import org.apache.hadoop.io.IOUtils;
import org.apache.hadoop.yarn.webapp.hamlet2.Hamlet;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.net.URI;
/**
 * Java代码操作HDFS
 * 文件操作：上传文件、下载文件、删除文件
 * Created by xuwei
 */
public class HdfsOp {
    public static void main(String[] args) throws Exception{
        //创建一个配置对象
        Configuration conf = new Configuration();
        //指定HDFS的地址
        conf.set("fs.defaultFS","hdfs://bigdata01:9000");
        //获取操作HDFS的对象
        FileSystem fileSystem = FileSystem.get(conf);
        put(fileSystem);
        get(fileSystem);
        delete(fileSystem);
        FileStatus[] fileStatuses=fileSystem.listStatus(new Path("/d1/"));
        for (FileStatus fs:fileStatuses){
            System.out.println();
            System.out.println(fs.getPath()+":");
            BlockLocation[] blocks= fileSystem.getFileBlockLocations(fs,0,fs.getLen());
            for (BlockLocation block:blocks){
                System.out.println(block);
            }
            System.out.println();
        }
    }
    /**
     * 删除文件
     * @param fileSystem
     * @throws IOException
     */

    private static void delete(FileSystem fileSystem) throws IOException {
        //删除文件，目录也可以删除
        //如果要递归删除目录，则第二个参数需要设置为true
        // 如果是删除文件或者空目录，第二个参数会被忽略
        boolean flag= fileSystem.delete(new Path("/LICENSE.txt"),true);
        if (flag){
            System.out.println("删除成功！ ");
        }
        else {
            System.out.println("删除失败！ ");
        }
    }
    /**
     * 下载文件
     * @param fileSystem
     * @throws IOException
     */
    private static void get(FileSystem fileSystem) throws IOException {
        // 获取HDFS文件系统的输入流
        FSDataInputStream fis= fileSystem.open(new Path("/README.txt"));
        // 获取本地文件的输出流
        FileOutputStream fos=new FileOutputStream("D:\\README.txt");
        // 下载文件
        IOUtils.copyBytes(fis,fos,1024,true);
    }
    /**
     * 文件上传
     * @param fileSystem
     * @throws IOException
     */
    private static void put(FileSystem fileSystem) throws IOException {
        //获取HDFS文件系统的输出流
        FSDataOutputStream fos = fileSystem.create(new Path("/user.txt"));
        //获取本地文件的输入流
        FileInputStream fis = new FileInputStream("D:\\user.txt");

        //上传文件：通过工具类把输入流拷贝到输出流里面，实现本地文件上传到HDFS
        IOUtils.copyBytes(fis,fos,1024,true);
    }
}