HDFS文件以流的形式输出供前端下载


一、背景

之前有使用过Java使用hdfs相关API下载文件,但前后端交互有时会会没办法使用,本次需求是将HDFS文件使用流的形式下载下来。


二、代码

 /**
     * @param path  文件路径
     * @param fileName  文件名
     * @param response  响应头
     */
    public void downloadHdfsFile(String path,String fileName, HttpServletResponse response) {
        // 查询HDFS
        Configuration config = new Configuration();
        config.set("fs.default.name", hdfsAddress);
        // 文件路径和名称拼接
        String remoteFilePath = path "/" + fileName;
        Path sourceFilePath = new Path(remoteFilePath);
        FileSystem fs;
        try {
            // 远程地址
            fs = FileSystem.get(new URI(remoteFilePath), config, "root");
            boolean isExists = fs.exists(sourceFilePath);
            // 文件存在则直接下载
            if (isExists) {
                response.setHeader("Cache-Control", "no-cache, no-store, must-revalidate");
                response.setHeader("Content-Disposition", "attachment; filename=" + fileName);
                response.setHeader("Pragma", "no-cache");
                response.setHeader("Expires", "0");
                response.setHeader("Last-Modified", new Date().toString());
                response.setHeader("ETag", String.valueOf(System.currentTimeMillis()));
                // 获取流
                InputStream in = fs.open(sourceFilePath);
                ServletOutputStream out = response.getOutputStream();
                int b = 0;
                byte[] buffer = new byte[1024 * 1024];
                while (b != -1) {
                    b = in.read(buffer);
                    // 写到输出流(out)中
                    out.write(buffer, 0, b);
                }
                in.close();
                out.close();
                out.flush();
            } else {
                // 文件不存在,其他处理
                ......
            }
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值