文件存储系统minio

一:技术选型

云存储,七牛云,阿里云等。缺点是要钱。(要钱没有,要命…也没有…)
私有的存储系统:fastdfs,这个之前用过一段时间,没有用minio之前感觉还行,用过minio后一点也看不上fastdfs了。
(不要怪俺,哪个程序猿不是个喜新厌旧的“渣男”),所以今天就来谈一下minio。

minio和fastdfs对比:
fastdfs:部署非常繁琐,目前使用不是太多,社区活跃度不高。所以假如出现问题,不好解决。没有可视化界面。
minio: 部署简便,具有可视化界面,维护方便。

二:minio搭建私有的存储系统

1.下载

minio官网

链接: https://pan.baidu.com/s/1dkeuwvt4YqNICvrrggVilQ
提取码: k595

2.部署到linux

上传
minio文件上传到服务器/usr/local/目录下
执行 chmod +x minio   赋予操作权限;

设置账号密码:
export MINIO_ACCESS_KEY=admin
export MINIO_SECRET_KEY=admin@2021
启动
nohup ./minio  server start &

3.浏览器访问

访问地址: http://ip:9000/minio/login

输入设置的账号和密码就可以进入系统,如下图:
在这里插入图片描述

三:编写代码,调用接口实现文件上传到minio

开始三板斧:

1.导包:

		<!--minio-->
        <dependency>
            <groupId>io.minio</groupId>
            <artifactId>minio</artifactId>
            <version>3.0.10</version>
        </dependency>

2.不需要添加注解

3.上代码

配置文件:yml
# minio文件存储配置信息
minio:
  endpoint: http://ip:9000
  accesskey: admin
  secretKey: admin@2021
属性类
import lombok.Data;
import org.springframework.boot.context.properties.ConfigurationProperties;
import org.springframework.context.annotation.PropertySource;
import org.springframework.stereotype.Component;

/**
 * @author hdf
 * minio 属性值
 */
//@PropertySource("classpath:application.yml")//
@Data
@Component
@ConfigurationProperties(prefix = "minio")//
public class MinioProp {
    /**
     * 连接url
     */
    private String endpoint;
    /**
     * 用户名
     */
    private String accesskey;
    /**
     * 密码
     */
    private String secretKey;
}
获取 MinioClient连接的类
import io.minio.MinioClient;
import io.minio.errors.InvalidEndpointException;
import io.minio.errors.InvalidPortException;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.context.properties.EnableConfigurationProperties;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

/**
 * @author hdf
 * minio 核心配置类
 */
@Configuration
@EnableConfigurationProperties(MinioProp.class)
public class MinioConfig {

    @Autowired
    private MinioProp minioProp;

    /**
     * 获取 MinioClient
     *
     * @return
     * @throws InvalidPortException
     * @throws InvalidEndpointException
     */
    @Bean
    public MinioClient minioClient() throws InvalidPortException, InvalidEndpointException {
        return new MinioClient(minioProp.getEndpoint(), minioProp.getAccesskey(), minioProp.getSecretKey());
    }
}
文件上传util
import com.alibaba.fastjson.JSONObject;
import io.minio.MinioClient;
import io.minio.errors.*;
import lombok.SneakyThrows;
import lombok.extern.slf4j.Slf4j;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component;
import org.springframework.web.multipart.MultipartFile;
import org.xmlpull.v1.XmlPullParserException;
import java.io.IOException;
import java.security.InvalidKeyException;
import java.security.NoSuchAlgorithmException;
import java.text.SimpleDateFormat;
import java.util.*;

/**
 * @author hdf
 */
@Slf4j
@Component
public class MinioUtils {

    @Autowired
    private MinioClient client;
    @Autowired
    private MinioProp minioProp;

    /**
     * 创建bucket
     *
     * @param bucketName bucket名称
     */
    @SneakyThrows
    public void createBucket(String bucketName) {
        if (!client.bucketExists(bucketName)) {
            client.makeBucket(bucketName);
        }
    }

    /**
     * 上传文件
     *
     * @param file       文件
     * @param bucketName 存储桶
     * @return
     */
    public JSONObject uploadFile(MultipartFile file, String bucketName) throws Exception {
        JSONObject res = new JSONObject();
        res.put("code", 0);
        // 判断上传文件是否为空
        if (null == file || 0 == file.getSize()) {
            res.put("msg", "上传文件不能为空");
            return res;
        }
        // 判断存储桶是否存在
        createBucket(bucketName);
        // 文件名
        String originalFilename = file.getOriginalFilename();
        // 新的文件名 = 存储桶名称_时间戳.后缀名
        String fileName = bucketName + "_" + System.currentTimeMillis() + originalFilename.substring(originalFilename.lastIndexOf("."));
        // 开始上传
        client.putObject(bucketName, fileName, file.getInputStream(), file.getContentType());
        res.put("code", 1);
        res.put("msg", minioProp.getEndpoint() + "/" + bucketName + "/" + fileName);
        return res;
    }

    /**
     * 上传文件
     *
     * @param file       文件
     * @param bucketName 存储桶
     * @return
     */
    public List<Map<String,String>> uploadFiles(MultipartFile[] file, String bucketName) throws Exception {
       List<Map<String,String>> list = new ArrayList<>();
        String s = null;
        String ss = null;

        try {
            for (int i = 0; i < file.length; i++) {

                String filename = file[i].getOriginalFilename();//原文件名称
                String newfilename = System.currentTimeMillis() + filename.substring(filename.lastIndexOf("."));//自己组的新名称
                SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd");
                // 文件存储的目录结构
                String objectName = sdf.format(new Date());
                // 存储文件
                client.putObject(bucketName, objectName + "/" + newfilename, file[i].getInputStream(), file[i].getContentType());
                log.info("文件上传成功!");
                s = minioProp.getEndpoint() + "/" + bucketName + "/" + objectName+ "/" + newfilename;
                ss = "/" + bucketName + "/" + objectName+ "/" + newfilename;
                Map<String, String> fileMap = new HashMap<>();
                //fileMap.put("bucket", objectName);
                fileMap.put("showUrl", s);
                fileMap.put("url", ss);
                list.add(fileMap);
            }
        } catch (Exception e) {
            log.info("上传发生错误: {}!", e.getMessage());
        }

        return list;
    }
}
接口
import com.alibaba.fastjson.JSONObject;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Controller;
import org.springframework.web.bind.annotation.*;
import org.springframework.web.multipart.MultipartFile;
import javax.servlet.http.HttpServletRequest;
import java.util.List;
import java.util.Map;

/**
 * @author hdf
 */
@Controller
public class MinioController {

    @Autowired
    private MinioUtils minioUtils;

    @GetMapping("init")
    public String init() {
        return "file";
    }

    /**
     * 上传单个文件
     *
     * @param file
     * @param request
     * @return
     */
    @PostMapping("/upload")
    @ResponseBody
    public String upload(@RequestParam(name = "file", required = false) MultipartFile file, HttpServletRequest request) {
        JSONObject res = null;
        try {
            res = minioUtils.uploadFile(file, "product");
        } catch (Exception e) {
            e.printStackTrace();
            res.put("code", 0);
            res.put("msg", "上传失败");
        }
        return res.toJSONString();
    }

    /**
     * 批量上传
     *
     * @param file
     * @param request
     * @return
     */
    @PostMapping("/uploads")
    @ResponseBody
    public List uploads(@RequestParam(name = "file", required = false) MultipartFile[] file, HttpServletRequest request) {
        List product = null;
        try {
            product = minioUtils.uploadFiles(file, "product");
        } catch (Exception e) {
            e.printStackTrace();
        }
        return product;
    }
}
postman测试

(我就测试一个批量的接口)
在这里插入图片描述

这里有个小坑

,用浏览器访问showUrl访问资源,不能访问。这是由于在minio中的容器没有设置权限;
在这里插入图片描述
在这里插入图片描述
这样就可以正常访问了。

  • 3
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
分布式Minio是一个可以将多块硬盘组成一个对象存储服务的解决方案。它通过在不同的节点上分布硬盘,避免了单点故障的问题。分布式Minio严格遵守read-after-write一致性模型,确保所有读写操作的一致性。要启动一个分布式Minio实例,你只需要将硬盘位置作为参数传递给minio server命令,并在所有其他节点上运行相同的命令。所有运行分布式Minio的节点应共享一个共同的根凭证,以便节点之间的连接和信任。建议在执行Minio服务器命令之前,将root用户和root密码导出为环境变量MINIO_ROOT_USER和MINIO_ROOT_PASSWORD,并在所有节点上导出。如果没有导出,可以使用默认凭据minioadmin/minioadmin。Minio将创建每组2到16个驱动器的纠删码集。您提供的驱动器总数必须是这些数字之一的倍数。分布式Minio选择最大的EC集大小,并将其划分为给定的驱动器总数或节点总数,以确保均匀分布,即每个节点参与每组相同数量的驱动器。每个对象都被写入单个EC集,因此它们分布在不超过16个驱动器上。建议所有运行分布式Minio设置的节点是同质的,即操作系统相同、磁盘数量相同、网络互连相同。分布式Minio需要新的目录,如果需要,可以与其他应用程序共享驱动器。您可以通过使用Minio独有的子目录来实现此目的。例如,如果您已将卷安装在/export下,则可以将其作为参数传递给Minio服务器/export/data。运行分布式Minio实例的服务器之间的时间间隔应小于15分钟。为了确保服务器之间的时间同步,建议启用NTP服务。在Windows操作系统上运行分布式Minio被认为是实验性的,请谨慎使用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值