18. 分布式文件系统-阿里云OSS

最新推荐文章于 2024-07-14 00:00:00 发布
最新推荐文章于 2024-07-14 00:00:00 发布
阅读量1k 收藏 6
点赞数 1
分类专栏： 尚融宝 文章标签： oss 阿里云
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Alvin199765/article/details/116071193
版权

一、开通“对象存储OSS”服务

为了解决海量数据存储与弹性扩容，项目中我们采用云存储的解决方案- 阿里云OSS。

1、开通“对象存储OSS”服务

在这里插入图片描述

在这里插入图片描述

2、进入管理控制台

在这里插入图片描述

二、控制台使用

1、创建Bucket

命名：srb-file

读写权限：公共读

2、上传默认头像

创建文件夹avatar，上传默认的用户头像

在这里插入图片描述

三、使用RAM子用户

1、进入子用户管理页面

在这里插入图片描述

在这里插入图片描述

2、添加用户

在这里插入图片描述

3、获取子用户key

AccessKeyId, AccessKeySecret

4、设置用户权限

AliyunOSSFullAccess

在这里插入图片描述

5、添加OOS权限

在这里插入图片描述

四、使用SDK

在OSS的概览页右下角找到“Bucket管理”，点击“OSS学习路径”

在这里插入图片描述

点击“Java SDK”进入SDK开发文档

在这里插入图片描述

五、创建测试项目

aliyun-oss

1、配置pom

在这里插入图片描述

<dependencies>
    <!--aliyunOSS-->
    <dependency>
        <groupId>com.aliyun.oss</groupId>
        <artifactId>aliyun-sdk-oss</artifactId>
        <version>3.10.2</version>
    </dependency>
    <dependency>
        <groupId>junit</groupId>
        <artifactId>junit</artifactId>
        <version>4.12</version>
    </dependency>
</dependencies>

2、创建Bucket

test目录下创建包com.indi.aliyunoss

OSSTest.java
在这里插入图片描述

package com.indi.aliyunoss;

public class OSSTest {
    // Endpoint以杭州为例，其它Region请按实际情况填写。
    String endpoint = "your endpoint";
    // 阿里云主账号AccessKey拥有所有API的访问权限，风险很高。强烈建议您创建并使用RAM账号进行API访问或日常运维，请登录 https://ram.console.aliyun.com 创建RAM账号。
    String accessKeyId = "your accessKeyId";
    String accessKeySecret = "your accessKeySecret";
    String bucketName = "srb-file";
    
    @Test
    public void testCreateBucket() {
        // 创建OSSClient实例。
        OSS ossClient = new OSSClientBuilder().build(endpoint, accessKeyId, accessKeySecret);
        // 创建存储空间。
        ossClient.createBucket(bucketName);
        // 关闭OSSClient。
        ossClient.shutdown();
    }
}

3、判断bucket是否存在

@Test
public void testExist() {
    // 创建OSSClient实例。
    OSS ossClient = new OSSClientBuilder().build(endpoint, accessKeyId, accessKeySecret);
    boolean exists = ossClient.doesBucketExist(bucketName);
    System.out.println(exists);
    // 关闭OSSClient。
    ossClient.shutdown();
}

4、设置bucket访问权限

@Test
public void testAccessControl() {
    // 创建OSSClient实例。
    OSS ossClient = new OSSClientBuilder().build(endpoint, accessKeyId, accessKeySecret);
    // 设置存储空间的访问权限为：公共读。
    ossClient.setBucketAcl(bucketName, CannedAccessControlList.PublicRead);
    // 关闭OSSClient。
    ossClient.shutdown();
}

一、OSS实现文件上传

1、创建service-oss模块

2、配置pom.xml

<dependencies>
		<dependency>
			<groupId>com.indi</groupId>
			<artifactId>service-base</artifactId>
			<version>1.0-SNAPSHOT</version>
		</dependency>

		<dependency>
			<groupId>org.springframework.boot</groupId>
			<artifactId>spring-boot-starter-web</artifactId>
		</dependency>

		<!--lombok用来简化实体类：需要安装lombok插件-->
		<dependency>
			<groupId>org.projectlombok</groupId>
			<artifactId>lombok</artifactId>
		</dependency>

		<!--aliyunOSS-->
		<dependency>
			<groupId>com.aliyun.oss</groupId>
			<artifactId>aliyun-sdk-oss</artifactId>
		</dependency>

		<!-- 日期工具栏依赖 -->
		<dependency>
			<groupId>joda-time</groupId>
			<artifactId>joda-time</artifactId>
		</dependency>

		<!--让自定义的配置在application.yaml进行自动提示-->
		<dependency>
			<groupId>org.springframework.boot</groupId>
			<artifactId>spring-boot-configuration-processor</artifactId>
			<optional>true</optional>
		</dependency>
	</dependencies>

3、配置application.yml

server:
  port: 8130 # 服务端口
spring:
  profiles:
    active: dev # 环境设置
  application:
    name: service-oss # 服务名
aliyun:
  oss:
    endpoint: 你的endponit
    keyId: 你的阿里云keyid
    keySecret: 你的阿里云keysecret
    bucketName: srb-file

4、logback-spring.xml

日志目录换成oss

在这里插入图片描述

5、创建启动类

创建ServiceOssApplication.java

package com.indi.srb.oss;

@SpringBootApplication
@ComponentScan({"com.indi.srb", "com.indi.common"})
public class ServiceOssApplication {
    public static void main(String[] args) {
        SpringApplication.run(ServiceOssApplication.class, args);
    }
}

6、创建常量读取工具类

OssProperties.java

package com.indi.srb.oss.util;

@Data
@Component
@ConfigurationProperties(prefix = "aliyun.oss")
public class OssProperties implements InitializingBean {
    private String endpoint;
    private String keyId;
    private String keySecret;
    private String bucketName;

    public static String ENDPOINT;
    public static String KEY_ID;
    public static  String KEY_SECRET;
    public static String BUCKET_NAME;

    @Override
    public void afterPropertiesSet() throws Exception {
        ENDPOINT = endpoint;
        KEY_ID = keyId;
        KEY_SECRET = keySecret;
        BUCKET_NAME = bucketName;
    }
}

7、service

创建Service接口：FileService.java

package com.indi.srb.oss.service;
public interface FileService {
    /**
     * 文件上传至阿里云
     */
    String upload(InputStream inputStream, String module, String fileName);
}

实现：FileServiceImpl.java

参考SDK中的：Java->上传文件->简单上传->流式上传->上传文件流

在这里插入图片描述

package com.indi.srb.oss.service.impl;

@Service
public class FileServiceImpl implements FileService {
    /**
     * 文件上传至阿里云
     */
    @Override
    public String upload(InputStream inputStream, String module, String fileName) {
        // 创建OSSClient实例。
        OSS ossClient = new OSSClientBuilder().build(
                OssProperties.ENDPOINT,
                OssProperties.KEY_ID,
                OssProperties.KEY_SECRET);
        //判断oss实例是否存在：如果不存在则创建，如果存在则获取
        if(!ossClient.doesBucketExist(OssProperties.BUCKET_NAME)){
            //创建bucket
            ossClient.createBucket(OssProperties.BUCKET_NAME);
            //设置oss实例的访问权限：公共读
            ossClient.setBucketAcl(OssProperties.BUCKET_NAME, CannedAccessControlList.PublicRead);
        }
        //构建日期路径：avatar/2019/02/26/文件名
        String folder = new DateTime().toString("yyyy/MM/dd");
        //文件名：uuid.扩展名
        fileName = UUID.randomUUID().toString() + fileName.substring(fileName.lastIndexOf("."));
        //文件根路径
        String key = module + "/" + folder + "/" + fileName;
        //文件上传至阿里云
        ossClient.putObject(OssProperties.BUCKET_NAME, key, inputStream);
        // 关闭OSSClient。
        ossClient.shutdown();
        //阿里云文件绝对路径
        return "https://" + OssProperties.BUCKET_NAME + "." + OssProperties.ENDPOINT + "/" + key;
    }
}

8、controller

创建controller.api包：

FileController.java

package com.indi.srb.oss.controller.api;

@Api(tags = "阿里云文件管理")
@CrossOrigin //跨域
@RestController
@RequestMapping("/api/oss/file")
public class FileController {
    @Resource
    private FileService fileService;
    /**
     * 文件上传
     */
    @ApiOperation("文件上传")
    @PostMapping("/upload")
    public R upload(
            @ApiParam(value = "文件", required = true)
            @RequestParam("file") MultipartFile file,
            @ApiParam(value = "模块", required = true)
            @RequestParam("module") String module)  {
        try {
            InputStream inputStream = file.getInputStream();
            String originalFilename = file.getOriginalFilename();
            String uploadUrl = fileService.upload(inputStream, module, originalFilename);
            //返回r对象
            return R.ok().message("文件上传成功").data("url", uploadUrl);
        } catch (IOException e) {
            throw new BusinessException(ResponseEnum.UPLOAD_ERROR, e);
        }
    }
}

9、测试

http://localhost:8130/swagger-ui.html

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

三、OSS实现文件删除

1、业务层

FileService.java

	/**
     * 根据路径删除文件
     * @param url
     */
	void removeFile(String url);

FileServiceImpl.java

	/**
     * 根据路径删除文件
     * @param url
     */
    @Override
    public void removeFile(String url) {
        // 创建OSSClient实例。
        OSS ossClient = new OSSClientBuilder().build(
            OssProperties.ENDPOINT,
            OssProperties.KEY_ID,
            OssProperties.KEY_SECRET);
        //文件名（服务器上的文件路径）
        String host = "https://" + OssProperties.BUCKET_NAME + "." + OssProperties.ENDPOINT + "/";
        String objectName = url.substring(host.length());
        // 删除文件。
        ossClient.deleteObject(OssProperties.BUCKET_NAME, objectName);
        // 关闭OSSClient。
        ossClient.shutdown();
    }

2、控制层

    @ApiOperation("删除OSS文件")
    @DeleteMapping("/remove")
    public R remove(
        @ApiParam(value = "要删除的文件路径", required = true)
        @RequestParam("url") String url) {
        fileService.removeFile(url);
        return R.ok().message("删除成功");
    }

3、测试

http://localhost:8130/swagger-ui.html
在这里插入图片描述

在这里插入图片描述

AlvinUnity
关注
  • 1
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
阿里云0SS的android-sdk，2.8.0版本
04-27
阿里云0SS的android-sdk，2.8.0版本，包含源代码、实例代码、sts配置的python代码等资源，很实用
JavaWeb项目架构之FastDFS分布式文件系统
云栖社区
02-27 1311
概述分布式文件系统：Distributed file system, DFS，又叫做网络文件系统：Network File System。一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多用户分享文件和存储空间。FastDFS是用c语言编写的一款开源的分布式文件系统，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，功能包括：文件存储、文件同步、文件访问（文件
搭建自己的OSS文件存储系统--MinIO
weixin_44146398的博客
07-12 1341
MinIO是一款高性能、可扩展的对象存储服务器，专为现代应用设计。它不仅提供了媲美Amazon S3的功能，还通过其轻量级架构和强大的安全措施，成为企业和开发者青睐的选择。
阿里云 OSS
xiaowei20091124的专栏
08-31 7762
比如网站的 图片、视频等文件就可以存放在 OSS 中（海量数据，自己维护起来麻烦，交给其他人去维护），每次从 OSS 中获取即可。OSS 具有与平台无关的 RESTful API 接口，可以在任意应用、任意时间、任意地点 存储与访问 任何类型的数据。简单地理解：OSS 基于网络提供数据存储服务，通过网络可以随时存储、获取 文本、图片、音频、视频等 非结构化数据。对象是 OSS 存储的基本单位，由元信息（Object Meta）、数据（Data）、文件名（key）组成。存储类型分为：标准、低频访问、归档。..
基于阿里云oss的文件管理系统
qq_51705526的博客
10-01 2231
调用阿里云sdk的文件管理系统
阿里云 OSS介绍
weixin_64051447的博客
06-21 4946
比如网站的 图片、视频等文件就可以存放在 OSS 中（海量数据，自己维护起来麻烦，交给其他人去维护），每次从 OSS 中获取即可。OSS 具有与平台无关的 RESTful API 接口，可以在任意应用、任意时间、任意地点 存储与访问 任何类型的数据。简单地理解：OSS 基于网络提供数据存储服务，通过网络可以随时存储、获取 文本、图片、音频、视频等 非结构化数据。对象是 OSS 存储的基本单位，由元信息（Object Meta）、数据（Data）、文件名（key）组成。存储类型分为：标准、低频访问、归档。
帝国CMS－Ecmsshop阿里云oss插件 (2).zip
06-12
帝国CMS与Ecmsshop阿里云OSS（Object Storage Service）插件是针对网站内容管理系统和电商系统的存储扩展解决方案。这个插件允许用户将网站的静态资源，如图片、视频、文档等，上传到阿里云的OSS服务，从而实现云...
阿里云OSS以及GraphQL入门.docx
10-19
【阿里云OSS以及GraphQL入门】是一门针对IT专业人士的课程，主要讲解如何利用阿里云对象存储服务（OSS）实现图片存储，并结合GraphQL技术优化前端数据查询。本课程通过实例详细介绍了图片存储解决方案的选择、阿里云...
阿里云oss上传可视化工具
03-23
阿里云OSS（Object Storage Service）是一款面向互联网和企业级应用设计的分布式对象存储服务，提供了高可用、高可靠、低成本的数据存储能力。阿里云OSS上传可视化工具是为了方便用户更直观、便捷地管理和操作OSS中...
阿里云oss c-sdk oss-demo
07-20
阿里云OSS（Object Storage Service）是一款面向互联网和企业级应用设计的分布式存储服务，提供高可用、高可靠、低成本的数据存储能力。C-SDK是阿里云为开发者提供的C语言接口，使得用户能够通过C语言方便地进行OSS...
阿里云OSS对象云存储上传控件仿百度webuploader插件
05-05
阿里云OSS（Object Storage Service）对象云存储是一种基于互联网的分布式存储服务，它提供了海量、安全、低成本、高可靠的云存储解决方案。阿里云OSS的上传控件是为了方便开发者在网页上实现文件上传功能而设计的，...
基于aliyun的oss图片管理器
03-23
基于aliyun的oss图片管理器只在原aliyun的sdk中添加了index php文件和配置conf inc php文件 紧紧是文件列表查看器而已等更新中
OSS文件管理
Chen_1999的博客
10-19 990
return 所有文件上传成功返回存储路径集合，任意一个文件上传失败返回null。@return 上传成功返回存储路径，失败返回null。@param dirPath 父文件夹名称。@param dirPath 父文件夹名称。// 创建OSSClient实例。// 创建OSSClient实例。// 创建OSSClient实例。// 创建OSSClient实例。// 获取源文件后缀名。// 设置私有权限读写。// 获取源文件后缀名。// 设置私有权限读写。// 获取源文件名称。// 获取源文件名称。
构建基于阿里云OSS文件上传服务
热门推荐
loongshawn的博客
02-21 1万+
构建阿里云OSS文件上传接口服务，通过开发的接口来实现文件上传。
0ss
tutubuchicao的博客
10-19 3237
3.1 OSS 简介 1. 什么是OSS： OSS(object store service) 对象存储服务 传统的物理存储 ----- 对象存储(云产品),阿里云提供的云存储服务，具有海量、安全、高可用性、低成本的特性；按量缴费即可 支持Restful API,弹性扩展、按需分配、只要用来存储图片、视频、文件等非结构化数据； 支持任何类型的文件存储
Java 上传文件至阿里云0SS
技术宝库
11-12 679
一、背景 本地浏览器导出功能因数据量大，出现浏览器卡顿、崩溃的情况下，我们可以通过优化代码、sql来缓解，当出现非代码优化所能处理卡顿的情况时，就需要换种思路处理导出功能了，那就是 实现异步导出（浏览器点击导出时，执行异步方法，边写入处理任务、边执行导出功能，这时很慢的导出在后台运行，前台客户无感知，等异步下载完成后，更薪任务状态，通知客户下载完毕，可以下载了。这条任务需要存入数据表里）。实现思路...
OSS云存储管理实践教学
Viper的程序员修炼手册
02-05 675
OSS云存储管理实践 场景体验目标 开始实验后，系统会自动去创建一台Linux ECS。其中，创建的ECS中已经部署了web应用和OSS python SDK。在本实验中，已创建的ECS作为web服务器，浏览器中直接访问其IP地址会显示包含四个小图片的页面，并且四个图片都保存在ECS本地。通过调用OSS API将四个图片上传到OSS中，同时删除保存在ECS本地的四个图片，此时访问ECS IP将会看到页面中没有图片可以显示。为了在页面中显示原有的四个图片，实验中需要修改web应用服务器根目录下默认访问页面中的
从零开始：利用阿里云 OSS 轻松同步你的思源笔记
最新发布
2301_80064376的博客
07-14 1864
在数字时代，数据的安全与同步变得尤为重要。**思源笔记**作为一款隐私优先的个人知识管理系统，如何通过**阿里云 OSS**进行数据同步？本文将为基础小白详细讲解步骤，让你轻松上手。**请务必先备份数据**，重要的事情说三遍！
【Obsidian\Typora\坚果云\阿里云OSS】零基础搭建自己的知识库，或者叫避坑指南
m0_52347493的博客
11-27 3127
搭建自己的知识库，避坑指南。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值