使用 Minio 作为 OpenStack Glance 以及 Cinder Backup 的 S3 后端

最新推荐文章于 2024-06-07 21:15:00 发布
最新推荐文章于 2024-06-07 21:15:00 发布
阅读量1.4k 收藏 1
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/NewTyun/article/details/127099595
版权

aa719a2ec092f9353d8e1edfd9d27168.gif

新钛云服已累计为您分享687篇技术干货

5d6cecf1c89a6fbb24b710e24bd9264f.gif

OpenStack Glance是一种提供发现、注册、和下载的镜像服务，也可以理解成是一个提供虚拟机镜像的集中式仓库。通过Glance的RESTful API，可以查询镜像元数据下载镜像。

虚拟机的镜像可以很方便的存储在各种地方，从简单的文件系统到对象存储系统(如OpenStack Swift项目)。在Glane里镜像被当做模板来存储，用于启动新实例。

Glance是一个可以组织和管理大量虚拟磁盘镜像的独立服务。Glance为云磁盘镜像提供了一个端到端的解决方案。它还可以从正在运行的实例建立快照用于备份虚拟机的状态。

1f1b38552e6bf2d87596cbe328dc4a14.png

通常情况下，我们会使用 NFS，Ceph，File 等作 为 Glance 映像和 Cinder 卷提供共享存储，有时候我们甚至会利用 iSCSI 的 Cinder 驱动程序。总而言之，这是一个普遍的配置方式，可以用来测试 OpenStack 功能。

我们最近发现了 Minio，Minio 是一个基于 Apache License v2.0 开源协议的对象存储服务。它兼容亚马逊 S3 云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几 kb 到最大 5T 不等。

Minio 可与 Docker 一起安装，因此我们决定在 Glance 中测试 OpenStack重新引入的对 S3 后端的支持。甚至，我们也会使用它来作为 Cinder 的卷备份。

配置 Minio

为了在我们的环境中通过 Docker 安装 Minio。

安装后，只需最少的配置即可与 Glance 以及 Cinder 一起使用。你需要如下配置：

· 具有 r/w 权限的用户

· 定义的区域

Docker 安装 Minio 仅需要一个命令：

 
 
docker run -p 9000:9000 -p 8800:8000--name minio --restart=always \
 -e "MINIO_ACCESS_KEY=admin" \
 -e "MINIO_SECRET_KEY=admin12345" \
 -v /mydata/minio/data:/data \
 -v /mydata/minio/config:/root/.minio \
minio/minio server /data
 
 
要创建用户，请导航到用户->创建用户并提供访问密钥和秘密密钥以及适当的权限：
 
 
 
 
ACCESS_KEY: admin
SECRET_KEY: admin123456
POLICY: readwrite
 
 
要定义区域，请导航至设置->区域并在服务器位置字段中设置区域名称。
 
 
MinIO Client (mc)为ls，cat，cp，mirror，diff，find等UNIX命令提供了一种替代方案。它支持文件系统和兼容Amazon S3的云存储服务（AWS Signature v2和v4）。
 
 
 
 
ls       列出文件和文件夹。
mb       创建一个存储桶或一个文件夹。
cat      显示文件和对象内容。
pipe     将一个STDIN重定向到一个对象或者文件或者STDOUT。
share    生成用于共享的URL。
cp       拷贝文件和对象。
mirror   给存储桶和文件夹做镜像。
find     基于参数查找文件。
diff     对两个文件夹或者存储桶比较差异。
rm       删除文件和对象。
events   管理对象通知。
watch    监听文件和对象的事件。
policy   管理访问策略。
session  为cp命令管理保存的会话。
config   管理mc配置文件。
update   检查软件更新。
version  输出版本信息。
 
 
下载安装
 
 
 
 
wget https://dl.min.io/client/m



                

        

        

    




        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  新钛云服
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                      0
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    1
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                    0
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      










                



	

		

			

				
					
s3backer:通过 Amazon S3 基于 FUSE 的单个文件后备存储

				
			

			

				

					07-24
				

			

		

		

			
				
s3backer是一个文件系统，其中包含由 (Amazon S3) 支持的单个文件。 作为一个文件系统，它非常简单：它提供了一个固定大小的普通文件。 在下面，文件被分成块，每个块的内容存储在一个唯一的 Amazon S3 对象中。 换句话说， s3backer提供的实际上更像是一个 S3 支持的虚拟硬盘设备，而不是一个文件系统。
 在典型的使用中，一个普通的文件系统被挂载在s3backer文件系统使用环回挂载（或 Mac OS X 上的磁盘映像挂载）导出的文件之上。
 与更完整的 S3 文件系统实现相比，这种安排有几个好处：
 通过不尝试实现一个完整的文件系统，这是一项复杂的工作，很难做到正确， s3backer可以保持非常轻量级和简单。 仅使用三个 HTTP 操作：GET、PUT 和 DELETE。 所有关于如何正确实现已经存在的文件系统的经验和知识都可以重用。
 通过利用现有的文件系统

			
		

	



                

              
                



	

		

			

				
					
开源minio-AWS-S3存储的部署及go操作详细

				
			

			

				

					不积跬步，无以至千里；不积小流，无以成江海。
				

				

					12-27
					
					2340
					
				

			

		

		

			
				
MinIO是一个开源的分布式对象存储服务，它允许用户在私有云或公有云环境中构建自己的对象存储基础设施。MinIO旨在提供高性能、高可用性的对象存储，并且与Amazon S3兼容，这意味着可以使用S3客户端工具和库直接与MinIO交互，而无需更改现有的应用程序代码。MinIO设计为具有分布式架构，允许用户将多个MinIO实例组合成一个集群，提供高可用性和可扩展性。每个MinIO实例可以运行在独立的硬件节点上，通过负载均衡器或DNS轮询等方式进行负载均衡。

			
		

	



                


  
              

                


	

		

			

				
					
【Spring Cloud Alibaba】13.自建存储对象服务与集成(minio版)

					
最新发布

				
			

			

				

					猫巳的博客
				

				

					06-07
					
					730
					
				

			

		

		

			
				
接下来对分布式项目实现存储对象服务器搭建与集成，本操作与前置步骤关系不大，大家可酌情查看前置步骤，详情请参照【Spring Cloud Alibaba】Spring Cloud Alibaba 搭建教程是一种云存储服务，用于存储和访问大量的非结构化数据，如图片、视频、文档等。它提供了高可靠性、高扩展性和低成本的存储解决方案，适用于各种云计算和大数据应用场景。MinIO：专注于对象存储，具有高性能和易用性，适合用于存储大量的非结构化数据。Ceph。

			
		

	





	

		

			

				
					
Amazon S3 对象存储Java API操作记录（Minio与S3 SDK两种实现）

				
			

			

				

					Gefangenes的博客
				

				

					05-17
					
					6909
					
				

			

		

		

			
				
按图中的模型，可简单理解为S3是由若干个桶（Bucket）组成，每个桶中包含若干个不同标识的对象（Object），还有就是统一的访问入口(RESTful API)，这样基本就足够了。如下图，我们可以把S3的存储空间想象成无限的，想存储一个任意格式的文件到S3服务中，只需要知道要把它放到哪个桶(Bucket)中，它的名字（Object Id）应该是什么。PS：客户现场部署的S3是浪潮公司提供的，如果现场遇到这个情况，就不要固执去找对方对线了，完全没用。最终换成了S3官方SDK可用了。

			
		

	



		

			
		



	

		

			

				
					
【Minio】minio客户端上提示 S3 API Requests must be made to API port

				
			

			

				

					qq_45797138的博客
				

				

					09-29
					
					1万+
					
				

			

		

		

			
				
minio客户端上提示 S3 API Requests must be made to API port

			
		

	





	

		

			

				
					
MinIO、FastDFS和Amazon S3

				
			

			

				

					weixin_51473488的博客
				

				

					06-27
					
					4854
					
				

			

		

		

			
				
FastDFS由一个跟踪器（tracker）和多个存储节点（storage node）组成，其中跟踪器用于管理文件的元数据，存储节点用于实际存储文件数据。MinIO对于小型和中型规模的存储需求是一个理想的选择，特别是在需要构建私有云存储环境或本地对象存储解决方案的情况下。S3具有高可靠性、持久性和可扩展性，通过多个数据中心和多个副本实现数据的备份和冗余存储，确保数据的高可用性和容错性。S3是一个全功能的对象存储服务，具有高可靠性和可扩展性，适用于云环境和大规模数据存储需求。

			
		

	





	

		

			

				
					
s3:使用Minio和AWS开发工具包进行s3功能测试

				
			

			

				

					04-11
				

			

		

		

			
				
 使用Minio和AWS开发工具包进行S3功能测试。 安装 安装Minio（ ）。  brew install minio / stable / minio  出口MINIO_ACCESS_KEY =“ Ieteen7g”  出口MINIO_SECRET_KEY =“ Oep0poh3”  以上密钥是通过pwgen...

			
		

	





	

		

			

				
					
minio基本使用，minio基本使用，minio基本使用

				
			

			

				

					03-24
				

			

		

		

			
				
总结，MinIO作为一款强大的对象存储解决方案，不仅易于使用，而且具有丰富的功能和高度的可扩展性。了解并熟练掌握MinIO的基本使用，将有助于你构建高效、安全的存储系统。无论是小型项目还是大型企业环境，MinIO都...

			
		

	





	

		

			

				
					
MINIO服务器基于AWS S3 SDK 文件上传及下载（C++实现类）

				
			

			

				

					11-14
				

			

		

		

			
				
在这个场景中，我们将探讨如何使用AWS S3 SDK（Software Development Kit）在C++中实现对MINIO服务器上的文件进行上传和下载。AWS S3 SDK为开发者提供了方便的API接口，可以轻松地在应用程序中集成S3服务。  首先，...

			
		

	





	

		

			

				
					
minio程序-文件系统转换为S3

				
			

			

				

					05-05
				

			

		

		

			
				
- **S3接口**：Amazon S3 API 是一种广泛采用的标准，MinIO兼容此接口，意味着你可以使用任何支持S3的客户端工具与MinIO交互。 - **分布式存储**：MinIO可以部署为单节点或分布式模式，后者可以扩展到数百个驱动器，...

			
		

	





	

		

			

				
					
moleculer-minio:molecule用于minio和S3的Molecularr服务混合器:floppy_disk:

				
			

			

				

					05-14
				

			

		

		

			
				
 该服务提供用于管理AWS S3或支持的后端中的存储桶和对象的操作。 它利用了Molecularr框架的文件流功能 特征 以下列表详细介绍了实现的功能 铲斗管理（创建，删除，列出）  对象管理（放置，列表，删除，统计）  预...

			
		

	





	

		

			

				
					
Amazon S3 对象存储Java API操作记录（Minio与S3 SDK两种实现）缘起

				
			

			

				

					wsnbb_2023的博客
				

				

					08-21
					
					2252
					
				

			

		

		

			
				
S3存储的基本操作就记录到这里了，由于没有S3存储就没尝试官方SDK的V2版本，由于这些代码是总结时从业务代码里抽取出来的，可能会有点问题，但大体思路已经有了。

			
		

	





	

		

			

				
					
使用docker版minio s3协议同步思源笔记

				
			

			

				

					cly0216的博客
				

				

					04-09
					
					4243
					
				

			

		

		

			
				
这里设置后需要重启docker（因为之前创建Bucket和设置区域都没有重启），我在极空间中需要停止-启动才可以。第一个是使用s3协议访问的端口，第二个是进行管理登录的端口，如果本地端口冲突自行更换即可。默认已经配置好了ddns，配置端口转发（tp-link中是虚拟服务器），两个端口都要配置。注意：初次同步是全量同步，耗时较久(与笔记大小有关)，过程中请勿打断，耐心等待同步完成。设置该密钥只能访问指定创建的Bucket，不修改默认是全部权限。注意：docker版只能在创建容器的时候设置用户名和密码。

			
		

	





	

		

			

				
					
开源minio-AWS-S3存储的部署及java操作

				
			

			

				

					不积跬步，无以至千里；不积小流，无以成江海。
				

				

					09-13
					
					5779
					
				

			

		

		

			
				
简介
MinIO 是在 GNU Affero 通用公共许可证 v3.0 下发布的高性能对象存储。它是与 Amazon S3 云存储服务兼容的 API。使用 MinIO 为机器学习、分析和应用程序数据工作负载构建高性能基础架构。
搭建mini
MinIO 需要一个持久卷来存储配置和应用程序数据。但是，出于测试目的，您可以通过简单地传递一个目录（/data在下面的示例中）来启动 MinIO 。该目录是在容器启动时在容器文件系统中创建的。但是容器退出后所有的数据都丢失了。如果打算持久化，进行挂载即可。
docke

			
		

	





	

		

			

				
					
MinIO与传统的对象存储系统相比有以下几个不同之处

				
			

			

				

					jakelihua
				

				

					09-04
					
					614
					
				

			

		

		

			
				
部署方式：传统的对象存储系统通常需要在专用的硬件设备上部署，并且需要进行复杂的配置和管理。而MinIO可以在常见的硬件设备上部署，如标准的x86服务器或云实例，并且提供了简单的部署和管理工具。通过以上实例和案例，我们可以看到MinIO与传统的对象存储系统相比具有更高的可扩展性、更灵活的数据访问方式、更简化的部署和管理过程以及更开放的定制能力。架构设计：传统的对象存储系统通常采用集中式的架构，将所有的数据存储在一个中心化的存储设备中。开源性质：MinIO是一个开源的对象存储系统，可以免费使用和修改。

			
		

	





	

		

			

				
					
AWS-S3通用存储操作，操作minio、oss、cos等所有兼容s3协议的云存储（含有大文件分片上传实现）

					
热门推荐

				
			

			

				

					流氓兔的博客
				

				

					05-25
					
					2万+
					
				

			

		

		

			
				
【代码】AWS-S3通用存储操作，操作minio、oss、cos等所有兼容s3协议的云存储（含有大文件分片上传实现）

			
		

	





	

		

			

				
					
黑马Minio（对象存储服务MinIO）

				
			

			

				

					weixin_50458070的博客
				

				

					04-23
					
					1359
					
				

			

		

		

			
				
MinIO

			
		

	





	

		

			

				
					
Docker部署Minio S3第三方存储

				
			

			

				

					IT小辉同学
				

				

					05-20
					
					1003
					
				

			

		

		

			
				
你不要着急，你先去读你的书，我去看我的电影，总有一天，我们会窝在一起，读同一本书，看同一部电影。

			
		

	





	

		

			

				
					
访问minio地址的图片_在SpringBoot应用中使用Minio作为云存储服务

				
			

			

				

					06-09
				

			

		

		

			
				
好的，我理解了你的问题。如果你想在 SpringBoot 应用中使用 Minio 作为云存储服务，可以按照以下步骤进行操作：

1. 添加 Minio 客户端依赖

在 `pom.xml` 文件中添加 Minio 客户端依赖：

```xml
<dependency>
    <groupId>io.minio</groupId>
    <artifactId>minio</artifactId>
    <version>8.2.1</version>
</dependency>
```

2. 配置 Minio 客户端

在 `application.properties` 文件中添加以下配置：

```properties
minio.url=http://localhost:9000
minio.access-key=minio
minio.secret-key=minio123
minio.bucket-name=my-bucket
```

其中，`minio.url` 是 Minio 服务的访问地址，`minio.access-key` 和 `minio.secret-key` 是访问 Minio 服务的凭证，`minio.bucket-name` 是存储对象的桶名称。

3. 实现上传文件接口

```java
@RestController
public class FileController {

    @Autowired
    private MinioClient minioClient;

    @PostMapping("/files")
    public String uploadFile(@RequestParam("file") MultipartFile file) throws Exception {
        String fileName = file.getOriginalFilename();
        InputStream inputStream = file.getInputStream();
        long size = file.getSize();
        String contentType = file.getContentType();

        minioClient.putObject(PutObjectArgs.builder()
                .bucket("my-bucket")
                .object(fileName)
                .stream(inputStream, size, -1)
                .contentType(contentType)
                .build());

        return "File uploaded successfully: " + fileName;
    }
}
```

4. 实现展示图片接口

```java
@RestController
public class ImageController {

    @Autowired
    private MinioClient minioClient;

    @GetMapping("/images/{fileName}")
    public ResponseEntity<byte[]> getImage(@PathVariable String fileName) throws Exception {
        InputStream inputStream = minioClient.getObject(GetObjectArgs.builder()
                .bucket("my-bucket")
                .object(fileName)
                .build());

        byte[] bytes = IOUtils.toByteArray(inputStream);

        HttpHeaders headers = new HttpHeaders();
        headers.setContentType(MediaType.IMAGE_JPEG);
        headers.setContentLength(bytes.length);

        return new ResponseEntity<>(bytes, headers, HttpStatus.OK);
    }
}
```

在这个示例中，我们定义了一个 `FileController` 和一个 `ImageController`，分别用于上传文件和展示图片。其中，`ImageController` 中的 `getImage` 方法根据文件名从 Minio 服务中获取图片，并返回 `ResponseEntity<byte[]>` 对象，该对象包含图片的二进制数据和响应头信息，用于在浏览器中展示图片。

以上就是在 SpringBoot 应用中使用 Minio 作为云存储服务的步骤。希望能对你有所帮助。

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值