minio作为K8S后端存储

原创

已于 2025-02-21 00:33:20 修改 · 2.3k 阅读

16 ·

CC 4.0 BY-SA版权

文章标签：

#kubernetes #容器 #云原生

于 2025-02-21 00:13:40 首次发布

docker部署minio

mkdir -p /minio/data

docker run -d \
   -p 9000:9000 \
   -p 9001:9001 \
   --name minio \
   -v /minio/data:/data \
   -e "MINIO_ROOT_USER=jbk" \
   -e "MINIO_ROOT_PASSWORD=jbjbjb123" \
   quay.io/minio/minio server /data --console-address ":9001"

直接安装csi-s3

https://artifacthub.io/packages/helm/k8s-csi-s3/csi-s3
helm repo add kubeblocks https://apecloud.github.

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

野猪佩挤

关注关注

22
点赞
踩
16

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

k8s上部署minio 14.8.5 存储

11-29

6. 配置和使用MinIO：登录MinIO的管理界面，创建桶（Bucket）和用户，设置权限，然后就可以通过应用程序使用MinIO作为存储后端了。在整个部署过程中，需要关注的细节包括存储类（StorageClass）的选择，这将影响...

minio：高性能，Kubernetes本机对象存储

02-04

MinIO快速入门指南 MinIO是根据Apache许可v2.0发布的高性能对象存储。它与Amazon S3云存储服务兼容。使用MinIO构建用于机器学习，分析和应用程序数据工作负载的高性能基础架构。本自述文件提供了在裸机硬件（包括基于Docker的安装）上运行MinIO的快速入门说明。对于Kubernetes环境，请使用。 Docker安装使用以下命令在Docker容器上运行独立的MinIO服务器。独立的MinIO服务器最适合早期开发和评估。版本控制，对象锁定和存储桶复制等某些功能需要使用Erasure Coding进行分布式MinMin部署。为了扩展开发和生产，请在

1 条评论您还未登录，请先登录后发表或查看评论

ARM64 KubeBlocks mysql集群基于MiniO存储BackupRepo备份与恢复

最新发布

2504_90751023的博客

09-25

794

KubeBlocks 提供备份恢复功能，以确保数据的安全性和可靠性。KubeBlocks 的备份恢复功能依赖于 BackupRepo，在使用完整的备份恢复功能之前，首先需要配置 BackupRepo。

k8s使用minio分布式集群作为存储--基础配置篇

qq_43511677的博客

10-13

2313

背景：minio分布式集群是单独的服务，并没有被k8s管理，k8s与minio集群在不同的服务器上部署，k8s需要使用minio分布式集群作为k8s集群的配置文件及其他文件的存储介质。

KubeBlocks for MinIO 容器化之路

baidu_41642080的博客

09-01

599

在云原生环境中运行 MinIO 同样面临部署复杂、扩容受限、运维繁琐等挑战。KubeBlocks 作为面向有状态服务的开源 Kubernetes Operator，通过模块化的 MinIO Addon 实现了集群部署自动化、服务高可用、Server Pool 弹性扩容等能力，有效提升了 MinIO 的容器化体验。尽管如此， MinIO 在动态扩容灵活性、生态兼容性等方面仍有优化空间。我们也将持续打磨相关能力，助力 MinIO 成为云原生场景下更具竞争力的分布式存储解决方案。

【Kubernetes】k8s使用minio作为对象存储

m0_58096123的博客

02-27

6338

（1）安装kubectl-minio插件自选minio-operaterd的版本下载包访问地址：http://ip:9090。

k8s集成MinIo

cherryの技术文档

01-18

2162

本篇文章分享一下在k8s怎么集成minio做存储，并实现、动态存储卷，以及演示让pod使用这些存储卷的完整流程。

k8s-部署对象存储minio

anguoan的博客

06-03

1899

k8s部署minio,单机部署，集群部署

分布式数据库实践（二）

hacker_lli的博客

09-17

1275

目前其实有很多提供DRDS分布式数据库解决方案的服务商，比较流行的有阿里云。另外腾讯、百度、网易等几家大厂也都有提供这类服务，另外官方也提供了MySQL Cluster CGE企业级MySQL分布式集群服务。直接选择这些商业服务可以以最快的速度将现有系统迁移或者将新系统部署到分布式数据库环境中，但同时因为商业服务都有一个既成的整体框架，服务商能做到的只有根据需求进行微调，客户的自身系统或多或少要为分布式数据库的部署做一些相应调整。以百度云服务为例，演示一下操作。百度云分布式关系型数据库DRDS，官网上介

MinIO对象存储与K8S整合

weixin_51954021的博客

01-18

7073

一、MinIO 简介 MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等。 MinIO是一个非常轻量的服务,可以很简单的和其他应用的结合，类似 NodeJS, Redis 或者 MySQL。二、MinIO 优点高性能 minio是世界上最快的对象存储(官网说的: min.io/) 弹性扩

k8s 1.28.2 集群部署 harbor v2.11.1 接入 MinIO 对象存储

以梦为马|越骑越傻

10-15

1856

Harbor 官网Harbor 是一个开源的制品仓库相比较 docker registry，它可以通过策略和基于角色的访问控制来保护镜像Harbor 是 CNCF 毕业项目，提供合规性、性能和互操作性，帮助您跨 Kubernetes 和 Docker 等云原生计算平台一致、安全地管理镜像。

k8s中loki使用minio作为存储

旋转星球的博客

02-27

1548

正在使用Loki的版本是V2.9.4，并将S3配置为索引和块的存储后端。以下是具体配置，官方文档过于简洁。

MinIO分布式存储k8s集群部署

椰汁菠萝

08-31

5469

这种方式我并没有登录成功，可能这种代理只能通过localhost:9090访问，没有深入研究，我是通过ingress暴露地址，拿token进行访问的；这里使用的5.07，请根据自己k8s版本自行下载安装，https://github.com/minio/operator/releases。启动后，访问看板：http://127.0.0.1:9090/，输入设置的用户名密码，这样一个单节点MinIO就搭建好了；以上就是所有的必填项，其他配置，可以大概看下，不想看的点击创建也可；

K8S部署分布式文件存储minio两种部署方式

xiaxia2022的博客

10-21

5479

一.分布式文件存储系统有很多,比如hadoop的HDFS和FastDFS.今天部署minio文件系统。二.分布式文件存储minio GitHub官网和minio官网都有详细的文档 MinIO下载 minio/docs/orchestration/kubernetes at RELEASE.2020-04-15T19-42-18Z · minio/minio · GitHub 1.standalone方式部署 cat minio-deployment.yaml --- # 创建minio...

k8s部署minio对象存储

checkjiji的博客

08-01

479

需求：项目需要一个临时的对象存储，每个租户下的应用共用一个minio，删除租户时自动删除minio；需要持久存储，挂载目录为/data，有点乱，当笔记看.....

【收藏】K8S部署minio对象存储

学亮编程手记

08-23

1512

https://blog.csdn.net/networken/article/details/111469223

K8s 集群部署MinIO （Ubuntu 22.04.4）

牛牛的博客

08-04

1325

MinIO是一个开源的高性能对象存储服务器，兼容亚马逊S3 API，可作为私有化部署的S3替代方案。它具有高性能、云原生架构、简单易用等特点，支持单机和分布式两种部署模式。本文详细介绍了如何在Kubernetes中部署单节点MinIO服务，包括配置Docker代理、拉取镜像、创建PVC和Secret资源清单、编写Deployment和服务暴露配置等步骤。通过LoadBalancer类型的Service将MinIO的API(9000端口)和管理控制台(9001端口)暴露到外部，最终可通过浏览器使用admin/

(k8s)kubernetes 挂载 minio csi 的方式(pod挂载pvc存在csi驱动问题，挂载不上)

Richardlygo的博客

09-11

2341

修改csi-s3.yaml中的quay.io/k8scsi/csi-node-driver-registrar:v1.2.0为quay.io/k8scsi/csi-node-driver-registrar:v2.1.0。首先我们在K8S集群中创建一个Minio的S3凭证，yaml文件如下（注意，这里secret下面用的stringData，所以下面的数据不需要经过base64编码）首先我们把插件的yaml文件都下载下来，为了保证版本测试的一致性，我们下载v1.2.0-rc.2这个Tag。

K8s部署Minio使用NFS持久化存储

weixin_45432833的博客

12-30

1778

k8s部署minio存储环境

我k8s搭建了doris，怎么给doris挂载minio

04-01

<think>好的，我现在需要解决用户的问题：在Kubernetes上部署Doris时如何挂载MinIO作为存储。首先，我得回忆一下Doris在K8s中的常见部署方式，以及MinIO作为存储的挂载方法。用户提到的是挂载MinIO，而MinIO通常作为对象存储，和传统的块存储或文件存储不同。在Kubernetes中，挂载对象存储通常可以通过CSI驱动程序，比如MinIO的CSI插件或者使用s3fs等工具将MinIO桶挂载为文件系统。不过，Doris作为数据库，可能需要持久化存储，通常使用PVC（Persistent Volume Claim）来挂载存储卷。首先，我需要确认MinIO是否支持作为Kubernetes的持久化存储。一般来说，MinIO可以作为S3兼容的对象存储，而Kubernetes中可以使用类似aws-s3-csi-driver这样的CSI驱动来挂载S3存储为卷。或者，用户可能需要使用s3fs-fuse将MinIO的存储桶挂载到Pod中，这样Doris就可以像使用本地文件系统一样访问MinIO的数据。接下来，我需要考虑Doris的部署配置。Doris通常包含FE（Frontend）和BE（Backend）组件，这些组件可能需要不同的存储配置。例如，FE可能需要存储元数据，而BE可能需要存储数据文件。因此，在Kubernetes部署时，可能需要为每个组件创建对应的PVC，并关联到MinIO的存储。然后，我需要查找相关的Kubernetes配置示例。比如，创建一个StorageClass指向MinIO，然后通过PVC申请存储空间。或者，如果使用s3fs，可能需要先在Pod中安装s3fs，并在容器启动时挂载目录。不过，可能更标准的做法是使用CSI驱动，这样PVC可以直接引用MinIO的存储。另外，用户提供的引用中有提到使用kubectl apply来部署Flink CDC的配置，这可能涉及到YAML文件的编写。因此，用户可能需要编写Doris的部署YAML文件，并在其中配置volumeMounts和volumes部分，引用MinIO的存储。可能的步骤包括： 1. 部署MinIO的CSI驱动，如果存在的话。 2. 创建Secret存储MinIO的访问密钥。 3. 创建StorageClass和PersistentVolume（PV）或者直接使用PVC，指向MinIO。 4. 在Doris的Deployment或StatefulSet中挂载这些卷。需要注意的是，MinIO默认使用S3 API，所以可能需要配置Doris的存储路径为S3协议，比如s3://bucket-name/path。不过，这可能需要Doris本身支持S3作为存储后端，或者通过文件系统挂载的方式间接访问。此时可能需要查阅Doris的文档，确认是否支持直接使用S3存储，或者是否需要通过文件系统挂载。如果Doris支持S3，那么可能不需要挂载卷，而是直接配置S3的访问信息。但用户的问题明确提到“挂载MinIO作为存储”，所以可能需要通过文件系统方式。例如，使用s3fs将MinIO的存储桶挂载到Pod的某个路径，然后在Doris的配置中指定该路径作为数据目录。这种情况下，需要在Pod的初始化容器中安装s3fs，或者使用包含s3fs的镜像，并在启动时挂载。总结步骤可能如下： - 创建Secret保存MinIO的access key和secret key。 - 在Doris的Pod模板中，使用initContainer来安装s3fs，或者使用预装s3fs的镜像。 - 挂载Secret中的凭证到容器中。 - 使用s3fs命令挂载MinIO的存储桶到指定目录。 - 配置Doris的数据目录指向该挂载点。此外，用户提供的引用中有提到使用kubectl apply来应用YAML文件，所以可能需要编写一个YAML文件，包含上述配置。可能的YAML示例部分： ```yaml apiVersion: apps/v1 kind: StatefulSet metadata: name: doris-be spec: template: spec: initContainers: - name: s3fs-mount image: appropriate/s3fs command: - /bin/sh - -c - | echo $MINIO_ACCESS_KEY:$MINIO_SECRET_KEY > /etc/passwd-s3fs chmod 600 /etc/passwd-s3fs mkdir -p /mnt/minio s3fs my-minio-bucket /mnt/minio -o url=http://minio-service:9000 -o use_path_request_style volumeMounts: - name: minio-secret mountPath: /etc/passwd-s3fs subPath: passwd-s3fs - name: doris-data mountPath: /mnt/minio containers: - name: doris-be image: doris-image volumeMounts: - name: doris-data mountPath: /opt/doris/be/storage volumes: - name: minio-secret secret: secretName: minio-credentials - name: doris-data emptyDir: {} ``` 不过，这里可能需要调整，比如emptyDir是否适用，或者是否需要使用其他卷类型。另外，initContainer的方式可能只在启动时挂载，但s3fs需要持续运行，可能需要使用sidecar容器或者使用CSI驱动。另一种方法是使用CSI驱动，如csi-s3，这需要预先安装到K8s集群中。例如，配置StorageClass使用MinIO： ```yaml apiVersion: storage.k8s.io/v1 kind: StorageClass metadata: name: minio-s3 provisioner: ch.ctrox.csi.s3-driver parameters: mounter: s3fs options: "-o use_path_request_style -o url=http://minio-service:9000" csi.storage.k8s.io/provisioner-secret-name: minio-credentials csi.storage.k8s.io/provisioner-secret-namespace: default ``` 然后创建PVC： ```yaml apiVersion: v1 kind: PersistentVolumeClaim metadata: name: doris-pvc spec: accessModes: - ReadWriteMany resources: requests: storage: 10Gi storageClassName: minio-s3 ``` 然后在Doris的部署中引用该PVC： ```yaml volumeMounts: - name: minio-volume mountPath: "/opt/doris/be/storage" volumes: - name: minio-volume persistentVolumeClaim: claimName: doris-pvc ``` 不过，这需要集群中已安装对应的CSI驱动，并且正确配置。用户可能需要根据具体环境调整。此外，用户提供的引用中有一个关于MySQL主从复制的配置，这可能与数据导入有关，但当前问题主要关注存储挂载，所以可能不需要涉及。最后，需要验证配置是否正确，包括MinIO的访问权限、网络连通性，以及Doris是否能够正确读写挂载的存储。</think>### 在Kubernetes上部署Doris并挂载MinIO的配置步骤 #### 1. 准备工作 - **MinIO服务已部署**：确保MinIO在Kubernetes集群中运行，并暴露S3兼容的API端点（如`http://minio-service:9000`）[^4]。 - **Doris镜像准备**：构建或获取支持存储挂载的Doris FE/BE镜像。 #### 2. 创建MinIO访问凭证Secret 将MinIO的Access Key和Secret Key保存为Kubernetes Secret： ```yaml apiVersion: v1 kind: Secret metadata: name: minio-credentials type: Opaque data: access-key: BASE64_ENCODED_ACCESS_KEY secret-key: BASE64_ENCODED_SECRET_KEY ``` #### 3. 使用CSI驱动挂载MinIO（以csi-s3为例） ##### 3.1 安装CSI驱动参考[csi-s3文档](https://github.com/ctrox/csi-s3)安装驱动： ```bash kubectl apply -f https://raw.githubusercontent.com/ctrox/csi-s3/master/deploy/kubernetes/csi-s3.yaml ``` ##### 3.2 创建StorageClass ```yaml apiVersion: storage.k8s.io/v1 kind: StorageClass metadata: name: minio-s3 provisioner: ch.ctrox.csi.s3-driver parameters: mounter: s3fs options: "-o use_path_request_style -o allow_other -o url=http://minio-service:9000" csi.storage.k8s.io/provisioner-secret-name: minio-credentials csi.storage.k8s.io/provisioner-secret-namespace: default ``` #### 4. 部署Doris并挂载存储 ##### 4.1 创建PVC ```yaml apiVersion: v1 kind: PersistentVolumeClaim metadata: name: doris-minio-pvc spec: accessModes: - ReadWriteMany resources: requests: storage: 100Gi storageClassName: minio-s3 ``` ##### 4.2 Doris BE节点配置示例（StatefulSet） ```yaml apiVersion: apps/v1 kind: StatefulSet metadata: name: doris-be spec: serviceName: doris-be replicas: 3 template: metadata: labels: app: doris-be spec: containers: - name: doris-be image: apache/doris:2.0.4-be volumeMounts: - name: storage mountPath: /opt/doris/be/storage volumes: - name: storage persistentVolumeClaim: claimName: doris-minio-pvc ``` #### 5. 验证配置 - **检查挂载状态**： ```bash kubectl exec -it doris-be-0 -- df -h | grep '/opt/doris/be/storage' ``` - **测试数据读写**：通过Doris的MySQL协议端口插入测试数据，观察MinIO存储桶中是否生成对应文件。