MINIO存储服务部署（LINUX）

最新推荐文章于 2024-03-16 15:15:45 发布
最新推荐文章于 2024-03-16 15:15:45 发布
阅读量2.7k 收藏 9
点赞数
分类专栏： 文件存储服务 文章标签： 中间件
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42846057/article/details/127304886
版权

软件下载

！！！强烈建议同一个业务系统使用同一固定版本，防止版本变动带来的不必要的问题

下载最新版文件

wget https://dl.min.io/server/minio/release/linux-amd64/minio
wget https://dl.min.io/client/mc/release/linux-amd64/mc

注意：

  1. 生产环境部署时，密码一定要更换！！！
  2. 文中的IP地址一定要换成自己的实际IP地址。
  3. 注意防火墙的端口开放[9000-9010]，[19000-19010]，当然也可以更换为自己想要的端口。


部署运行

安装minio 和 mc

chmod +x minio
mv minio /usr/local/bin/

chmod +x mc
mv mc /usr/local/bin/

创建minio用户

# 创建用户组：-r创建一个系统账户
groupadd -r minio

# 创建用户 -M不创建用户的主目录  -r创建一个系统账户  -g新账户主组的名称或 ID
useradd -M -r -g minio minio

脚本方式部署

首先我们建议将脚本统一放在/opt/minio目录下，并授权给minio用户，包括后面自行编写的导入导出脚本

# 授权用户目录权限
chown minio:minio /opt/minio

# 赋予脚本执行权限
chmod 777 /opt/minio/*.sh

单节点单驱动器部署

不具有纠删码校验修复能力

简单、快速部署

  1. 创建和授权minio用户数据目录
mkdir /mnt/data
chown minio:minio /mnt/data
  1. 启动脚本 /opt/minio/minio-simple-start.sh
#!/bin/bash

RUNNING_USER=minio
MINIO_ROOT_USER=minioadmin
MINIO_ROOT_PASSWORD=miniopwd
MINIO_DATA=/mnt/data

START_CMD="MINIO_ROOT_USER=${MINIO_ROOT_USER} MINIO_ROOT_PASSWORD=${MINIO_ROOT_PASSWORD} \
nohup minio server --console-address ":19000" ${MINIO_DATA} \
> ./minio-simple-run.log 2>&1 &"

su ${RUNNING_USER} -c "${START_CMD}"
echo "${START_CMD}"
  1. 管理操作
# 启动实例
./minio-simple-start.sh
# 访问控制台 （注意：访问http://ip:9000也会直接重定向到19000端口）
http://ip:19000
# 查看日志
tail -100f minio-simple-run.log
# 查看所有minio进程
ps -ef |grep minio
# 杀死所有minio进程
ps -aux | grep minio | awk '{print $2}' | xargs kill

在这里插入图片描述



单节点多驱动器部署

具有纠删码校验修复能力

下例中/mnt/disk{1…4}，用的是目录模拟的驱动器，实际生产环境中，应挂载为4个磁盘

  1. 创建和授权minio用户数据模拟的驱动器目录
mkdir /mnt/disk1 /mnt/disk2 /mnt/disk3 /mnt/disk4
chown minio:minio /mnt/disk1 /mnt/disk2 /mnt/disk3 /mnt/disk4
  1. 启动脚本 /opt/minio/minio-start.sh
#!/bin/bash

RUNNING_USER=minio
MINIO_ROOT_USER=minioadmin
MINIO_ROOT_PASSWORD=miniopwd
MINIO_DATA=/mnt/disk{1...4}

# CI=true 允许根目录磁盘作为驱动器（模拟时使用，生产环境可去除）
START_CMD="MINIO_ROOT_USER=${MINIO_ROOT_USER} MINIO_ROOT_PASSWORD=${MINIO_ROOT_PASSWORD} CI=true\
nohup minio server --console-address ":19000" ${MINIO_DATA} \
> ./minio-run.log 2>&1 &"

su ${RUNNING_USER} -c "${START_CMD}"
echo "${START_CMD}"
  1. 管理操作
# 启动实例
./minio-start.sh
# 访问控制台 （注意：访问http://ip:9000也会直接重定向到19000端口）
http://ip:19000
# 查看日志
tail -100f minio-run.log
# 查看所有minio进程
ps -ef |grep minio
# 杀死所有minio进程
ps -aux | grep minio | awk '{print $2}' | xargs kill

在这里插入图片描述



多节点多驱动器部署

具有纠删码校验修复能力

模拟准备四个节点，每个节点四个驱动器

本例中用的是目录模拟的节点和驱动器，实际生产环境中，应以4个服务器作为节点，每个节点挂载为4个磁盘

  1. 创建和授权minio用户数据模拟的节点以及驱动器目录
mkdir /mnt/mdata && mkdir /mnt/mdata/node1 /mnt/mdata/node2 /mnt/mdata/node3 /mnt/mdata/node4
mkdir /mnt/mdata/node1/disk1 /mnt/mdata/node1/disk2 /mnt/mdata/node1/disk3 /mnt/mdata/node1/disk4
mkdir /mnt/mdata/node2/disk1 /mnt/mdata/node2/disk2 /mnt/mdata/node2/disk3 /mnt/mdata/node2/disk4
mkdir /mnt/mdata/node3/disk1 /mnt/mdata/node3/disk2 /mnt/mdata/node3/disk3 /mnt/mdata/node3/disk4
mkdir /mnt/mdata/node4/disk1 /mnt/mdata/node4/disk2 /mnt/mdata/node4/disk3 /mnt/mdata/node4/disk4

# 赋予用户和文件夹读写权限，否则会无权限错误
chown minio:minio /mnt/mdata
# 赋予所有节点可读写权限，否则建立驱动器时会报错
chmod -R 777 /mnt/mdata

  1. 启动脚本 /opt/minio/minio-multi-start.sh
#!/bin/bash

RUNNING_USER=minio
MINIO_HOST=192.168.1.110
MINIO_ROOT_USER="minioadmin"
MINIO_ROOT_PASSWORD="miniopwd"

for i in {1..4}; do
    START_CMD="MINIO_ROOT_USER=${MINIO_ROOT_USER} MINIO_ROOT_PASSWORD=${MINIO_ROOT_PASSWORD} \
    nohup minio server --address "${MINIO_HOST}:900${i}" --console-address "${MINIO_HOST}:1900${i}" \
    http://${MINIO_HOST}:9001/mnt/mdata/node1/disk{1...4} \
    http://${MINIO_HOST}:9002/mnt/mdata/node2/disk{1...4} \
    http://${MINIO_HOST}:9003/mnt/mdata/node3/disk{1...4} \
    http://${MINIO_HOST}:9004/mnt/mdata/node4/disk{1...4} \
    > ./minio-multi-run${i}.log 2>&1 &"
    su ${RUNNING_USER} -c "${START_CMD}"
    echo "${START_CMD}"
done
  1. 管理操作
# 启动实例
./minio-multi-start.sh
# 访问控制台 （注意：访问http://ip:9001也会直接重定向到19001端口）
http://ip:19001
http://ip:19002
...
# 查看日志
tail -100f minio-multi-run1.log
tail -100f minio-multi-run2.log
...
# 查看所有minio进程
ps -ef |grep minio
# 杀死所有minio进程
ps -aux | grep minio | awk '{print $2}' | xargs kill

在这里插入图片描述

  1. 多节点nginx负载均衡
    upstream http_minio {
        server 192.168.1.110:9001;
        server 192.168.1.110:9002;
        server 192.168.1.110:9003;
        server 192.168.1.110:9004;
    }

    server{
        listen       9000;
        server_name  192.168.1.110;

        ignore_invalid_headers off;
        proxy_buffering off;

        location / {
            proxy_set_header   X-Real-IP $remote_addr;
            proxy_set_header   X-Forwarded-Host  $host:$server_port;
            proxy_set_header   X-Forwarded-For $proxy_add_x_forwarded_for;
            proxy_set_header   X-Forwarded-Proto  $http_x_forwarded_proto;
            proxy_set_header   Host $http_host;

            proxy_connect_timeout 300; #秒
            proxy_http_version 1.1;
            client_body_buffer_size 100m;
            client_max_body_size 1000m;
            chunked_transfer_encoding off;
            proxy_ignore_client_abort on;

            proxy_pass http://http_minio;
        }
    }

然后就可以通过：192.168.1.110:9000 直接访问API了，当然访问控制台还是会重定向到1900{1…4}端口。



服务方式部署

官方文档

点击查看官方文档

使用多驱动器的建议

  1. 如果使用多驱动器，强烈建议使用具有 XFS 格式磁盘的直连 JBOD 阵列，以获得最佳性能。
  2. 多个磁盘确保具有相同的容量和格式，否则minio会限制每个磁盘的容量为最小的那个。
  3. 挂在磁盘时确保使用/etc/fstab，保证每次重启自动挂载磁盘。
  4. MinIO 不支持将具有现有 MinIO 数据的驱动器任意迁移到新的挂载位置
mkfs.xfs /dev/sdb -L DISK1
mkfs.xfs /dev/sdc -L DISK2
mkfs.xfs /dev/sdd -L DISK3
mkfs.xfs /dev/sde -L DISK4

nano /etc/fstab

  # <file system>  <mount point>  <type>  <options>         <dump>  <pass>
  LABEL=DISK1      /mnt/disk1     xfs     defaults,noatime  0       2
  LABEL=DISK2      /mnt/disk2     xfs     defaults,noatime  0       2
  LABEL=DISK3      /mnt/disk3     xfs     defaults,noatime  0       2
  LABEL=DISK4      /mnt/disk4     xfs     defaults,noatime  0       2

单节点单/多驱动器分布式部署
  1. 创建 /etc/systemd/system/minio.service 服务
cd /etc/systemd/system/
touch minio.service

/etc/systemd/system/minio.service

[Unit]
Description=MinIO
Documentation=https://min.io/docs/minio/linux/index.html
Wants=network-online.target
After=network-online.target
AssertFileIsExecutable=/usr/local/bin/minio

[Service]
WorkingDirectory=/usr/local

# Run Os User
User=minio
Group=minio
ProtectProc=invisible

EnvironmentFile=/etc/default/minio
ExecStartPre=/bin/bash -c "if [ -z \"${MINIO_VOLUMES}\" ]; then echo \"Variable MINIO_VOLUMES not set in /etc/default/minio\"; exit 1; fi"
ExecStart=/usr/local/bin/minio server $MINIO_OPTS $MINIO_VOLUMES

# Let systemd restart this service always
Restart=always

# Specifies the maximum file descriptor number that can be opened by this process
LimitNOFILE=65536

# Specifies the maximum number of threads this process can create
TasksMax=infinity

# Disable timeout logic and wait until process is stopped
TimeoutStopSec=infinity
SendSIGKILL=no

[Install]
WantedBy=multi-user.target

# Built for ${project.name}-${project.version} (${project.name})
  1. 创建和授权minio用户数据模拟的驱动器目录
# 用于模拟多驱动器的目录
mkdir /mnt/disk1 /mnt/disk2 /mnt/disk3 /mnt/disk4
chown minio:minio /mnt/disk1 /mnt/disk2 /mnt/disk3 /mnt/disk4

# 用于单驱动器的目录
mkdir /mnt/data
chown minio:minio /mnt/data
  1. 创建环境变量（注意更改用户名/密码）
# windows的在C:\minio\config
touch /etc/default/minio
vi  /etc/default/minio

/etc/default/minio 文件内容如下

# MINIO_ROOT_USER and MINIO_ROOT_PASSWORD sets the root account for the MinIO server.
# This user has unrestricted permissions to perform S3 and administrative API operations on any resource in the deployment.
# Omit to use the default values 'minioadmin:minioadmin'.
# MinIO recommends setting non-default values as a best practice, regardless of environment

MINIO_ROOT_USER=minioadmin
MINIO_ROOT_PASSWORD=miniopwd

# MINIO_VOLUMES sets the storage volume or path to use for the MinIO server.

# 单驱动器
# MINIO_VOLUMES="/mnt/data"
# 多驱动器（至少4个以上）
MINIO_VOLUMES="/mnt/disk{1...4}"

# 控制台访问端口
MINIO_OPTS="--console-address :19000"

# 该参数设置为true支持挂载根目录的多驱动器部署
CI=true

# MINIO_SERVER_URL sets the hostname of the local machine for use with the MinIO Server
# MinIO assumes your network control plane can correctly resolve this hostname to the local machine

# Uncomment the following line and replace the value with the correct hostname for the local machine.

#MINIO_SERVER_URL="http://minio.example.net"
  1. 管理操作
# 启用服务
systemctl enable minio.service
# 启动 sudo systemctl start minio.service
systemctl start minio.service
# 重启
systemctl restart minio.service
# 停止
systemctl stop minio.service

# 查看状态
systemctl status minio.service
journalctl -f -u minio.service

多节点多驱动器

对于多节点驱动器部署，至少需要4个以上的节点才能满足最低的纠删码校验修复功能

多节点多驱动器服务部署是官方的方式目前没有实验过,所以本文档可能参考的意义不多。

建议可直接翻阅官方文档。

多节点多驱动器官方文档


MinIO 强烈建议为部署中的所有节点选择基本相似的硬件配置。确保硬件（CPU、内存、主板、存储适配器）和软件（操作系统、内核设置、系统服务）在所有节点上保持一致。


  1. 按照单节点的步骤部署4台存储服务

部署具有单个服务器池，该池由四个具有顺序主机名的 MinIO 服务器主机组成。

# IP
192.168.10.101
192.168.10.102
192.168.10.103
192.168.10.104

# 或主机名
minio1.example.com
minio3.example.com
minio2.example.com   
minio4.example.com

每个服务器上的 /etc/default/minio 文件内容应调整如下

# Set the hosts and volumes MinIO uses at startup
# The command uses MinIO expansion notation {x...y} to denote a
# sequential series.
#
# The following example covers four MinIO hosts
# with 4 drives each at the specified hostname and drive locations.
# The command includes the port that each MinIO server listens on
# (default 9000)

# MINIO_VOLUMES="http://192.168.10.10{1...4}:9000/mnt/disk{1...4}"
MINIO_VOLUMES="https://minio{1...4}.example.net:9000/mnt/disk{1...4}"

# Set all MinIO server options
#
# The following explicitly sets the MinIO Console listen address to
# port 9001 on all network interfaces. The default behavior is dynamic
# port selection.

MINIO_OPTS="--console-address :19000"

# Set the root username. This user has unrestricted permissions to
# perform S3 and administrative API operations on any resource in the
# deployment.
#
# Defer to your organizations requirements for superadmin user name.

MINIO_ROOT_USER=minioadmin

# Set the root password
#
# Use a long, random, unique string that meets your organizations
# requirements for passwords.

MINIO_ROOT_PASSWORD=miniopwd

# 负载均衡URL设置
# Set to the URL of the load balancer for the MinIO deployment
# This value *must* match across all MinIO servers. If you do
# not have a load balancer, set this value to to any *one* of the
# MinIO hosts in the deployment as a temporary measure.
# MINIO_SERVER_URL="http://192.168.10.100:9000"
MINIO_SERVER_URL="https://minio.example.net:9000"


可能的问题

1. 遇到类似 Unknown lvalue ‘ProtectProc’ in section ‘Service’
# 升级systemd
yum install systemd-* -y
2. Error: Disk /mnt/disk1 is part of root disk
# /etc/default/minio 文件下 设置CI=true
# 这是因为minio默认不允许多驱动器模式直接使用根目录的磁盘
CI=true


迁移备份

# 从机器1 迁移到 机器2
# 设置机器1别名
mc alias set mdata http://127.0.0.1:9000 minioadmin miniopwd
# 查看已设置的别名列表
mc alias list

# 导出备份 mdata：别名，base：存储桶
mc cp --recursive mdata/base/ /mnt/minio_data_bak/

# 将minio_data_bak打包迁移到机器2

# 设置机器2别名
mc alias set mdata http://127.0.0.1:9000 minioadmin miniopwd
# 导入备份文件 mdata：别名，base：存储桶
mc cp --recursive /mnt/minio_data_bak/ mdata/base/

更多MC命令可参考官方文档：

mc命令操作说明

结语

如有错误请指正，非常感谢！

WEB届的阿猫阿狗
关注
  • 0
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
minio linux服务 Minio配置启动脚本
01-25
liunx自启动、接口封装、部署、word预览https://so.csdn.net/so/search?q=minio&t=blog&u=zhanghuaiyu_35minio -minio -minio.service -start.sh -conf/minio.conf
MinIO在Linux环境下单机安装部署
欧阳啸天的专栏
07-25 6191
MinIO 是一个基于 Go语言实现的高性能对象存储。它采用AGPL（GNU Affero General Public License） 开源协议并兼容 S3 协议。
Linux下minio单机和集群部署
weixin_48008501的博客
11-08 864
【代码】Linux下minio单机和集群部署。
Linux环境下Minio的安装部署与启动教程（完整版）
最新发布
qinshengfei的专栏
03-16 1141
Minio是一个开源、分布式的对象存储系统，专为云原生环境设计。它提供了一个基于标准的Amazon S3兼容接口，使得开发者可以使用熟悉的API在私有云或边缘环境中部署和管理大规模非结构化数据，如图片、视频、日志文件等。
Linux部署Minio
bbs的博客
02-01 2025
Linux部署minio
Linux 部署单机MinIO
江湖行骗老中医
11-01 2357
设置公开访问 永久访问链接。尝试创建一个桶并上传一个文件。登录后创建bucket。
Linux|minio对象存储服务的部署和初步使用总结
zsk_john的技术分享专用博客
05-19 3392
minio是一个非常轻量化的对象存储服务，是可以算到云原生领域的。 该服务是使用go语言编写的，因此，主文件就一个文件，它的下载，部署什么的都是非常简单的，一般两三步就可以搭建好了，只是有一些细节问题需要在部署使用的时候注意。 本文将就一个可用的minio存储服务部署做一个尽量详细的讲解，并探讨如何将该技术落地
linux配置minio，包含集群配置
xnian_的博客
05-27 7771
MinIO 英文官网地址。
Unknown lvalue ‘ProtectKernelModules‘ in section ‘Service‘
kl专栏
11-29 1103
Unknown lvalue 'ProtectKernelModules' in section 'Service'
linux下minio文件存储服务一键安装包
02-16
1：打包好的一键安装包;可在centos7以上一键安装 安装步骤： 1：拷贝到/home 目录下 2：授权chmod a+x minioServer_64_20220117.bin 3：执行bash minioServer_64_20220117.bin
Minio集成服务部署安装包
11-20
整合后的minio安装包，可以直接安装为winows服务启动，请修改相关配置文件路径及对应文件夹
minio文件存储服务
08-16
新建一个目录存放minio文件，如 D:\minioData，CMD进入刚刚下载的minio.exe所在目录，直接在cmd下运行:minio.exe server D:\minioData 启动成功以后如记住显示的access Key和Secret Key (默认全是minioadmin) ...
minio存储服务端部署及使用说明
05-26
minio存储服务端部署及使用说明 Centos7 安装 Minio （文件服务器）
linux部署minio
qq_42855167的博客
02-17 454
linux部署minio
linux部署Minio(分布式文件服务器)
孙冉的博客
06-22 3874
linux部署minio
Linux环境下安装部署MinIo服务
programm_er的博客
10-31 718
在Linux环境下安装部署MinIo
Linux MinIO 安装与配置(清晰明了)
sout-lanys
09-26 2747
Minio是一个轻量级、高性能的对象存储服务，支持多云环境，并且可以在大部分操作系统上运行，包括Linux、Windows、MacOS等。下面我们来看一下如何在Linux上搭建一个Minio。
linux部署minio对象存储、docker部署minio象存储、k8s部署minio象存储
MssGuo的博客
10-16 1852
minio有两个端口，一个 minio servers的端口，也就是api端口，默认9000，一个是minio console端口，即控制台端口，控制台端口可以自定义，控制台端口用于外部浏览器访问，不同版本minio的默认控制台端口可能不同，如有的是9001，有的是9090，浏览器使用9000端口访问，默认会跳转到控制台端口。linux部署minio:1、使用linux部署minio，单台单磁盘部署minion，存在服务器宕机、磁盘损坏的情况;
Linux 搭建部署Minio分布式集群
小红
02-13 1211
Centos8.5 搭建Minio分布式集群 :4个节点每个节点4个分区。1个负载
minio linux部署
08-01
要在Linux上部署Minio，您可以按照以下步骤进行操作： 1. 首先，您需要下载Minio的安装包。您可以从Minio的官方网站下载安装包[2]。您可以使用wget命令下载安装包，例如： ``` wget https://dl.min.io/server/minio/release/linux-amd64/minio ``` 2. 下载完成后，您需要为Minio的安装包添加执行权限。您可以使用chmod命令为安装包添加执行权限，例如： ``` chmod +x minio ``` 3. 接下来，您可以设置Minio的根用户和密码。您可以使用以下命令设置根用户和密码： ``` export MINIO_ROOT_USER=admin export MINIO_ROOT_PASSWORD=password ``` 4. 然后，您可以启动Minio服务器。您可以使用以下命令启动Minio服务器，并指定数据存储路径和控制台地址： ``` ./minio server /mnt/data --console-address ":9001" ``` 请注意，上述命令中的`/mnt/data`是您指定的数据存储路径，您可以根据需要进行更改。 这样，您就成功在Linux上部署了Minio服务器。您可以通过访问指定的控制台地址来管理和访问Minio服务器。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

WEB届的阿猫阿狗

即使没有奖励，我也不会停下脚步

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值