Docker部署ceph

于 2024-06-02 15:27:59 发布
阅读量1.2k 收藏 28
点赞数 39
分类专栏： 云计算 文章标签： docker ceph 云计算 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_73690719/article/details/139391588
版权

一、实验目的

Docker部署ceph

二、实验内容

Docker部署ceph

三、实验过程（步骤、命令或源程序代码）及结果（截图）

监控，存储

1.部署环境

三台网络互通的 CentOS 虚拟机。
右键要克隆的虚拟机、选择管理 ——> 克隆，进入克隆虚拟机向导，然后根据向导即可轻松创建。

克隆完成

主机名称主机IP说明
summer192.168.2.130osd、mon、mgr、rgw
ceph- 1192.168.2.140osd、mon
ceph- 2192.168.2.150osd、mon

2.虚拟机CentOS7三台集群配置网络

（1）进入虚拟机网络编辑器，选择VMnet8, 选择NAT模式，确定子网IP段


点击DHCP设置，看下IP使用范围段

看完可用IP段后，我们将三台虚拟机的IP确定下来

主机名称主机IP说明
summer192.168.2.130osd、mon、mgr、rgw
ceph- 1192.168.2.140osd、mon
ceph- 2192.168.2.150osd、mon

​

​

（2）对于虚拟机的配置

进入第一台CentOS 7虚拟机，使用命令：
先输入systemctl stop firewalld命令关闭防火墙，然后输入systemctl disable firewalld命令禁用防火墙

修改主机名（hostbname）:
不然会出现系统识别不出对应的虚拟机的情况，因为名字都一样
具体修改是通过命令hostnamectl set-hostname ***，例如：

修改后重启虚拟机，发现主机名被改变：

（3）配置Centos网络

通过命令到cd /etc/sysconfig/network-scripts到网络配置的目录下，找到当前虚拟机使用的网络的配置文件，修改为：

（4）修改host映射

通过命令vim /etc/hosts进入，加上所需的各个虚拟机的IP地址和主机号即可
修改完之后需要重启一下网络，使用命令service network restart,没有重启成功把虚拟机重启

（5）以同样的方式配置另外两台虚拟机

执行命令service network restart可能出现问题：
检查配置文件无问题还有报错
执行以下语句

$ systemctl stop NetworkManager
$ systemctl disable NetworkManager

重启网络：systemctl start network.service即可解决。
如上所述，如果不出意外，三台虚拟机之间应该可以相互ping通，下图是在summer上ping了ceph-1和在summer上ping了ceph-2的演示。

3.拉取镜像

# 拉取镜像

docker pull ceph/daemon:master-7ef46af-nautilus-centos-7-x86_64

# 更改镜像tag

docker image tag ceph/daemon:master-7ef46af-nautilus-centos-7-x86_64 ceph/daemon:latest

4.启动 mon 容器

（1）登陆到第一台服务器（summer）。

创建挂载目录，并赋予权限。

sudo mkdir -p "/root/ceph/etc"
sudo mkdir -p "/root/ceph/lib"
sudo mkdir -p "/root/ceph/logs"
sudo mkdir -p "/root/ceph/data"
chmod -R 777 /root/ceph

（2）启动容器。

docker run -d \
    --net=host \
--name=mon \
    --privileged=true \
    -v /root/ceph/etc:/etc/ceph \
    -v /root/ceph/lib:/var/lib/ceph/ \
    -v /root/ceph/logs:/var/log/ceph \
-e MON_IP=192.168.2.130,192.168.2.140,192.168.2.150 \
    -e CEPH_PUBLIC_NETWORK=192.168.2.0/24 \
    ceph/daemon mon

（3）复制配置文件到另外两台服务器.

# ceph-1 192.168.2.140

scp -r /root/ceph root@192.168.2.140:/root

# ceph-2 192.168.2.150

scp -r /root/ceph root@192.168.2.150:/root


（4）执行上面的容器启动命令，在另外两台服务器上启动 mon 容器。

docker run -d \
    --net=host \
--name=mon \
    --privileged=true \
    -v /root/ceph/etc:/etc/ceph \
    -v /root/ceph/lib:/var/lib/ceph/ \
    -v /root/ceph/logs:/var/log/ceph \
-e MON_IP=192.168.2.130,192.168.2.140,192.168.2.150 \
    -e CEPH_PUBLIC_NETWORK=192.168.2.0/24 \
    ceph/daemon mon


docker run -d \
    --net=host \
--name=mon \
    --privileged=true \
    -v /root/ceph/etc:/etc/ceph \
    -v /root/ceph/lib:/var/lib/ceph/ \
    -v /root/ceph/logs:/var/log/ceph \
-e MON_IP=192.168.2.130,192.168.2.140,192.168.2.150 \
    -e CEPH_PUBLIC_NETWORK=192.168.2.0/24 \
    ceph/daemon mon

（5）查看部署状态。如下图，三个 mon 节点启动成功。

docker exec mon ceph -s

4.启动 osd 容器

在三台主机上执行下面的（1）（2）操作

（1）执行如下命令，在 mon 节点生成 osd 密钥信息，否则启动 osd 容器会报错。

docker exec -it mon ceph auth get client.bootstrap-osd -o /var/lib/ceph/bootstrap-osd/ceph.keyring

（2）启动容器。

docker run -d \
    --net=host \
    --name=osd \
    --restart=always \
    --privileged=true \
    -v /root/ceph/etc:/etc/ceph \
    -v /root/ceph/lib/:/var/lib/ceph/ \
    -v /root/ceph/logs/:/var/log/ceph \
    -v /root/ceph/data/osd:/var/lib/ceph/osd \
    ceph/daemon osd_directory

（3）查看部署状态。如下图，三个 osd节点启动成功。

docker exec mon ceph -s

5.在三台主机上启动 mds 容器

 docker run -d \
     --net=host \
     --name mds \
     --restart=always \
     --privileged=true \
     -v /root/baseService/ceph/etc:/etc/ceph \
     -v /root/baseService/ceph/lib:/var/lib/ceph/ \
     -v /root/baseService/ceph/logs:/var/log/ceph \
     -e CEPHFS_CREATE=0 \
     -e CEPHFS_METADATA_POOL_PG=512 \
     -e CEPHFS_DATA_POOL_PG=512 \
     ceph/daemon mds

CEPHFS_CREATE 是为METADATA服务生成文件系统， 0表示不自动创建文件系统（默认值）， 1表示自动创建。
CEPHFS_DATA_POOL_PG是数据池的数量，默认为8。
CEPHFS_METADATA_POOL_PG是元数据池的数量，默认为8。

6.启动 rgw 容器

在summer主机上执行（1）（2）操作

（1）执行如下命令，在 mon 节点生成 rgw密钥信息，否则启动 rgw容器会报错。

docker exec mon ceph auth get client.bootstrap-rgw -o /var/lib/ceph/bootstrap-rgw/ceph.keyring

（2）启动容器。

docker run -d \
     --net=host \
     --name rgw \
     --restart=always \
     -p 7480:80 \
     -v /root/ceph/etc:/etc/ceph \
     -v /root/ceph/lib:/var/lib/ceph/ \
     -v /root/ceph/logs:/var/log/ceph \
     ceph/daemon rgw

7.启动 mgr 容器

（1）在summer主机上启动容器。

docker run -d --net=host  \
  --name=mgr \
  --restart=always \
  -v /root/ceph/etc:/etc/ceph \
  -v /root/ceph/lib:/var/lib/ceph \
  -v /root/ceph/logs:/var/log/ceph \
  ceph/daemon mgr

（2）查看部署状态。如下图，至此，Ceph 集群节点全部启动成功。

docker exec mon ceph -s

8.安装 Dashboard 管理后台

（1）开启 Dashboard 功能。

docker exec mgr ceph mgr module enable dashboard

（2）创建证书。

docker exec mgr ceph dashboard create-self-signed-cert

（3）创建登陆用户名和密码。

docker exec mgr ceph dashboard set-login-credentials cephAdmin cephPassword

（4）配置外部访问端口。

docker exec mgr ceph config set mgr mgr/dashboard/server_port 7800

（5）配置外部访问 ip。

docker exec mgr ceph config set mgr mgr/dashboard/server_addr 10.0.28.10

（6）关闭 HTTPS（如果没有证书或内网使用，可以关闭）。

docker exec mgr ceph config set mgr mgr/dashboard/ssl false

（7）重启mgr服务。

docker restart mgr

（8）查看 Dashboard 服务信息。

docker exec mgr ceph mgr services

（9）浏览器访问 Dashboard 管理页面。

http://192.168.2.130:7800/

（10）登录用第（3）步创建的登陆用户名和密码

cephAdmin cephPassword

（11）登录后的界面


夏summer天
关注
专栏目录
第一篇：用Docker搭建Ceph集群(nautilus版本)
码农飞哥
10-26 8330
在CentOS7上通过Docker搭建Ceph分布式文件系统
Docker安装部署Ceph
WinJay
01-28 1516
​Docker安装部署Ceph
Ceph-Docker 部署指南
gogo199779的博客
10-25 2772
Ceph-Docker 部署指南 USTC OSH-2021-x-DisGraFS小组 HurryPeng 本指南参考第一篇：用Docker搭建Ceph集群(nautilus版本)_码农飞哥-CSDN博客_ceph docker，部署了一个三节点的简单Ceph集群。相比原文，在功能上有所删减，但对于安装过程中可能出现的问题做了一些细节补充。阅读时，不妨将本问文为原文的一份“注”。在一些“你为什么不自己搜”的问题上，本指南尽量提供了有效的参考链接，以求对读者友好。 在阅读本文前，最好先对Ceph的整体.
使用 Docker 部署分布式存储系统——Ceph
最新发布
持续学习，稳中求进，努力输出高质量内容， 所有文章都会维护更新。
02-01 2452
Ceph 是一个开源的分布式存储系统，提供了对象存储、块存储和文件系统三种存储接口。Ceph 将数据存储在逻辑存储池中，使用 CRUSH 分布式算法决定如何将数据分散存储在集群的各个节点上，以实现高可用性和数据冗余。本文介绍如何使用 Ceph 的对象存储功能。
docker部署ceph集群
牛奔的博客
05-24 450
1. 创建Ceph专用网络 sudo docker network create --driver bridge --subnet 172.20.0.0/16 ceph-network 2. 拉取搭建用镜像 sudo docker pull ceph/daemon:latest-luminous 3. 搭建mon节点 sudo docker run -d --name ceph-mon --ne...
使用脚本和docker部署ceph集群
09-13
使用脚本和docker部署ceph集群. 不过得去每个机器上去指定执行一次(前提是先有docker, 并且有对应的docker- ceph镜像), 可以部署mon,osd,mgr,mds.这个是L版本的ceph, 支持多mds active. 也可以用ansible批量执行
docker部署ceph
08-31
要在Docker上部署Ceph，您可以按照以下步骤进行操作： 1. 首先，确保您的系统中已经安装了Docker和Docker Compose。 2. 创建一个用于Ceph容器的Docker Compose文件（比如docker-compose.yml），并添加以下内容： ...
使用docker部署ceph
09-08
使用Docker部署Ceph集群是一种方便且快捷的方法。可以通过脚本和Docker部署Ceph集群，需要在每个机器上执行指定的命令来完成部署。前提是需要提前安装好Docker，并且有对应的docker-ceph镜像。可以部署mon、osd、mgr...
Docker快速部署Ceph分布式集群
xu7065的博客
03-05 3393
最近工作上需要熟悉了解Ceph分布式存储，所以本地搭建一套Ceph来做测试。本文主要内容是使用Docker部署Ceph集群。 1.Ceph Ceph是一个可靠、自动重均衡、自动恢复的分布式存储系统，根据场景划分可以将Ceph分为三大块，分别是对象存储、块设备和文件系统服务。块设备存储是Ceph的强项。 RADOS是一个完整的分布式对象存储系统，它具有可靠、智能、分布式等特性，Ceph的高可...
Docker简单部署Ceph测试集群
weixin_33735077的博客
03-11 339
　　通过docker可以快速部署小规模Ceph集群的流程，可用于开发测试。　　以下的安装流程是通过linux shell来执行的;假设你只有一台机器，装了linux(如Ubuntu)系统和docker环境，那么可以参考以下步骤安装Ceph:　　# 1. 创建Ceph专用网络　　docker network create --driver bridge --subnet 172.20.0.0/16 ...
docker安装ceph分布式存储系统(多节点)
小明程序猿
09-13 2072
docker安装ceph，ceph集群
Docker快速部署Ceph测试集群
moxiaomomo的专栏
11-20 2037
本文记录了通过docker快速部署小规模Ceph集群的流程，可用于开发测试环境。 # 1. 创建Ceph专用网络 docker network create --driver bridge ceph-network docker network inspect ceph-network # 2. 删除旧的ceph相关容器 docker rm -f $(docker ps -a | grep cep...
用docker搭建Ceph集群（基于nautilus版本）
weixin_43740011的博客
05-20 940
在本文中，我们将使用Docker搭建Ceph集群。我们将使用nautilus版本，这是Ceph的最新长期支持版本。
Docker基础之搭建ceph环境
m0_43405302的博客
11-24 1197
基础环境配置 # ifconfig enp0s8: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500 inet 192.168.56.101 netmask 255.255.255.0 broadcast 192.168.56.255 inet6 fe80::2407:e89c:1adc:1272 prefixlen 64 scopeid 0x20<link> ether
Centos6.5：Docker下部署Ceph
破木吉他
02-18 1580
需求：Centos6.5环境下 实现在Docker上部署安装ceph集群
docker-compose 部署ceph集群
lihongbao80的专栏
11-16 1679
关闭防火墙 参照文档 前置条件 hostname ip test1 192.168.180.46 test2 192.168.180.47 test3 192.168.180.48 ceph 有三种存储方式： CephFS 挂载分区 挂载目录 RBD 对象存储 安装 Docker-Compose 创建文件夹为部署ceph做准备 [root@test1 ~]# mkdir -p /home/compose /etc/ceph/ /var/lib/ceph/ [ro
docker软件安装-ceph
wangjz2008的专栏
03-11 365
ceph安装 参考rabbitMQ 1、进入docker hub镜像仓库地址：https://hub.docker.com/ 2、搜索ceph，进入官方的镜像，在tag页签中可以看到几种类型的镜像； 3、拉取镜像： docker pull ceph/daemon:master-f0a1ab7-mimic-centos-7-x86_64 较新 # docker pull ceph/daemon:master-08456a7-mimic-centos-7-x86_64 较旧 docker im...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值