ceph osd集群网络配置修改

最新推荐文章于 2023-04-19 11:02:27 发布
最新推荐文章于 2023-04-19 11:02:27 发布
阅读量555 收藏
点赞数
分类专栏： 分布式存储-ceph 文章标签： centos linux ubuntu 后端 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40017427/article/details/124946603
版权

# ceph osd dump

可以看到osd 运行在Public网络面，集群通信也是在Public网络上面，故需要修改~

解决办法:

/# ceph orch ls

NAME                       RUNNING  REFRESHED  AGE  PLACEMENT                                           IMAGE NAME               IMAGE ID     

iscsi.iscsi                    1/1  10m ago    2w   label:ISCSI                                         docker.io/ceph/ceph:v15  2cf504fded39 

mds.HKHKGALC                   3/3  10m ago    5w   label:MDS                                           docker.io/ceph/ceph:v15  2cf504fded39 

mgr                            3/3  10m ago    5w   label:MGR                                           mix                      2cf504fded39 

mon                            3/3  10m ago    2w   HKHKGALC8013CEPH;HKHKGALC8012CEPH;HKHKGALC8011CEPH  mix                      2cf504fded39 

osd.None                       8/0  6m ago     -    <unmanaged>                                         docker.io/ceph/ceph:v15  2cf504fded39 

# ceph orch stop --service_name osd.None

# ceph orch start --service_name osd.None

# ceph daemon osd.32 config show |grep cluster_network

    "cluster_network": "10.0.0.0/24",

    "cluster_network_interface": "",

# ceph osd dump    // 问题已解决~

wx_doitroot
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ceph 集群 多网络 配置 （public、cluster、network、addr ）
cgtxsgeoo421515302的博客
07-26 5318
1、简介 多网络的情况下，不进行多网络配置，会导致 osd 访问 错乱了（导致整个集群 访问混乱），本文描述 如何 处理 多个 网络的问题处理（public、cluster、network、addr） 2、多网络 配置 2.1 整体 架构 2.2 配置 参数 直接 写在 配置 文件中，重启服务 ## 网段 public_network = 192.168.0....
Ceph修改OSD和Monitor的网络
for_tech的博客
05-17 4278
修改Ceph的OSD和Monitor网络配置
ceph 手工部署osd
01-12
ceph 集群中如何手工部署osd，
ceph集群(centos7)安装配置文档201510
09-28
简介： 4 一：安装配置环境介绍 5 1：系统版本： 5 2：内核版本： 5 3：ceph版本： 5 4：ceph-deploy版本： 5 4：网络拓扑图 6 5：设备位置图 6 6：服务器配置信息及运行服务统计 7 二：系统软件基础包初始化: 10 1：安装 EPEL 软件源： 10 2：常用软件包、常用工具等（非必须、推荐安装） 10 三：集群主机系统初始化准备 10 1：规范系统主机名； 11 2：添加hosts文件实现集群主机名与主机名之间相互能够解析 11 3：每台 ssh-copy-id 完成这些服务器之间免ssh密码登录； 11 4：关闭防火墙或者开放 6789/6800~6900端口、关闭SELINUX； 11 5：关闭防火墙及开机启动 12 5：配置ntp服务，保证集群服务器时间统一； 12 6：系统优化类 12 四：集群优化配置 12 1：优化前提 12 2: 开启VT和HT 13 3：关闭CPU节能 13 4：关闭NUMA 13 5：网络优化 15 6：修改read_ahead 15 7：关闭swap 16 8：调整Kernel pid max 16 9：修改I/O Scheduler 16 五：安装部署主机（ceph-deploy）安装环境准备 17 1：建立主机列表 17 2：为所有集群主机创建一个 ceph 工作目录 17 3：同步hosts文件 17 4：测试主机名解析 17 5：ceph-deploy安装配置 18 六:创建mon 节点 18 1：安装部署集群软件包： 18 2：在安装部署节使用ceph-deploy创建，生成MON信息： 18 3：添加初始monitor节点和收集秘钥 18 4：验证集群mon节点安装成功 19 七：安装集群osd服务 19 1：查看一下 Ceph 存储节点的硬盘情况： 19 2：批量格式化磁盘 20 3：执行osd初始化命令 21 4：验证日志写入位置在ssd 硬盘分区成功 22 5：验证osd启动状态 22 6：PGs per OSD (2 < min 30)报错解决： 23 7：官方推荐pg计算公式 24 八：添加元数据服务器 24 1：添加元数据服务器 24 2：验证mds服务 24 3：删除mds节点 26 4：同步集群配置文件 26 九：crush 规则配置 26 1：ceph crush规则介绍 26 2：集群crush规则配置 27 3：修改crushmap信息 28 十：集群配置清理 29 1:清理软件包 29 2：卸载之前挂载的osd磁盘 29 3：将写入分区表的分区挂载 29 4：查看一下状态，仅剩余系统盘 30 5：清理残余key文件和残余目录 30 6：新建安装目录 30 7：重新部署集群 30 十一：集群配置参数优化 30 1：配置参数优化 30 2：同步集群配置文件 49 十二：ceph集群启动、重启、停止 49 1：ceph 命令的选项 49 2：启动所有守护进程 50 3:启动单一实例 50 十三：维护常用命令 50 1：检查集群健康状况 50 1：检查集群健康状况 50 2：检查集群的使用情况 51 3：检查集群状态 51 4：检查MONITOR状态 52 5：检查 MDS 状态: 52 十四：集群命令详解 52 1：mon 相关 52 2： msd 相关 53 4：ceph auth 相关 54 5：osd 相关 54 6：pool 相关 56 7：rados命令相关 57 8：PG 相关 59 9： rbd命令相关 61 十五：ceph 日志和调试设置 63 1：配置文件修改 63 2：在线修改日志输出级别 63 3：修改集群子系统，日志和调试设置 64 4：日志输出级别默认值 65
1.3网络配置参考.pdf
11-26
网络配置对于构建高性能Ceph存储集群至关重要。 Ceph存储集群不代表Ceph客户端执行请求路由或调度。相反，Ceph客户端直接向Ceph OSD守护程序发出请求。 Ceph OSD守护程序代表Ceph客户端执行数据复制，这意味着复制和其他因素会在Ceph存储集群网络上施加额外的负载。 我们的快速入门配置提供了一个简单的Ceph配置文件，该文件仅设置监视器IP地址和守护程序主机名。除非指定集群网络，否则Ceph将假定为单个“公共”网络。 Ceph只能在公共网络上正常运行，但是大型集群中的第二个“集群”网络可能会显着改善性能。 可以使用两个网络来运行Ceph存储集群：一个公共（前端）网络和一个集群（后端）网络。但是，这种方法使网络配置（包括硬件和软件）复杂化，并且通常不会对整体性能产生重大影响。因此，我们通常建议双NIC系统在同一网络上配置两个IP或绑定。
使用脚本和docker部署ceph集群
09-13
使用脚本和docker部署ceph集群. 不过得去每个机器上去指定执行一次(前提是先有docker, 并且有对应的docker- ceph镜像), 可以部署mon,osd,mgr,mds.这个是L版本的ceph, 支持多mds active. 也可以用ansible批量执行
ceph集群的配置参考说明书.doc
11-26
硬件建议部分提供了一些用于配置Ceph存储集群的硬件指南。 一个Ceph节点可以运行多个守护程序。 例如，具有多个驱动器的单个节点可以为每个驱动器运行一个ceph-osd。 理想情况下，将具有用于特定类型流程的节点。 例如，某些节点可能运行ceph-osd守护程序，其他节点可能运行ceph-mds守护程序，而其他节点可能运行ceph-mon守护程序。
ceph配置——3.网络配置
AK48的专栏
11-03 1万+
简介 建立一个高性能的Ceph存储集群网络配置是至关重要的。 Ceph的存储集群不执行CEPH客户的路由请求或路由调度。相反， Ceph的Client直接提出请求CEPH OSD守护进程。 Ceph的OSD守护代表Ceph的客户端执行数据备份，这意味着备份和其他因素施加额外负荷Ceph的存储集群网络。 我们的快速入门（Our Quick Start configurations）提供了一个简单
第二课 ceph基础学习-OSD扩容换盘和集群运维
QnHyn
10-19 1981
osd扩容还盘和集群运维
ceph的架构和概念学习
jingzhiz 专属移动笔记
12-30 387
一、ceph的架构和术语 不管你是想为云平台提供Ceph 对象存储(RGW)和/或 Ceph 块设备(RBD)，还是想部署一个 Ceph 文件系统(CephFS)或者把 Ceph 作为他用，所有 Ceph 存储集群的部署都始于部署一个个 Ceph 节点、网络和 Ceph 存储集群。 Ceph 存储集群至少需要一个 Ceph Monitor 和两个 OSD 守护进程。而运行 Ceph 文件系统客户...
Ceph部署（超详细）
热门推荐
wangboyujiayou的博客
05-28 2万+
Ceph的部署工具： ceph-deploy：官方的部署工具 ceph-ansible：红帽的部署工具 ceph-chef：利用chef进行自动部署Ceph的工具 puppet-ceph：puppet的ceph模块 Public Network 192.168.200.161-164 Cluster Network 192.168.100.161-164 版本 Mimic 13版 部署前提 这是一个前提条件 关闭SELinux 关闭firewalld，并禁止开机自启 禁止开机自启 网卡 准备两块
Ceph优化系列（二）：Ceph主要配置参数详解
Yannick Jiang 的专栏
06-24 5998
转载：Ceph配置参数详解 概述 Ceph的配置参数很多，从网上也能搜索到一大批的调优参数，但这些参数为什么这么设置？设置为这样是否合理？解释的并不多 本文从当前我们的ceph.conf文件入手，解释其中的每一项配置，做为以后参数调优和新人学习的依据； 参数详解 1，一些固定配置参数 1 2 3 fsid = 6d529c3d-5745-4fa5-be...
Ceph入门到精通-Ceph 服务管理之OSD服务
隔壁老瓦的专栏
04-19 1205
例如，如果您在创建 OSD 时使用该all-available-devices选项，则当您zap使用设备时，cephadm orchestrator 会自动在设备中创建新的 OSD。笔记: 删除 OSD 后，如果您擦除已删除 OSD 使用的设备中的 LVM 物理卷，则会创建一个新的 OSD。如果您使用 OSD Specs 进行 OSD 部署，您新添加的磁盘将被分配其替换对应的 OSD id。假设集群有不同类型的主机，每个主机具有相似的磁盘布局，建议应用仅匹配一组主机的不同 OSD 规范。
OSD故障处理总结
DeamonXiao的博客
10-26 4266
参考链接：https://docs.ceph.com/en/latest/rados/troubleshooting/troubleshooting-osd/#troubleshooting-osds OSD故障处理总结 在定位OSD故障之前，首先检查MON和网络。执行ceph health或ceph -s命令，如果发现MON有报错，应当去MON上定位问题。其次检查网络是否正常运行，因为OSD的性能极大程度地受到网络影响。在主机端检查丢包，在交换机端检查CRC错误。 获取OSDs的数据信息 要查看是否所.
Ceph存储集群&配置
DoloresOOO的博客
06-15 1448
Ceph存储集群 导读： 1.从零部署一个ceph集群 2.ceph block device与cephfs快速入门 3.ceph 对象存储快速入门 Overview 一个Ceph存储群集至少需要一个Ceph monitor，Ceph Managers和Ceph OSD（对象存储守护程序）。 运行Ceph文件系统客户端时，也需要Ceph Metadata Server。 Monitors：Ceph Monitor(ceph-mon)维护集群状态的映射，包括monitor映射，manager映射，OSD映
ceph修改osd服务器IP,正确修改Ceph集群IP地址
weixin_30909915的博客
08-12 1199
当我们需要把整个 Ceph 集群的网络地址修改为另一个子网地址(与 ceph.conf 的 public addr 等不相同)时，就需要更改 Ceph Monitor，Ceph OSD，Ceph Manager 的监听地址。其中，OSD 和 Manager 的地址是根据 ceph.conf 文件中的配置项 public addr 与 cluster addr 等确定的，因此只需修改文件内容即可。而...
ceph部署踩坑——OSD服务无法启动
fq3758的博客
11-23 3497
unable to find any IPV4 address in networks "" start request repeated too quickly for ceph-osd@0.service
ceph osd 常见故障处理
henweimei的博客
11-18 1429
如果 ceph health 或 ceph -s 返回的是健康状态，这意味着 monitors 形成了法定人数。核实下网络，确保它在正常运行，因为网络对 OSD 的运行和性能有显著影响。如果 cluster（后端）网络失败、或出现了明显的延时，同时 public（前端）网络却运行良好， OSD 目前不能很好地处理这种情况。这时 OSD 们会向 monitor 报告邻居 down 了、同时报告自己是 up 的，我们把这种情形称为震荡（ flapping ），会妨碍工作，特别是共享驱动器时。
ceph集群将osd踢出集群命令
最新发布
06-01
要将 Ceph 集群中的 OSD 踢出集群，可以使用以下命令: 1. 先查看 OSD 的状态，找出要踢出的 OSD 的 ID: ``` ceph osd status ``` 2. 将 OSD 标记为 out (即踢出集群): ``` ceph osd out osd.{id} ``` 3. 等待 OSD 状态变为 "out"，再将其标记为 down： ``` ceph osd down osd.{id} ``` 4. 等待 OSD 状态变为 "down"，再将其从集群中删除： ``` ceph osd rm osd.{id} ``` 注意：在执行以上命令前，要确保该 OSD 上的数据已经迁移到其他 OSD 上，否则会导致数据丢失。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值