ceph osd相关

最新推荐文章于 2024-08-27 16:18:03 发布
最新推荐文章于 2024-08-27 16:18:03 发布
阅读量428 收藏 1
点赞数 1
分类专栏： ceph 文章标签： ceph 服务器 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/system_zhazha/article/details/138468873
版权

概述

本文主要介绍ceph osd相关的一些概念。

osd 挂载目录

在osd启动前，需要读一些数据用于引导，校验等等。在使用硬盘创建osd时，经常能看到osd会预留一部分空间（ceph-disk版本为盘分区类似/dev/sdb1,ceph-volume版本为temp），并使用操作系统的本地文件系统进行挂载。

一般一个osd挂载目录中都有以下几个内容。

  • block -> ：指向集群的data设备
  • db -> ： 指向集群的db设备
  • db_wal -> :指向集群的wal设备
  • type :标识使用的存储引擎类型（filestore还是bluestore）
  • magic：检验数据，用于验证该osd能否被当前的ceph软件识别，同时也用来校验引导数据
  • whoami :指向osd.id。一般在拿到某个硬盘，或者osd未启动时，检查该数值判断该盘原来用于哪个osd
  • ceph_fsid：集群的id。
  • fsid：osd自身的uuid。

osd的通信

  • public：用于客户端和osd之前通信
  • cluster：用于osd内部通信，写副本，数据恢复，重平衡等
  • heartbeat：用于osd之间的通信链路检测。目前，为了保证能够检测到所有网络层面的通信故障，heartbeat会同时使用public和cluster来进行通信
手持钩笼引天下
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ceph osd分组
ApexPredator的博客
04-19 605
ceph osd使用规则分组
分布式存储ceph osd 常用操作
zrc_xiaoguo的博客
10-03 794
调整 pool 副本数量（大部分系统默认副本数为3，表示同一份数据存储多少个备份，不重要的数据可设置为2或1）REWEIGHT调整（设置新写入数据权重值，硬盘使用率较高时降低权重以平衡数据）。ceph中pg代表数据分布，默认已经开启了自动调整，从集群中删除osd的认证auth信息。从集群中删除osd的crush信息。osd 根据磁盘类型分组调整。
【ceph】ceph OSD状态及常用命令
bandaoyu的note
04-16 9930
1. OSD概念 OSD：Object Storage Device，主要负责响应客户端请求返回具体数据的守护进程，一般一个集群会有多个OSD，每一块盘都会对应一个OSD。 2. OSD 状态 [root@data1 ~]# ceph osd stat 4 osds: 3 up (since 23m), 3 in (since 13m); epoch: e345 OSD状态说明： a. 集群内（in） b. 集群外（out） c. 活着且在运行（up） d. 挂了且不再运行（down） .
2024年运维最新分布式存储ceph osd 常用操作_ceph查看osd对应硬盘
2401_83946826的博客
05-01 672
最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！
ceph osd pg 状态介绍
DoloresOOO的博客
06-25 1594
导读： 1.从零部署一个ceph集群 2.ceph block device与cephfs快速入门 3.ceph 对象存储快速入门 4.Ceph存储集群&配置 5.centos7 通过cephadm部署ceph octopus版本 6.ceph集群状态检查常用命令 OSD in/out 、up/down OSD状态应处于集群内(in)、集群外(out)，并且处于运行(up)或关闭(down)。如果OSD处于up，他可能位于集群中(可以读写数据)，也可能不在集群中。如果OSD原本在集群中但是最近被移除
ceph osd pg upmap
system_zhazha的博客
08-28 523
在我们巡检ceph集群、处理故障或者进行迁移等操作时，pg往往是最需要关注项之一。一方面pg的健康状态会直接影响集群能否正常提供业务，另一方面，pg的分布会影响集群osd的容量与负载均衡。ceph根据crush rule，采用分布式哈希算法，也就是以计算代替查表的方式进行数据分布。由于伪随机性和众多因素（pgnum合理性，硬件规格统一性，后期结构调整，ceph），很多时候pg的分布往往达不到我们想要的效果，此时便需要我们手动进行pg的调整。
ceph osd慢请求排查
yueyingshaqiu01的博客
04-02 446
可以发现整个请求的耗时主要在header_read event，该耗时显示header_read到all_read期间耗时18.1s，可以分析得出osd在从messenger中读取(0-4M)的数据花了18s，该请求是从10.124.107.8于12:03:35的cephfs client发出，发往osd的，进一步可以去看看src dst在这个时间点的网络链路、CPU情况。
ceph osd 相关命令
天行健，地势坤
12-09 762
混合osd的部署 先部署所有的ssd 在/etc/ceph.conf中最后添加ssd做osd的block大小如下： 比如部署中有两个ssd，则添加 [osd.0] bluestore_block_size = xxxx [osd.1] bluestore_block_size = xxx 如上的size大小计算如下，如ssd容量为800G，默认分给hdd的db,wal分别为20G,10G，则： ...
ceph OSD状态及常用命令
热门推荐
Be_Nice的博客
05-26 1万+
1. OSD概念 OSD：Object Storage Device，主要负责响应客户端请求返回具体数据的守护进程，一般一个集群会有多个OSD，每一块盘都会对应一个OSD。 2. OSD 状态 [root@data1 ~]# ceph osd stat 4 osds: 3 up (since 23m), 3 in (since 13m); epoch: e345 OSD状态说明： a. 集群内（in） b. 集群外（out） c. 活着且在运行（up） d. 挂了且不再运行（down） .
Ceph OSD简介
ZHANGJNWEI的专栏
06-28 7227
Ceph OSD是Ceph存储集群最重要的组件，Ceph OSD将数据以对象的形式存储到集群中每个节点的物理磁盘上，完成存储工作由OSD Daemon进程完成。集群中一般包括OSD节点，对于对象数据的读写，client首先是从Monitor节点获取Cluster Map信息，后续client直接同OSD进行I/O操作的交互，加速读写过程。相较于其他分布式存储系统，效率更高。 Ceph的核心功能包括高可靠、自动平衡、自动恢复和一致性。因此对于OSD而言，基于配置的副本数，Ceph通过分布在多个节点上的副本来
解决ceph osd写满导致osd无法启动的问题
北鸣上的专栏
07-19 1734
最近一个无人看管的ceph集群出现了osd被写满的情况，osd磁盘使用量99.99%，然后osd自己down了，重启也启动不起来。可能是因为之前有人调过full的限制值，所以才完全写满了，由于好几个osd同时写满了，导致有些PGdown了，无法提供服务。所以必须将这些down的osd想办法up起来。ceph版本v15.2.16。...
Openstack 与 Ceph集群搭建(下)： Openstack部署
范枝洲的博客
08-27 468
前面文章对集群的规划已经做了详细说明(Openstack 与 Ceph集群搭建(中)： Ceph部署Openstack 与 Ceph集群搭建(上)： 规划与准备)，并完成了Ceph集群的部署，接下来就是最重要的Openstack集群部署了。项目描述说明系统OpenStack 2022调研显示：受众多，文档丰富docker在ceph环节已经安装python33.10系统默认安装Openstack2024.01Ceph18.2.2。
K8S对接Ceph分布式存储
秦子腾
08-25 817
Ceph 是一个开源的分布式存储系统，用于提供高性能、高可靠性的对象存储、块存储和文件系统，它通过去中心化的架构，自动处理数据复制和恢复，旨在提供弹性扩展和容错能力。Ceph包含一下几种存储类型：（1）块存储(RBD)：用途： 提供了高性能的块级存储，类似于传统的磁盘驱动器。通常用于虚拟机的存储或数据库的存储。接口： 通过 Ceph 的 RADOS（Reliable Autonomic Distributed Object Store）接口提供块设备。
Openstack 与 Ceph集群搭建(完结)： 配置Ceph作为Openstack后端存储
最新发布
范枝洲的博客
08-27 833
注意：cinder-backup文件夹需要复制两个keyring，分别是cinder-backup.keyring、cinder.keyring。注意：在上述存储配置中，自动生成的配置文件mon_host可能还有其他参数，手动修改为纯IP即可。因cinder配置后端ceph存储，那么nova也必须可以访问cinder volumes，编辑。/etc/kolla/globals.yml，该文件定义OpenStack所需要安装的服务。与Glance保持一致：将ceph控制节点上的配置文件复制到。
阿里云服务器 篇七：服务器热备份/定时备份
生活在别处
08-24 542
Python 客户端用于百度云（个人云存储）百度云/百度网盘 Python 客户端。它主要用于在 Linux 环境下通过命令行操作百度云盘的 2TB 存储空间。是一个Github开源项目，这是一个百度云/百度网盘Python客户端。: 列出百度 PCS 中的 ‘remotepath’ 目录。: 从本地目录同步到远程目录。: 在百度云中创建一个目录。
多进程和多线程基础概念LINUX
2301_79109608的博客
08-22 1321
直接访问物理地址,会导致地址空间没有隔离,很容易导致数据被修改通过虚拟地址空间可以实现每个进程空间都是独立的，操作系统会映射到不用的物理地址区间，在访问时互不干扰.进程状态分为三个基本状态，即运行态，就绪态，阻塞态。在五态模型中，进程分为新建态、终止态，运行态，就绪态，阻塞态。并发：有限的 cpu 核芯的情况下 ,利用快速交替(时间片轮转)执行来达到宏观上的同时执行。虚拟地址 : 虚拟地址并不代表真实的内存空间,而是一个用于寻址的编号。并行：在 cpu 多核的支持下，实现物理上的同时执行。
仿Muduo库实现高并发服务器——Acceptor模块
2201_75324712的博客
08-22 504
Acceptor模块是为了创建套接字，并且接收新到来的客户端套接字，将对应套接字的Channel对象添加到Poller对象中，进行事件监控。
ceph osd set noout ceph osd set noscrub ceph osd set nodeep-scrub 这三条命令啥意思
05-13
这三条命令都是用来控制Ceph中OSD（Object Storage Daemon）的行为的。 - ceph osd set noout：这个命令会设置Ceph集群中的所有OSD处于“noout”模式，也就是不会再进行任何的迁移操作。这通常用于在进行维护或者升级时防止OSD在迁移数据时造成额外的负载。 - ceph osd set noscrub：这个命令会关闭Ceph集群中所有OSD的“scrub”功能，也就是不会再进行数据一致性的检查。这通常用于在进行维护或者升级时防止OSD在执行scrub操作时造成额外的负载。 - ceph osd set nodeep-scrub：这个命令会关闭Ceph集群中所有OSD的“deep-scrub”功能，也就是不会再进行更深入的数据一致性检查。这通常用于在进行维护或者升级时防止OSD在执行deep-scrub操作时造成额外的负载。 需要注意的是，这些命令会影响Ceph集群的数据一致性和性能，因此在使用前需要仔细考虑和评估风险。同时，如果使用了这些命令，在操作完成后需要及时取消相应的设置，以保障集群的正常运行。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值