ceph 存储池PG查看和PG存放OSD位置

最新推荐文章于 2024-07-09 21:54:52 发布

mixboot

最新推荐文章于 2024-07-09 21:54:52 发布

阅读量4.2k

点赞数

分类专栏： Ceph 文章标签：运维

本文链接：https://blog.csdn.net/u010953692/article/details/78060390

版权

Ceph 专栏收录该内容

70 篇文章 11 订阅

订阅专栏

1. 查看PG

# vcfs pg stat
# vcfs pg dump

2. pg映射OSD位置

# vcfs pg map 1.1ff
osdmap e99 pg 1.1ff (1.1ff) -> up [8,5] acting [8,5]
#【8,5】指osd.8和osd.5 2副本，osd.8为主副本

参考：
1.ceph运维常用指令

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

mixboot

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

第⑯讲：Ceph集群Pool资源池管理以及PG的数据分布的核心技术要点

江晓龙的博客

04-23

1938

如果一个Pool资源池中的PG数量很多，就意味着会通过CRUSH算法将Object数据分散写入到更多的OSD中，数据分散存储在OSD的数量越多，对于数据的安全性就越高，相反，如果Pool中的PG数量过少，那么通过CRUSH算法将数据分散存储到OSD的数量就越少，数据的丢失概率就会很高。在使用公式计算PG的数量时，建议使用OSD*200，可以方便后期的数据量的扩展，随着数据量的增长，PG的数量也需要增长，如果一开始设置的数量很多，再后期就不需要扩容了。例子：集群有200个OSD，Pool资源池的副本数为3。

Ceph中的PG和PGP的关系

Be_Nice的博客

06-24

3034

【前言】 ceph创建存储池需要pg数和pgp数的两个参数，在前面我们介绍了ceph的pg，那么pgp和pg有什么关系呢？ PG (Placement Group)，pg是一个虚拟的概念，用于存放object，PGP(Placement Group for Placement purpose)，相当于是pg存放的一种osd排列组合。举个例子：假设集群有3个osd，即osd1，osd2，osd3，副本数为2，如果pgp=1，那么pg存放的osd的组合就有一种，可能是[osd1，osd2]，那么所有的...

1 条评论您还未登录，请先登录后发表或查看评论

查看pg在osd上的分布

weixin_34380948的博客

06-08

512

2019独角兽企业重金招聘Python工程师标准>>> ...

【分布式系统】ceph部署（命令+截图巨详细版）

最新发布

F12138X的博客

07-09

3008

每个人都想把手伸向夜空，去捕捉那属于自己的星星，但极少有人能真正地知道自己的星星在哪个位置

查看ceph的osd中pg分布

a13568hki的博客

09-13

2129

ceph pg ls-by-osd osd.0 |awk '{printf"%s\t%s\n",$1,$15}' 1.3 [0,1] 1.b [0,1] 1.c [0,1] 1.60 [0,1] 1.63 [0,1] 1.65 [0,1] 1.6b [0,1] 1.70 [0,1] 1.73 [0,1] 1.79 [0,1] 2.1 [0,1] 2.6 [0,1] 意思是查看osd.0上的pg分布，可以看到pg主要分布在0，1上单个pg迁移 ceph osd pg-upmap-items 1.

ceph常用命令

weixin_34419321的博客

06-18

144

1、查看ceph集群配置信息 ceph daemon /var/run/ceph/ceph-mon.$(hostname -s).asok config show 2、在部署节点修改了ceph.conf文件，将新配置推送至全部的ceph节点 ceph-deploy --overwrite-conf config push dlp node1 node2 node3 ...

分布式存储系统之Ceph集群存储池、PG 与 CRUSH

「虚幻私塾」

10-06

1278

前文我们了解了ceph集群状态获取常用命令以及通过ceph daemon、ceph tell动态配置ceph组件、ceph.conf配置文件相关格式的说明等，回顾请参考https://blog.csdn.net/qiuhom-1874/p/16727820.html；今天我们来聊一聊ceph的存储池、PG以及CRUSH相关话题；一、关于存储池我们知道ceph客户端存储对象数据到RADOS集群上，不是客户端直接存储到osd上；首先客户端会根据ceph集群的配置，将客户端存储的对象数据切分多个固定大小的对象数据

【ceph】存储池pool的pg数量的计算和规划_ceph pg数量，2024年最新阿里+头条+腾讯等大厂软件测试笔试题目分享

2401_84264468的博客

04-18

379

如果您的 OSD 超过 50 个，我们建议每个 OSD 使用大约 50-100 个 PG，以平衡资源使用、数据持久性和数据分布。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！接下来，检查生成的基线值是否与您设计 Ceph 集群的方式一致，以最大限度地提高数据持久性和对象分布并最大限度地减少资源使用。这里的池大小要么是复制池的副本数量，要么是纠删码池的 K+M 总和。该值应向上舍入到最接近的 2 的幂。

分布式存储Ceph中PG各种状态详解.docx

10-13

- **基本单位**：PG是构成存储池的基本单元，许多存储池的特性都是基于PG实现的。 - **备份策略**：PG支持面向容灾域的备份策略，通常需要执行跨节点的分布式写操作，这意味着数据需要在不同节点之间进行同步和恢复...

ceph存储pg、object、pool、osd、image对应存储位置查询

pansaky的博客

04-15

9870

pg, osd, pool 之间的一些查找方法 1. pg --> osd: 通过 pg 查找 osd ceph pg map {pgid} 2. osd --> pg: 通过 osd 查找 pg ceph pg ls-by-osd osd.{osdid} 3. pg --> pool: 通过 pg 查找 pool ceph pg dump | grep "^{po...

ceph的pg,osd和pool之间的关系查找

Be_Nice的博客

07-23

4736

使用ceph时，经常碰到某个pg有问题，但是这个pg属于哪个存储池呢，到处翻命令，在此记录下常用的几个命令，用于查找pg os和pool之间的映射关系。 1. 通过pg查找所属的pool ceph pg dump |grep "^{poolid}\." #poolid通过ceph osd pool ls detail 可查看到 2. 通过pg查找pg ceph pg ls-by-pool {poolname} 或者 ceph pg ls {poolid} 3. 通过pg查看其所在的osd

ceph如何确定文件存储的最终位置（OSD）

weixin_48225168的博客

02-02

3206

ceph同时提供对象存储、块存储、文件存储三种接口，但本质上其实是对象存储，也就是说一个rbd image实际上包含了多个对象（默认情况下是image_size/4M）。此处以块存储（RBD）为例进行演示，因为三种接口最终存储文件的操作单元都是对象，所以其他接口的方法类似：前提：在bloc接口下有一个池：pool1,创建另一个volume（rbd image）：vol1。因为这个vol1里其实包含了很多object，我们首先要查找object的位置： [root@rook-ceph-tools-6f5

ceph之查看osd上pg的分布

weixin_34278190的博客

08-10

1345

一、概述　　osd上pg的分布决定了数据分布的均匀与否，所以能直观的看到pg到osd的上分布是很有必要的；　　ceph只身提供了相关的命令： 1 #ceph pg ls-by-osd.{osd_id} 2 #for i in `ceph osd ls`; do ceph pg ls-by-osd osd.$i |awk '{print $1}' >> /tmp/aaa...

解析 Ceph : OSD , OSDMap 和 PG, PGMap

chenzhigui2178的博客

02-13

930

在 2014 年 01 月 25 日上公布作者为麦子迈文章分类 Ceph 图A Ceph致力于提供PB级的集群存储能力，并且提供自动故障恢复，方便的扩容和缩容能力，这些能力在典型的分布式存储系统就需要 Metadata ...

ceph 获取每个osd上pg的数量

BigTiger的博客

06-03

5617

Get the PG distribution per osd in command line : ceph pg dump | awk ' /^pg_stat/ { col=1; while($col!="up") {col++}; col++ } /^[0-9a-f]+\.[0-9a-f]+/ { match($0,/^[0-9a-f]+/); pool=substr($0, RSTAR

ceph - pg 常见状态

weixin_33985507的博客

02-17

560

说明 pg ( placement group ) 是数据存储的重要单位在使用 ceph 的时候, pg 会经常发生状态的变化, 参考下面例子当创建池的时候, 将会创建相应的 pg, 那么可以看到 pg creating 状态当部分 pg 创建成功后, 将会发现 pg 会进入 peering 状态当所有 pg peer...

ceph根据obj找到对应pg和osd

闻到你的人的博客

05-26

643

根据obj找到对应pg和osd 查找所在池 radosgw-admin object stat --object=objectname --bucket=bucketname | grep pool 根据信息进入所在数据池查找pg名称 ceph osd map poolname objectname -c /etc/ceph/data-cluster/ceph.conf 根据pg查看osd ceph pg map pgname -c /etc/ceph/data-cluster/ceph.conf 查

Ceph 中Pool、PG、OSD的关系

专注基础架构领域

01-31

6076

Pool是存储对象的逻辑分区，它规定了数据冗余的类型和对应的副本分布策略；支持两种类型：副本（replicated）和纠删码（ Erasure Code）；目前我们公司内部使用的Pool都是副本类型（3副本）； PG（ placement group）是一个放置策略组，它是对象的集合，该集合里的所有对象都具有相同的放置策略；简单点说就是相同PG内的对象都会放到相同的硬盘上； PG是 ceph的...