ceph 中 pg和pgp的关系

最新推荐文章于 2025-03-27 15:04:53 发布
最新推荐文章于 2025-03-27 15:04:53 发布
阅读量2.1k 收藏 4
点赞数 3
分类专栏： ceph存储测试
本文详细解析了Ceph中pg和pgp的概念及其关系，通过实例说明pg用于存储object，而pgp定义了pg在osd上的分布方式，强调两者数量相等的重要性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

pg和pgp的关系：

pg是用来存放object的，pgp相当于是pg存放osd的一种排列组合，我举个例子，比如有3个osd，osd.1、osd.2和osd.3，副本数是2，如果pgp的数目为1，那么pg存放的osd组合就只有一种，可能是[osd.1,osd.2]，那么所有的pg主从副本分别存放到osd.1和osd.2，如果pgp设为2，那么其osd组合可以两种，可能是[osd.1,osd.2]和[osd.1,osd.3]，是不是很像我们高中数学学过的排列组合，pgp就是代表这个意思。一般来说应该将pg和pgp的数量设置为相等。这样说可能不够明显，我们通过一组实验来体会下：

第⑯讲：Ceph集群Pool资源池管理以及PG的数据分布的核心技术要点
江晓龙的博客
04-23 2174
如果一个Pool资源池中的PG数量很多，就意味着会通过CRUSH算法将Object数据分散写入到更多的OSD中，数据分散存储在OSD的数量越多，对于数据的安全性就越高，相反，如果Pool中的PG数量过少，那么通过CRUSH算法将数据分散存储到OSD的数量就越少，数据的丢失概率就会很高。在使用公式计算PG的数量时，建议使用OSD*200，可以方便后期的数据量的扩展，随着数据量的增长，PG的数量也需要增长，如果一开始设置的数量很多，再后期就不需要扩容了。例子：集群有200个OSD，Pool资源池的副本数为3。
ceph pg和pgp的区别
xiongwenwu的专栏
11-08 3693
一、前言首先来一段英文关于PG和PGP区别的解释：PG = Placement GroupPGP = Placement Group for Placement purposepg_num = number of placement groups mapped to an OSDWhen pg_num is increased for any pool, every PG of t
ceph中的PG和PGP
05-21 2813
在最初使用ceph的时候就有一个疑问，ceph存储时将对象映射到PG(Placement Groups)中，然后以PG为单位，遵循CRUSH的规则分布到OSD中，那么PGP又是什么？因此决定自己探索一下。 文章目录ceph对象的映射关系架构图环境介绍操作验证1.创建test_pool2.查看创建之后的PG分布情况3.写测试数据到test_pool4.再次查询PG分布情况5.增大pg_num测试...
Ceph的PG常见状态以及异常处理
最新发布
bltyu2000的博客
03-27 851
ceph的PG有几种状态。PG异常了怎么处理
Ceph中的PG和PGP的关系
sqlora的专栏
02-18 1983
【前言】 ceph创建存储池需要pg数和pgp数的两个参数，在前面我们介绍了ceph的pg，那么pgp和pg有什么关系呢？ PG (Placement Group)，pg是一个虚拟的概念，用于存放object，PGP(Placement Group for Placement purpose)，相当于是pg存放的一种osd排列组合。举个例子：假设集群有3个osd，即osd1，osd2，osd3，副本数为2，如果pgp=1，那么pg存放的osd的组合就有一种，可能是[osd1，osd2]，那么所有的pg主
Ceph 中PG与PGP的概述
zuopiezia的博客
11-13 1094
在Ceph分布式存储系统中，PG（Placement Group）和PGP（Placement Group for Placement purpose）是两个至关重要的概念，它们共同决定了数据在集群中的分布和复制方式。
清晰的理解pg与pgp之间的关系
pansaky的博客
10-31 3129
这里先说下ceph中PG和PGP使用的一个典型场景，ceph中PG数是可以修改的，但是目前只能从小到大修改 ，那么就会有一种情况PG数修改变大后就会存在PG分裂的场景。如源集群PG为PG1/2/3  修改PG数为PG1/2/3/4/5后ceph为了保证存储数据平滑分裂引入PGP概念，PGP就是用来保存分裂前PG的状态，意为PG初始状态或PG祖先。所以修改PG数后PG分布不回引起太大的变化，但如果同...
ceph分布式存储-PG和PGP的区别
weixin_44389885的博客
12-18 767
一、前言 首先来一段英文关于PG和PGP区别的解释： PG = Placement Group PGP = Placement Group for Placement purpose pg_num = number of placement groups mapped to an OSD When pg_num is increased for any pool, every ...
ceph PG和PGP区别
Operational_0624的博客
03-07 1178
首先来一段英文关于PG和PGP区别的解释：​​​以上是来自邮件列表的 Karan Singh 的PG和PGP的相关解释，他也是 Learning Ceph 和 Ceph Cookbook的作者，以上的解释没有问题，我们来看下具体在集群里面具体作用。
Ceph PG和PGP分解
杨仕虎的博客
08-06 1032
PG PG是ceph对象到OSD的中间桥梁，实现大容量集群的关键效率技术 PG分裂 ceph最大的特点是能实现OSD负载均衡，如果新增OSD就会导致之前的PG映射就要被负载一部分到新的PG上（前提是新增了PG数量） PGP PGP其实是PG的复制，原因在于PG分裂会导致之前的PG映射OSD关系变化，导致新增OSD后导致大量数据迁移，而复制PG给PGP在后续分裂中尽量让之前的PG还是对应之前的OSD上，避免数据的迁移 为什么需要合理规划PG数量，OSD增加一般也需要增加PG数量 数据表明磁盘的使
ceph存储池创建，删除，PG和PGP基本分配方法；ceph 的用户管理及授权；普通用户挂载块存储和cephfs；MDS高可用架构
weixin_42896216的博客
01-05 2693
ceph存储池创建，删除，PG和PGP基本分配方法;ceph 的用户管理及授权;普通用户挂载块存储和cephfs;MDS高可用架构.
ceph 中pg和pgp的区别
wuxiaobingandbob的专栏
12-12 908
PG是指定存储池存储对象的目录有多少个，PGP是存储池PG的OSD分布组合个数 PG的增加会引起PG内的数据进行分裂，分裂到相同的OSD上新生成的PG当中 PGP的增加会引起部分PG的分布进行变化，但是不会引起PG内对象的变动 ...
ceph的pg与pgs分析
weixin_45566022的博客
01-13 2662
1. 当pg与pgp数量一样都为6时 由下图可见： ​ pg数量为8.0~8.5总计6个，所有的object分布在这6个pg中，此时每个pg对应一个osd组合总计为6个组合类型 ​ 同时观察到pg8.0和8.4对应的组合[3,5,9]和[5,9,3]虽然osd号相同，但是排列不同，ACTING说明主osd分别对应3和5，且没有重复的主osd 2. 设置pg数量大于pgp数量 由下图可见： ​ pg数量为8.0~8.5总计6个，所有的object分布在这6个pg中，此时这6个pg对应了[3,5,9]
ceph学习笔记之四PG
weixin_34122810的博客
07-25 303
PG PG（Placement Group）单从名字上可理解为一个放置策略组，它是对象的集合，集合里的所有对象具有相同的放置策略；对象的副本都分布在相同的OSD列表上。一个对象只能属于一个PG，一个PG对应于放置在其上的OSD列表。一个OSD上可以分布多个PG。 PG是一组对象的逻辑集合，也可将PG看成一个逻辑容器，容器里面包含多个对象。图中PG1、PG2同处于一个Poo...
在ceph中，PG数量如何计算？
努力变的更强
10-04 630
OSD的数量 * 100 / 存储式的副本数量（osd_pool_default_size，默认为3）2的8次幂计算的结果于此最接近，因此我们推荐设置为256。很明显大于270，因此推荐设置PGS数量为256。即 2N次幂 就是对应的PG数量。2的9次幂得到的结果是512。存储式的默认副本：3个。操作OSD设备：8个。
ceph中 PG的意义
热门推荐
frankxie的空间
06-19 1万+
http://ceph.com/docs/master/dev/placement-group/ ceph中引入了PG（placement group)的概念，PG是一个虚拟的概念而已，并不对应什么实体，具体的解释下面很清楚。 下图中可以看出，ceph仙剑object映射成PG，然后从PG映射成OSD。object可以是数据文件的一部分，也可以是journal file，也可以目录文件（包括内
Ceph 知识摘录(Crush算法、PG/PGP)
weixin_30338743的博客
08-25 328
Crush算法1、Crush的目的 优化分配数据，高效的重组数据，灵活的约束对象副本放置，硬件故障时候最大化保证数据安全 2、流程 Ceph 架构中，Ceph客户端是直接读写存放在OSD上的RADOS Object，因此，Ceph需要走完(Pool, Object) → (Pool, PG) → OSD set → OSD/Disk 完整的链路，才能让Ceph client...
ceph_pg_total - ceph_pg_active > 0
02-26
- 确保 `pg_num` 和 `pgp_num` 设置合理（参考 [Ceph PG 计算器](https://ceph.io/pgcalc/)）。 --- ### **5. 预防措施** - **监控告警**：配置 PG 状态监控（如 `active+clean` 比例）。 - **容量规划**：避免 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值