ceph性能调优

最新推荐文章于 2023-05-18 20:05:14 发布
最新推荐文章于 2023-05-18 20:05:14 发布
阅读量2.0k 收藏 6
点赞数 1
分类专栏： ceph 文章标签： ceph
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40548182/article/details/109570239
版权
本文详细探讨了Ceph性能调优，包括硬件方面如CPU、内存和网络的配置建议，以及软件层面的集群配置文件调整和Ceph集群性能优化策略。在软件优化中，重点关注了全局参数、OSD调优、客户端调优和部署缓存分层的各个细节，旨在提升Ceph集群的运行效率和性能。
摘要由CSDN通过智能技术生成

硬件方面

CPU

ceph的进程对cpu的依赖强弱
MDS>OSD>MON

一个MDS进程给4核cpu
一个OSD进程给2核cpu
一个MON进程给1核cpu

内存

ceph的进程对cpu的依赖强弱
MON>OSD

一个MON进程给2G内存
一个OSD进程给1G内存（osd使用一个物理磁盘）
如果使用多个物理磁盘作为一个OSD，每个OSD进程就需要分配大于1G的内存，另外集群处于recovery状态时，内存消耗会明显增加。

网络

软件层面

集群配置文件

配置文件段
[global]
这个段的配置会影响集群所有的守护进程。
[MON]
这个段的配置只会作用于ceph集群内的mon守护进程，这个段内设置的参数会覆盖掉在[global]段中设置的相同参数。
[OSD]
这个段的配置只会作用于ceph集群内的osd守护进程，这个段内设置的参数会覆盖掉在[global]段中设置的相同参数。
[MDS]
这个段的配置只会作用于ceph集群内的mds守护进程，这个段内设置的参数会覆盖掉在[global]段中设置的相同参数

了解本专栏 订阅专栏 解锁全文 超级会员免费看
rocksdb原理_ceph性能调优历程-rocksdb篇(1)
weixin_39776787的博客
12-21 950
最近调优及其他工作实在太忙，没有太多时间写心得，今天抽空来总结一下阶段性成果吧。从一开始的ceph调研、系统调优开始，ceph集群存储大规模数据之后(集群文件数超过2亿)，rgw并发写性能下降的问题一直困扰我们，终于在最近找到了原因及相关解决办法问题引入在测试集群的并发性能的时候，我们注意到，经过系统调优后，集群创建初期，至少，在写入数据低于1亿文件数的时期，集群能够保持比较好的性能，并发虽然会有...
ceph 性能调优大全
最新发布
qq_61750451的博客
11-18 1020
ceph 性能调优
ceph性能优化
weixin_43493709的博客
05-18 2024
1.服务器2.内存3.硬盘4.网卡5.使用raid卡6.万兆交换机。
Ceph性能调优
xidianjiapei001的博客
02-24 470
概述 硬件层面 软件层面 Journal 与 tcmalloc 参考文献 http://xiaoquqi.github.io/blog/2015/06/28/ceph-performance-optimization-summary/ http://hustcat.github.io/ceph-performance-journal-and-tcmalloc/ ...
ceph_性能调优6_2.pdf
01-25
### Ceph性能调优策略详解 #### 概述 Ceph作为一款分布式存储系统，在提供高性能、高可用性以及可扩展性的基础上，还具备自我修复和自我管理的能力。本文将根据给定文档“ceph_性能调优6_2.pdf”的内容，深入探讨...
ceph 性能优化
hypatia2015的专栏
09-13 370
写 4M数据 write: (g=0): rw=write, bs=(R) 4096KiB-4096KiB, (W) 4096KiB-4096KiB, (T) 4096KiB-4096KiB, ioengine=rbd, iodepth=32 fio-3.7 Starting 1 thread Jobs: 1 (f=1): [W(1)][100.0%][r=0KiB/s,w=244MiB/s][r=0,w=61 IOPS][eta 00m:00s] write: (groupid=0, jobs=1):.
Ceph性能优化总结(v0.94)
老孙正经胡说
06-30 7414
如需转载请标明作者，原文地址：http://xiaoquqi.github.io/blog/2015/06/28/ceph-performance-optimization-summary/最近一直在忙着搞Ceph存储的优化和测试，看了各种资料，但是好像没有一篇文章把其中的方法论交代清楚，所以呢想在这里进行一下总结，很多内容并不是我原创，只是做一个总结。如果其中有任何的问题，欢迎各位喷我，以便我提高
Ceph性能优化与增强
渡江客涂鸦板
05-28 3162
Ceph是一个非常复杂的存储系统，它具有几种我们可以用来提高性能的方式。幸运的是，Ceph的开箱即用非常好，许多性能设置几乎利用了自动调整和缩放功能。在探索一些性能增强时，了解您的工作负载很重要，这样您就可以选择最适合您的选项。
Ceph调优
weixin_42340926的博客
01-11 404
扩容最好一个个osd的加，否则数据再平衡需要较长的时间 如果业务流量比较大的话，可以先暂停到数据的rebalance（相当于设置标志位） ceph osd set norebalance ceph osd set nobackfill 两个必须都关掉才能有效果 等业务流量高峰期过了重新设置标志位即可 ceph osd unset norebalance ceph osd unset nobackfill 查看每块盘的延迟 ceph osd perf 如果有盘延迟特别高，说明出现了问题，需..
Ceph性能优化
smart9527_zc的博客
12-31 2706
一、硬件选型 （1）服务器 1GHz CPU per  OSD （the  more the better） 1GB  RAM  per OSD 1GHz  CPU*4  per  MON 4GB  RAM  per  MON （2）硬盘 SSD、HDD配比1:3~5 （推荐使用Intel DC 3700或同等级以上SSD）  每个物理节点OSD数量最好控制在单机最大网络带宽以内（...
几个 Ceph 性能优化的新方法和思路（2015 SH Ceph Day 参后感）
weixin_34331102的博客
10-26 412
    一周前，由 Intel 与 Redhat 在10月18日联合举办了 Shanghai Ceph Day。在这次会议上，多位专家做了十几场非常精彩的演讲。本文就这些演讲中提到的 Ceph性能优化方面的知识和方法，试着就自己的理解做个总结。 0. 常规的 Ceph 性能优化方法 （1）. 硬件层面 硬件规划：CPU、内存、网络 SSD选择：使用 SSD 作为日志存储 BIOS设置...
ceph分布式文件存储性能调优
kobe24fgy的博客
06-15 2331
ceph分布式文件存储性能调优一、硬件调优二、BIOS配置三、网络配置四、OS配置五、硬盘调度算法六、软件层面七、ceph调优 一、硬件调优 1、NVMe SSD 调优 ● 目的 为减少数据跨片开销。 ● 方法 将NVMe SSD与网卡插在统一Riser卡。 2、内存插法调优 ● 目的 内存按1dpc方式插将获得最佳性能，即将DIMM0插满，此时内存带宽最大。 ● 方法 优先插入DIMM0，即插入DIMM000、010、020、030、040、050、100、110、 120、130、140、150插槽。三
Ceph 架构及性能优化
民工哥的博客
02-24 1035
点击下方“民工哥技术之路”，选择“设为星标”回复“1024”获取独家整理的学习资料！对分布式存储系统的优化离不开以下几点：1.硬件层面硬件规划SSD选择BIOS设置2.软件层面Linux ...
阿里云Ceph性能调优实战：服务器选型与配置指南
"《Ceph性能调优6_2》是一份详细的文档，主要关注于Ceph存储系统的性能优化策略和实践经验。作者Diluga@ali2cloud.com分享了在构建高效、可靠的Ceph集群时所需考虑的关键要素。 首先，对于服务器硬件选择，建议每台...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时空无限

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值