Ceph配置参数（二）

最新推荐文章于 2025-06-10 10:02:54 发布

uj_mosquito

最新推荐文章于 2025-06-10 10:02:54 发布

阅读量6k

点赞数 1

CC 4.0 BY-SA版权

分类专栏：分布式文件系统

本文链接：https://blog.csdn.net/uj_mosquito/article/details/41862149

分布式文件系统专栏收录该内容

11 篇文章

订阅专栏

Ceph配置参数（一）

6、KEYVALUESTORE CONFIG REFERENCE

http://ceph.com/docs/master/rados/configuration/keyvaluestore-config-ref/

KeyValueStore is an alternative OSD backend compared to FileStore. Currently, it uses LevelDB as backend. KeyValueStore doesn’t need journal device. Each operation will flush into the backend directly.

KeyValueStore所用的后端（leveldb）：keyvaluestore backend

（1）队列

队列上可以存储的最大操作数：keyvaluestore queue max ops
队列上可以存储的最大btye数：keyvaluestore queue max bytes

（2）线程

并行线程数：keyvaluestore op threads
文件操作线程超时秒数：keyvaluestore op thread timeout
提交一个操作多少秒都可以取消：keyvaluestore op thread suicide timeout

（3）MISC

条带大小：keyvaluestore default strip size

注：每个对象会分割成多个键值对存储在后端

header cache大小：keyvaluestore header cache size

注：存的东西和文件系统中的inode差不多

7、OSD CONFIG REFERENCE

http://ceph.com/docs/master/rados/configuration/osd-config-ref/

（1）通用设置

OSD的UUID：osd uuid

注：一个uuid作用于一个OSD Daemon，一个fsid作用于整个cluster，这两个不一样

OSD数据存储的路径：osd data

注：实际底层设备挂载的地方e.g. /var/lib/ceph/osd/$cluster-$id

一次写入最大的MB数（默认90）：osd max write size
在内存中允许存储的最大客户端数据信息（默认500MB）：osd client message size cap
RADOS class插件地址（$libdir/rados-classes）：osd class dir

（2）文件系统设置

生成文件系统的类型：osd mkfs options {fs-type}

注：对XFS默认-f -i 2048，其他类型无默认，e.g. osd mkfs options xfs = -f -d agcount=24

挂载选项：osd mount options {fs-type}

注：对XFS默认rw,noatime,inode64，其他类型rw, noatime，e.g. osd mount options xfs = rw, noatime, inode64, nobarrier, logbufs=8 其中noatime表示取消读文件时记录最后一次读取的时间（access time），节省时间，inode64表示inode数有64位（近乎无限制）现在的很多文件系统会在数据提交时强制底层设备刷新cache，避免数据丢失，称为write barriers。但是，其实我们数据库服务器底层存储设备要么采用RAID卡，RAID卡本身的电池可以掉电保护；要么采用Flash卡，它也有自我保护机制，保证数据不会丢失。所以我们可以安全的使用nobarrier挂载文件系统。

（3）日志设置

日志路径：osd journal

注：建议使用硬盘或SSD单独存放，默认/var/lib/ceph/osd/$cluster-$id/journal

日志大小（默认5120MB，即5G）：osd journal size

注：如果是0表示整个块设备都用来存日志，建议初始设为1G，至少为2 * (expected throughput * filestore max sync interval)，其中throughput 为磁盘转速和网络速率的最小值，filestore max sync interval参数在上文filestore参数设置中有解释。

（4）SCRUBBING

scrubbing相当于一个周期性检查工作，保证数据完整性，对象没有丢失，轻量级的scrubbing每天进行，它检查对象的大小和属性，深度scrubbing每周进行，它读取数据并进行校验和来保证数据的完整性。