【ceph】ceph发展历史、组织和前景、整体架构

本文详细介绍了Ceph的发展历程、国内用户生态、社区贡献,以及其在存储引擎、备份容灾方面的创新。Ceph作为开源分布式存储项目的领导者,已被广泛应用于互联网公司、运营商等领域。随着新技术的融入,如RDMA、BlueStore,Ceph的性能和可靠性得到了显著提升。此外,文章还探讨了Ceph的未来趋势,包括与Elasticsearch的整合、CephFS的改进以及与新型硬件的适配。Ceph在统一存储解决方案中的地位日益凸显,有望成为应对大数据存储挑战的重要工具。
摘要由CSDN通过智能技术生成

Ceph国内用户生态

Ceph作为全球最火热的开源分布式存储项目,同样在中国的发展也是非常火热,不断开始在不同领域不同行业及客户系统相融合。典型应用在国内一线互联网公司以及运营商、政府、金融、广电、能源、游戏、直播等行业。

当前中国Ceph形势对比前几年已经发生了决定性的变化,随着国内越来越多的各行业用户的使用,足以见证它的稳定性可靠性。

Ceph中国用户生态已然形成,可以看到国内如:中国移动、腾讯、阿里、网易、乐视、携程、今日头条、中国电信、中兴、恒丰银行、平安科技、YY、B站、360等。正是由于众多用户的使用验证了它的稳定性和可靠性的同时也促进了Ceph的进步,使其出现了很多新东西,如 SPDK、BlueStore、RDMA等等这些高性能底层技术。

Ceph国内贡献

Ceph社区的贡献者是 Ceph 的使用用户占据了相当的贡献排名。

国内都有哪些公司参与社区的贡献呢?我来说下,如:中国移动、XSKY、中兴、浪潮、H3C、阿里、网易、乐视、360、United Stack、99cloud等等,我这里就不展开说了(以上公司不分排名),详情可以查看社区mail list。

例如乐视小伙伴提交的Ceph RGW:Lifecycle还有XSKY小伙伴提交的DPDK、SPDK、RDMA、AsyncMessenger等等。

Ceph社区:持续的创新环境

从传统IT基础架构的生态链看,各个层级的行业领导者纷纷为Ceph投入人力,物力来持续推动不断创新的运行,开发和生产环境。

如图所示RedHat、SUSE、Canonical、FreeBSD等构成了Ceph 软件发行包的厂商。

Intel,Mellanox,AMD 和 Cisco 分别在不同的硬件组件层面推动自身融入Ceph 体系,SanDisk,HDS 和 Fujitsu 都在自身的存储系统上采用 Ceph 整合,CERN 和德国电信分别是 Ceph 社区参与和回馈最多的企业用户。同时近年来国内运营商级别用户中国移动也在参与Ceph社区的贡献。

Ceph 通过其开放的社区和插件化的代码架构来包容越来越多的底层厂商参与其中,不管是 Mellanox 推动 Infiniband/RDMA,还是希捷的 Kinetic API,或是 Intel x86 架构,ARM 都在积极的参与其中,利用自身的优势来持续对 Ceph 软件体系进行创新发展。

比如在网络层面,Mellanox 联合 XSKY提供了基于 RDMA 的网络方案,Chelsio 跟 XSKY 合作实现基于 iWARP 的 RDMA 存储网络等。

Ceph存储引擎

Ceph在存储后端支持多种不同的存储引擎,有点类似MySQL支持InnoDB,MyISAM等等一样。之前有FileStore,KeyValueStore、NewStore和MemStore,但在这些存储引擎中真正被用来做在线系统只有FileStore。但是FileStore由于历史问题,存在先天的过多依赖本地文件系统的问题,在高利用率下存在较为严重的性能瓶颈问题。

因此,从Infernails版本开始,Sage开始NewStore的开发,通过结合键值数据库的高效管理和本地文件系统对于数据的空间管理来实现高效的后端存储。但是由于RocksDB和XFS的完美结合困难,在遭受若干次打击后,Sage Weil决定一捅到底,直接替换XFS使用一个简易的用户态文件系统进行管理。这个项目命名为Blue

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值