存储如何让文件小一点_杉岩数据梁欣鑫:使用Ceph存储海量小文件的实践

请输入标题   bcdef

4月23日,在由DOIT主办的首届软件定义存储峰会在深圳举办。杉岩数据高级存储技术专家梁欣鑫“使用Ceph存储海量小文件的实践”的主题演讲中,谈到了小文件、解决小文件问题的几点想法以及Sandstone MOS海量小文件的方案。

请输入标题   abcdefg

2845a12df64b9fcd97f986122fa25317.png

本次大会,以“软件定义存储未来”为主题,DOIT主办,中国开源云联盟、中国超融合产业联盟、Ceph中国社区和腾讯云+社区提供支持,吸引了来自全国各地的数百位专业观众参与。大会探讨了SDS业内最热门的六大话题,包括SDS趋势与实践、开源云存储、超融合、Ceph、互联网云服务等等。数十位国内外专家、学者和用户亲临现场,结合软件定义存储技术、应用、现状及趋势进行了深入交流。

e5eef73ce6816f41687a8a3ee3796639.png

杉岩数据高级存储技术专家梁欣鑫

以下内容根据速记整理,未经本人审定:

各位下午好!我来自杉岩数据,下面跟大家分享使用Ceph存储海量小文件的实践,今天要讲的是小文件,解决小文件问题的几点想法以及Sandstone MOS海量小文件的方案,最后是总结。

海量小文件带来的问题

1、海量数据的性能问题。这是64K写的性能测试,一开始的1万到4亿个对象,这个时候会发现写入的性能逐步下降,从开始有15K的oes到下降到2.5,实际上下滑比例已经达到了80%多,海量小文件的冲击是非常大的。

究其原因,如果用的是fd,底下的文件是要从fd到dentry再到inode,superblock,1亿的文件,256B,它已

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值