请输入标题 bcdef
4月23日,在由DOIT主办的首届软件定义存储峰会在深圳举办。杉岩数据高级存储技术专家梁欣鑫在“使用Ceph存储海量小文件的实践”的主题演讲中,谈到了小文件、解决小文件问题的几点想法以及Sandstone MOS海量小文件的方案。
请输入标题 abcdefg
本次大会,以“软件定义存储未来”为主题,DOIT主办,中国开源云联盟、中国超融合产业联盟、Ceph中国社区和腾讯云+社区提供支持,吸引了来自全国各地的数百位专业观众参与。大会探讨了SDS业内最热门的六大话题,包括SDS趋势与实践、开源云存储、超融合、Ceph、互联网云服务等等。数十位国内外专家、学者和用户亲临现场,结合软件定义存储技术、应用、现状及趋势进行了深入交流。
杉岩数据高级存储技术专家梁欣鑫
以下内容根据速记整理,未经本人审定:
各位下午好!我来自杉岩数据,下面跟大家分享使用Ceph存储海量小文件的实践,今天要讲的是小文件,解决小文件问题的几点想法以及Sandstone MOS海量小文件的方案,最后是总结。
海量小文件带来的问题
1、海量数据的性能问题。这是64K写的性能测试,一开始的1万到4亿个对象,这个时候会发现写入的性能逐步下降,从开始有15K的oes到下降到2.5,实际上下滑比例已经达到了80%多,海量小文件的冲击是非常大的。
究其原因,如果用的是fd,底下的文件是要从fd到dentry再到inode,superblock,1亿的文件,256B,它已