星实对象存储
大数据时代的来临,数据爆炸式增长,数据的使用模式也在发生转变,传统架构的存储系统(DAS/NAS/SAN)在实际应用中逐渐遇到了性能、数据共享、扩展能力等方面的诸多问题,已经不能满足用户需求。上海星实信息技术有限公司针对这些问题,研发了构建于通用硬件之上的高性能、高可靠、高可扩展的新型分布式存储管理软件 —— 星实对象存储系统(以下,简称StarOS)。应用StarOS,用户可以采用通用服务器、普通的SATA/SAS硬盘以及主流以太网络来构建媲美传统企业级存储产品的海量存储系统。
对象存储是一个更灵活和更方便的存储系统,和传统的NAS和SAN存储不通,对象存储具有近乎无限的扩展能力和可以线性扩展的性能。在面对海量数据的场景相比传统存储有非常大的优势。
星实对象存储特点
无限扩展
a. 基于通用的X86、ARM或者国产化服务器平台,提供统一存储池;
b. 在线扩容,在用户无感知的情况下,实现快速扩容。并且能解决扩容带来的数据迁移;
c. 实现软硬件解耦,支持异构的硬件,在软件层面实现存储的统一管理和统一使用;
持续保护
a. 系统采用可以提供纠删码和多副本等冗余技术,完成数据的跨节点冗余。实现跨节点冗余,同时也支持机柜级的冗余;
b. 支持WORM、数据加密、审计等企业级存储得功能;
高效访问
a. 独特得分布式算法,数据能同时写入到所有得节点上。具有非凡得并发访问带宽;
b. 小文件优化算法,通过小文件聚合、SSD缓存加速等方式,大大提升系统得IOPS;
c. 独特得数据均衡方式,数据能均匀得写道各个硬盘上,使用率差别不超过3%;
便捷使用
a. StarOS支持业务程序通过文件系统接口来访问对象存储系统里面的数据、业务程序可以通过对象接口来访问文件系统中的数据,实现了文件和对象的数据互通;
应用场景
-
备份归档
通过纠删码实现最高90%以上得空间利用率。实现最低成本下得数据备份;
-
广电媒资
按需扩展存储池为点播、媒资、渲染、CDN等应用业务提供高度灵活和高性能得分布式对象存储系统;
-
人工智能
完善的API和SDK,完整对接Tensorflow、Caffe等深度学习应用;
-
海量数据
针对海量小文件场景进行了专门得优化,通过小文件聚合、SSD加速等方式加速数据得读写;
优化元数据存储方式,整个系统最高能支持千亿级数量得文件;