申耀的科技观察
读懂科技,赢取未来!
毫无疑问,今天数据正快速融入到人们的日常生活中,这让各行各业的数据都出现了“井喷式”的爆发增长。但是,随着企业对数据的理解和应用越来越深刻,会发现基于数据的创新依然面临着很多的困难,那就是这些不断涌现的数据大多是以非结构化数据的形式存在。
Gartner数据显示,目前全世界80%的数据是非结构化数据;同样,IDC也预测,截至到2023年,文件和对象数据的容量将增长3倍,且90%的新企业的应用将是基于云原生设计的,可以说这就对非结构化数据的存储、使用和管理提出了更高要求,同时也对存储基础设施的性能和可扩展性提出了前所未有的挑战。
其中,以戴尔易安信ECS代表的对象存储平台就以其“可扩展性强、容量无限大、数据安全可靠、使用简单方便”等特性成为了今天破解非结构化数据,释放数据红利和价值的有力“武器”,越来越多的企业也开始意识到对象存储可以提供更多的竞争优势。
而作为全球存储领域的领导者,长期耕耘企业级对象存储的戴尔科技集团也在这一市场实现了领跑,在Gartner近期公布的《2020年分布式文件系统和对象存储魔力象限》报告中,戴尔科技集团就位列榜首,再一次展现了其强大的技术实力和领先优势,而自2016年Gartner首次发布该报告以来,戴尔科技集团更是已连续五年实现了“霸榜”。
客观的说,在这背后正是戴尔科技集团在对象存储领域不断“创新求变”的真实印证,也是其“一直在引领,从未被超越”的最佳体现,而这也会最大化地释放“新基建”时代数据的作用与价值,并大大推动企业数字化转型的步伐,让更多的行业客户在面对非结构化数据创新挑战时,真正做到“不畏挑战,不惧艰难”。
对象存储市场迎来变革
事实上,过去几年对象存储市场的成长可谓“风生水起”,无论是当网盘、跑游戏、做备份、存视频……在非结构化数据爆炸的大趋势下,对象存储越来越受到企业的高度重视,在公有云到企业私有云存储环境中都“频频亮相”。
根据IDC公布的2020年第三季度中国软件定义存储(SDS)市场跟踪报告显示,去年前三季度中国SDS市场继续实现高速发展,市场规模同比增长47%,是中国增速最快的存储细分市场,而分布式文件、块、对象市场份额分别为48%、29%和23%,相比传统企业级存储整体市场的下滑,以对象存储为代表的SDS可以说保持了较高的增速。
在戴尔科技集团大中华区非结构化数据存储事业部技术总监胡渊汶看来,今天的非结构化数据可谓“无处不在”,比如企业和机构的非结构化数据主要就有三大部分:一是IT部门管理的数据,包括文件共享,主目录,文件档案库,甚至包括视频监控;二是行业应用的数据,包括媒体里面有4K编辑、播出系统和媒资系统,生命科学有基因测序分析、石油能源、气象、地震的高性能计算,EDA、ADAS(汽车自动驾驶辅助系统),银行影像系统等等;三是大量的新兴业务产生的数据,特别是随着企业采用新的应用架构、微服务、容器等技术,传统的存储解决方案和数据库无法提供这些新应用和新架构所需的简易性和灵活性。
那么,对象存储相比文件和块存储,究竟有何不同呢?可以简单做个对比,其中块存储,其操作对象是磁盘,粒度很细,适合小数据管理,存储协议是SCSI、iSCSI、FC;而文件存储,操作对象是文件和文件夹,采用树形结构管理数据,但随着文件目录层数增加,访问会变得越来越慢,存储协议是NFS、SAMBA、POSIX等,最后是对象存储,主要操作对象是对象(Object),它能够像块存储一样高效检索,像文件存储一样极致扩展,其存储协议是S3、Swift等,可见对象存储作为新的存储类型,结合了块和文件存储的优势,因此受到了市场不断的认可。
胡渊汶也认为,对象存储具有很好的扩展性,能够实现横向的扩展架构,在系统不停机的情况下就可以加节点,这样可以把系统扩大到很大的规模,由此有效地应对数据增长;同时,管理简单,一个存储管理员就可以管理PB级数据规模;此外,能够直接通过元数据定义业务标签,如在人工智能、机器学习利用元数据,就可以帮助定义特定的数据集;更为关键的是,就是其存储协议支持S3,而大多数现代化应用和云原生应用都能够兼容S3,这就让对象存储有了更多的“用武之地”。
也正因此,对象存储越来越快的走入到了企业的应用场景之中,针对传统的工作负载,对象存储可在分级归档、备份、云网关中承担“重任”,作为次级存储,能够释放性能更高、价格更贵的第一级存储容量;而在现代化应用中,对象存储在Web应用、物联网、数据分析、人工智能和机器学习中也能发挥优势,特别是今天越来越多的公有云厂商把对象存储当做“云存储”在售卖,从一个侧面也印证了对象存储的发展趋势。
不难发现,对象存储访问的灵活性、管理的简易性以及针对云原生架构的适应性等优势,再加上随着全闪存介质成本的不断下降,这让对象存储市场即将迎来新的变革。
领跑对象存储关键优势
而在此过程中,戴尔科技集团旗下的企业级对象存储平台——戴尔易安信ECS,就以其卓越的扩展性、性能、弹性;支持传统工作负载和下一代工作负载,以及兼容S3,能够提供公有云的功能和私有云基础架构的掌控力等关键优势,长期领跑企业级对象存储市场,具体来说:
一是,能够满足任何数据的需求,ECS采用横向扩展式架构,在容量、对象数量、文件规模或节点数量等方面无限制,因此无论行业客户的数据中心位于何处,都可以轻松跟上指数级数据增长的步伐,同时也只需以类似于公有云的规模添加新节点和支持工作负载,就能同时实现私有云基础架构的可靠性和控制。
由此带来的好处是实现了更好的TCO成本,数据显示,与先进的公有云提供商相比,通过ECS构建一个对象存储云,总拥有成本可降低59.5%。同时,它还具备全球可访问能力,支持8个站点的虚拟数据中心的联合;此外采用Active-active架构,支持XOR等能力,也带来更加简化的管理;ECS还能充当二级存储,为关键业务应用释放昂贵的主存储资源。
二是,更好的赋能现代工作流,ECS支持多协议,包括S3、NFS、SMB、CIFS、Swift、CAS、ATMOS、HDFS,同时也能通过RESTful API来支持云原生的应用,这样就能适应目前企业往云原生转型的趋势;更为关键的是,多协议支持和良好的互操作性,企业也可以借助ECS构建现代数据湖,进而通过数据湖实现Splunk分析,以及流数据分析存储等能力。
三是,具有强大的安全和合规能力,ECS内置了数据保护功能,具有静态数据加密、纠删码、三重镜像等功能,能够使得存储平台安全性增强,同时还新增了更多的安全能力,包括支持新的安全管理员角色,能够将特定的使用权和特权授予安全管理员;提供了新的安全API,不仅方便自动化地报告安全设置,同时企业也能将ECS整合到已有的安全解决方案中;此外,也支持外部的密匙管理器,帮助企业满足合规要求。
除此之外,ECS还具有更多的特性,如具有强一致性的多站点访问能力,能够通过全局命名空间,让任意数据可以在任意站点进行读写,支持应用访问无缝切换;支持Box-carting(小文件归并功能)和数据大块(chunk),为大型和小型队形提供高能和低开销;能够定制元数据,内置的元数据搜索功能,可以支持多达30个元数据字段,不但可以快速轻松定位数据,也能支持元数据更加精细的搜索,同时,ECS也加入了戴尔科技集团推出的“未来无忧存储保障计划”,也能够进一步护航企业的数字化转型。
对此,戴尔科技集团大中华区非结构化数据存储事业部资深系统工程师白光茁也表示:“ECS的多站点和强一致性能力,能够给前端业务带来很大的便利性,不需要处理很复杂的一致性的关系,就能实现数据的完整性、数据一致性的保证,这也是相比公有云厂商,ECS所具备的独有的技术优势。”
四是,支持灵活的部署方式,ECS支持软件定义模式部署,也可以通过一体机这种“交钥匙”的方式部署,同时服务供应商也能通过ECS提供相应的部署,灵活的部署方式,可以让企业拥有更好的可扩展性、性能、弹性和经济性,真正满足了企业现代化应用的需求。
值得一提的是,在“交钥匙”的方式中,戴尔科技集团也提供了四款独特的硬件产品,即EX300、EX500、EX3000和全闪存EXF900。其中,EX300是入门版产品,它以容量60TB起的群集选项降低了采用对象存储的门槛;EX500实现了经济性与密度的出色结合,为ECS一体机产品组合注入了更高的灵活性;EX3000则是一种采用可热插磁盘的高密度对象存储系统,每个机架的最高容量可达到11.5PB,并可轻松扩展到EB规模;而作为EX系列的最新产品,EXF900通过3.84TB NVMe全闪存固态硬盘的“加持”,带来了极致的性能,在规模方面每个节点支持12-24个硬盘,集群规模也支持从每个机架230TB到2.94PB规模化的扩展,为企业的现代化工作负载提供了理想的选择。
从这个角度来说,ECS不仅以前所未有的前瞻力、创新力和产品力,重新定义了企业级对象存储的新标准,同时也引领了整个对象存储未来发展的新方向和新趋势。
ECS背后的底蕴与底气
回头来看,戴尔科技集团在企业级对象存储市场也用自身实力和行动真正践行了那句老话:“一直在引领,从未被超越”,而这也是ECS之所以在企业级对象存储领域保持强大竞争力,并不断重新定义和引领市场趋势的关键所在,背后重要的原因包括三个方面:
首先,是ECS基于久经验证的传承与创新。作为对象存储领域的领导者,戴尔科技集团在对象存储领域的耕耘历史超过了20年,旗下的戴尔易安信第一代对象存储是Centera,Centera主要针对数据归档和法规遵从场景进行设计,并广泛应用于金融行业,是针对特定场景专用存储设备。
2008年,戴尔易安信推出第二代对象存储Atmos,从第二代对象存储开始,对象存储设备以平台的定位进入到数据中心,同时由于跨地域数据复制,跨地域数据访问特性的引入,对象存储的云特性得以体现,因此从第二代对象存储开始,对象存储也被称为云存储平台。时间进入到2014年,戴尔易安信又推出第三代对象存储ECS,这是全球第一款直接支持Hadoop大数据分析平台的对象存储产品,同时通过直接提供HDFS接口以及跨HDFS和S3接口的数据互联互通,使得对象存储成为整个数据中心的数据湖平台,支持海量数据的存储、保护、访问和分析,此后ECS持续保持着不断的迭代和进化,这种传承和创新实现了不断的技术积累和市场突破。
其次,是ECS成熟稳定的同时也支持广泛的应用场景创新。ECS的优势不仅建立在对技术的不断传承与突破上,具有值得信赖的数据安全性和持续运行能力,也在于对用户需求的深刻理解和洞察,因此它支持十分广泛的应用场景创新,这为ECS在企业级对象存储市场中保持强大的竞争力提供了新动能。
例如,PowerProtect DD+ECS,这套产品组合可以让企业将冷门数据从PowerProtect DD分级存储到ECS,由此释放容量并降低总体拥有成本,最大化的延伸数据的价值;PowerScale+ECS,可以组成分层存储,当PowerScale上的数据变冷以后,企业可以通过CloudPools把数据“迁移”到ECS上,实现数据归档,这也是一种经济高效的冷门数据存储方案;GeoDrive+ECS,则可以实现将Windows文件系统界面延伸到ECS,从Windows中进行对象存储的访问,不仅能够实现轻松地安装、配置和使用,且整个方案完全免费;VMware Tanzu/PCF+ECS,则可以帮助企业更好的实现基于VMware环境下的云原生存储转型。
与此同时,ECS也是企业极致的备份目标设备,ECS和很多备份软件集成,可以成为Commvault、Oracle、IBM等存储平台的备份目标介质。此外,ECS也支持企业“利旧”,特别是针对Centera和Atmos的用户,都可以把过去的数据规整到ECS上,整个过程能够保持轻量级的数据迁移,迁移之后,原先的应用程序可以用,ECS始终保持了对Centera和Atmos协议的支持,由此大大延长了整个使用生命周期。此外,无论是人工智能、深度学习和数据分析、驱动流数据平台、还是搭建物联网数据湖方面,ECS都能够发挥出更好的优势。
最后,是ECS具有丰富的落地实践和完善的服务能力。戴尔科技集团拥有一支丰富经验,成功实施过大规模部署和运行的对象存储项目的实施团队,在保障行业用户长期投资保护的同时,也能帮助企业加速数字化的转型,同时这种服务贯穿系统的整个生命周期,为用户提供极致的选择权和灵活性。
比如,某制造企业,由于过去采用传统的NAS存储保存非结构化数据,无法实现用户自定义功能,在加上其ERP系统产生的非结构化数据写入存储平台时,也导致订单文件流转复杂,此外超过上万人的邮件附件,也让存储平台的发送效率低下。因此,借助ECS的云网关能力,该公司实现了统一的数据存储平台,对现有的生产、用户的云盘数据进行统一的梳理和数据的隔离,最终实现了生产数据的高可用。
再如,某证劵公司,随着证劵行业持续的数字化转型,其数据总量也呈现出指数级的增长,尤其是非结构化的小文件数量越来越多,使得数据的传输、查询、备份、归档等日常业务开展的速度越来越慢,为此该券商利用ECS对象存储的扩展性建立新的存储资源,降低了初期成本投入和TCO,并且解决了传统磁带库性能低下、可靠性不足等问题,为数据全生命周期管理、人工智能等技术在后续发展中的实际应用奠定了基础。在此基础上,基于ECS提供的REST的接口,该券商也提高了图片、视频等非结构化数据的检索与访问性能,让业务的办理效率进一步提高,更为新技术对业务的赋能开创了新天地。
正如胡渊汶最后所言:“戴尔科技集团对非结构数据基础架构具有长期的远景、战略和投资,能够为用户提供文件、对象和流数据分析的完整而整合的解决方案,最终加速企业的数字化转型,释放数据的最大价值。”
总的来看,随着非结构化数据的爆炸,以及云原生和现代化应用工作负载的兴起,无疑赋予了整个对象存储市场更大的活力,这也给存储厂商带来了前所未有的机遇。而在此过程中,戴尔科技集团始终保持着不断的投入与创新,进化与迭代,以及对行业需求的前瞻认知和准确判断,这让它真正有能力,也有决心帮助更多企业可以更简单、更从容地实现数字化转型,其价值可谓“不止于现在,更关乎未来”。
申耀的科技观察,由科技与汽车跨界自媒体人申斯基创办,18年企业级媒体工作经验,专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。