数据是一项重要资源,已经成为业界的共识。事实上,目前众多的企业正在依托数据驱动业务增长,这与数字化的最终目标不谋而合。与此同时,面对数据的爆发式增长,特别是非结构化数据的增长,想要更好的利用数据,就要从数据存储的源头说起。
作为对数据利用的代表,自数字化转型以来,企业上云正在成为一种不可逆的趋势,所以云存储也将是企业未来数据存储的重要介质。作为公有云的代表,亚马逊云服务(AWS)在技术上遥遥领先,而云存储方面亦不例外。
AWS大中华区产品部总经理顾凡
AWS大中华区产品部总经理顾凡指出,随着最近AWS在中国区发布了AWS FSx for Windows与AWS FSx for Lustre这两款新产品,在中国区,已经集齐了无论是以Linux还是Windows为工作负载下的,AWS存储服务全家桶,而这些都是AWS以开放心态,坚持为客户解决行业和业务问题为初衷。
需求推动产品更迭
众所周知,早期的云主机中,大多以Linux作为工作负载,而现在越来越多的客户也将在云端使用Windows系统,这一全新趋势,促使AWS在云存储领域做出新的改变。有数据显示,在公有云上使用Windows负载的用户有57.7%建立在AWS上,这也成为AWS FSx for Windows新品推出的最重要原因。
AWS认为,从长远角度来看,目前众多的企业正在使用Windows作为工作负载,ERP、CRM与SQL Server的使用是典型的代表,而众所周知的是,PC上运行的大多以Windows为主,特别是在企业上云脚步加快的同时,基于Windows工作负载的应用迁移与灾备,将是一个不容忽视的问题,而这一切都需要文件系统的支撑。
为了提供更优质的文件存储服务,特别是Windows负载的文件系统,AWS采用了原生的Windows SMB协议,而这一协议从根本上解决了文件无法兼容的问题。另外,跨三区的可用部署、20G的网络吞吐,以及存储介质可选是AWS在性能与成本间找到的最佳平衡点。
值得一提的是,AWS FSx for Windows的数据去重功能,该功能可以去除同一组织、同一公司中各个用户的类似或者相同文件,去重率达到80%,最终减少存储空间的使用,使得企业达到降低存储成本的目的。
高性能计算之友
在金融、科研等众多行业中,高性能计算的应用已经普及。在过去的几十年中,高性能计算一直围绕着节点计算能力、网络性能,以及文件存储响应三个方面,展开深入研究,进而达到效能提升。另外,在整个高性能计算文件系统中,Lustre具有举足轻重的地位,其中全球60%的高性能计算应用处于Lustre平台中。
事实上,Lustre的部署过程异常繁杂,时间长、易出错。传统的高性能工作负载,在一个独立项目中,需要具备文件系统支持的同时,对于节点、带宽、存储等各个方面都要进行评估,购置相应的硬件设备支持整个集群的工作,最后在部署相应的应用,时间成本高昂。并且,必须要指出的是,高性能计算平台并不是时时刻刻都在启用,数据存储于其上,造成极大的存储资源浪费。
AWS FSx for Lustre的出现就是为了打破过去固有的传统,通过将Lustre与AmazonS3集成,用户在使用时可以通过需求配置相应节点的带宽、存储和计算性能直接构建一个高性能服务。此外,通过将数据从S3中拉入AWS FSx for Lustre文件存储中,进行算法的运行,并将计算结果保存在S3中,最后可以释放掉不在使用的节点资源,做到资源优化。
在这一过程中,AWS提供的Lustre文件系统,可以提供若干个百G的吞吐量,亚毫秒级的延迟、百万级的IOPS,通过这些较高的性能指标,助力系统的管理与部署。根据用户需要,对于存储介质可以有HDD、SDD和SSD等多种选择。
云厂商那么多,为什么选择AWS?这也是许多企业面临上云时的抉择。
优势之选
2020年8月份,AWS被Gartner评为全球云计算IaaS和PaaS的领导者。并且,在过去十年的评选中AWS一直处于领先地位。IDC IaaS MarketScape认为,AWS继续保持其在公有云中IaaS市场的主导地位,并为客户提供当今公有云中最广泛的基础设施服务组合。
单以云存储产品而言,可以用“安全可信、至广至深、高度集成、开放生态”十六个字来概括。
“客户数据安全是AWS存储的最高优先级。通过执行网络接入的控制、数据加密、API接入控制、文件访问控制、访问审计、以及客户端访问控制等数据安全机制,AWS的存储在满足各类合规性要求的同时,可以加强客户数据的安全性。”顾凡说。
AWS存储全家桶涵盖了从对象存储、块存储、文件存储到备份存储,以及各类数据传输与边缘处理等极具广度和深度的存储选项。特别是AWS对象存储服务中,依据数据的访问频度,可以依次分为6个不同的产品,这一产品分层,可以有效的降低企业服务成本。
值得一提的是,AWS存储与计算,分析,机器学习,迁移,备份等云服务高度集成。譬如,基于Amazon S3构建的数据湖与Amazon EMR,AmazonRedshift,AmazonAthena,AmazonKinesis,AmazonSageMaker等云服务集成,是构建云上数据湖的最佳选择。又如,Amazon EFS与Amazon EC2,AmazonEKS,AmazonECS, Amazon SageMaker,AWS Fargate和AWSLambda集成,为各类计算服务提供共享持久性文件存储。
直面AWS的初心,顾凡再次强调表示,AWS整体产品设计思路和发展的想法,很重要的一条就是授人以渔。AWS始终坚持一个开放的心态,并且AWS也愿意与更多的合作伙伴携手并肩,共同致力于为客户提供更多、更优质的解决方案。