亚马逊云存储简介：在云中构建数据基础

亚马逊云存储简介：在云中构建数据基础

关键字: [Amazon Web Services re:Invent 2024， 亚马逊云科技， Amazon S3， Cloud Storage， Data Foundation， Enterprise Applications， Data Lakes， Artificial Intelligence/Machine Learning]

导读

通过亚马逊云科技存储释放您数据的潜力。本次会话将向您介绍亚马逊云科技提供的全面存储和迁移服务，重点关注企业迁移到云端的常见工作负载。探索这些服务如何与其他亚马逊云科技产品无缝集成，使您能够在云中构建强大、可扩展且具有成本效益的数据基础。了解数据管理、安全性和持久性的最佳实践，使您能够释放数据的力量并推动组织内的创新。

演讲精华

以下是小编为您整理的本次演讲的精华。

在2024年亚马逊云科技 re:Invent大会上，一场名为“亚马逊云科技存储服务介绍:在云中构建数据基础”的会议深入探讨了亚马逊云科技存储服务及其在各种客户用例中的应用。主讲人Rajesh J. Ragwan、Rohan Thomas和Boris Alexandrov强调了数据在现代企业中的关键作用，以及管理从各种来源产生的大量数据所面临的挑战。

演讲者们强调构建健全的数据基础对于释放数据价值和推动业务增长至关重要。亚马逊云科技存储服务以安全性为基础原则，确保客户数据和基础设施的最高保护。这些服务由亚马逊云科技全权管理，免去了客户资源密集型管理任务的负担，使他们能够专注于转型工作。亚马逊云科技孜孜不倦地追求客户满意度，提供高可用性、全球可扩展性和卓越性能，同时不断创新以满足不断发展的客户需求。

许多亚马逊云科技客户都将成本效率视为当务之急。主讲人阐明，客户可以通过利用云的弹性特性、合理规模部署、利用托管服务以及利用每项服务固有的成本优化功能来优化成本。完全优化的客户平均报告了31%的成本节约，同时减少了停机时间、提高了生产力，并增强了交付业务计划的能力。

亚马逊云科技存储产品组合包括一套满足不同客户需求的全面服务。对于数据存储，Amazon Elastic Block Store提供高性能块存储，Amazon S3提供对象存储以从任何地方访问任何数量的数据，Amazon EFS和Amazon FSx系列提供托管文件存储服务。数据传输由Amazon Transfer Family提供安全的数据共享、Amazon Snowball加速数据传输到和从亚马逊云科技、Amazon Storage Gateway为本地应用程序提供无限云存储、Amazon DataSync简化并加速亚马逊云科技存储服务与本地环境之间的数据传输。

数据保护通过Amazon Backup实现集中和自动化的数据保护管理、亚马逊云科技 Disaster Recovery实现可扩展和经济高效的应用程序恢复，以及各种快照功能(如Amazon EBS快照)实现时间点恢复。与其他亚马逊云科技服务的无缝集成使客户能够运行分析、机器学习、高性能计算、可视化和流媒体工作负载，并不受限地访问他们的数据。

主讲人深入探讨了常见的客户旅程，首先是通过提升和转移的方式将应用程序迁移到亚马逊云科技。随后利用额外的服务和创新来现代化和增强应用程序，最后持续利用亚马逊云科技提供的最新成本优化功能进行优化。

在企业应用方面，各行业的客户正在积极将关键业务应用程序(如Windows、SAP、数据库和VMware)迁移到亚马逊云科技。他们的主要动机包括降低成本、推动创新、改善客户体验、实现更好的可扩展性和增强安全态势。对于结构化应用程序(如SQL Server)，客户有多种部署选择，从Amazon RDS中完全托管的配置到使用EC2和EBS的独立服务器、使用EC2、EBS和Amazon FSx的故障转移集群，以及跨多个可用区的永久可用性组。客户可以根据他们的总拥有成本(TCO)考虑，将应用程序的关键性和可用性要求与不同的操作模式相匹配。

主讲人展示了来自Salesforce.com的客户案例，他们利用Amazon EBS io2 Block Express为机器学习预测部署了低延迟、高性能的MongoDB。这一迁移使预测更快，而不会影响应用程序性能，最终为Salesforce客户提供了更丰富、更个性化的体验。

对于基于文件的应用程序，客户正在采用Amazon FSx服务，支持流行的文件系统，如NetApp ONTAP、OpenZFS、Windows文件服务器和Lustre。这些全托管文件系统提供功能丰富、高性能且经济高效的解决方案，允许客户从本地部署迁移，而无需重新架构、重新认证或重新培训员工。主讲人强调了使用全托管文件或块存储的好处，包括更快的上市时间、降低复杂性和降低成本。客户不再需要担心容量规划、网络管理、备份、硬件故障、软件升级或许可证管理，因为这些任务都由亚马逊云科技处理。

教育内容提供商Pearson的客户案例说明了他们如何利用Amazon FSx for NetApp ONTAP提高ERP应用程序的敏捷性和性能。这一迁移使供应链批处理程序加快了速度，节省了容量，并实现了从测试到生产环境的快速部署。

对于采用多租户SaaS架构或无服务器架构的现代应用程序，Amazon Elastic File System (Amazon EFS)因其弹性、经济高效以及可从任何地方访问而被广泛采用。Ancestry的客户案例展示了他们如何利用Amazon EFS和Amazon EC2使多位科学家能够同时进行基因组学研究，并独立扩展计算和存储资源。

构建健全的数据基础，利用数据湖成为一个关键话题。许多客户都面临着数据孤岛的问题，并希望将数据集中起来供组织内不同群体进行分析和使用。Amazon S3因其可扩展性、安全性以及与亚马逊云科技分析和AI/ML服务的无缝集成，被视为构建数据湖的理想解决方案。

主讲人强调，已有超过100万个数据湖建立在亚马逊云科技上，像宝马、先锋和通用电气医疗保健公司等公司都将其作为单一的真相来源，以驱动业务决策并开发新的客户体验。快餐连锁餐厅Sweetgreen的客户案例说明了他们如何在Amazon S3上构建数据湖，集中来自各种来源的数据，同时确保符合加利福尼亚消费者隐私法(CCPA)等法规。

Amazon S3为不同工作负载提供了多种存储类别，根据检索性能、访问频率和持续时间要求实现成本优化。主讲人讨论了客户使用Amazon S3 Intelligent-Tiering实现的显著成本节约，该服务根据访问频率自动在存储类别之间移动数据，而不会影响性能或引入操作开销。

演讲转向了AI和ML工作负载的云存储，这是当前技术格局中极其重要的一个话题。演讲者概述了AI和机器学习的基础知识，追溯了从传统模型到基础模型的演进，后者通过利用可针对特定任务进行微调的预训练模型来简化AI/ML。

详细探讨了AI/ML管道，包括数据准备、模型构建、训练、部署和管理。主讲人强调了人类和机器在该管道中的不同需求和能力，以及优化数据流以保持GPU实例饱和的重要性，从而确保成本效率并实现更快的迭代周期。

Amazon S3被视为扩展数据湖以支持AI/ML工作负载的理想起点。演讲者讨论了将数据聚合到中央存储库的注意事项，以及处理工具和交互方式(文件、文件夹、接口)，这些都是为人类和机器与数据交互而量身定制的。

主讲人还强调了亚马逊云科技在饱和GPU以实现经济高效的训练方面的独特方法，因为AI/ML环境中的大部分成本来自训练阶段。保持GPU持续工作可确保成本效率，并促进更快的迭代周期。

总之，在2024年亚马逊云科技 re:Invent大会上的“亚马逊云科技存储服务介绍:在云中构建数据基础”会议全面探讨了亚马逊云科技存储产品组合，强调了其安全性、可扩展性、性能和成本优化能力。主讲人深入探讨了常见的用例和客户旅程，强调了构建健全的数据基础、利用数据湖以及优化云存储以支持AI/ML工作负载的重要性。来自Salesforce.com、Pearson、Ancestry和Sweetgreen等公司的真实客户案例说明了在不同行业和应用中利用亚马逊云科技存储服务的切实好处和最佳实践。

下面是一些演讲现场的精彩瞬间：

演讲者概述了本次会议的议程，包括对亚马逊云科技存储产品组合的概览以及数据的重要性，同时鼓励与会者在整个周期内深入探讨各种服务。

根据演讲者与各种客户合作的经验，构建正确的数据和应用程序架构对于提高敏捷性、创新性和最大化业务成果至关重要。

亚马逊云科技客户通过优化云端部署平均节省了31%的成本。

Salesforce利用Amazon EBS和EC2实现了MongoDB部署的低延迟和高性能，从而实现了更快的机器学习预测并为客户提供了更丰富、个性化的体验。

Amazon FSx为NetApp客户提供了无缝迁移路径，可在云端运行网络附加存储工作负载，无需重新架构、重新认证或重新培训员工。

客户通过使用S3智能分层节省了超过40亿美元，其中Bynder将成本降低了65%，而不会影响性能。

亚马逊云科技推出了强大的GPU实例，如P4和P5，可以根据需求进行扩展，确保GPU得到充分利用，并提供高带宽以实现最佳性能。

总结

在这个引人入胜的叙事中，我们踏上了一段云存储之旅，亚马逊云科技作为一股先锋力量矗立其中。故事从介绍亚马逊云科技存储产品组合开始，这是一套旨在应对企业日益增长的数据挑战的综合服务。从Amazon S3提供的安全可扩展对象存储，到Amazon EBS提供的高性能块存储，亚马逊云科技提供了多种量身定制的解决方案，满足客户的独特需求。

当我们深入探索时，我们发现了数据湖的变革力量，这是一个集中式存储库，让组织能够充分利用其数据的潜力。亚马逊云科技客户如Sweetgreen已采用了这种架构模式，利用S3存储和分析大量数据，实现数据驱动的决策并促进创新。

叙事接着带领我们探索企业应用程序向云端迁移的过程。从数据库和虚拟化工作负载到基于文件的系统，亚马逊云科技提供了无缝过渡路径，提供完全托管的服务，如Amazon FSx和Amazon EFS。Salesforce和Pearson等客户从这些服务中获益，体验到了性能、敏捷性和成本节约的提升。

最后，我们进入人工智能(AI)和机器学习(ML)的领域，亚马逊云科技存储在其中扮演着关键角色。叙事揭示了AI/ML工作负载所涉及的复杂流程，从数据准备和模型构建到训练和部署。S3成为基础，实现高效的数据聚合和管理，而Amazon SageMaker和Amazon Bedrock等服务则促进了无缝的模型训练和部署。

当这个故事接近尾声时，一声响亮的号召回荡在耳边:拥抱亚马逊云科技存储的力量，释放您数据的真正潜能，推动创新，在不断演进的数字化景观中引领企业向更高远征程。

亚马逊云科技（Amazon Web Services）是全球云计算的开创者和引领者。提供200多类广泛而深入的云服务，服务全球245个国家和地区的数百万客户。做为全球生成式AI前行者，亚马逊云科技正在携手广泛的客户和合作伙伴，缔造可见的商业价值 – 汇集全球40余款大模型，亚马逊云科技为10万家全球企业提供AI及机器学习服务，守护3/4中国企业出海。