Oaktree Capital 如何通过现代化 Microsoft 工作负载节省 50%

OaktreeCapital通过AmazonRedshift和Athena实现对传统SQLServer工作负载的现代化,提升了75%的数据SLA,降低成本50%。演讲详细阐述了云迁移策略和AmazonWebServices在支持业务价值和成本优化中的作用。
摘要由CSDN通过智能技术生成

关键字: [Amazon Web Services re:Invent 2023, Amazon Redshift, Modernization, Amazon Web Services Workloads, Sql Server, Data Lake, Business Value]

本文字数: 1400, 阅读完需: 7 分钟

视频

如视频不能正常播放,请前往bilibili观看本视频。>> https://www.bilibili.com/video/BV1Ww411b7t5

导读

2022 年,Oaktree Capital Management 开始使用 Amazon Redshift 和 Amazon Athena,现代化传统的 Microsoft Windows 和 SQL Server 工作负载。在本论坛中,Oaktree 分享了数据现代化如何帮助他们将数据 SLA 提高 75%,同时将成本降低 50%。听取 Oaktree 的云创新如何帮助他们在客户继续优化和帮助确保运行其任务关键型云环境的可预测成本时为客户提供更好的服务。

演讲精华

以下是小编为您整理的本次演讲的精华,共1100字,阅读时间大约是6分钟。如果您想进一步了解演讲内容或者观看演讲全文,请观看演讲完整视频或者下面的演讲原文。

在2022年亚马逊云科技re:Invent上,有一场名为“Oaktree Capital如何通过现代化其Microsoft工作负载节省50%”的会议。这场会议旨在分享Oaktree Capital在现代化转型过程中的经验和见解。会议由美洲SA领导者Thor Giddings主持,他对Microsoft技术有深入的了解。此外,Oaktree Capital的数据和架构主管Chitra Hota以及亚马逊云科技的专业解决方案架构师Yogi Barra也参加了会议。

Thor Giddings在会议上首先解释了现代化的概念。他认为现代化是一个逐步转变现有应用和基础设施以利用更高价值、云原生服务的过程。这一过程旨在解锁新的业务功能,加速创新并减少技术债务。现代化需要有计划的进行,并关注业务价值。虽然现代化可能会带来较高的成本,但关键在于确定哪些领域可以实现创新和改进客户体验。全面的现代化并不常见,通常只是针对关键应用程序的组件进行现代化以实现递增的业务价值。

在讨论如何在亚马逊云科技生态系统中现代化Microsoft工作负载时,Thor强调了亚马逊云科技在支持客户现代化之旅的任何阶段提供的创新。许多客户从将Windows和SQL Server工作负载迁移到Amazon EC2开始,这是一个提升和切换操作。这使得他们能够进一步优化,通过使用如Amazon RDS等管理服务而不是自己管理数据库基础设施来利用数据库基础设施。容器和无服务器是其他在迁移后现代化的技术。更高级别的现代化涉及重构代码,转移到像.NET Core这样的新框架,以及采用云原生数据库如Amazon Aurora。

接下来,Yogi Barra简要介绍了从SQL Server到Amazon Redshift迁移的概述。她指出,SQL Server通常既用于交易数据库又用作数据仓库,这使得成本高昂。在现代社会,客户需要一个完全托管的、自助服务的数据仓库,具有零运维开销,并提供更快的数据洞察。

瑜伽强调,现代云数据仓库应具备在数据量从GB至TB乃至PB呈指数级增长的情况下,无需移动或转换数据即可进行分析的能力。即使在无活动需求时,也能通过使用如Amazon Redshift的自动暂停功能可靠地快速提供见解,并在预算范围内调整规模。随着数据量的增加,Redshift顶级的价格性能使其在价格上具有竞争力,性能上比竞争对手高出3倍。数千个并发用户应能通过商业智能工具获得支持。

亚马逊Redshift已针对所有这些领域进行投资,以满足现代数据仓库的需求。它能帮助分析所有类型的数据,而无需移动,并提供更高的性能价格比,比竞争对手高出3倍。Redshift的灵活性意味着您可以从无服务器模式开始快速启动,然后如果需要更多的控制,可以升级到预配置集群。使用案例包括数据科学家自助服务分析,通过利用Redshift无服务器模式处理尖峰工作负载,实时分析等。

Oaktree资本的Chitra Hota随后分享了他们的数据库现代化之旅。她介绍了背景信息,即Oaktree自1995年开始运营,现在管理着1790亿美元的资产,因此数据量随着投资组合复杂性的增长而大量增长。他们面临的挑战是一个有机增长的组织所典型的——能够在不干扰业务的情况下扩大平台规模,识别数据的黄金来源,实现自助服务报告,以及制定长期愿景并实现短期胜利。

他们的本地环境由514个SQL Server数据库组成,存储容量为500 TB,有18个复制副本,200,000个存储过程,只能通过复制进行水平扩展。生产服务器可能会因为未正确锁定的链接服务器调用而停机。数据仓库是关系型的,位于物理服务器上,没有列级别安全。ETL使用SQL Server集成服务(SSIS)和C#作业,通过Windows调度器进行安排。所有应用程序都使用Windows呈现框架(WPF)桌面框架。

他们的现代化架构以亚马逊S3上的单个数据湖为中心,使用Lake Formation进行治理。数据摄入通过亚马逊云科技的Glue爬虫完成。数据来自内部系统和外部来源进入原始区域,经过亚马逊云科技的Glue ETL作业和Spark/Python脚本处理。Amazon Redshift无服务器模式用于分析,而Amazon Athena则提供无服务器查询功能。系统监控使用亚马逊云科技的CloudWatch、EventBridge、Lambda和Step Functions等技术。细粒度的访问控制通过Microsoft Power BI实现自助服务分析。部分工作负载已迁移至亚马逊云科技的ECS/Fargate容器服务,例如风险分析。数据访问方式已从存储过程更改为API,并采用了Web框架(如React)。

一个关键用例是每日指数成分处理。由于索引数据的高容量且供应商在本地处理历史数据存在问题,因此迁移到云端支持可扩展的存储和计算能力,提高SLAs并实现并行处理。元数据驱动的逻辑已将处理时间减半,而S3中的历史数据降低了存储成本。实时定制索引计算成为可能,同时还处理了PDF等非结构化数据。

其他用例还包括处理各种结构化/非结构化数据的ESG报告,以及文档解析。他们使用亚马逊云科技的Textract、Lambda和Aurora技术构建了相关产品,从PDF中提取文本和元数据,实现了高于手动输入99%的准确性。为了报告需求,他们用React重建UI并将其托管在亚马逊云科技的ECS Fargate上,使用预签发的URL将数据缓存在S3存储桶中。与Azure AD集成实现单点登录(SSO)。

主要经验教训包括首选具有高影响力且中等努力的工作负载,识别本地限制,利用云服务加速,解决计算/存储约束,评估翻转和移动的可行性。未来优化云上的成本,确定优先目标,并通过使用案例证明业务价值以推动采纳。

总的来说,本次会议对现代概念进行了精彩的概括,特别是在亚马逊云科技上运行微软工作负载方面。关于Redshift和Oaktree的发展过程的详细描述强调了现代化如何带来商业利益,例如提高服务等级协议(SLA)质量、更简单的可扩展性和自助服务分析,同时也优化了成本。企业可以从小规模开始,并随着时间的推移逐步扩大现代化计划。亚马逊云科技提供了一系列功能,包括专门针对数据库设计的功能、无服务器计算、容器技术和数据湖等,以支持客户在其整个发展过程中的每一个阶段。

下面是一些演讲现场的精彩瞬间:

领导者开始在演讲中概述主题。

他们强调了在启动技术现代化过程之前,必须动员所有受影响的团队并确保他们理解重要性。

Microsoft的工作负载在Amazon Web Services(亚马逊云科技)上运行,使客户能够进行创新,包括重新托管、重新平台化以及实现全面现代化等各个层面。

特别强调了Amazon Redshift作为最实惠的云数据仓库,能够快速、安全地提供来自各种数据类型的见解,无需管理。

现代化的国家利用了诸如S3、Glue、Lambda、Step Functions、Athena、Redshift和Linux等亚马逊云科技服务来重塑他们的数据平台和应用程序。

亚马逊云科技的文字提取和分析服务支持高级的文档理解和搜索功能。

亚马逊云科技通过诸如.NET、SQL Server、容器、无服务器和专用数据库等技术帮助客户现代化Microsoft的工作负载。

总结

这段视频探讨了Oaktree资本公司如何通过运用亚马逊云科技对微软工作负载进行现代化改造,从而实现显著的成本节省和业务优势。演讲者详细描述了云迁移和现代化改造的过程,包括评估商业案例、组建团队以及实施技术变革。他们强调了从具有高影响力和高价值的工作负载入手的重要性,以便展示其成果。

在过去,Oaktree公司在传统的SQL Server环境中面临着难以扩展、缺乏自助服务分析和无法满足SLA等问题。如今,他们采用了基于亚马逊云科技的新型架构,利用S3、亚马逊云科技Glue、Athena和Redshift支持数据湖、扩展计算能力、提供自助服务访问并满足SLA。

具体的成功案例包括每日索引处理、ESG报告和文档解析。通过利用可扩展的存储、计算和并行处理,索引处理速度提高了50%。此外,还可以使用Textract处理PDF等非结构化数据,将其用于分析。

演讲者分享了他们的经验教训,包括优先选择高影响力使用案例、评估内部限制、利用云服务加速、实现持续学习和推动采纳。结果,Oaktree公司在SLA、处理非结构化数据的能力和成本节省方面取得了显著的改进。

演讲原文

https://blog.csdn.net/just2gooo/article/details/134814013

想了解更多精彩完整内容吗?立即访问re:Invent 官网中文网站!

2023亚马逊云科技re:Invent全球大会 - 官方网站

点击此处,一键获取亚马逊云科技全球最新产品/服务资讯!

点击此处,一键获取亚马逊云科技中国区最新产品/服务资讯!

即刻注册亚马逊云科技账户,开启云端之旅!

【免费】亚马逊云科技“100 余种核心云服务产品免费试用”

【免费】亚马逊云科技中国区“40 余种核心云服务产品免费试用”

亚马逊云科技是谁?

亚马逊云科技(Amazon Web Services)是全球云计算的开创者和引领者,自 2006 年以来一直以不断创新、技术领先、服务丰富、应用广泛而享誉业界。亚马逊云科技可以支持几乎云上任意工作负载。亚马逊云科技目前提供超过 200 项全功能的服务,涵盖计算、存储、网络、数据库、数据分析、机器人、机器学习与人工智能、物联网、移动、安全、混合云、虚拟现实与增强现实、媒体,以及应用开发、部署与管理等方面;基础设施遍及 31 个地理区域的 99 个可用区,并计划新建 4 个区域和 12 个可用区。全球数百万客户,从初创公司、中小企业,到大型企业和政府机构都信赖亚马逊云科技,通过亚马逊云科技的服务强化其基础设施,提高敏捷性,降低成本,加快创新,提升竞争力,实现业务成长和成功。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值