亚马逊云科技赋能企业FinOps云成本优化之路

关键字: [亚马逊云科技中国峰会2024, SaveNow, 云成本优化, 成本治理, 单位业务指标, 资源浪费, 弹性伸缩]

本文字数: 1500, 阅读完需: 8 分钟

导读

在亚马逊云科技中国峰会2024上,演讲者分享了FinOps视角下的云成本优化之路。他介绍了FinOps的概念和运营框架,以及如何通过数据驱动的方式识别成本优化机会并采取措施,如回收闲置资源、切换ARM实例、优化NAT网关架构、实现弹性伸缩、购买RI和SP等。演讲重点阐述了如何通过FinOps实现云业务价值最大化,并分享了一个实际案例,在月活用户持续增长的情况下将月成本降低了30%。最后介绍了亚马逊提供的相关服务和认证,以支持企业持续运营FinOps流程。

演讲精华

以下是小编为您整理的本次演讲的精华，共1200字，阅读时间大约是6分钟。

亚马逊云科技中国峰会2024的演讲视频”FinOps视角下的云成本优化之路”的主要内容如下:

虽然FinOps在2022年曾是一个热门话题,但随着2023年AI的兴起,人们对此的关注有所减少。然而,云成本管理的问题依然存在,且变得更加突出。演讲者来自聚云科技,一家多云管理服务提供商,也是亚马逊云科技的高级咨询合作伙伴。聚云科技拥有240多个公有云认证和70多个专家认证,能够为客户提供迁移、运维和技术支持等服务。

云计算可根据业务需求按需付费启动资源,但客户上云后往往发现成本居高不下,主要原因是对成本缺乏管理,导致大量资源浪费。根据Flexera的报告,2022年企业在云上的浪费率高达32%,2023年降至28%,但仍有待进一步优化。云成本已连续两年成为企业面临的最大挑战。云成本管理之所以困难,是因为各角色都面临不同问题:财务人员难以准确预测云支出;采购人员难以权衡不同采购策略;技术人员缺乏自动化手段管理浪费资源;各团队在成本治理上缺乏合作。

为解决这些问题,FinOps基金会提出了一种运营框架和文化实践,旨在建立团队合作、以数据驱动决策、建立财务问责机制,最终实现云业务价值最大化。FinOps中的关键概念是单位业务指标,即每月公有云总费用除以业务指标(如月活用户),用于衡量FinOps效果。FinOps框架定义了一些原则和需具备的能力,如数据分析可视化、成本分摊、成本预测和预算管理等。它将FinOps落地分为多个阶段,是一个循环迭代逐步成熟的过程。

接下来,演讲者通过一个实际案例分享了在云成本落地方面的经验。这个客户是一家直播行业公司,业务从2016年的单一形态发展到2021年多业务线并转向容器化和Serverless架构,但成本压力也随之增加。2022年,客户引入机器学习做欺诈检测,计划发力通用AI应用,因此开始重视成本管理,借助聚云科技的FinOps产品SaveNow落地了FinOps流程。

在Inform阶段,他们首先确定了云成本数据源亚马逊云科技的CUR,进行成本分析、分摊和报告,建立预算编制、趋势预测和单位业务指标的能力。他们对标签进行了规范,因为标签是资源访问控制和成本跟踪的基础。有了标签,他们就可以核算某个项目或产品线的成本。他们还对公共资源进行了分摊,将其按消耗或百分比分配到各团队。之后,他们建立了一个统一平台,让不同团队基于同一数据源进行沟通合作。财务人员可以关注公有云整体成本变化、环比变化情况、过去7天成本变化,以及各个项目、系统或团队的成本,对各团队的投入产出比进行测算。技术人员可以关注团队和产品的成本支出,以发现异常并优化,如清理闲置资源、购买RI和SP等。

在Optimize阶段,他们使用SaveNow平台对客户消费Top10的服务成本进行分析,并按建议执行优化,包括回收闲置的EBS快照、EIP等资源,降低低利用率实例配置,设置定时开关机,尤其是GPU机器,切换到ARM实例等。他们还优化了一个NAT网关导致成本高涨的架构问题。客户的一个NAT网关月费用超过1万美元,他们通过开启VPC Flow Log,分析流量日志,找到流量来源对应的负责人,让其调整架构,解决了NAT网关成本高企的问题。主要原因包括内网服务使用公网LB导致流量经NAT网关流出、服务访问同区域S3等服务时未使用VPC终端节点、实例跨AZ访问NAT网关产生额外费用等。

报告显示,客户EC2利用率很低,他们无法简单地缩减实例数量,需要进行架构调整实现动态弹性伸缩。他们的解决方案是定期计算集群的容纳能力,作为CloudWatch指标触发扩缩容,从而根据业务波动动态调整资源配置。具体做法是调用Lambda函数每分钟计算EKS或ECS集群的饱和度(如当前可容纳6个Pod),并将其作为指标放入CloudWatch,然后在弹性伸缩组中根据该指标配置扩缩容规则。这样可以在业务扩容时提前准备好机器,快速拉起Pod。

报告还指出,他们有大量按需实例的成本太高,需购买RI或SP。对于RDS、Redshift、OpenSearch、DynamoDB和ElastiCache等服务只能购买RI,对于Lambda和SageMaker只能购买SP。在EC2服务上,SP相比标准RI有更大的灵活性,可自动覆盖不同平台、租户类型和实例系列,而标准RI需要手动调整;Convertible RI和Compute Savings Plan都可覆盖不同实例系列和操作系统,但前者需手动调整,后者可自动覆盖。他们对比了在美东地区C5实例上,Savings Plan的折扣略低于RI,但差异不大。他们还介绍了获取商务折扣的几种方式,如与合作伙伴签署转售协议、与亚马逊云科技签署长期承诺协议等。

成本优化并非一蹴而就,需要持续运营和迭代优化。在Operate阶段,他们的主要任务是让组织成员具备FinOps领域知识,建立问责机制和跨团队合作,持续引入新能力迭代优化整个流程。亚马逊云科技在各阶段都提供了相关服务,他们可借助这些服务或第三方解决方案更高效地落地FinOps。

最终,在客户月活用户持续增长的情况下,他们将月运营成本降低了30%,单位用户运营成本持续下降,实现了FinOps的目标。

总之,FinOps为云成本管理提供了一种全面的运营框架,通过建立合作、问责和数据驱动的文化,帮助企业最大化云业务价值。聚云科技的案例实践有效落地了FinOps,在业务增长的同时优化了云成本,获得了理想效果。

下面是一些演讲现场的精彩瞬间：

在亚马逊云科技中国峰会2024上,演讲者指出,尽管人工智能的兴起使FinOps话题暂时冷却,但实际上这个问题仍然存在,且变得更加突出。

亚马逊云科技中国峰会2024:云资源浪费问题仍然严峻,与AI应用的兴起有关,需要重视FinOps以降低浪费。

亚马逊云科技中国峰会2024上,演讲者强调了利用工具全面管理和持续优化云资源的重要性,如回收闲置资源、降低低利用率实例配置、设置定时开关机等。

亚马逊云科技中国峰会2024:通过动态弹性伸缩,优化EC2资源利用率,避免资源浪费。

亚马逊云科技中国峰会2024上,演讲者分享了如何利用Amazon Lambda函数和CloudWatch指标实现EKS或ECS集群的自动扩缩容,确保资源利用率最优化。

亚马逊云科技中国峰会2024上,演讲者强调了EC2 Savings Plan的灵活性,可以自动在不同平台、实例类型之间覆盖,相比Standard RI和Convertible RI更加灵活便捷。

亚马逊云科技通过优化运营策略,使月活用户持续增长的同时,单位用户运营成本下降30%,展现了卓越的成本效益管理能力。

总结

云成本优化是一个持续的过程,需要采用FinOps运营框架和文化实践来实现。FinOps的核心是建立跨团队合作、以数据驱动决策、建立财务问责机制,最终目标是实现云业务价值最大化。通过一个实际案例,分享了如何利用标签管理、成本分摊、可视化报告等能力,识别成本优化机会并采取措施,如回收闲置资源、切换ARM实例、优化NAT网关架构、实现弹性伸缩、购买RI/SP等。成本优化需要持续迭代,引入FinOps能力框架中定义的各项能力,并借助亚马逊云科技服务和第三方解决方案,最终实现单位业务成本持续下降,达成云业务价值最大化的目标。

2024年5月29日，亚马逊云科技中国峰会在上海召开。峰会期间，亚马逊全球副总裁、亚马逊云科技大中华区总裁储瑞松全面阐述了亚马逊云科技如何利用在算力、模型、以及应用层面丰富的产品和服务，成为企业构建和应用生成式 AI 的首选。此外，活动还详细介绍了亚马逊云科技秉承客户至尚的原则，通过与本地合作伙伴一起支持行业客户数字化转型和创新，提供安全、稳定、可信赖的服务，以及持续深耕本地、链接全球，助力客户在中国和全球化发展的道路上取得成功。