算力作为关键的新型生产力,为数字经济的高质量发展注入强大动力,变得和水力、电力同等重要。算力有效加快数字产业化进程,催生技术范式变革,是开发者和企业关注的焦点。
长沙·中国1024程序员节上,中国移动集团首席专家、云能力中心首席科学家、创新中心总经理钱岭在《由云向算,算力网络催生应用开发新范式》主题演讲中,深入解读算力对中国数字经济发展的重要性,中国移动在算力网络与应用开发的丰富实践,以及算力网络催生应用开发的新范式。
钱岭
本文试图从钱岭博士的分享中,带领大家探寻中国数字经济的发展脉络、挑战和机遇,及如何通过技术和策略来应对这些挑战,期望为开发者在数字化转型的路上提供有益的参考与启示。
由云向算,快速演进
随着全球数字化转型的步伐持续加速,各个国家及行业都面临着前所未有的机遇与挑战。这种转型不仅是技术的变革,更深层次地,它是经济、文化和社会结构的全面重塑。 目前,全球数字转型如火如荼中,国家提出了两大核心要素:数字化基础设施和数据要素。这两者对于云计算厂家而言,尤其是对数字基础设施的建设,是其主要关注和投入的领域。
但值得注意的是,当前的数据基础设施利用率并不理想,据Gartner预测,业界服务器利用率约 12%。国内一些金融机构数据中心的利用率大概在 5% 左右。这意味着巨大资源浪费,也为云厂商带来了很大的压力,如果不能有效提高这些基础设施的利用率,很难实现投资回报率。移动云正着眼于此,旨在从根本上解决这一挑战。
要追求更强的智慧化算力,也要紧跟双碳目标的绿色节能要求;要提升较低下的算力利用率,也要促进算力和网络协同发展。在中国移动探讨这些议题时,工信部等六部委发布了《高质量发展行动计划》,其核心观点与中国移动所关注的问题高度一致。
如今,智能算力的需求呈爆发式地增长,导致算力成为一种“有价无市”的稀缺资源。尽管一些国际巨头在这方面的发展势头强劲,但智能算力的应用高峰期仍未到来。训练模型只是开始,更大的挑战是模型的推理和应用。加之网络互联互通能力的不足,以及单体数据中心算力的局限,都是制约发展的因素。为了应对这些问题,我们需要充分利用基础设施的能力,这也是应用开发者当前面临的最大挑战。
钱岭博士强调,未来的移动互联网用户规模预计将持续增长,但伴随而来的是数据中心能耗的剧增。更为关键的是,相对于传统的服务器,边缘服务器的算力仍然显得相对较弱。因此,如何在维持用户体验的前提下,平衡数据中心的能耗与提供稳定、高效的算力,成为亟待解决的问题。
中国移动洞察到云计算的重要性和其在未来的潜在影响,早在2007年起便开始涉足云计算领域,并在随后深入公有云建设。从2020年至2022年短短三年的时间里,移动云跃升为中国前五名的云计算服务商,成为业界领先的第一阵营成员。
随着数字经济转型的趋势,与国家整体战略高度一致的情况下,中国移动董事长杨杰给出“五纵三横”的战略研判。规划布局以5G、算力网络、智慧中台建设为重点的“连接+算力+能力”新基建,推动实现“网络无所不达、算力无处不在、智能无所不及”的算力网络,做强、做优、做大数字经济。
面对算力不足、利用率不均和网络算力不协调等一系列挑战,中国移动策略性地提出了“算力网络”的概念,旨在实现算力并网和算网融合。这种策略下,计算无所不在,网络覆盖范围更广,确保数据安全,全栈处理,同时采用算网大脑进行资源调度。算力网络作为一个与云计算紧密关联的概念,实际上是云计算经过多时代发展的产物。融合了云与网络、云与边缘以及云与终端的技术。这种融合将所有资源统一管理,形成一个宏观、超级的计算体系,从而实现资源的大范围调度,有力地解决了资源分布不均和利用率低的问题。
2019年,移动云云改制定了“云网融合、战建协同”的战略途径,规划“云网、云数、云智、云边”四融差异化能力和云原生架构。推进四融深化了云和大网能力的融合:不仅实现移动云差异化能力,而且推动移动云向算力网络有序演进。在过去的一年,中国移动专注于算力网络架构的规划,推动云和网的同步建设、协调和管理,实现快速演进。目前,移动云已上线了包含通用算力、智能算力、边缘算力、算网融合、任务式、合作算力六大专区,涉及约40款算力网络产品在项目实施方面,移动云与多个省级政府合作,建设公共资源池,提供算力服务,同时还与国家超级计算昆山中心合作,推动超算资源的统一管理。
不仅如此,在推动行业标准化组织开展算力网络标准制定的同时,移动云已经用算力网络技术承建政企客户新型项目。从单纯的云化、云原生类型的项目,向异构算力纳管、全局算力调度、云网协同调度等新型高质量(提质增效)算力网络项目转型。目前,移动云在算力网络方面已经取得了几项显著的成绩:
1.任务式的算力: 针对特定的需求和场景,如“东数西算”和“东数西存”,为用户提供了一种与网络结合的资源,确保他们可以以最合适的价格和资源满足其算力需求。
2.算力并网场景: 中国建设的诸多超算中心和智算中心,在特定时期利用率极高,但也会面临利用率偏低的问题。移动云与相关中心负责人进行深度合作,将这些分布式算力资源与移动云算力融合,实现了高效的算力并网。目前,移动云已成功汇聚了1.9亿算力,约占全国总算力的1%。
3.弹性用户资费体验: 传统的网络资源订购方式可能会导致在带宽大的情况下费用过高。为了解决这个问题,移动云推出了一种新的资费体验,即只在数据传输时收费,从而更加贴合用户的实际需求。
4.发布算网大脑: 为了实现上述的各种功能,我们发布了“算网大脑”。这一系统不仅可以调用中国移动的所有云资源和网络资源,还可以整合并网的超算、智算资源,以及客户的资源池资源,实现统一的调度管理。
另一方面,面向新型算力网络基础设施,需要培育构建相匹配的应用开发范式。近20年,应用架构已经经历了SOA、云原生、云数融合(Lambda等)、微服务和Serverless等多个阶段,新型架构让应用可以充分利用云计算、大数据等基础设施,实现资源的高效利用(应用现代化)。因此,算力网络在满足算力高质量发展的同时,也对应用架构提出了新的范式。
跨越云端:四大范式重塑未来计算
回首过去,技术的发展历程可谓波澜壮阔。我们从最初的桌面应用如Word和WPS,踏入了移动互联网时代,见证了门户网站与后端应用的分化,随后跃入了移动应用开发的大潮。然而,随着技术的进步,云计算逐渐成为主流,所有的后端应用纷纷迁移到云上,展现出云原生的开发模式。
然而,时至今日,纯粹的云计算已不能满足现代化应用和算力网络的高要求。因此,技术界对新范式的探索从未停歇。在钱岭博士看来,面对新型算力网络基础设施,四个新范式正在崭露头角:算网原生应用范式、任务式应用范式、云智融合应用范式和量超融合应用范式。
范式一:算网原生应用范式(应对分布式云)
在应对分布式云的挑战时,算网原生范式应运而生。它主张应用不再局限于特定的资源、地域或平台。移动云打造了资源高效供给、业务快速上云的新一代分布式云原生星罗算力基础设施。利用算力网络,它提供Serverless技术支撑资源弹性供给、提供Regionless技术支撑应用无处不在、提供Platformless技术支撑业务快速上云,从而支撑应用的现代化架构升级,实现应用业务快速实现,实现分布式资源管理、serverless、统一资源调度、现代化应用开发等核心能力,满足现代化应用的新需求,实现算力、服务、应用无处不在。
范式二:任务式应用范式(应对利用率)
客户根据业务SLO而不是具体资源来使用算力网络资源,而是一种为结果付费的模式。在新服务模式下用算用网门槛更低、资源使用率更高、提供确定性业务保障。中国移动利用“算网大脑”引领了这场范式的革命,集中并智能地管理和调度算网资源。钱岭博士指出,这是一种新的应用范式,同场在渲染、传输、推理、训练场景都会应用这个范式。
范式三:云智融合应用范式(应对AI)
借助于ChatGPT这类大型AI模型和传统深度学习的技术,推动产业员工效率提升,推动各类平台系统通过+AI实现客户意图理解、服务能力扩展与增强、系统自智与自治等高级特性;AI通过与多类工具系统、多能力服务的交互,表现出以AI为任务决策大脑的服务链接新生态。在此背景下,也为我们揭示了一个新的应用范式:云智融合。云智融合代表着“+AI”或“AI+”的新纪元,有别于云数融合范式,云智融合不仅利用数据计算结果形成控制反馈,而且还具备智能交互、数据生成、代码生成等高级能力,形成可以自演进的应用系统。
范式四:量超融合应用范式(应对量子计算)
量超融合应用范式是一个偏远期的新范式,突破了传统异构计算的界限,旨在实现量子与经典计算的和谐共生。尽管量子计算为特定问题提供了指数级的加速优势,但其并未旨在完全替代经典计算的独特逻辑和浮点运算能力。相反,更倾向于视量子计算为算力网络中的一种差异化超级算力。我们可以将量子计算定位为差异化的超级算力,成为算力网络中异构算力之一,满足行业计算需求。然而,量子技术尚在成长阶段,其硬件实力仍有待提升。因此,如何将其与经典计算、云计算、及智能计算高效整合,才是开发者当下面对的中远期挑战。
钱岭博士强调,当前各行业的开发者面临一个无处不在的资源环境。首先,我们需要针对“+AI和AI+”的新范式进行深度探索和应用,紧接着是算网原生的应用挑战。同时,任务式问题也将逐渐浮现,与算网原生并行进行。考虑到3-5年后量子计算与经典计算的融合可能成为常态,开发者应根据自身的领域和专长,明智地选择参与各计算范式的时机,以规避潜在障碍。
技术大潮涌动,移动云与开发者共铸未来
面对钱岭博士对于开发者在新技术范式下的建议,我们不禁要思考:当开发者面对如此庞大的资源环境,以及不断变化的技术景观,开发者如何才能稳稳地走好每一步?基于这样的背景,移动云近年来一直致力于搭建各种平台、机制,确保开发者和行业能在不断变化的计算范式中,找到自己的立足点。自2019年起,移动云社区就成为了吸引众多开发者的磁石。从个人开发者到各大小型企业,都在寻求与中国移动云的合作机会,以便更好地利用其强大的资源和渠道。其中,小型孵化器更是成为一个助推器,帮助企业迅速崭露头角。
此外,移动云赋能开发者方式,不仅仅局限于基础设施的提供,还涉及到深层次的技术合作与指导。例如,为了鼓励创新,推出第二届“移动云杯”算力网络应用创新大赛,旨在吸引更多的开发者,提升比赛的规格与影响力;为了支撑创新,不同的激励措施得以实施。从提供免费资源、优惠扣折,到丰厚的奖金、新技术的试验场地,都在向开发者发出邀请,鼓励他们创新和尝试;再者,如工业、教育、量子计算和人工智能等更具针对性的赛道推出,以帮助开发者在各领域找到更明确、更有深度的创新方向。
最后,钱岭博士作为一个开发者出身的技术管理者,以其经历和视角为开发者们提出了切实的建议:“一切的开发要以质量为中心,以创新为牵引。”他深知,只有确保质量和创新,开发者们才能在快速变化的时代中,持续保持自己的竞争力和活力。期待在未来,移动云能与更多的开发者携手,共同开创数字化的新篇章。