基于算力网络的大数据计算资源智能调度分配方法

摘要

【目的】进入算力时代以来,伴随泛在接入、万物互联,全社会数据量迎来爆发式增长。需要通过算力网络解决大数据计算资源不足、异构算力不足、边缘算力不足等问题。【方法】基于算力网络,重新设计大数据计算体系架构,通过资源编排层提供大数据算力编排、资源封装、统一调度能力。同时利用粒子群算法,智能计算和寻找出资源调度分配的最优节点,使资源分配达到最优平衡。【结果】通过新型的资源调度方法,智能调度各类算力,从根本上解决大数据计算资源不足、异构算力不足、边缘算力不足等问题。【结论】使用基于算力网络的大数据计算资源智能调度分配方法,能够智能调度社会闲散算力、异构算力和边缘算力,从全局角度解决算力需求不足和算力分布不均等问题。

关键词: 算力网络; 大数据计算; 资源调度

引言

随着社会信息化和网络化的发展,数据爆炸式增长,全球数据总量正在持续增长,预计2025年将达到163Z

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
FPGA计算资源调度是指针对FPGA芯片的计算任务,在多样性的大数据业务场景下,通过智能调度分配方法,将计算资源进行有效的规划和调度,以提高计算资源的利用率和效率。 在进行FPGA计算资源调度时,可以采用基于算力网络方法,结合容器化技术和存算分离技术。基于容器化技术可以利用其可移植性、可伸缩性、高效性、安全性及快速响应性的特点,根据业务繁忙程度,灵活快速地扩缩容计算资源,提高数据计算单元的创建速度。同时,存算分离技术可以将计算和存储分别弹性扩展和按需分配,降低系统部署和扩展成本,并解决资源利用不均衡的问题。 此外,基于算力网络大数据计算资源智能调度分配方法还依靠算网大脑的智能调度分配资源特性,解决了计算环境下资源分配过程中的资源调度时效性、资源利用率以及负载均衡等问题。用户只需要通过业务应用层,提交大数据业务场景对应的计算需求,算网大脑就会根据用户任务的算力需求自动匹配整个算力网络中最合适的算力资源。用户无须关注算力提供节点的真实物理位置,只需关注数据计算业务本身的资源需求。这样可以帮助业务实现按需在全网范围内第一时间获取所需的大数据资源。 综上所述,在FPGA计算资源调度中,可以利用基于算力网络大数据计算资源智能调度分配方法,结合容器化技术和存算分离技术,以提高计算资源的利用率和效率,同时解决资源调度时效性、资源利用率和负载均衡等问题。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [FPGA实现深度学习系列之FPGA程序计算单元细节规划](https://blog.csdn.net/my_share/article/details/115922411)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [基于算力网络大数据计算资源智能调度分配方法](https://blog.csdn.net/weixin_70923796/article/details/128420014)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

米朵儿技术屋

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值