负载均衡论文
文章平均质量分 93
负载均衡方面论文阅读及总结
向来痴_
每天进步一点点
展开
-
论文阅读-PIM-tree:一种面向内存处理的抗偏移索引
当今的内存索引性能受到内存延迟/带宽瓶颈的限制。Processing-in-memory (PIM) 是一种新兴的方法,可能通过实现低延迟内存访问,其聚合内存带宽随 PIM 节点数量扩展,来缓解这种瓶颈。然而,在工作负载偏斜的情况下,PIM 系统在最小化节点间通信和实现负载平衡之间存在固有的张力。本文介绍了 PIM-tree,一种针对 PIM 系统的有序索引,它通过在数据和查询中实现加载平衡,实现了低通信成本和高负载平衡。我们的抗偏移索引基于主机 CPU 和 PIM 节点之间的劳动分工,利用各自的优势。原创 2024-02-15 22:32:24 · 1344 阅读 · 1 评论 -
论文阅读-One for All : 动态多租户边缘云平台的统一工作负载预测
多租户边缘云平台中的工作负载预测对于高效的应用部署和资源供给至关重要。然而,在多租户边缘云平台中,异构的应用模式、可变的基础设施性能以及频繁的部署给准确和高效的工作负载预测带来了重大挑战。基于聚类的动态多租户边缘云平台建模方法往往因需要维护大量数据聚类和模型而产生过高的成本。现有的端到端时间序列预测方法在动态多租户边缘云平台中难以提供一致的预测性能。本文提出了一个具有全局池化和静态内容感知的端到端框架 DynEformer,为动态多租户边缘云平台提供了统一的工作负载预测方案。原创 2024-02-12 18:50:18 · 1811 阅读 · 2 评论 -
论文阅读-CARD:一种针对复制元数据服务器集群的拥塞感知请求调度方案
复制元数据服务器集群(RMSC)在分布式文件系统中非常高效,同时面对数据驱动的场景(例如,大规模分布式机器学习任务)。然而,考虑到成本效益和系统利用率,实践中通常会限制集群规模。在这种情况下,由于客户端对拥塞不知情的行为和非智能选择策略(即,集群中的服务器被间歇性地优先选择然后避开),集群中的服务器开始在更高的系统利用率下遭受负载波动。负载波动带来的后果在一定程度上降低了整个系统的总体性能。解决这个问题的一个方案是让客户端分担部分责任,并为了稳定性更明智地行事。因此,在本文中,我们提出了一种。原创 2024-02-04 19:28:54 · 1268 阅读 · 1 评论 -
论文阅读-GROUP:一种聚焦于工作负载组行为的端到端多步预测方法
首先,我们为云原生应用程序定义工作负载组行为。假设容器 ci 的原始工作负载数据序列从 t0 到 tN是。为了识别容器的工作负载组行为,我们将每个容器的工作负载特征建模为包含以下四个组成部分,这些部分代表了每个容器的数据、趋势、季节和细节方面的工作负载变化。数据分量D 表示工作负载系列的原始数据值,直接描述工作负载的数据变化关系。趋势分量T 表示工作负载系列的长期活动,排除季节和不规则影响,并可以近似表示原始工作负载系列。季节分量S 指定定期发生的模式,由至少一个或多个间隔组成。原创 2024-02-07 21:07:24 · 1565 阅读 · 0 评论 -
论文阅读-面向机器学习的云工作负载预测模型的性能分析
由于异构服务类型和动态工作负载的高变异性和维度,资源使用的精确估计是一个复杂而具有挑战性的问题。在过去几年中,资源使用和流量的预测已受到研究界的广泛关注。许多基于机器学习的工作负载预测模型通过利用其计算能力和学习能力得以发展。本文提出了第一篇系统调查、基于性能分析的比较研究,涉及多样化的基于机器学习的云工作负载预测模型。从预测资源管理的重要性开始讨论,接着介绍了这些工作负载预测模型的框架描述、操作设计、动机和挑战。将不同预测方法的分类和分类法分为五个不同类别。原创 2024-02-14 21:37:32 · 1392 阅读 · 1 评论 -
论文阅读-Pegasus:通过网络内一致性目录容忍分布式存储中的偏斜工作负载
高性能分布式存储系统面临着由于偏斜和动态工作负载引起的负载不平衡的挑战。本文介绍了Pegasus,这是一个利用新一代可编程交换机ASIC来平衡存储服务器负载的新型存储系统。Pegasus使用数据存储中最受欢迎的对象的选择性复制来分配负载。通过使用一种新颖的网络内一致性目录,Pegasus交换机跟踪和管理复制对象的位置。这使得它能够实现对复制键的负载感知转发和动态再平衡,同时仍然保证数据的一致性和一致性。Pegasus设计的实施是切实可行的,因为它只在交换机数据平面中存储转发元数据。原创 2024-02-13 23:12:55 · 1394 阅读 · 0 评论 -
论文阅读-Hydra: 用于持久内存和RDMA网络的分散文件系统
新兴的字址持久内存(PM)有可能颠覆内存和存储之间的边界。结合高速RDMA网络,分布式基于PM的存储系统提供了通过紧密耦合PM和RDMA特性来实现存储性能大幅提升的机会。然而,现有的分布式文件系统采用为传统磁盘设计的传统集中式客户端-服务器架构,导致访问延迟过高、可扩展性有限且恢复开销高。本文提出了一种完全去中心化的基于PM的文件系统——Hydra。通过利用本地PM的性能优势,Hydra利用数据访问局部性实现高性能。为加速Hydra节点间的文件传输,文件元数据和数据通过单边RDMA读取进行分离更新。原创 2024-02-19 18:24:37 · 861 阅读 · 0 评论 -
论文阅读-一种用于大规模分布式文件系统中基于深度强化学习的自适应元数据管理方案
在一个典型的分布式元数据系统中,有N个元数据节点和M个MDS,令T = {ni | 1 ≤ i ≤ N}表示元数据命名空间树上所有元数据节点的集合,而S = {mj | 1 ≤ j ≤ M}表示所有MDS的集合。定义1:定义跳数Ji为在从根节点向上递归搜索节点ni期间,在不同MDS之间的“切换”次数。定义2:定义流行度Pi为节点ni的总访问次数,其中Pi = access(ni) + ∑nj∈Di access(nj),并且Di表示ni的后代节点集,它既包括对ni的访问,也包括对其后代节点的访问的总和。原创 2024-02-03 16:01:26 · 1177 阅读 · 0 评论 -
论文阅读-通过云特征增强的深度学习预测云工作负载转折点
云工作负载转折点要么是代表工作负载压力的局部峰值点,要么是代表资源浪费的局部谷值点。预测这些关键点对于向系统管理者发出警告、采取预防措施以实现高资源利用率、服务质量(QoS)和投资收益至关重要。现有研究主要只关注于工作负载未来点值的预测,而没有考虑基于趋势的转折点预测。此外,在预测过程中最关键的挑战之一是,传统的趋势预测方法在金融和工业领域等方面虽然取得了成功,但它们表示云特征的能力较弱,这意味着它们无法描述高度变化的云工作负载时间序列。本文提出了一种基于云特征增强的深度学习的新型云工作负载转折点预测方法。原创 2024-02-05 21:13:53 · 981 阅读 · 0 评论 -
论文阅读-面向公平性的分布式系统负载均衡机制
因此,策略配置 (x2A;x2B) 是纳什均衡。然而,纳什均衡 (x2A;x2B) 也是一个帕累托最优策略。备注 6。我们的。原创 2024-02-06 21:43:19 · 1810 阅读 · 2 评论 -
论文阅读-一个用于云计算中自我优化的通用工作负载预测框架
准确地预测未来的工作负载,如作业到达率和用户请求率,对于云计算中的资源管理和弹性非常关键。然而,设计一个通用的工作负载预测器,并使其适用于各种类型的工作负载,具有很大的挑战性,因为工作负载的种类繁多且随着时间动态变化。由于这些挑战,现有的工作负载预测器通常是手动调优的,以便在最大程度上提高精度,针对特定(类型的)工作负载。这种需要个体调整预测器的必要性,也使得从先前研究中复现结果变得非常困难,因为预测器的设计与工作负载之间存在强烈的依赖关系。在本论文中,原创 2024-02-01 18:06:48 · 1451 阅读 · 0 评论 -
论文阅读-基于计算网格的并行工作负载预测的作业调度算法
一般来说,计算网格由大量的计算节点组成,其中一些由于计算需求的地理分布不均而处于空闲状态。这可能会导致工作负载不平衡问题,影响大规模计算网格的性能。为了平衡计算需求和计算节点,我们提出了一种基于计算节点工作负载预测的作业调度算法。我们首先分析了工作负载不平衡的原因和重新分配计算资源的可行性。其次,我们通过结合先前设计的工作负载预测模型,设计了一种应用和工作负载感知的调度算法(AWAS)。为了降低AWAS算法的复杂性,我们提出了一种基于计算节点工作负载预测的并行作业调度方法。原创 2024-01-31 18:54:38 · 986 阅读 · 1 评论 -
论文阅读-在分布式数据库环境中对哈希算法进行负载均衡基准测试
现代高负载应用使用多个数据库实例存储数据。这样的架构需要数据一致性,并且确保数据在节点之间均匀分布很重要。负载均衡被用来实现这些目标。几乎所有负载均衡系统的核心都是哈希算法。自经典一致性哈希引入以来,已经为此目的设计了许多算法。负载均衡器的一个目的是确保存储集群的可扩展性。在节点添加或移除期间尽可能少地转移数据记录对整个系统的性能至关重要。负载均衡器中的哈希算法对这一过程影响最大。在本文中,我们通过模拟和真实系统实验评估了几种用于负载均衡的哈希算法。原创 2024-02-03 18:03:14 · 1151 阅读 · 0 评论 -
论文阅读-基于动态权重的一致性哈希微服务负载均衡优化
这篇论文真水原创 2024-02-19 20:19:52 · 1181 阅读 · 0 评论