计算机科学 > 分布式、并行与集群计算
[提交于 2024年6月18日
]
标题: D&A:使用多核机器在个性化PageRank计算中的资源优化
标题: D&A: Resource Optimisation in Personalised PageRank Computations Using Multi-Core Machines
摘要: 资源优化常用于工作负载管理,确保在利用可用资源的情况下高效且及时地完成任务。 它旨在最小化成本,促使开发了许多针对此目的的算法。 这些技术大多数专注于在提供的资源限制内有效地调度和执行工作负载。 在本文中,我们使用另一种方法来解决这个问题。 我们提出了一种新的框架D&A,以确定在时间约束下完成工作负载所需的内核数量。 我们首先预处理一小部分查询,以推导出所需槽位的数量,从而将剩余的工作负载分配到每个槽位中。 我们在处理由随机函数引起的时间波动问题时引入了一个缩放因子。 我们进一步建立了在这种情况下所需内核数的下限,作为比较的基准。 我们通过计算涉及密集计算的个性化PageRank值来检验该框架。 我们的实验结果表明,D&A优于基准,实现了所需内核数减少38.89%至73.68%,覆盖包含数百万个顶点和边的基准数据集。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.