Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > cs > arXiv:2509.02399

帮助 | 高级搜索

计算机科学 > 机器学习

arXiv:2509.02399 (cs)
[提交于 2025年9月2日 ]

标题: 评估累积谱梯度作为复杂性度量

标题: Evaluating Cumulative Spectral Gradient as a Complexity Measure

Authors:Haji Gul, Abdul Ghani Naim, Ajaz Ahmad Bhat
摘要: 准确估计数据集复杂性对于评估和比较知识图谱(KGs)的链接预测模型至关重要。 累积谱梯度(CSG)指标是从谱聚类框架内类之间的概率发散中推导出的,被提出作为数据集复杂性的度量,它(1)随着类数自然扩展,(2)与下游分类性能有很强的相关性。 在本工作中,我们严格评估了CSG在标准知识图谱链接预测基准和多类尾部预测任务上的行为,使用两个控制其计算的关键参数,M,每个类的蒙特卡洛采样点数,和K,嵌入空间中的最近邻数。 与原始声明相反,我们发现(1)CSG对K的选择非常敏感,因此不会随着目标类数而自动扩展,(2)CSG值与均倒数排名(MRR)等现有性能指标的相关性很弱或没有相关性。 通过在FB15k 237、WN18RR和其他标准数据集上的实验,我们证明了CSG所声称的稳定性和泛化预测能力在链接预测设置中失效。 我们的结果突显了在KG链接预测评估中需要更稳健、与分类器无关的复杂性度量。
摘要: Accurate estimation of dataset complexity is crucial for evaluating and comparing link prediction models for knowledge graphs (KGs). The Cumulative Spectral Gradient (CSG) metric derived from probabilistic divergence between classes within a spectral clustering framework was proposed as a dataset complexity measure that (1) naturally scales with the number of classes and (2) correlates strongly with downstream classification performance. In this work, we rigorously assess CSG behavior on standard knowledge graph link prediction benchmarks a multi class tail prediction task, using two key parameters governing its computation, M, the number of Monte Carlo sampled points per class, and K, the number of nearest neighbors in the embedding space. Contrary to the original claims, we find that (1) CSG is highly sensitive to the choice of K and therefore does not inherently scale with the number of target classes, and (2) CSG values exhibit weak or no correlation with established performance metrics such as mean reciprocal rank (MRR). Through experiments on FB15k 237, WN18RR, and other standard datasets, we demonstrate that CSG purported stability and generalization predictive power break down in link prediction settings. Our results highlight the need for more robust, classifier agnostic complexity measures in KG link prediction evaluation.
主题: 机器学习 (cs.LG) ; 计算与语言 (cs.CL)
引用方式: arXiv:2509.02399 [cs.LG]
  (或者 arXiv:2509.02399v1 [cs.LG] 对于此版本)
  https://doi.org/10.48550/arXiv.2509.02399
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Haji Gul [查看电子邮件]
[v1] 星期二, 2025 年 9 月 2 日 15:10:25 UTC (811 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
  • HTML(实验性)
  • TeX 源代码
  • 其他格式
许可图标 查看许可
当前浏览上下文:
cs
< 上一篇   |   下一篇 >
新的 | 最近的 | 2025-09
切换浏览方式为:
cs.CL
cs.LG

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号