计算机科学 > 信息检索
[提交于 2025年9月26日
]
标题: 从作者到审稿人:利用排名来改进同行评审
标题: From Authors to Reviewers: Leveraging Rankings to Improve Peer Review
摘要: 本文是对Su等人于2025年发表的JASA讨论论文的讨论。我们想祝贺作者对2023 ICML排名数据进行了全面而有见地的实证研究。近年来,由于提交的手稿数量迅速增长,机器学习(ML)会议的评审质量已成为一个重大关注点。在本次讨论中,我们提出了一种替代Su等人(2025)的方法,该方法利用评审者的排名信息而不是作者的排名信息。我们模拟了与2023 ICML会议提交非常相似的评审数据。我们的结果表明,(i)结合评审者的排名信息可以显著提高对每篇论文质量的评估,通常优于仅使用作者的排名信息;(ii)在大多数情况下,结合评审者和作者的排名信息能最准确地评估提交的论文。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.