Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > cs > arXiv:2510.21726

帮助 | 高级搜索

计算机科学 > 信息检索

arXiv:2510.21726 (cs)
[提交于 2025年9月26日 ]

标题: 从作者到审稿人:利用排名来改进同行评审

标题: From Authors to Reviewers: Leveraging Rankings to Improve Peer Review

Authors:Weichen Wang, Chengchun Shi
摘要: 本文是对Su等人于2025年发表的JASA讨论论文的讨论。我们想祝贺作者对2023 ICML排名数据进行了全面而有见地的实证研究。近年来,由于提交的手稿数量迅速增长,机器学习(ML)会议的评审质量已成为一个重大关注点。在本次讨论中,我们提出了一种替代Su等人(2025)的方法,该方法利用评审者的排名信息而不是作者的排名信息。我们模拟了与2023 ICML会议提交非常相似的评审数据。我们的结果表明,(i)结合评审者的排名信息可以显著提高对每篇论文质量的评估,通常优于仅使用作者的排名信息;(ii)在大多数情况下,结合评审者和作者的排名信息能最准确地评估提交的论文。
摘要: This paper is a discussion of the 2025 JASA discussion paper by Su et al. (2025). We would like to congratulate the authors on conducting a comprehensive and insightful empirical investigation of the 2023 ICML ranking data. The review quality of machine learning (ML) conferences has become a big concern in recent years, due to the rapidly growing number of submitted manuscripts. In this discussion, we propose an approach alternative to Su et al. (2025) that leverages ranking information from reviewers rather than authors. We simulate review data that closely mimics the 2023 ICML conference submissions. Our results show that (i) incorporating ranking information from reviewers can significantly improve the evaluation of each paper's quality, often outperforming the use of ranking information from authors alone; and (ii) combining ranking information from both reviewers and authors yields the most accurate evaluation of submitted papers in most scenarios.
主题: 信息检索 (cs.IR) ; 机器学习 (cs.LG)
引用方式: arXiv:2510.21726 [cs.IR]
  (或者 arXiv:2510.21726v1 [cs.IR] 对于此版本)
  https://doi.org/10.48550/arXiv.2510.21726
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Chengchun Shi [查看电子邮件]
[v1] 星期五, 2025 年 9 月 26 日 19:16:09 UTC (130 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
  • HTML(实验性)
  • TeX 源代码
查看许可
当前浏览上下文:
cs.LG
< 上一篇   |   下一篇 >
新的 | 最近的 | 2025-10
切换浏览方式为:
cs
cs.IR

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号