Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > stat > arXiv:2510.12547

帮助 | 高级搜索

统计学 > 机器学习

arXiv:2510.12547 (stat)
[提交于 2025年10月14日 ]

标题: 通用自适应环境发现

标题: Universal Adaptive Environment Discovery

Authors:Madi Matymov, Ba-Hien Tran, Maurizio Filippone
摘要: 机器学习中的一个开放性问题是如何避免模型利用数据中的虚假相关性;一个著名的例子是Waterbirds数据集中的背景-标签捷径。一种常见的解决方法是在多个环境中训练模型;在Waterbirds数据集中,这相当于对背景进行随机化。然而,由于这些环境很少事先已知,选择正确的环境是一个具有挑战性的问题。我们提出了通用自适应环境发现(UAED),这是一个统一的框架,它学习一个数据变换的概率分布,该分布实例化环境,并优化在此学习分布上平均的任何鲁棒目标。UAED在没有预定义组或手动环境设计的情况下,生成IRM、REx、GroupDRO和CORAL的自适应变体。我们通过提供PAC-Bayes界并证明在标准条件下对测试环境分布的鲁棒性,提供了理论分析。实证结果表明,UAED发现了可解释的环境分布,并在标准基准上提高了最坏情况下的准确性,同时在平均准确性上保持竞争力。我们的结果表明,使环境自适应是实现分布外泛化的实用途径。
摘要: An open problem in Machine Learning is how to avoid models to exploit spurious correlations in the data; a famous example is the background-label shortcut in the Waterbirds dataset. A common remedy is to train a model across multiple environments; in the Waterbirds dataset, this corresponds to training by randomizing the background. However, selecting the right environments is a challenging problem, given that these are rarely known a priori. We propose Universal Adaptive Environment Discovery (UAED), a unified framework that learns a distribution over data transformations that instantiate environments, and optimizes any robust objective averaged over this learned distribution. UAED yields adaptive variants of IRM, REx, GroupDRO, and CORAL without predefined groups or manual environment design. We provide a theoretical analysis by providing PAC-Bayes bounds and by showing robustness to test environment distributions under standard conditions. Empirically, UAED discovers interpretable environment distributions and improves worst-case accuracy on standard benchmarks, while remaining competitive on mean accuracy. Our results indicate that making environments adaptive is a practical route to out-of-distribution generalization.
评论: 8页正文,4页附录,4图和9表,会议
主题: 机器学习 (stat.ML) ; 机器学习 (cs.LG)
MSC 类: 62F15, 68T07 (Primary) 62M45, 62C10, 65C60 (Secondary)
引用方式: arXiv:2510.12547 [stat.ML]
  (或者 arXiv:2510.12547v1 [stat.ML] 对于此版本)
  https://doi.org/10.48550/arXiv.2510.12547
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Madi Matymov [查看电子邮件]
[v1] 星期二, 2025 年 10 月 14 日 14:10:16 UTC (571 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
  • HTML(实验性)
  • TeX 源代码
许可图标 查看许可
当前浏览上下文:
stat.ML
< 上一篇   |   下一篇 >
新的 | 最近的 | 2025-10
切换浏览方式为:
cs
cs.LG
stat

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号