Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > cs > arXiv:2510.17120

帮助 | 高级搜索

计算机科学 > 机器学习

arXiv:2510.17120 (cs)
[提交于 2025年10月20日 ]

标题: 无矩阵自由能作为高斯化正则化器:增强自编码器以生成高斯代码

标题: Matricial Free Energy as a Gaussianizing Regularizer: Enhancing Autoencoders for Gaussian Code Generation

Authors:Rishi Sonthalia, Raj Rao Nadakuditi
摘要: 我们引入了一种基于矩阵自由能的自编码器新颖正则化方案。 我们的方法在代码矩阵(代码维度 x 批量大小)的奇异值方面定义了一个可微损失函数。 从自由概率和随机矩阵理论的角度来看,当代码矩阵的奇异值分布与具有独立同分布高斯条目的适当雕刻随机度量的奇异值分布一致时,该损失达到最小值。 实证模拟表明,通过标准基于随机梯度的训练最小化负矩阵自由能会产生类似高斯的代码,这些代码在训练集和测试集之间具有泛化能力。 在此基础上,我们提出了一种矩阵自由能最大化自编码器,该编码器能够可靠地生成高斯代码,并展示了其在欠定逆问题中的应用。
摘要: We introduce a novel regularization scheme for autoencoders based on matricial free energy. Our approach defines a differentiable loss function in terms of the singular values of the code matrix (code dimension x batch size). From the standpoint of free probability an d random matrix theory, this loss achieves its minimum when the singular value distribution of the code matrix coincides with that of an appropriately sculpted random metric with i.i.d. Gaussian entries. Empirical simulations demonstrate that minimizing the negative matricial free energy through standard stochastic gradient-based training yields Gaussian-like codes that generalize across training and test sets. Building on this foundation, we propose a matricidal free energy maximizing autoencoder that reliably produces Gaussian codes and show its application to underdetermined inverse problems.
主题: 机器学习 (cs.LG) ; 计算机视觉与模式识别 (cs.CV); 机器学习 (stat.ML)
引用方式: arXiv:2510.17120 [cs.LG]
  (或者 arXiv:2510.17120v1 [cs.LG] 对于此版本)
  https://doi.org/10.48550/arXiv.2510.17120
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Rishi Sonthalia [查看电子邮件]
[v1] 星期一, 2025 年 10 月 20 日 03:19:44 UTC (22,173 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
  • HTML(实验性)
  • TeX 源代码
许可图标 查看许可
当前浏览上下文:
cs.LG
< 上一篇   |   下一篇 >
新的 | 最近的 | 2025-10
切换浏览方式为:
cs
cs.CV
stat
stat.ML

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号