计算机科学 > 机器学习
[提交于 2025年10月16日
]
标题: 一种在大支撑集上进行PMF估计的简单方法
标题: A Simple Method for PMF Estimation on Large Supports
摘要: 我们研究在大离散支持上概率质量函数(PMF)的非参数估计,其中PMF是多峰且重尾的。 核心思想是将经验PMF视为线图上的信号,并应用一个数据相关的低通滤波器。 具体来说,我们构造一个对称三对角算子,即从经验PMF构建的对角矩阵扰动的路径图拉普拉斯矩阵,然后计算对应于最小频率特征值的特征向量。 将经验PMF投影到这个低维子空间上会产生一个平滑的、多峰的估计,它保留粗粒结构的同时抑制噪声。 一个轻量级的后处理步骤,包括截断和重新归一化,得到一个有效的PMF。 因为我们计算对称三对角矩阵的特征对,计算是可靠的,运行时间和内存与支持大小和所需低维子空间的维度成比例。 我们还提供了一个实用的数据驱动规则,基于正交系列风险估计选择维度,因此该方法在最小调参的情况下“即可工作”。 在合成和真实重尾例子中,该方法在抑制抽样噪声的同时保留了粗粒结构,在预期范围内与对数样条和高斯-KDE基线相比表现更优。 然而,它已知存在失败模式(例如,突然的不连续性)。 该方法实现简短,适用于不同样本大小,由于其可靠性和速度,适合自动化流程和大规模探索性分析。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.