数学 > 统计理论
[提交于 2007年5月2日
]
标题: 前向阶段回归和单调lasso
标题: Forward stagewise regression and the monotone lasso
摘要: 我们研究了用于求解惩罚最小二乘回归问题的最小角回归和前向逐步算法。 在Efron、Hastie、Johnstone与Tibshirani(2004)中证明了,通过一个小修改后,最小角回归算法可以解决套索回归问题。 在这里,我们对增量前向逐步回归给出了一个类似的结论,表明它解决了强制单调性的套索问题的一个版本。 由此得出的一个推论如下:虽然套索在每单位增加的系数$\beta$的$L_1$-范数时能以最优方式减少残差平方和,但前向逐步方法则在每单位沿系数路径行进的$L_1$弧长上是最优的。 我们还研究了一个使套索的系数路径单调的条件,从而使得不同的算法一致。 最后,在涉及大量相关预测变量的模拟研究中,我们将套索和前向逐步算法进行了比较。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.