定量生物学 > 神经与认知
[提交于 2019年6月3日
(v1)
,最后修订 2023年6月28日 (此版本, v6)]
标题: 探索循环神经网络中权重初始化、解的多样性以及在时间与决策任务训练中的退化现象
标题: Exploring weight initialization, diversity of solutions, and degradation in recurrent neural networks trained for temporal and decision-making tasks
摘要: 循环神经网络(RNNs)常用于建模大脑功能和结构的方面。 在本工作中,我们训练了小型全连接RNNs,以执行具有时变刺激的时间和流控制任务。 我们的结果表明,不同的RNN可以通过收敛到不同的底层动力学来解决相同的任务,并且还展示了当网络规模减小、间隔持续时间增加或连接损伤增加时,性能如何优雅地退化。 对于所考虑的任务,我们探讨了训练后获得的网络根据任务参数化可以有多稳健。 在此过程中,我们开发了一个框架,可用于对计算神经科学中的其他感兴趣任务进行参数化。 我们的结果有助于量化模型的不同方面,这些模型通常被用作黑箱,需要被理解以模拟大脑皮层区域的生物反应。
提交历史
来自: Cecilia Jarne Dr [查看电子邮件][v1] 星期一, 2019 年 6 月 3 日 21:56:48 UTC (7,098 KB)
[v2] 星期五, 2019 年 9 月 13 日 16:23:44 UTC (7,180 KB)
[v3] 星期二, 2019 年 10 月 1 日 14:18:27 UTC (7,194 KB)
[v4] 星期一, 2020 年 12 月 21 日 14:04:01 UTC (4,563 KB)
[v5] 星期一, 2021 年 12 月 6 日 13:41:03 UTC (4,456 KB)
[v6] 星期三, 2023 年 6 月 28 日 07:52:10 UTC (4,473 KB)
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.