通过隐藏神经元研究一类联想记忆的相变
英文标题:Phases in a class of associative memories via hidden neurons
该论文研究 Hopfield 网络及其扩展形式中的联想记忆相变。作者指出,Hopfield 网络中的联想记忆可被视为无序多体系统中的吸引子动力学,而高阶与指数型扩展会使检索更新规则转化为 softmax attention。论文聚焦此前已被分析的多项式和指数型机制,并从隐藏神经元角度讨论这一类联想记忆。该研究可能为理解注意力机制与联想记忆模型之间的统计物理联系提供参考。
打开原文相关 2.4 · 机会 0
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式引用
English / 原文
BibTeX formatted citation
×