察元AI教程库 · 文章 · 大模型

进化中的通用Transformer记忆

先前的方法提出通过手工设计的规则删除现代基础模型中特定部分的上下文来抵消其日益增长的成本，同时试图保持其原始性能。我们通过神经注意力记忆模型（NAMMs）克服了这一权衡，引入了一种可学习的

作者:Edoardo Cetin, Qi Sun, Tianyu Zhao · 语言:en

简介