察元AI教程库 · 文章 · 大模型

在Transformer中解耦知识与推理：一种具有通用交叉注意力的模块化架构

Transformer在各个领域取得了显著的成功，但其单一架构在可解释性、适应性和可扩展性方面带来了挑战。本文介绍了一种新颖的模块化Transformer架构，通过一个g机制明确地将知识和推理解耦

作者:Zhenyu Guo, Wenguang Chen · 语言:en

简介