察元AI教程库 · 文章 · 大模型

对齐、统一、抑制、路由:Transformer计算的相干主义观点

机制可解释性已经识别出了Transformer电路,但缺乏一个共享的词汇来描述它们在不同任务和架构中的功能组合方式。我们引入了相干概率组合主义(CPC),一种解释框架,将Transformer计算建立在

作者:Nura Aljaafari, Andre Freitas · 语言:en

前往原址学习

简介

机制可解释性已经识别出了Transformer电路,但缺乏一个共享的词汇来描述它们在不同任务和架构中的功能组合方式。我们引入了相干概率组合主义(CPC),一种解释框架,将Transformer计算建立在

返回教程库 · 察元AI产品家族