察元AI教程库 · 文章 · 大模型

通过低秩适应实现上下文引导的Transformer

基于Transformer的大型语言模型（LLMs）在文本处理方面表现卓越，但其对提示的依赖导致了专门行为的计算开销。我们提出了一种Transformer架构的修改方法，通过学习编码上下文，从而消除了对显式提示的需求

作者:Andrey Zhmoginov, Jihwan Lee, Max Vladymyrov · 语言:en

前往原址学习

简介

基于Transformer的大型语言模型（LLMs）在文本处理方面表现卓越，但其对提示的依赖导致了专门行为的计算开销。我们提出了一种Transformer架构的修改方法，通过学习编码上下文，从而消除了对显式提示的需求

返回教程库 · 察元AI产品家族