察元AI教程库 · 文章 · 大模型

HARP：Transformer推理过程中基于犹豫的重构

本文旨在通过解决推理步骤中的可变计算需求来提升大型语言模型的性能，其中某些token需要比其他token更多的计算资源。我们提出了HARP，这是一种对“现成”Transformer前向传播的简单修改。从

作者:Romain Storaï, Seung-won Hwang · 语言:en

前往原址学习

简介

本文旨在通过解决推理步骤中的可变计算需求来提升大型语言模型的性能，其中某些token需要比其他token更多的计算资源。我们提出了HARP，这是一种对“现成”Transformer前向传播的简单修改。从

返回教程库 · 察元AI产品家族