察元AI教程库 · 文章 · 大模型

SelfCP：通过冻结的大型语言模型自身压缩超限提示

在使用基于Transformer的大型语言模型（LLMs）时，长提示会导致巨大的硬件成本。不幸的是，许多任务，如摘要，不可避免地会引入长文档，而上下文学习的广泛应用也容易使提示长度爆炸。本文提出了一种

作者:Jun Gao, Ziqiang Cao, Wenjie Li · 语言:en

前往原址学习

简介

在使用基于Transformer的大型语言模型（LLMs）时，长提示会导致巨大的硬件成本。不幸的是，许多任务，如摘要，不可避免地会引入长文档，而上下文学习的广泛应用也容易使提示长度爆炸。本文提出了一种

返回教程库 · 察元AI产品家族