察元AI教程库 · 文章 · 大模型

AdapterDrop：关于Transformer中适配器效率的研究

大规模预训练的变换器模型在微调时计算成本高昂，推理速度慢，且存储需求大。近期的方法通过训练更小的模型、动态减小模型规模以及训练轻量级适配器来解决这些问题。本文

作者:Andreas Rücklé, Gregor Geigle, Max Glockner · 语言:en

前往原址学习

简介

大规模预训练的变换器模型在微调时计算成本高昂，推理速度慢，且存储需求大。近期的方法通过训练更小的模型、动态减小模型规模以及训练轻量级适配器来解决这些问题。本文

返回教程库 · 察元AI产品家族