察元AI教程库 · 文章 · 微调

LoRETTA：低秩经济张量训练适应，用于大型语言模型超低参数微调

近年来，已提出多种参数高效微调（PEFT）技术，以实现计算高效的微调同时保持模型性能。然而，现有PEFT方法仍受限于随着大型语言模型（LLMs）的快速部署而增长的可训练参数数量

作者:Yifan Yang, Jiajun Zhou, Ngai Wong · 语言:en

前往原址学习

简介

近年来，已提出多种参数高效微调（PEFT）技术，以实现计算高效的微调同时保持模型性能。然而，现有PEFT方法仍受限于随着大型语言模型（LLMs）的快速部署而增长的可训练参数数量

返回教程库 · 察元AI产品家族