察元AI教程库 · 文章 · 微调
微调是利用基于Transformer的语言模型进行下游任务的有前景技术。随着模型规模的持续增长,更新所有模型参数的成本越来越高。参数高效的微调方法通过选择性地更新少量参数,有效解决了这一问题。
作者:Xiaoshuang Ji, Zhendong Zhao, Xiaojun Chen · 语言:en
微调是利用基于Transformer的语言模型进行下游任务的有前景技术。随着模型规模的持续增长,更新所有模型参数的成本越来越高。参数高效的微调方法通过选择性地更新少量参数,有效解决了这一问题。