察元AI教程库 · 文章 · 微调

AFLoRA:一种资源感知的自适应联邦微调大语言模型,采用低秩自适应

联邦微调作为一种新兴方法,通过分散式数据将基础模型适应于下游任务,展现出巨大潜力。然而,由于在客户端上对大型语言模型(LLMs)进行微调的高计算和通信需求,实际部署仍面临挑战

作者:Yajie Zhou, Xiaoyi Pang, Zhibo Wang · 语言:en

前往原址学习

简介

联邦微调作为一种新兴方法,通过分散式数据将基础模型适应于下游任务,展现出巨大潜力。然而,由于在客户端上对大型语言模型(LLMs)进行微调的高计算和通信需求,实际部署仍面临挑战

返回教程库 · 察元AI产品家族