察元AI教程库 · 文章 · 微调

早期数据暴露能提升后续微调的鲁棒性

如何训练出在后续微调后仍能保持其后训练能力的模型？与其关注下游干预以缓解对上游能力的遗忘，我们研究了上游训练选择——即能力如何获得——如何塑造其鲁棒性

作者:Lawrence Feng, Gaurav R. Ghosal, Jacob Mitchell Springer · 语言:en

前往原址学习

简介

如何训练出在后续微调后仍能保持其后训练能力的模型？与其关注下游干预以缓解对上游能力的遗忘，我们研究了上游训练选择——即能力如何获得——如何塑造其鲁棒性

返回教程库 · 察元AI产品家族