察元AI教程库 · 文章 · 微调
基于锚定的监督微调
大型语言模型的后训练涉及一个根本性的权衡:监督微调(SFT)能高效模仿演示,但容易导致记忆化;而强化学习(RL)虽然能实现更好的泛化,但计算成本更高。动态微调(DFT)能够
作者:He Zhu, Junyou Su, Peng Lai · 语言:en
前往原址学习
简介
大型语言模型的后训练涉及一个根本性的权衡:监督微调(SFT)能高效模仿演示,但容易导致记忆化;而强化学习(RL)虽然能实现更好的泛化,但计算成本更高。动态微调(DFT)能够
返回教程库 · 察元AI产品家族