察元AI教程库 · 文章 · 微调

大型语言模型的属性控制微调：一个去毒案例研究

我们提出了一种约束学习方案，用于通过属性控制对大型语言模型（LLMs）进行微调。给定一个训练语料库和以模型输出序列级约束形式表述的控制标准，我们的方法在训练语料库上对LLM进行微调，同时增强约束满足性

作者:Tao Meng, Ninareh Mehrabi, Palash Goyal · 语言:en

简介