察元AI教程库 · 文章 · 微调

DEFT：基于分布引导的高效细调以实现人类对齐

基于人类反馈的强化学习（RLHF），使用如近端策略优化（PPO）等算法，将大型语言模型（LLMs）与人类价值观对齐，但成本高昂且不稳定。已有替代方案被提出，以替代PPO或整合监督微调（SFT）和对比学习

作者:Liang Zhu, Feiteng Fang, Yuelin Bai · 语言:en

前往原址学习

简介

基于人类反馈的强化学习（RLHF），使用如近端策略优化（PPO）等算法，将大型语言模型（LLMs）与人类价值观对齐，但成本高昂且不稳定。已有替代方案被提出，以替代PPO或整合监督微调（SFT）和对比学习

返回教程库 · 察元AI产品家族