察元AI教程库 · 文章 · 大模型

FedPDPO：面向大语言模型对齐的联邦个性化直接偏好优化

在联邦学习（FL）中将大型语言模型（LLMs）与人类偏好对齐具有挑战性，因为偏好数据是分散的、敏感的，且高度非独立同分布（non-IID）。直接偏好优化（DPO）为基于人类反馈的强化学习（RLHF）提供了一种高效替代方案

作者:Kewen Zhu, Liping Yi, Zhiming Zhao · 语言:en

前往原址学习

简介

在联邦学习（FL）中将大型语言模型（LLMs）与人类偏好对齐具有挑战性，因为偏好数据是分散的、敏感的，且高度非独立同分布（non-IID）。直接偏好优化（DPO）为基于人类反馈的强化学习（RLHF）提供了一种高效替代方案

返回教程库 · 察元AI产品家族