察元AI教程库 · 文章 · 排行榜

PEA-DPO:感知增强的对齐直接偏好优化用于多模态大语言模型对齐

直接偏好优化(DPO)已成为一种有效的方法,用于将大型语言模型(LLMs)与人类偏好对齐。然而,其在多模态设置中的适应性尚未被探索。通过表征分析,我们发现多模态偏好优化存在一个关键限制

作者:Jiawei Feng, Jiancan Wu, Xingyu Zhu · 语言:en

前往原址学习

简介

直接偏好优化(DPO)已成为一种有效的方法,用于将大型语言模型(LLMs)与人类偏好对齐。然而,其在多模态设置中的适应性尚未被探索。通过表征分析,我们发现多模态偏好优化存在一个关键限制

返回教程库 · 察元AI产品家族