察元AI教程库 · 文章 · 排行榜
直接偏好优化(DPO)已成为一种有效的方法,用于将大型语言模型(LLMs)与人类偏好对齐。然而,其在多模态设置中的适应性尚未被探索。通过表征分析,我们发现多模态偏好优化存在一个关键限制
作者:Jiawei Feng, Jiancan Wu, Xingyu Zhu · 语言:en
直接偏好优化(DPO)已成为一种有效的方法,用于将大型语言模型(LLMs)与人类偏好对齐。然而,其在多模态设置中的适应性尚未被探索。通过表征分析,我们发现多模态偏好优化存在一个关键限制