察元AI教程库 · 文章 · 多模态

结构化的视觉叙事会削弱多模态大语言模型的安全对齐

多模态大语言模型(MLLMs)通过扩展纯文本LLMs的视觉推理能力,但也引入了在视觉引导指令下新的安全失败模式。我们研究了嵌入有害目标的漫画模板劫持,这些劫持通过简单的三格视觉叙事引导模型扮演角色

作者:Rui Yang Tan, Yujia Hu, Roy Ka-Wei Lee · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)通过扩展纯文本LLMs的视觉推理能力,但也引入了在视觉引导指令下新的安全失败模式。我们研究了嵌入有害目标的漫画模板劫持,这些劫持通过简单的三格视觉叙事引导模型扮演角色

返回教程库 · 察元AI产品家族