察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)通过扩展纯文本LLMs的视觉推理能力,但也引入了在视觉引导指令下新的安全失败模式。我们研究了嵌入有害目标的漫画模板劫持,这些劫持通过简单的三格视觉叙事引导模型扮演角色
作者:Rui Yang Tan, Yujia Hu, Roy Ka-Wei Lee · 语言:en
多模态大语言模型(MLLMs)通过扩展纯文本LLMs的视觉推理能力,但也引入了在视觉引导指令下新的安全失败模式。我们研究了嵌入有害目标的漫画模板劫持,这些劫持通过简单的三格视觉叙事引导模型扮演角色