察元AI教程库 · 文章 · 多模态
大型视觉-语言模型(LVLMs)在视觉-语言推理任务中取得了显著进展,但确保其安全性仍是一个关键挑战。近期的输入侧防御方法通过CLIP检测不安全图像,并在提示前添加安全前缀,但仍然存在判断不准确的问题。
作者:Xingyu Zhu, Beier Zhu, Junfeng Fang · 语言:en
大型视觉-语言模型(LVLMs)在视觉-语言推理任务中取得了显著进展,但确保其安全性仍是一个关键挑战。近期的输入侧防御方法通过CLIP检测不安全图像,并在提示前添加安全前缀,但仍然存在判断不准确的问题。