察元AI教程库 · 文章 · 智能体

相关性作为脆弱性:网页检索如何削弱LLM代理的安全对齐

AI代理通过集成外部工具(如网页检索)来增强大型语言模型,从而实现有据可依且实时的响应。然而,将外部内容纳入生成流程可能会削弱模型输出的安全对齐机制。先前的研究表明,启用检索

作者:Aditya Nawal, Manit Baser, Mohan Gurusamy · 语言:en

前往原址学习

简介

AI代理通过集成外部工具(如网页检索)来增强大型语言模型,从而实现有据可依且实时的响应。然而,将外部内容纳入生成流程可能会削弱模型输出的安全对齐机制。先前的研究表明,启用检索

返回教程库 · 察元AI产品家族