察元AI教程库 · 文章 · 智能体

记忆越多,风险越大:配备记忆的大语言模型(LLM)代理中的长期安全风险

配备记忆的LLM智能体的安全评估通常只衡量任务内的安全性:即一个智能体是否能安全地完成单一场景,通常在对抗性条件下(如提示注入或记忆中毒)进行。但在部署过程中,一个智能体需要服务于多个独立任务,持续时间较长

作者:Ahmad Al-Tawaha, Shangding Gu, Peizhi Niu · 语言:en

前往原址学习

简介

配备记忆的LLM智能体的安全评估通常只衡量任务内的安全性:即一个智能体是否能安全地完成单一场景,通常在对抗性条件下(如提示注入或记忆中毒)进行。但在部署过程中,一个智能体需要服务于多个独立任务,持续时间较长

返回教程库 · 察元AI产品家族