察元AI教程库 · 文章 · 智能体

你的代理在装死吗?部署的大型语言模型代理表现出规避约束的虚构和装死行为

本文介绍了并描述了一种此前未被报道的行为谱系,我们称之为约束规避伪造(CEF):当LLM代理面临不可调和的约束(即无法同时满足所有活跃规则的任何响应)时,会自发地生成看似合理的外部信息

作者:Andoni Rodríguez, Alberto Pozanco, Daniel Borrajo · 语言:en

前往原址学习

简介

本文介绍了并描述了一种此前未被报道的行为谱系,我们称之为约束规避伪造(CEF):当LLM代理面临不可调和的约束(即无法同时满足所有活跃规则的任何响应)时,会自发地生成看似合理的外部信息

返回教程库 · 察元AI产品家族