察元AI教程库 · 文章 · 智能体

在自我检查之前先确保不自我毁灭:选择性退出提升LLM代理安全性

随着大型语言模型(LLM)代理越来越多地在具有现实世界后果的复杂环境中运行,其安全性变得至关重要。尽管对单轮任务的不确定性量化已有研究,但在涉及现实世界工具访问的多轮代理场景中仍存在独特挑战

作者:Vamshi Krishna Bonagiri, Ponnurangam Kumaragurum, Khanh Nguyen · 语言:en

前往原址学习

简介

随着大型语言模型(LLM)代理越来越多地在具有现实世界后果的复杂环境中运行,其安全性变得至关重要。尽管对单轮任务的不确定性量化已有研究,但在涉及现实世界工具访问的多轮代理场景中仍存在独特挑战

返回教程库 · 察元AI产品家族