察元AI教程库 · 文章 · 智能体

商业LLM代理已经面临简单却危险的攻击

近年来的机器学习安全文献大量关注于针对对齐的大型语言模型(LLMs)的攻击。这些攻击可能提取私有信息,或迫使模型生成有害输出。在实际部署中,LLMs通常作为更大智能体流水线的一部分,包括记忆

作者:Ang Li, Yin Zhou, Vethavikashini Chithrra Raghuram · 语言:en

前往原址学习

简介

近年来的机器学习安全文献大量关注于针对对齐的大型语言模型(LLMs)的攻击。这些攻击可能提取私有信息,或迫使模型生成有害输出。在实际部署中,LLMs通常作为更大智能体流水线的一部分,包括记忆

返回教程库 · 察元AI产品家族