察元AI教程库 · 文章 · 智能体

CoP：使用原则组合进行大语言模型的代理红队攻击

大型语言模型（LLMs）的最新进展在各个领域（从开源到专有LLMs）催生了变革性应用。然而，劫持攻击旨在通过欺骗目标LLM回答有害且危险的内容，从而破坏安全对齐和用户合规。

作者:Chen Xiong, Pin-Yu Chen, Tsung-Yi Ho · 语言:en

前往原址学习

简介

大型语言模型（LLMs）的最新进展在各个领域（从开源到专有LLMs）催生了变革性应用。然而，劫持攻击旨在通过欺骗目标LLM回答有害且危险的内容，从而破坏安全对齐和用户合规。

返回教程库 · 察元AI产品家族