察元AI教程库 · 文章 · 部署
协同边缘-云推理使资源受限的设备能够利用大语言模型(LLMs),通过将部分计算任务卸载到云端服务器。然而,传输中间激活值会暴露敏感的用户提示,从而面临提示逆向攻击,攻击者可以重构提示
作者:Sayedeh Leila Noorbakhsh, Hossein Khalili, Nader Sehatbakhsh · 语言:en
协同边缘-云推理使资源受限的设备能够利用大语言模型(LLMs),通过将部分计算任务卸载到云端服务器。然而,传输中间激活值会暴露敏感的用户提示,从而面临提示逆向攻击,攻击者可以重构提示