察元AI教程库 · 文章 · 部署

FuseFSS：基于函数秘密共享的高效安全大语言模型推理

双服务器安全推理允许客户端在查询托管的大型语言模型（LLM）时，不暴露提示或嵌入。基于函数秘密共享（FSS）的最新GPU系统使线性层高效，但固定点非线性以及辅助操作仍构成瓶颈，因为它们

作者:Yuhan Ma, Yong Li, Stefan Schmid · 语言:en

前往原址学习

简介

双服务器安全推理允许客户端在查询托管的大型语言模型（LLM）时，不暴露提示或嵌入。基于函数秘密共享（FSS）的最新GPU系统使线性层高效，但固定点非线性以及辅助操作仍构成瓶颈，因为它们

返回教程库 · 察元AI产品家族