察元AI教程库 · 文章 · 部署

最小化MPC的 secure LLM 推理

许多基于大型语言模型（LLMs）的推理服务存在隐私问题，可能泄露用户提示或模型的专有权重给服务方。通过安全多方计算（MPC）可以解决这一问题，但目前仍不切实际。

作者:Deevashwer Rathee, Dacheng Li, Ion Stoica · 语言:en

前往原址学习

简介

许多基于大型语言模型（LLMs）的推理服务存在隐私问题，可能泄露用户提示或模型的专有权重给服务方。通过安全多方计算（MPC）可以解决这一问题，但目前仍不切实际。

返回教程库 · 察元AI产品家族