察元AI教程库 · 文章 · 部署
联邦注意力:一种用于边缘网络上协作式大语言模型(LLM)推理的分布式范式
大型语言在边缘端迅速普及,为各种应用场景提供了智能能力。然而,它们在协作场景中的实际部署面临根本性挑战:隐私漏洞、通信开销和计算
作者:Xiumei Deng, Zehui Xiong, Binbin Chen · 语言:en
前往原址学习
简介
大型语言在边缘端迅速普及,为各种应用场景提供了智能能力。然而,它们在协作场景中的实际部署面临根本性挑战:隐私漏洞、通信开销和计算
返回教程库 · 察元AI产品家族