察元AI教程库 · 文章 · 部署
AI WiFi卸载正成为一种有前景的方法,用于为资源受限的无线设备提供大型语言模型(LLM)服务。然而,与传统边缘计算不同,LLM通过WiFi进行推理必须同时解决异构模型能力、无线竞争以及不确定的
作者:Mingqi Han, Xinghua Sun · 语言:en
AI WiFi卸载正成为一种有前景的方法,用于为资源受限的无线设备提供大型语言模型(LLM)服务。然而,与传统边缘计算不同,LLM通过WiFi进行推理必须同时解决异构模型能力、无线竞争以及不确定的