察元AI教程库 · 文章 · 智能体
在边缘服务器上部署轻量级的大语言模型(LLM)智能体可以降低延迟,使智能体服务更贴近用户,但资源受限的边缘模型通常难以处理需要持久记忆、子目标跟踪和反思的长周期任务。对边缘模型进行微调
作者:Yannan Wang, Longli Yang, Zhen Liu · 语言:en
在边缘服务器上部署轻量级的大语言模型(LLM)智能体可以降低延迟,使智能体服务更贴近用户,但资源受限的边缘模型通常难以处理需要持久记忆、子目标跟踪和反思的长周期任务。对边缘模型进行微调