察元AI教程库 · 文章 · 部署

Transformer-Lite：基于移动设备GPU的大型语言模型高效部署

大型语言模型（LLM）被广泛用于智能助手、文本摘要、翻译以及手机上的多模态任务。然而，当前的设备端LLM部署方法仍存在推理速度慢的问题，导致用户体验不佳。为了促进

作者:Luchang Li, Sheng Qian, Jie Lu · 语言:en

前往原址学习

简介

大型语言模型（LLM）被广泛用于智能助手、文本摘要、翻译以及手机上的多模态任务。然而，当前的设备端LLM部署方法仍存在推理速度慢的问题，导致用户体验不佳。为了促进

返回教程库 · 察元AI产品家族