察元AI教程库 · 文章 · 大模型

基于FPGA的变换器硬件加速器的设计与实现

基于Transformer的大型语言模型（LLMs）严重依赖于密集的矩阵乘法来实现注意力和前馈层，其中多头自注意力（MHA）模块中的Q、K、V线性投影构成了关键的性能瓶颈。本文提出了一种

作者:Richie Li, Sicheng Chen · 语言:en

前往原址学习

简介

基于Transformer的大型语言模型（LLMs）严重依赖于密集的矩阵乘法来实现注意力和前馈层，其中多头自注意力（MHA）模块中的Q、K、V线性投影构成了关键的性能瓶颈。本文提出了一种

返回教程库 · 察元AI产品家族