察元AI教程库 · 文章 · 大模型

MATE：多视角注意力提升表Transformer效率

本文提出了一种稀疏注意力Transformer架构，用于建模包含大量表格的文档。表格在互联网上普遍存在，信息丰富。然而，超过20%的网络关系表有20行或更多行（Cafarella等，2008），这些大型表格

作者:Julian Martin Eisenschlos, Maharshi Gor, Thomas Müller · 语言:en

前往原址学习

简介

本文提出了一种稀疏注意力Transformer架构，用于建模包含大量表格的文档。表格在互联网上普遍存在，信息丰富。然而，超过20%的网络关系表有20行或更多行（Cafarella等，2008），这些大型表格

返回教程库 · 察元AI产品家族