察元AI教程库 · 文章 · 大模型

Transformer模型中注意力的多尺度可视化

Transformer是一种序列模型，它放弃了传统的递归架构，转而采用全注意力方法。除了提升性能外，使用注意力的一个优势是它还能帮助解释模型，通过展示模型如何为不同输入元素分配权重

作者:Jesse Vig · 语言:en

前往原址学习

简介

Transformer是一种序列模型，它放弃了传统的递归架构，转而采用全注意力方法。除了提升性能外，使用注意力的一个优势是它还能帮助解释模型，通过展示模型如何为不同输入元素分配权重

返回教程库 · 察元AI产品家族