察元AI教程库 · 文章 · 大模型

因果桥接:Transformer语言模型中句法岛的梯度阻塞表征

我们展示了在Transformer模型中进行因果干预如何提供关于英语语法的见解,重点关注了长期以来困扰句法理论的“句法岛”问题。从协调动词短语中提取通常会退化,但其可接受性会随着词汇内容的变化而呈现梯度变化(例如,“I

作者:Sasha Boguraev, Kyle Mahowald · 语言:en

前往原址学习

简介

我们展示了在Transformer模型中进行因果干预如何提供关于英语语法的见解,重点关注了长期以来困扰句法理论的“句法岛”问题。从协调动词短语中提取通常会退化,但其可接受性会随着词汇内容的变化而呈现梯度变化(例如,“I

返回教程库 · 察元AI产品家族