察元AI教程库 · 文章 · 大模型

变换器的后期层以经典方式重构语法：来自希腊语打乱和跨层泛化的证据

探针研究表明，句法信息可以在早期和中期的Transformer层中被解码，但其在后期层中的演变仍不明确。我们对三个基于希腊语微调的大型语言模型进行了跨层泛化分析，评估了

作者:Christos Nikolaos Zacharopoulos, Revekka Kyriakoglou, Chara Tsoukala · 语言:en

简介