察元AI教程库 · 文章 · 大模型

LLM-JEPA：大型语言模型与联合嵌入预测架构的结合

大型语言模型（LLM）的预训练、微调和评估依赖于输入空间重构和生成能力。然而，在视觉领域中，嵌入空间训练目标，例如联合嵌入预测架构（JEPAs），远优于其输入空间目标

作者:Hai Huang, Yann LeCun, Randall Balestriero · 语言:en

前往原址学习

简介

大型语言模型（LLM）的预训练、微调和评估依赖于输入空间重构和生成能力。然而，在视觉领域中，嵌入空间训练目标，例如联合嵌入预测架构（JEPAs），远优于其输入空间目标

返回教程库 · 察元AI产品家族