察元AI教程库 · 文章 · 大模型

预训练数据混合使Transformer模型具备更窄的模型选择能力

变换器模型,特别是大型语言模型(LLMs),具有在上下文学习(ICL)中表现出色的能力——即在没有显式模型训练的情况下,通过提示未见过的输入-输出示例来执行新任务。在本研究中,我们研究了变换器如何在不同任务之间建立桥梁

作者:Steve Yadlowsky, Lyric Doshi, Nilesh Tripuraneni · 语言:en

前往原址学习

简介

变换器模型,特别是大型语言模型(LLMs),具有在上下文学习(ICL)中表现出色的能力——即在没有显式模型训练的情况下,通过提示未见过的输入-输出示例来执行新任务。在本研究中,我们研究了变换器如何在不同任务之间建立桥梁

返回教程库 · 察元AI产品家族