察元AI教程库 · 文章 · 微调

无遗忘的上下文学习微调:线性注意力模型的理论分析

基于Transformer的大型语言模型表现出上下文学习能力,可通过少量示例提示实现对下游任务的适应。在实践中,这些模型通常通过微调来提升在无示例情况下的零样本性能,使其能够在没有示例的情况下解决任务

作者:Chungpa Lee, Jy-yong Sohn, Kangwook Lee · 语言:en

前往原址学习

简介

基于Transformer的大型语言模型表现出上下文学习能力,可通过少量示例提示实现对下游任务的适应。在实践中,这些模型通常通过微调来提升在无示例情况下的零样本性能,使其能够在没有示例的情况下解决任务

返回教程库 · 察元AI产品家族