察元AI教程库 · 文章 · 大模型

Transformer Copilot：在大语言模型微调中通过错误日志学习

大型语言模型通常通过在领域特定数据上进行监督微调来适应下游任务。虽然标准微调专注于最小化生成损失以优化模型参数，但我们进一步采取了保留并利用模型自身学习信号的更深层次方法

作者:Jiaru Zou, Yikun Ban, Zihao Li · 语言:en

简介