察元AI教程库 · 文章 · 微调

通过认知神经网络进行语言模型微调

语言模型通常先在大规模无监督文本语料上进行预训练，然后在额外的任务特定数据上进行微调。然而，典型的微调方案并未优先考虑训练数据。我们表明，如果能够优先选择信息性强的训练数据，就能实现更好的性能

作者:Ian Osband, Seyed Mohammad Asghari, Benjamin Van Roy · 语言:en

简介