察元AI教程库 · 文章 · 大模型
我们重新审视了预训练大型语言模型(LLM)与其微调变体之间的似然比,作为检测分布外(OOD)数据的标准。该标准的直观思路是,预训练的LLM由于训练数据量庞大,对OOD数据具有先验知识。
作者:Andi Zhang, Tim Z. Xiao, Weiyang Liu · 语言:en
我们重新审视了预训练大型语言模型(LLM)与其微调变体之间的似然比,作为检测分布外(OOD)数据的标准。该标准的直观思路是,预训练的LLM由于训练数据量庞大,对OOD数据具有先验知识。