察元AI教程库 · 文章 · 微调

LoFiT：在大型语言模型表示上进行局部微调

可解释性研究显示，大型语言模型（LLMs）可以以无学习的方式适应新任务：通过干预LLM的表示，可以激发期望的行为以实现对齐。例如，向某些注意力头的输出添加特定的偏置向量

作者:Fangcong Yin, Xi Ye, Greg Durrett · 语言:en

前往原址学习

简介

可解释性研究显示，大型语言模型（LLMs）可以以无学习的方式适应新任务：通过干预LLM的表示，可以激发期望的行为以实现对齐。例如，向某些注意力头的输出添加特定的偏置向量

返回教程库 · 察元AI产品家族