察元AI教程库 · 文章 · 微调

分拣麦粒，剔除杂草：一种事后安全重对齐方法用于微调的语言模型

尽管大型语言模型（LLMs）在发布时实现了有效的安全对齐，但它们仍面临各种安全挑战。一个关键问题是微调通常会损害LLMs的安全对齐。为解决这一问题，我们提出了一种名为IRR（识别、移除和重计算）的方法

作者:Di Wu, Xin Lu, Yanyan Zhao · 语言:en

前往原址学习

简介

尽管大型语言模型（LLMs）在发布时实现了有效的安全对齐，但它们仍面临各种安全挑战。一个关键问题是微调通常会损害LLMs的安全对齐。为解决这一问题，我们提出了一种名为IRR（识别、移除和重计算）的方法

返回教程库 · 察元AI产品家族