察元AI教程库 · 文章 · 大模型

在稀疏空间中引导大型语言模型的激活

AI对齐中的一个关键挑战是指导大型语言模型(LLMs)在测试时遵循期望的行为。激活引导通过在推理过程中修改模型内部的激活,提供了一种潜在的解决方案。然而,现有工作在密集激活空间中面临叠加问题,

作者:Reza Bayat, Ali Rahimi-Kalahroudi, Mohammad Pezeshki · 语言:en

前往原址学习

简介

AI对齐中的一个关键挑战是指导大型语言模型(LLMs)在测试时遵循期望的行为。激活引导通过在推理过程中修改模型内部的激活,提供了一种潜在的解决方案。然而,现有工作在密集激活空间中面临叠加问题,

返回教程库 · 察元AI产品家族