察元AI教程库 · 文章 · 大模型
算法提取旨在直接从在算法任务上训练的模型中合成可执行程序,从而实现从权重中无依赖于人类编写的可执行程序,恢复出可执行机制。然而,将此范式应用于Transformer时,由于表示机制的复杂性,应用起来变得非常困难。
作者:Yifan Zhang, Wei Bi, Kechi Zhang · 语言:en
算法提取旨在直接从在算法任务上训练的模型中合成可执行程序,从而实现从权重中无依赖于人类编写的可执行程序,恢复出可执行机制。然而,将此范式应用于Transformer时,由于表示机制的复杂性,应用起来变得非常困难。