察元AI教程库 · 文章 · 大模型

Transformer微调的能量消耗：一种基于屋顶线的扩展模型

基于Transformer的模型是现代自然语言处理的基础，但其计算和能耗成本呈快速增长趋势。随着训练在模型规模和并行性方面不断扩展，准确预测能耗已成为实现可持续和成本敏感系统设计的关键。我们提出

作者:Mansour Zoubeirou a Mayaki · 语言:en

简介