索引 / 标签
#适配器微调
共 1 篇
- Ch11 模型微调
Adapter Tuning(适配器微调)
一句话理解 Adapter Tuning 在 Transformer 的每一层之间插入小型神经网络模块(Adapter),微调时只训练这些模块,原始模型参数完全冻结。它是 PEFT 概念的开创
约 4 分钟1,311 字
索引 / 标签
共 1 篇
一句话理解 Adapter Tuning 在 Transformer 的每一层之间插入小型神经网络模块(Adapter),微调时只训练这些模块,原始模型参数完全冻结。它是 PEFT 概念的开创
常用