feature-based 方法和fine-tuning 方法的区别

前言
  • 文章来源:LawsonAbs
  • 望各位读者审慎阅读。
  • 持续更新~

在谈联系和区别的时候,先看Bert 那篇论文中的原文:
feature-based 方法和fine-tuning 方法的区别

1. 共同点

它们都是在下游任务中使用预训练模型的方法

2. 区别
名称
feature-bases 使用具体任务的特征,同时包含预训练的表示作为额外的特征
fine-tuning 引入最小的具体任务的参数,同时微调所有可训练的参数
上一篇:jquery: siblings使用删除当前样式,添加所有siblings样式


下一篇:关于卷积神网络,以及模型训练自己的一些理解