fine-tune 微调 Transfer learning 迁移学习 动手学深度学习v2_finetune——transfer-程序员宅基地

技术标签: fine-tune 微调  Transfer learn  李沐动手学深度学习  迁移学习  

1. Fine-tuning 微调 Transfer learning

Fine-tuning 微调是整个深度学习领域是最重要的技能。如果前面的知识只能选择一个,那就是微调了。Transfer learning迁移学习,就是可以用别的成功网络的参数等来训练跟你相似的模型。简单来说是重用。

跟详细知识请参考: Transfer learning 迁移学习指南
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2. 代码实现

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3. Q&A

    1. fine tuning和transfer training实际上是同一个东西
    1. 源数据集和目标数据集最好相似,fine tuning效果才好。
    1. auto-gluon自动化框架最主要是用了微调。

参考

https://www.bilibili.com/video/BV1Sb4y1d7CR?p=1

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/zgpeace/article/details/124396007

智能推荐

【PM2.5浓度预测】基于Logistic混沌映射改进的麻雀算法优化BP神经网络PM2.5浓度预测附matlab代码...-程序员宅基地

文章浏览阅读68次。作者简介:热爱科研的Matlab仿真开发者,修心和技术同步精进,matlab项目合作可私信。????个人主页:Matlab科研工作室????个人信条:格物致知。更多Matlab仿真内容点击????智能优化算法 神经网络预测 雷达通信 无线传感器 电力系统信号处理 ..._pm2.5浓度超标浓度预测

有意义的命名_使用读的出来的命名-程序员宅基地

文章浏览阅读505次。选择有意义的名字做有意义的区分使用读的出来的名词避免误导添加有意义的语境使用可搜索的名称单字母名称仅用于短方法中的本地变量.名称长短应与其作用域大小相对应.避免使用编码Java程序员不需要类型编码,不需要匈牙利语标记法.不需要m_前缀或者后缀.不需要类似I修饰接口,比如IShapeFactory.避免思维映射聪明程序员和专业程序员的区别在于,专业程序员了解,明确是王道.类名类名应该_使用读的出来的命名

Windows的自动更新和自带的杀毒软件怎么弄掉!-程序员宅基地

文章浏览阅读35次。在某些Windows版本中,可以通过控制面板或设置来禁用或关闭Microsoft Defender,但这通常不是长期禁用的最佳方式,因为系统更新可能随时重新启用它。对于Windows 11和较新的Windows 10版本,直接通过设置关闭Microsoft Defender并不推荐或不可行,因为它已经是系统核心组件之一,直接关闭可能导致安全性降低。2. 浏览到“计算机配置” > “管理模板” > “Windows组件” > “Windows更新”。2. 转到“更新与安全” > “Windows更新”。

推荐几个好用的网盘搜索引擎_盘优搜-程序员宅基地

文章浏览阅读4.6k次。随着网盘的兴起,很多用户都会在网盘上分享自己的资源。那么如何快速的在网盘上找到你想要的资源呢 ? 这时候就要擅用一些网盘搜索引擎了。 网盘搜索引擎都会把一些网盘资源抓取并进行整合,从而提高了搜索效率。下面介绍几个比较好用的网盘搜索引擎,排名不分先后。度盘搜 -盘多多 站点地址 http://www.panduoduo.net/胖次 站点地址 http://www.panc.cc/西林..._盘优搜

微信小程序踩坑记录 ------- 优化修改微信小程序原生单选(radio)复选(checkbox)框样式_微信小程序的复选框太丑,自己写一个-程序员宅基地

文章浏览阅读6.8k次。现在的微信小程序是火的不要要的,很多公司都开始做微信小程序的产品项目,很多前端工程师都或主动或被动的一头扎向小程序开发大军,当然我也不可避免的开始加入其中。不管是做什么样的项目,或多或少会涉及到表单,小程序提供了一系列的原生表单组件,其中很多组件是很不错的,我们直接拿来用就可以,但是单选和复选框的样式,实在是不在丑的不忍直视,当然和我们的设计小哥哥小姐姐做的设计图更是相差甚远,为了达到预期效果我..._微信小程序的复选框太丑,自己写一个

AAPT2简介-程序员宅基地

文章浏览阅读619次,点赞80次,收藏73次。AAPT2(Android 资源打包工具)是一种构建工具,Android Studio 和 Android Gradle 插件使用它来编译和打包应用的资源。 AAPT2 会解析资源、为资源编制索引,并将资源编译为针对 Android 平台进行过优化的二进制格式。_aapt2

随便推点

蝴蝶飞舞-程序员宅基地

文章浏览阅读894次。 这个哥们儿的手指蛮灵活啊,他好像叫balian fabisonghttp://www.videoplayer.es/video/indexthumbs-instructional-balisong-trick-trip-hop-beat/tVAJDI5dRFs/http://www.youtube.com/watch?v=o8_KlXPGHW8http://www.youtube.c

Grafana 提醒注意严重的认证绕过漏洞-程序员宅基地

文章浏览阅读928次。聚焦源代码安全,网罗国内外最新资讯!编译:代码卫士Grafana 为其多个应用版本发布安全修复方案,修复了一个严重漏洞,它可使攻击者绕过认证并接管使用 Azure Active Directory 用于认证的任何 Grafana 账户。该漏洞的编号是CVE-2023-3128,CVSS v3.1评分是9.4。Grafana 是一款广泛使用的开源分析和交互可视化 app,通过大量监控平台和应用程序..._grafana6.7.6版本漏洞

django 常见过滤器-程序员宅基地

文章浏览阅读52次。一、形式:小写{{ name | lower }} 二、过滤器是可以嵌套的,字符串经过三个过滤器,第一个过滤器转换为小写,第二个过滤器输出首字母,第三个过滤器将首字母转换成大写标签{{ str|lower|first|upper }} 三、过滤器的参数显示前30个字{{ bio | truncatewords:"30..._django前台{{ str|upper|lower|upper }}

StanfordCoreNLP从零安装与我遇到的各种坑(使用python)超详细最全截图-程序员宅基地

文章浏览阅读8.7k次,点赞28次,收藏72次。安装安装步骤很简单,不过要注意自己的电脑环境:(1)下载安装JDK 1.8及以上版本。 这一点很重要!!!!!!!注意:如果本来有java的盆友记得先在控制面板卸载所有的java程序,然后再下载安装新的JDK,我就是没卸载,系统无法识别……具体地址:oracle官网 https://www.oracle.com/index.html进入网站后:点击左上角的横线菜单:在菜单中点击J..._stanfordcorenlp

一文搞懂电子电路-程序员宅基地

文章浏览阅读1.3k次。电子电路1.1 分类1.1.1 模拟电子电路1.1.1.1 介绍1.1.1.2 特点1.1.2 数字电子电路1.1.2.1 特点1.1.2.2 数字电路中的相关概念1.1.2.3 门电路1.1.2.3.1 TTL集成门电路1.1.2.3.1.1 特点1.1.2.3.1.2 电压范围1.1.2.3.1.3 介绍1.1.2.3.1.4 反相器1.1.2.3.1.5 开路门1.1.2.3.1.6 三态门1.1.2.3.1.7 线与1.1.2.3.2 CMOS集成门电路1.1.2.3.2.1 特点1.1.2.3._电子电路

输出二叉树中从每个叶子结点到根结点的路径(代码简练,思路易懂)_输出二叉树中从每个叶子结点到根结点的路径算法-程序员宅基地

文章浏览阅读3.6k次,点赞14次,收藏35次。如果我们在递归函数,传入一个栈,(不要传引用!)每次递归,若当前结点非空那么就将该节点入栈,那么每一层递归都会对应一个栈,==这个栈表示当前结点到根结点的路径==。_输出二叉树中从每个叶子结点到根结点的路径算法