PyTorch实现更新部分网络,其他不更新


Posted in Python onDecember 31, 2019

torch.Tensor.detach()的使用

detach()的官方说明如下:

Returns a new Tensor, detached from the current graph.
The result will never require gradient.

假设有模型A和模型B,我们需要将A的输出作为B的输入,但训练时我们只训练模型B. 那么可以这样做:

input_B = output_A.detach()

它可以使两个计算图的梯度传递断开,从而实现我们所需的功能。

以上这篇PyTorch实现更新部分网络,其他不更新就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python使用cookie库操保存cookie详解
Mar 03 Python
Python栈类实例分析
Jun 15 Python
老生常谈python函数参数的区别(必看篇)
May 29 Python
python创建列表和向列表添加元素的实现方法
Dec 25 Python
对python sklearn one-hot编码详解
Jul 10 Python
python opencv实现切变换 不裁减图片
Jul 26 Python
Python图像处理之图像的读取、显示与保存操作【测试可用】
Jan 04 Python
pytorch实现onehot编码转为普通label标签
Jan 02 Python
Python如何实现邮件功能
May 27 Python
Java多线程实现四种方式原理详解
Jun 02 Python
Python爬虫UA伪装爬取的实例讲解
Feb 19 Python
python单向链表实例详解
May 25 Python
pytorch中的transforms模块实例详解
Dec 31 #Python
Pytorch 实现权重初始化
Dec 31 #Python
pytorch 归一化与反归一化实例
Dec 31 #Python
Pytorch 数据加载与数据预处理方式
Dec 31 #Python
pytorch 数据处理:定义自己的数据集合实例
Dec 31 #Python
pytorch: Parameter 的数据结构实例
Dec 31 #Python
Python测试线程应用程序过程解析
Dec 31 #Python
You might like
3种平台下安装php4经验点滴
2006/10/09 PHP
Yii使用ajax验证显示错误messagebox的解决方法
2014/12/03 PHP
Javascript常用运算符(Operators)-javascript基础教程
2007/12/14 Javascript
js树形控件脚本代码
2008/07/24 Javascript
javascript 伪数组实现方法
2010/10/11 Javascript
JQuery事件e参数的方法preventDefault()取消默认行为
2013/09/26 Javascript
原生js和jquery中有关透明度设置的相关问题
2014/01/08 Javascript
jQuery动画效果animate和scrollTop结合使用实例
2014/04/02 Javascript
jQuery ajax分页插件实例代码
2016/01/27 Javascript
jQuery实现图片局部放大镜效果
2016/03/17 Javascript
Jquery获取当前城市的天气信息
2016/08/05 Javascript
拖动时防止选中
2017/02/03 Javascript
js中变量的连续赋值(实例讲解)
2017/07/08 Javascript
H5基于iScroll实现下拉刷新和上拉加载更多
2017/07/18 Javascript
vue 打包后的文件部署到express服务器上的方法
2017/08/09 Javascript
对angularJs中2种自定义服务的实例讲解
2018/09/30 Javascript
jQuery zTree插件使用简单教程
2019/08/16 jQuery
JavaScript数组及常见操作方法小结
2019/11/13 Javascript
vue 使用原生组件上传图片的实例
2020/09/08 Javascript
Vue+element+cookie记住密码功能的简单实现方法
2020/09/20 Javascript
python 列表,数组,矩阵两两转换tolist()的实例
2018/04/04 Python
python 中文件输入输出及os模块对文件系统的操作方法
2018/08/27 Python
Python 数据库操作 SQLAlchemy的示例代码
2019/02/18 Python
python操作kafka实践的示例代码
2019/06/19 Python
基于python模拟TCP3次握手连接及发送数据
2020/11/06 Python
python3爬虫中多线程进行解锁操作实例
2020/11/25 Python
婚礼证婚人证婚词
2014/01/13 职场文书
法律进社区实施方案
2014/03/21 职场文书
高中生操行评语大全
2014/04/25 职场文书
公司离职证明样本
2014/09/13 职场文书
医学检验专业自荐信
2014/09/18 职场文书
小学班主任个人总结
2015/03/03 职场文书
PyTorch 如何自动计算梯度
2021/05/23 Python
Java用自带的Image IO给图片添加水印
2021/06/15 Java/Android
HTML中的表单元素介绍
2022/02/28 HTML / CSS
台积电称即便经济低迷也没有降价的计划
2022/04/21 数码科技