pytorch简介


Posted in Python onNovember 11, 2020

一.Pytorch是什么?

  Pytorch是torch的python版本,是由Facebook开源的神经网络框架,专门针对 GPU 加速的深度神经网络(DNN)编程。Torch 是一个经典的对多维矩阵数据进行操作的张量(tensor )库,在机器学习和其他数学密集型应用有广泛应用。与Tensorflow的静态计算图不同,pytorch的计算图是动态的,可以根据计算需要实时改变计算图。但由于Torch语言采用 Lua,导致在国内一直很小众,并逐渐被支持 Python 的 Tensorflow 抢走用户。作为经典机器学习库 Torch 的端口,PyTorch 为 Python 语言使用者提供了舒适的写代码选择。

二.为什么选择 Pytorch?

 1.简洁:

  PyTorch的设计追求最少的封装,尽量避免重复造轮子。不像 TensorFlow 中充斥着session、graph、operation、name_scope、variable、tensor、layer等全新的概念,PyTorch 的设计遵循tensor→variable(autograd)→nn.Module 三个由低到高的抽象层次,分别代表高维数组(张量)、自动求导(变量)和神经网络(层/模块),而且这三个抽象之间联系紧密,可以同时进行修改和操作。 简洁的设计带来的另外一个好处就是代码易于理解。PyTorch的源码只有TensorFlow的十分之一左右,更少的抽象、更直观的设计使得PyTorch的源码十分易于阅读。

2.速度:

  PyTorch 的灵活性不以速度为代价,在许多评测中,PyTorch 的速度表现胜过 TensorFlow和Keras 等框架。框架的运行速度和程序员的编码水平有极大关系,但同样的算法,使用PyTorch实现的那个更有可能快过用其他框架实现的。

3.易用:

  PyTorch 是所有的框架中面向对象设计的最优雅的一个。PyTorch的面向对象的接口设计来源于Torch,而Torch的接口设计以灵活易用而著称,Keras作者最初就是受Torch的启发才开发了Keras。PyTorch继承了Torch的衣钵,尤其是API的设计和模块的接口都与Torch高度一致。PyTorch的设计最符合人们的思维,它让用户尽可能地专注于实现自己的想法,即所思即所得,不需要考虑太多关于框架本身的束缚。

4.活跃的社区:

  PyTorch 提供了完整的文档,循序渐进的指南,作者亲自维护的论坛 供用户交流和求教问题。Facebook 人工智能研究院对 PyTorch 提供了强力支持,作为当今排名前三的深度学习研究机构,FAIR的支持足以确保PyTorch获得持续的开发更新,不至于像许多由个人开发的框架那样昙花一现。

三.PyTorch 的架构是怎样的?

  PyTorch(Caffe2) 通过混合前端,分布式训练以及工具和库生态系统实现快速,灵活的实验和高效生产。PyTorch 和 TensorFlow 具有不同计算图实现形式,TensorFlow 采用静态图机制(预定义后再使用),PyTorch采用动态图机制(运行时动态定义)。PyTorch 具有以下高级特征:

  • 混合前端:新的混合前端在急切模式下提供易用性和灵活性,同时无缝转换到图形模式,以便在C ++运行时环境中实现速度,优化和功能。   
  • 分布式训练:通过利用本地支持集合操作的异步执行和可从Python和C ++访问的对等通信,优化了性能。   
  • Python优先: PyTorch为了深入集成到Python中而构建的,因此它可以与流行的库和Cython和Numba等软件包一起使用。  
  • 丰富的工具和库:活跃的研究人员和开发人员社区建立了丰富的工具和库生态系统,用于扩展PyTorch并支持从计算机视觉到强化学习等领域的开发。   
  • 本机ONNX支持:以标准ONNX(开放式神经网络交换)格式导出模型,以便直接访问与ONNX兼容的平台,运行时,可视化工具等。   
  • C++前端:C++前端是PyTorch的纯C++接口,它遵循已建立的Python前端的设计和体系结构。它旨在实现高性能,低延迟和裸机C++应用程序的研究。 使用GPU和CPU优化的深度学习张量库。

四.Pytorch 与 tensorflow 之间的差异在哪里?

  上面也将了PyTorch 最大优势是建立的神经网络是动态的, 对比静态的 Tensorflow, 它能更有效地处理一些问题, 比如说 RNN 变化时间长度的输出。各有各的优势和劣势。两者都是大公司发布的, Tensorflow(Google)宣称在分布式训练上下了很大的功夫, 那就默认 Tensorflow 在分布式训练上要超出 Pytorch(Facebook),还有tensorboard可视化工具, 但是 Tensorflow 的静态计算图使得在 RNN 上有一点点被动 (虽然它用其他途径解决了), 不过用 PyTorch 的时候, 会对这种动态的 RNN 有更好的理解。而且 Tensorflow 的高度工业化, 它的底层代码很难看懂, Pytorch 好那么一点点, 如果深入 PytorchAPI, 至少能比看 Tensorflow 多看懂一点点 Pytorch 的底层在干啥。

五.Pytorch有哪些常用工具包?

  • torch :类似 NumPy 的张量库,强 GPU 支持 ;   
  • torch.autograd :基于 tape 的自动区别库,支持 torch 之中的所有可区分张量运行;   
  • torch.nn :为最大化灵活性未涉及、与 autograd 深度整合的神经网络库;   
  • torch.optim:与 torch.nn 一起使用的优化包,包含 SGD、RMSProp、LBFGS、Adam 等标准优化方式;
  • torch.multiprocessing: python 多进程并发,进程之间 torch Tensors 的内存共享;   
  • torch.utils:数据载入器。具有训练器和其他便利功能;   
  • torch.legacy(.nn/.optim) :处于向后兼容性考虑,从 Torch 移植来的 legacy 代码;

到此这篇关于pytorch简介的文章就介绍到这了,更多相关pytorch简介内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
python3.6 +tkinter GUI编程 实现界面化的文本处理工具(推荐)
Dec 20 Python
python爬取拉勾网职位数据的方法
Jan 24 Python
Python实现的寻找前5个默尼森数算法示例
Mar 25 Python
教你利用Python玩转histogram直方图的五种方法
Jul 30 Python
python实现汉诺塔算法
Mar 01 Python
Python3 pip3 list 出现 DEPRECATION 警告的解决方法
Feb 16 Python
python print出共轭复数的方法详解
Jun 25 Python
Python进程Multiprocessing模块原理解析
Feb 28 Python
tensorflow使用L2 regularization正则化修正overfitting过拟合方式
May 22 Python
带你学习Python如何实现回归树模型
Jul 16 Python
python如何控制进程或者线程的个数
Oct 16 Python
Python实现自动整理文件的脚本
Dec 17 Python
Python远程linux执行命令实现
Nov 11 #Python
python 实现简单的计算器(gui界面)
Nov 11 #Python
python海龟绘图之画国旗实例代码
Nov 11 #Python
python 实现倒计时功能(gui界面)
Nov 11 #Python
windows+vscode安装paddleOCR运行环境的步骤
Nov 11 #Python
Django基于Models定制Admin后台实现过程解析
Nov 11 #Python
Django Admin后台模型列表页面如何添加自定义操作按钮
Nov 11 #Python
You might like
PHP对MongoDB[NoSQL]数据库的操作
2013/03/01 PHP
PHP 7的一些引人注目的新特性简单介绍
2015/11/08 PHP
Laravel 实现密码重置功能
2018/02/23 PHP
准确获得页面、窗口高度及宽度的JS
2006/11/26 Javascript
Javascript之文件操作
2007/03/07 Javascript
AngularJS基础知识
2014/12/21 Javascript
jQuery统计上传文件大小的方法
2015/01/24 Javascript
JavaScript判断数组是否包含指定元素的方法
2015/07/01 Javascript
jquery实现向下滑出的二级导航下滑菜单效果
2015/08/25 Javascript
JavaScript如何实现组合列表框中元素移动效果
2016/03/01 Javascript
Backbone中View之间传值的学习心得
2016/08/09 Javascript
JS触摸屏网页版仿app弹窗型滚动列表选择器/日期选择器
2016/10/30 Javascript
JavaScript创建对象的七种方式全面总结
2017/08/21 Javascript
Node使用Sequlize连接Mysql报错:Access denied for user ‘xxx’@‘localhost’
2018/01/03 Javascript
小程序视频列表中视频的播放与停止的示例代码
2018/07/20 Javascript
React Component存在的几种形式详解
2018/11/06 Javascript
总结4个方面优化Vue项目
2019/02/11 Javascript
小程序api实现promise封装过程解析
2019/11/21 Javascript
JS获取表格视图所选行号的ids过程解析
2020/02/21 Javascript
[00:47]TI7不朽珍藏III——沙王不朽展示
2017/07/15 DOTA
[01:20]PWL开团时刻DAY9——听说潮汐没用?
2020/11/10 DOTA
Python内置函数 next的具体使用方法
2017/11/24 Python
Python读取Word(.docx)正文信息的方法
2018/03/15 Python
Python基于递归实现电话号码映射功能示例
2018/04/13 Python
Django 自动生成api接口文档教程
2019/11/19 Python
pytorch中获取模型input/output shape实例
2019/12/30 Python
Python GUI编程学习笔记之tkinter界面布局显示详解
2020/03/30 Python
JD Sports意大利:英国篮球和运动时尚的领导者
2017/10/29 全球购物
乌克兰时尚鞋子和衣服购物网站:Born2be
2018/05/24 全球购物
十佳教师事迹材料
2014/01/11 职场文书
教师校本培训方案
2014/02/26 职场文书
金融管理毕业生求职信
2014/03/03 职场文书
大二学生学年自我鉴定
2014/09/12 职场文书
房产遗嘱范本
2015/08/06 职场文书
Python超简单容易上手的画图工具库推荐
2021/05/10 Python
Anaconda安装pytorch及配置PyCharm 2021环境
2021/06/04 Python