pytorch简介


Posted in Python onNovember 11, 2020

一.Pytorch是什么?

  Pytorch是torch的python版本,是由Facebook开源的神经网络框架,专门针对 GPU 加速的深度神经网络(DNN)编程。Torch 是一个经典的对多维矩阵数据进行操作的张量(tensor )库,在机器学习和其他数学密集型应用有广泛应用。与Tensorflow的静态计算图不同,pytorch的计算图是动态的,可以根据计算需要实时改变计算图。但由于Torch语言采用 Lua,导致在国内一直很小众,并逐渐被支持 Python 的 Tensorflow 抢走用户。作为经典机器学习库 Torch 的端口,PyTorch 为 Python 语言使用者提供了舒适的写代码选择。

二.为什么选择 Pytorch?

 1.简洁:

  PyTorch的设计追求最少的封装,尽量避免重复造轮子。不像 TensorFlow 中充斥着session、graph、operation、name_scope、variable、tensor、layer等全新的概念,PyTorch 的设计遵循tensor→variable(autograd)→nn.Module 三个由低到高的抽象层次,分别代表高维数组(张量)、自动求导(变量)和神经网络(层/模块),而且这三个抽象之间联系紧密,可以同时进行修改和操作。 简洁的设计带来的另外一个好处就是代码易于理解。PyTorch的源码只有TensorFlow的十分之一左右,更少的抽象、更直观的设计使得PyTorch的源码十分易于阅读。

2.速度:

  PyTorch 的灵活性不以速度为代价,在许多评测中,PyTorch 的速度表现胜过 TensorFlow和Keras 等框架。框架的运行速度和程序员的编码水平有极大关系,但同样的算法,使用PyTorch实现的那个更有可能快过用其他框架实现的。

3.易用:

  PyTorch 是所有的框架中面向对象设计的最优雅的一个。PyTorch的面向对象的接口设计来源于Torch,而Torch的接口设计以灵活易用而著称,Keras作者最初就是受Torch的启发才开发了Keras。PyTorch继承了Torch的衣钵,尤其是API的设计和模块的接口都与Torch高度一致。PyTorch的设计最符合人们的思维,它让用户尽可能地专注于实现自己的想法,即所思即所得,不需要考虑太多关于框架本身的束缚。

4.活跃的社区:

  PyTorch 提供了完整的文档,循序渐进的指南,作者亲自维护的论坛 供用户交流和求教问题。Facebook 人工智能研究院对 PyTorch 提供了强力支持,作为当今排名前三的深度学习研究机构,FAIR的支持足以确保PyTorch获得持续的开发更新,不至于像许多由个人开发的框架那样昙花一现。

三.PyTorch 的架构是怎样的?

  PyTorch(Caffe2) 通过混合前端,分布式训练以及工具和库生态系统实现快速,灵活的实验和高效生产。PyTorch 和 TensorFlow 具有不同计算图实现形式,TensorFlow 采用静态图机制(预定义后再使用),PyTorch采用动态图机制(运行时动态定义)。PyTorch 具有以下高级特征:

  • 混合前端:新的混合前端在急切模式下提供易用性和灵活性,同时无缝转换到图形模式,以便在C ++运行时环境中实现速度,优化和功能。   
  • 分布式训练:通过利用本地支持集合操作的异步执行和可从Python和C ++访问的对等通信,优化了性能。   
  • Python优先: PyTorch为了深入集成到Python中而构建的,因此它可以与流行的库和Cython和Numba等软件包一起使用。  
  • 丰富的工具和库:活跃的研究人员和开发人员社区建立了丰富的工具和库生态系统,用于扩展PyTorch并支持从计算机视觉到强化学习等领域的开发。   
  • 本机ONNX支持:以标准ONNX(开放式神经网络交换)格式导出模型,以便直接访问与ONNX兼容的平台,运行时,可视化工具等。   
  • C++前端:C++前端是PyTorch的纯C++接口,它遵循已建立的Python前端的设计和体系结构。它旨在实现高性能,低延迟和裸机C++应用程序的研究。 使用GPU和CPU优化的深度学习张量库。

四.Pytorch 与 tensorflow 之间的差异在哪里?

  上面也将了PyTorch 最大优势是建立的神经网络是动态的, 对比静态的 Tensorflow, 它能更有效地处理一些问题, 比如说 RNN 变化时间长度的输出。各有各的优势和劣势。两者都是大公司发布的, Tensorflow(Google)宣称在分布式训练上下了很大的功夫, 那就默认 Tensorflow 在分布式训练上要超出 Pytorch(Facebook),还有tensorboard可视化工具, 但是 Tensorflow 的静态计算图使得在 RNN 上有一点点被动 (虽然它用其他途径解决了), 不过用 PyTorch 的时候, 会对这种动态的 RNN 有更好的理解。而且 Tensorflow 的高度工业化, 它的底层代码很难看懂, Pytorch 好那么一点点, 如果深入 PytorchAPI, 至少能比看 Tensorflow 多看懂一点点 Pytorch 的底层在干啥。

五.Pytorch有哪些常用工具包?

  • torch :类似 NumPy 的张量库,强 GPU 支持 ;   
  • torch.autograd :基于 tape 的自动区别库,支持 torch 之中的所有可区分张量运行;   
  • torch.nn :为最大化灵活性未涉及、与 autograd 深度整合的神经网络库;   
  • torch.optim:与 torch.nn 一起使用的优化包,包含 SGD、RMSProp、LBFGS、Adam 等标准优化方式;
  • torch.multiprocessing: python 多进程并发,进程之间 torch Tensors 的内存共享;   
  • torch.utils:数据载入器。具有训练器和其他便利功能;   
  • torch.legacy(.nn/.optim) :处于向后兼容性考虑,从 Torch 移植来的 legacy 代码;

到此这篇关于pytorch简介的文章就介绍到这了,更多相关pytorch简介内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
Python字典及字典基本操作方法详解
Jan 30 Python
单利模式及python实现方式详解
Mar 20 Python
对python:循环定义多个变量的实例详解
Jan 20 Python
在Python中os.fork()产生子进程的例子
Aug 08 Python
python 单线程和异步协程工作方式解析
Sep 28 Python
Python+OpenCV 实现图片无损旋转90°且无黑边
Dec 12 Python
Python实现序列化及csv文件读取
Jan 19 Python
tensorflow求导和梯度计算实例
Jan 23 Python
Python urlencode和unquote函数使用实例解析
Mar 31 Python
Python使用os.listdir和os.walk获取文件路径
May 21 Python
弄清Pytorch显存的分配机制
Dec 10 Python
Python编程根据字典列表相同键的值进行合并
Oct 05 Python
Python远程linux执行命令实现
Nov 11 #Python
python 实现简单的计算器(gui界面)
Nov 11 #Python
python海龟绘图之画国旗实例代码
Nov 11 #Python
python 实现倒计时功能(gui界面)
Nov 11 #Python
windows+vscode安装paddleOCR运行环境的步骤
Nov 11 #Python
Django基于Models定制Admin后台实现过程解析
Nov 11 #Python
Django Admin后台模型列表页面如何添加自定义操作按钮
Nov 11 #Python
You might like
中国的第一台收音机
2021/03/01 无线电
PHP包含文件函数include、include_once、require、require_once区别总结
2014/04/05 PHP
mysql_connect localhost和127.0.0.1的区别(网络层阐述)
2015/03/26 PHP
PHP统计数值数组中出现频率最多的10个数字的方法
2015/04/20 PHP
几个优化WordPress中JavaScript加载体验的插件介绍
2015/12/17 PHP
PHP通过引用传递参数用法分析
2016/12/01 PHP
jQuery 跨域访问问题解决方法
2009/12/02 Javascript
ASP.NET jQuery 实例16 通过控件CustomValidator验证RadioButtonList
2012/02/03 Javascript
jQuery解决下拉框select设宽度时IE 6/7/8下option超出显示不全
2013/05/27 Javascript
jquery实现的可隐藏重现的靠边悬浮层实例代码
2013/05/27 Javascript
JQuery控制Radio选中方法分析
2015/05/29 Javascript
JS模拟实现方法重载示例
2016/08/03 Javascript
JS监听微信、支付宝等移动app及浏览器的返回、后退、上一页按钮的事件方法
2016/08/05 Javascript
js实现的光标位置工具函数示例
2016/10/03 Javascript
PHP实现本地图片上传和验证功能
2017/02/27 Javascript
node.js平台下利用cookie实现记住密码登陆(Express+Ejs+Mysql)
2017/04/26 Javascript
vue中rem的配置的方法示例
2018/08/30 Javascript
浅谈react-router@4.0 使用方法和源码分析
2019/06/04 Javascript
wx-charts 微信小程序图表插件的具体使用
2019/08/18 Javascript
JS定时器如何实现提交成功提示功能
2020/06/12 Javascript
[01:53]DOTA2超级联赛专访Zhou 五年职业青春成长
2013/05/29 DOTA
Python编程生成随机用户名及密码的方法示例
2017/05/05 Python
python 获取微信好友列表的方法(微信web)
2019/02/21 Python
Python 中如何实现参数化测试的方法示例
2019/12/10 Python
Python3.9又更新了:dict内置新功能
2020/02/28 Python
Python3+selenium实现cookie免密登录的示例代码
2020/03/18 Python
Python tkinter实现简单加法计算器代码实例
2020/05/13 Python
找到您丢失的钥匙、钱包和手机:Tile
2017/05/19 全球购物
个人思想理论学习的自我鉴定
2013/11/30 职场文书
学校门卫管理制度
2014/01/30 职场文书
军训感想500字
2014/02/20 职场文书
计算机科学与技术专业求职信
2014/09/03 职场文书
解决Nginx 配置 proxy_pass 后 返回404问题
2021/03/31 Servers
js Proxy的原理详解
2021/05/25 Javascript
Python Pandas模块实现数据的统计分析的方法
2021/06/24 Python
详解MongoDB排序时内存大小限制与创建索引的注意事项
2022/05/06 MongoDB