pytorch简介


Posted in Python onNovember 11, 2020

一.Pytorch是什么?

  Pytorch是torch的python版本,是由Facebook开源的神经网络框架,专门针对 GPU 加速的深度神经网络(DNN)编程。Torch 是一个经典的对多维矩阵数据进行操作的张量(tensor )库,在机器学习和其他数学密集型应用有广泛应用。与Tensorflow的静态计算图不同,pytorch的计算图是动态的,可以根据计算需要实时改变计算图。但由于Torch语言采用 Lua,导致在国内一直很小众,并逐渐被支持 Python 的 Tensorflow 抢走用户。作为经典机器学习库 Torch 的端口,PyTorch 为 Python 语言使用者提供了舒适的写代码选择。

二.为什么选择 Pytorch?

 1.简洁:

  PyTorch的设计追求最少的封装,尽量避免重复造轮子。不像 TensorFlow 中充斥着session、graph、operation、name_scope、variable、tensor、layer等全新的概念,PyTorch 的设计遵循tensor→variable(autograd)→nn.Module 三个由低到高的抽象层次,分别代表高维数组(张量)、自动求导(变量)和神经网络(层/模块),而且这三个抽象之间联系紧密,可以同时进行修改和操作。 简洁的设计带来的另外一个好处就是代码易于理解。PyTorch的源码只有TensorFlow的十分之一左右,更少的抽象、更直观的设计使得PyTorch的源码十分易于阅读。

2.速度:

  PyTorch 的灵活性不以速度为代价,在许多评测中,PyTorch 的速度表现胜过 TensorFlow和Keras 等框架。框架的运行速度和程序员的编码水平有极大关系,但同样的算法,使用PyTorch实现的那个更有可能快过用其他框架实现的。

3.易用:

  PyTorch 是所有的框架中面向对象设计的最优雅的一个。PyTorch的面向对象的接口设计来源于Torch,而Torch的接口设计以灵活易用而著称,Keras作者最初就是受Torch的启发才开发了Keras。PyTorch继承了Torch的衣钵,尤其是API的设计和模块的接口都与Torch高度一致。PyTorch的设计最符合人们的思维,它让用户尽可能地专注于实现自己的想法,即所思即所得,不需要考虑太多关于框架本身的束缚。

4.活跃的社区:

  PyTorch 提供了完整的文档,循序渐进的指南,作者亲自维护的论坛 供用户交流和求教问题。Facebook 人工智能研究院对 PyTorch 提供了强力支持,作为当今排名前三的深度学习研究机构,FAIR的支持足以确保PyTorch获得持续的开发更新,不至于像许多由个人开发的框架那样昙花一现。

三.PyTorch 的架构是怎样的?

  PyTorch(Caffe2) 通过混合前端,分布式训练以及工具和库生态系统实现快速,灵活的实验和高效生产。PyTorch 和 TensorFlow 具有不同计算图实现形式,TensorFlow 采用静态图机制(预定义后再使用),PyTorch采用动态图机制(运行时动态定义)。PyTorch 具有以下高级特征:

  • 混合前端:新的混合前端在急切模式下提供易用性和灵活性,同时无缝转换到图形模式,以便在C ++运行时环境中实现速度,优化和功能。   
  • 分布式训练:通过利用本地支持集合操作的异步执行和可从Python和C ++访问的对等通信,优化了性能。   
  • Python优先: PyTorch为了深入集成到Python中而构建的,因此它可以与流行的库和Cython和Numba等软件包一起使用。  
  • 丰富的工具和库:活跃的研究人员和开发人员社区建立了丰富的工具和库生态系统,用于扩展PyTorch并支持从计算机视觉到强化学习等领域的开发。   
  • 本机ONNX支持:以标准ONNX(开放式神经网络交换)格式导出模型,以便直接访问与ONNX兼容的平台,运行时,可视化工具等。   
  • C++前端:C++前端是PyTorch的纯C++接口,它遵循已建立的Python前端的设计和体系结构。它旨在实现高性能,低延迟和裸机C++应用程序的研究。 使用GPU和CPU优化的深度学习张量库。

四.Pytorch 与 tensorflow 之间的差异在哪里?

  上面也将了PyTorch 最大优势是建立的神经网络是动态的, 对比静态的 Tensorflow, 它能更有效地处理一些问题, 比如说 RNN 变化时间长度的输出。各有各的优势和劣势。两者都是大公司发布的, Tensorflow(Google)宣称在分布式训练上下了很大的功夫, 那就默认 Tensorflow 在分布式训练上要超出 Pytorch(Facebook),还有tensorboard可视化工具, 但是 Tensorflow 的静态计算图使得在 RNN 上有一点点被动 (虽然它用其他途径解决了), 不过用 PyTorch 的时候, 会对这种动态的 RNN 有更好的理解。而且 Tensorflow 的高度工业化, 它的底层代码很难看懂, Pytorch 好那么一点点, 如果深入 PytorchAPI, 至少能比看 Tensorflow 多看懂一点点 Pytorch 的底层在干啥。

五.Pytorch有哪些常用工具包?

  • torch :类似 NumPy 的张量库,强 GPU 支持 ;   
  • torch.autograd :基于 tape 的自动区别库,支持 torch 之中的所有可区分张量运行;   
  • torch.nn :为最大化灵活性未涉及、与 autograd 深度整合的神经网络库;   
  • torch.optim:与 torch.nn 一起使用的优化包,包含 SGD、RMSProp、LBFGS、Adam 等标准优化方式;
  • torch.multiprocessing: python 多进程并发,进程之间 torch Tensors 的内存共享;   
  • torch.utils:数据载入器。具有训练器和其他便利功能;   
  • torch.legacy(.nn/.optim) :处于向后兼容性考虑,从 Torch 移植来的 legacy 代码;

到此这篇关于pytorch简介的文章就介绍到这了,更多相关pytorch简介内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
使用Python判断IP地址合法性的方法实例
Mar 13 Python
python中requests模块的使用方法
Apr 08 Python
人生苦短我用python python如何快速入门?
Mar 12 Python
利用pandas将numpy数组导出生成excel的实例
Jun 14 Python
Flask实现图片的上传、下载及展示示例代码
Aug 03 Python
pyqt5让图片自适应QLabel大小上以及移除已显示的图片方法
Jun 21 Python
python scatter函数用法实例详解
Feb 11 Python
Django values()和value_list()的使用
Mar 31 Python
Python基于smtplib模块发送邮件代码实例
May 29 Python
keras 获取某层的输入/输出 tensor 尺寸操作
Jun 10 Python
如何利用python之wxpy模块玩转微信
Aug 17 Python
pycharm 使用anaconda为默认环境的操作
Feb 05 Python
Python远程linux执行命令实现
Nov 11 #Python
python 实现简单的计算器(gui界面)
Nov 11 #Python
python海龟绘图之画国旗实例代码
Nov 11 #Python
python 实现倒计时功能(gui界面)
Nov 11 #Python
windows+vscode安装paddleOCR运行环境的步骤
Nov 11 #Python
Django基于Models定制Admin后台实现过程解析
Nov 11 #Python
Django Admin后台模型列表页面如何添加自定义操作按钮
Nov 11 #Python
You might like
php Ubb代码编辑器函数代码
2012/07/05 PHP
php的ZipArchive类用法实例
2014/10/20 PHP
php截取字符串函数分享
2015/02/02 PHP
php session实现多级目录存放实现代码
2016/02/03 PHP
PHP开发中解决并发问题的几种实现方法分析
2017/11/13 PHP
详解Laravel设置多态关系模型别名的方式
2019/10/17 PHP
ExtJs使用IFrame的实现代码
2010/03/24 Javascript
JQuery 操作select标签实现代码
2010/05/14 Javascript
Js动态添加复选框Checkbox的实例方法
2013/04/08 Javascript
图片翻转效果具体实现代码
2014/01/09 Javascript
jquery mobile的触控点击事件会多次触发问题的解决方法
2014/05/08 Javascript
基于javascript的JSON格式页面展示美化方法
2014/07/02 Javascript
轻松学习jQuery插件EasyUI EasyUI创建菜单与按钮
2015/11/30 Javascript
基于Bootstrap的Metronic框架实现条码和二维码的生成及打印处理操作
2016/08/29 Javascript
Vue axios 中提交表单数据(含上传文件)
2017/07/06 Javascript
深入探究angular2 UI组件之primeNG用法
2017/07/26 Javascript
详解如何构建一个Angular6的第三方npm包
2018/09/07 Javascript
jQuery Migrate 插件用法实例详解
2019/05/22 jQuery
mpvue微信小程序开发之实现一个弹幕评论
2019/11/24 Javascript
详解vue中在循环中使用@mouseenter 和 @mouseleave事件闪烁问题解决方法
2020/04/07 Javascript
ant-design-vue 时间选择器赋值默认时间的操作
2020/10/27 Javascript
python获取指定时间差的时间实例详解
2017/04/11 Python
分享一个可以生成各种进制格式IP的小工具实例代码
2017/07/28 Python
Python实现希尔排序算法的原理与用法实例分析
2017/11/23 Python
Python实现简单网页图片抓取完整代码实例
2017/12/15 Python
python 使用xlsxwriter循环向excel中插入数据和图片的操作
2021/01/01 Python
CSS3的 fit-content实现水平居中
2017/09/07 HTML / CSS
北美最大的手工艺品零售商之一:Michaels Stores
2019/02/27 全球购物
应届毕业生求职信范例分享
2013/12/17 职场文书
数控机械专业个人的自我评价
2014/01/02 职场文书
写给女朋友的道歉信
2014/01/08 职场文书
食品厂厂长岗位职责
2014/01/30 职场文书
建设工程授权委托书
2014/09/22 职场文书
党员转正党支部意见
2015/06/02 职场文书
python 统计代码耗时的几种方法分享
2021/04/02 Python
go语言求任意类型切片的长度操作
2021/04/26 Golang