pytorch简介


Posted in Python onNovember 11, 2020

一.Pytorch是什么?

  Pytorch是torch的python版本,是由Facebook开源的神经网络框架,专门针对 GPU 加速的深度神经网络(DNN)编程。Torch 是一个经典的对多维矩阵数据进行操作的张量(tensor )库,在机器学习和其他数学密集型应用有广泛应用。与Tensorflow的静态计算图不同,pytorch的计算图是动态的,可以根据计算需要实时改变计算图。但由于Torch语言采用 Lua,导致在国内一直很小众,并逐渐被支持 Python 的 Tensorflow 抢走用户。作为经典机器学习库 Torch 的端口,PyTorch 为 Python 语言使用者提供了舒适的写代码选择。

二.为什么选择 Pytorch?

 1.简洁:

  PyTorch的设计追求最少的封装,尽量避免重复造轮子。不像 TensorFlow 中充斥着session、graph、operation、name_scope、variable、tensor、layer等全新的概念,PyTorch 的设计遵循tensor→variable(autograd)→nn.Module 三个由低到高的抽象层次,分别代表高维数组(张量)、自动求导(变量)和神经网络(层/模块),而且这三个抽象之间联系紧密,可以同时进行修改和操作。 简洁的设计带来的另外一个好处就是代码易于理解。PyTorch的源码只有TensorFlow的十分之一左右,更少的抽象、更直观的设计使得PyTorch的源码十分易于阅读。

2.速度:

  PyTorch 的灵活性不以速度为代价,在许多评测中,PyTorch 的速度表现胜过 TensorFlow和Keras 等框架。框架的运行速度和程序员的编码水平有极大关系,但同样的算法,使用PyTorch实现的那个更有可能快过用其他框架实现的。

3.易用:

  PyTorch 是所有的框架中面向对象设计的最优雅的一个。PyTorch的面向对象的接口设计来源于Torch,而Torch的接口设计以灵活易用而著称,Keras作者最初就是受Torch的启发才开发了Keras。PyTorch继承了Torch的衣钵,尤其是API的设计和模块的接口都与Torch高度一致。PyTorch的设计最符合人们的思维,它让用户尽可能地专注于实现自己的想法,即所思即所得,不需要考虑太多关于框架本身的束缚。

4.活跃的社区:

  PyTorch 提供了完整的文档,循序渐进的指南,作者亲自维护的论坛 供用户交流和求教问题。Facebook 人工智能研究院对 PyTorch 提供了强力支持,作为当今排名前三的深度学习研究机构,FAIR的支持足以确保PyTorch获得持续的开发更新,不至于像许多由个人开发的框架那样昙花一现。

三.PyTorch 的架构是怎样的?

  PyTorch(Caffe2) 通过混合前端,分布式训练以及工具和库生态系统实现快速,灵活的实验和高效生产。PyTorch 和 TensorFlow 具有不同计算图实现形式,TensorFlow 采用静态图机制(预定义后再使用),PyTorch采用动态图机制(运行时动态定义)。PyTorch 具有以下高级特征:

  • 混合前端:新的混合前端在急切模式下提供易用性和灵活性,同时无缝转换到图形模式,以便在C ++运行时环境中实现速度,优化和功能。   
  • 分布式训练:通过利用本地支持集合操作的异步执行和可从Python和C ++访问的对等通信,优化了性能。   
  • Python优先: PyTorch为了深入集成到Python中而构建的,因此它可以与流行的库和Cython和Numba等软件包一起使用。  
  • 丰富的工具和库:活跃的研究人员和开发人员社区建立了丰富的工具和库生态系统,用于扩展PyTorch并支持从计算机视觉到强化学习等领域的开发。   
  • 本机ONNX支持:以标准ONNX(开放式神经网络交换)格式导出模型,以便直接访问与ONNX兼容的平台,运行时,可视化工具等。   
  • C++前端:C++前端是PyTorch的纯C++接口,它遵循已建立的Python前端的设计和体系结构。它旨在实现高性能,低延迟和裸机C++应用程序的研究。 使用GPU和CPU优化的深度学习张量库。

四.Pytorch 与 tensorflow 之间的差异在哪里?

  上面也将了PyTorch 最大优势是建立的神经网络是动态的, 对比静态的 Tensorflow, 它能更有效地处理一些问题, 比如说 RNN 变化时间长度的输出。各有各的优势和劣势。两者都是大公司发布的, Tensorflow(Google)宣称在分布式训练上下了很大的功夫, 那就默认 Tensorflow 在分布式训练上要超出 Pytorch(Facebook),还有tensorboard可视化工具, 但是 Tensorflow 的静态计算图使得在 RNN 上有一点点被动 (虽然它用其他途径解决了), 不过用 PyTorch 的时候, 会对这种动态的 RNN 有更好的理解。而且 Tensorflow 的高度工业化, 它的底层代码很难看懂, Pytorch 好那么一点点, 如果深入 PytorchAPI, 至少能比看 Tensorflow 多看懂一点点 Pytorch 的底层在干啥。

五.Pytorch有哪些常用工具包?

  • torch :类似 NumPy 的张量库,强 GPU 支持 ;   
  • torch.autograd :基于 tape 的自动区别库,支持 torch 之中的所有可区分张量运行;   
  • torch.nn :为最大化灵活性未涉及、与 autograd 深度整合的神经网络库;   
  • torch.optim:与 torch.nn 一起使用的优化包,包含 SGD、RMSProp、LBFGS、Adam 等标准优化方式;
  • torch.multiprocessing: python 多进程并发,进程之间 torch Tensors 的内存共享;   
  • torch.utils:数据载入器。具有训练器和其他便利功能;   
  • torch.legacy(.nn/.optim) :处于向后兼容性考虑,从 Torch 移植来的 legacy 代码;

到此这篇关于pytorch简介的文章就介绍到这了,更多相关pytorch简介内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
常见的在Python中实现单例模式的三种方法
Apr 08 Python
python提取字典key列表的方法
Jul 11 Python
Java多线程编程中ThreadLocal类的用法及深入
Jun 21 Python
Django实现表单验证
Sep 08 Python
Python Cookie 读取和保存方法
Dec 28 Python
Python谱减法语音降噪实例
Dec 18 Python
Pytorch根据layers的name冻结训练方式
Jan 06 Python
解决Tensorboard 不显示计算图graph的问题
Feb 15 Python
利用Python pandas对Excel进行合并的方法示例
Nov 04 Python
Python中Pyspider爬虫框架的基本使用详解
Jan 27 Python
详解python3 GUI刷屏器(附源码)
Feb 18 Python
浅析Python实现DFA算法
Jun 26 Python
Python远程linux执行命令实现
Nov 11 #Python
python 实现简单的计算器(gui界面)
Nov 11 #Python
python海龟绘图之画国旗实例代码
Nov 11 #Python
python 实现倒计时功能(gui界面)
Nov 11 #Python
windows+vscode安装paddleOCR运行环境的步骤
Nov 11 #Python
Django基于Models定制Admin后台实现过程解析
Nov 11 #Python
Django Admin后台模型列表页面如何添加自定义操作按钮
Nov 11 #Python
You might like
PHP.MVC的模板标签系统(四)
2006/09/05 PHP
php获取访问者IP地址汇总
2015/04/24 PHP
php、mysql查询当天,查询本周,查询本月的数据实例(字段是时间戳)
2017/02/04 PHP
PhpStorm2020 + phpstudyV8 +XDebug的教程详解
2020/09/17 PHP
ASP Json Parser修正版
2009/12/06 Javascript
基于jQuery的图片左右无缝滚动插件
2012/05/23 Javascript
推荐17个优美新鲜的jQuery的工具提示插件
2012/09/14 Javascript
JavaScript版TAB选项卡效果实例
2013/08/16 Javascript
使用javascript获取页面名称
2014/12/23 Javascript
js实现有时间限制消失的图片方法
2015/02/27 Javascript
输入法的回车与消息发送快捷键回车的冲突解决方法
2016/08/09 Javascript
纯JS焦点图特效实例(可一个页面多用)
2016/12/07 Javascript
JavaScript+HTML5实现的日期比较功能示例
2017/07/12 Javascript
vue.js异步上传文件前后端实现代码
2017/08/22 Javascript
详解Nuxt.js 实战集锦
2019/11/19 Javascript
JavaScript实现网页下拉菜单效果
2020/11/20 Javascript
python异步任务队列示例
2014/04/01 Python
python散点图实例之随机漫步
2018/08/27 Python
PyGame贪吃蛇的实现代码示例
2018/11/21 Python
pyqt实现.ui文件批量转换为对应.py文件脚本
2019/06/19 Python
浅谈在django中使用filter()(即对QuerySet操作)时踩的坑
2020/03/31 Python
Jupyter Notebook的连接密码 token查询方式
2020/04/21 Python
新手学习Python2和Python3中print不同的用法
2020/06/09 Python
Python用户自定义异常的实现
2020/12/25 Python
用Python实现职工信息管理系统
2020/12/30 Python
python爬虫实现爬取同一个网站的多页数据的实例讲解
2021/01/18 Python
matplotlib grid()设置网格线外观的实现
2021/02/22 Python
css3动画过渡实现鼠标跟随导航效果
2018/02/08 HTML / CSS
让IE可以变相支持CSS3选择器
2010/01/21 HTML / CSS
HTML5学习心得总结(推荐)
2016/07/08 HTML / CSS
2015庆祝七一建党节94周年活动总结
2015/03/20 职场文书
责任书范本大全
2015/05/11 职场文书
三严三实·严以用权心得体会
2016/01/12 职场文书
工人先锋号事迹材料(2016精选版)
2016/03/01 职场文书
详解Python小数据池和代码块缓存机制
2021/04/07 Python
教你使用Jenkins集成Harbor自动发布镜像
2022/04/03 Servers