tensorflow的计算图总结


Posted in Python onJanuary 12, 2020

计算图

在 TensorFlow 中用计算图来表示计算任务。 计算图,是一种有向图,用来定义计算的结构,实际上就是一系列的函数的组合。 用图的方式,用户通过用一些简单的容易理解的数学函数组件,就可以建立一个复杂的运算

在 TensorFlow 使用图,分为两步:建立计算图 和 执行图

图,在形式上由结点 Nodes 和边 Edges 组成。 - Nodes,用圆圈表示,代表一些对数据进行的计算或者操作(Operation)。 - Edges,用箭头表示,是操作之间传递的实际值(Tensor)

建立图

graph = tf.Graph()

访问上下文管理器

with graph.as_default():

用 with 表示我们用 context manager 告诉 TensorFlow 我们要向某个具体的 graph 添加 Op 了

执行图图必须在会话(Session)里被启动,会话(Session)将图的 op 分发到 CPU 或 GPU 之类的设备上,同时提供执行 op 的方法,这些方法执行后,将产生的张量(tensor)返回

## 开启session

sess = tf.Session()`

一旦开启了 Session,就可以用 run() 来计算想要的 Tensor 的值

用完会话,记得关掉

sess.close()

Fetches

fetches是session.run()的一个参数,它可以接收任何一个我们想要执行的op或者Tensor,或者他们对应的list结构。

  • 如果是tensor,那么session.run()输出的就是一个Numpy 数组
  • 如果是Op,那么session.run()输出的就是None

比如:sess.run(b)就是告诉Session要把计算b所需要的结点都找到按顺序执行并且输出结果。

全局变量初始化

tf.global_variables_initializer()

表示将所有定义的Variable变量都准备好,以便于后续使用,这个Op也可以传给给session.run.比如:

init = tf.global_variables_initializer()
…
sess.run(init)

张量Tensor和OP

在tensorflow中使用tensor来表示所有的数据结构,计算图中操作Op结点之间传递的都是Tensor

  • 定义tensor时可以直接使用numpy传递给Op结点,因为tensorflow的Op可以将python的数据类型转化为tensor包括numbers,booleans,strings或者list。
  • 图中的任何结点都叫做Operation简称:Op
  • 每个Op的输出会被传递到其他Op或者sess.run()

Variable

Variable,变量是维护图执行过程中的状态信息的,需要它来保持和更新参数数值,是需要动态调整的。

  • Tensor 和Operation都是一成不变的,而Variable是可以随着时间改变的
  • Variables可以用在任何使用tensor的Op中,它当前的值就会被传递给使用它的Op
  • Variable通常的初始值是一些很大的0,1或者随机值tensor,或者内置op:tf.zeros(),tf.ones()等
  • Variable在graph中,状态由session管理,也是在session中进行初始化,session可以追踪variable的当前值是多少。
  • session可以只初始化一部分variable
  • 使用tf.variables_initializer,传入初始化变量列表
  • variable的值是可以被改变的
  • 比如使用variable.assign(variable),或者variable.assign_add(1)
  • 每个session维护独立的variable变量值,同一个variable不同的session值可以是不同的。
  • 当各种Optimizer优化器训练机器学习模型时,variable就会随之改变,当使用variable中的trainable=False属性可以不被Optimizer改变。

name_scopes

  • name_sopes可以用来管理图,可以把一组Op放到一个组块中

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
利用python求相邻数的方法示例
Aug 18 Python
python编程之requests在网络请求中添加cookies参数方法详解
Oct 25 Python
浅谈Python中带_的变量或函数命名
Dec 04 Python
Python操作MySQL数据库的方法
Jun 20 Python
python tornado微信开发入门代码
Aug 24 Python
Python中实现输入超时及如何通过变量获取变量名
Jan 18 Python
PyCharm取消波浪线、下划线和中划线的实现
Mar 03 Python
Python魔术方法专题
Jun 19 Python
python 无损批量压缩图片(支持保留图片信息)的示例
Sep 22 Python
python 从list中随机取值的方法
Nov 16 Python
Python socket如何解析HTTP请求内容
Feb 12 Python
Python OpenCV之常用滤波器使用详解
Apr 07 Python
python利用JMeter测试Tornado的多线程
Jan 12 #Python
Django 批量插入数据的实现方法
Jan 12 #Python
python处理RSTP视频流过程解析
Jan 11 #Python
pyftplib中文乱码问题解决方案
Jan 11 #Python
python实现实时视频流播放代码实例
Jan 11 #Python
python3下pygame如何实现显示中文
Jan 11 #Python
Pytorch 实现sobel算子的卷积操作详解
Jan 10 #Python
You might like
纯真IP数据库的应用 IP地址转化成十进制
2009/06/14 PHP
一些 PHP 管理系统程序中的后门
2009/08/05 PHP
php使用json_encode对变量json编码
2014/04/07 PHP
php数组中包含中文的排序方法
2014/06/03 PHP
PHP遍历文件夹与文件类及处理类用法实例
2014/09/23 PHP
PHP实现图片自动清理的方法
2015/07/08 PHP
wordpress网站转移到本地运行测试的方法
2017/03/15 PHP
Laravel 自带的Auth验证登录方法
2019/09/30 PHP
[IE&FireFox兼容]JS对select操作
2007/01/07 Javascript
jquery简单体验
2007/01/10 Javascript
详解JS 比较两个Json对象的值是否相等的实例
2013/11/20 Javascript
JS中window.open全屏命令解析及使用示例
2013/12/11 Javascript
jQuery如何实现点击页面获得当前点击元素的id或其他信息
2014/01/09 Javascript
jquery实现邮箱自动补全功能示例分享
2014/02/17 Javascript
Jquery实现Div上下移动示例
2014/04/23 Javascript
AngularJS实现表单手动验证和表单自动验证
2015/12/09 Javascript
探究JavaScript函数式编程的乐趣
2015/12/14 Javascript
JavaScript实现翻页功能(附效果图)
2017/02/16 Javascript
使用canvas进行图像编辑的实例
2017/08/29 Javascript
JavaScript判断输入是否为数字类型的方法总结
2017/09/28 Javascript
在移动端使用vue-router和keep-alive的方法示例
2018/12/02 Javascript
uni-app 自定义底部导航栏的实现
2020/12/11 Javascript
django1.11.1 models 数据库同步方法
2018/05/30 Python
windows下pycharm安装、创建文件、配置默认模板
2018/07/31 Python
Python从ZabbixAPI获取信息及实现Zabbix-API 监控的方法
2018/09/17 Python
Python判断有效的数独算法示例
2019/02/23 Python
python对象转字典的两种实现方式示例
2019/11/07 Python
基于python图书馆管理系统设计实例详解
2020/08/05 Python
标准导师推荐信(医学类)
2013/10/28 职场文书
大学生应聘导游自荐信
2014/06/02 职场文书
党员自我评议对照检查材料
2014/09/27 职场文书
2014年技术工作总结范文
2014/11/20 职场文书
2015年文秘个人工作总结
2015/10/14 职场文书
如何使用PostgreSQL进行中文全文检索
2021/05/27 PostgreSQL
pd.DataFrame中的几种索引变换的实现
2022/06/16 Python
Java实现超大Excel文件解析(XSSF,SXSSF,easyExcel)
2022/07/15 Java/Android