浅谈TensorFlow之稀疏张量表示


Posted in Python onJune 30, 2020

对于多维的稀疏数据,TensorFlow 支持 SparseTensor 表示。

官方文档地址:https://tensorflow.google.cn/api_guides/python/sparse_ops

构造稀疏张量

SparseTensor(indices, values, dense_shape)

indices是一个维度为(n, ndims)的2-D int64张量,指定非零元素的位置。比如indices=[[1,3], [2,4]]表示[1,3]和[2,4]位置的元素为非零元素。n表示非零元素的个数,ndims表示构造的稀疏张量的维数。

values是一个维度为(N)的1-D张量,对应indices所指位置的元素值。

dense_shape是一个维度为(ndims)的1-D张量,代表稀疏张量的维度。

tf.SparseTensor(indices=[[0, 0], [1, 2]], values=[1, 2], dense_shape=[3, 4])
>>
[[1, 0, 0, 0]
 [0, 0, 2, 0]
 [0, 0, 0, 0]]

转换

将稀疏张量转为普通矩阵。

tf.sparse_to_dense(
sparse_indices,
output_shape,
sparse_values,
default_value=0,
validate_indices=True,
name=None
)

sparse_indices是那些非零元素的位置。

sparse_indices是实数,该矩阵为一维矩阵,指定一维矩阵的某一个元素位置

sparse_indices是向量,该矩阵为一维矩阵,指定一维矩阵的多个元素

sparse_indices是二维矩阵,该矩阵为多维矩阵,指定多维矩阵的多个元素。

output_shape是矩阵的维度。

sparse_value是对应sparse_indices所指位置的元素值。

default_value是未指定元素的默认值,一般为0。

import tensorflow as tf 

mysparse_indices = tf.constant(5)
mymatrix = tf.sparse_to_dense(mysparse_indices, [11], 10)
with tf.Session() as sess:
  result = sess.run(mymatrix)
  print(result)

//[0 0 0 0 0 10 0 0 0 0 0]

SparseTensor和SparseTensorValue

两者的参数相同。

在计算图中定义稀疏张量时,使用SparseTensor;在feed数据时使用SparseTensorValue。

补充知识:彻底搞懂tensorflow里的张量(tensor)

1.引言

学习卷积神经网络(CNN)的时候,最重要的就是搞清楚网络各层的神经元输入输出的数据结构(即张量)。如果仅用线性代数所学的矩阵,向量来理解张量,一定会搞得一头雾水。因此很有必要搞清楚张量是什么东西。

首先明确:张量最主要的两个参数: rank(阶,或维数)、shape(形状)

2.什么是张量

下图是张量的直观的示意:张量是标量、向量、矩阵的集合和推广。

浅谈TensorFlow之稀疏张量表示

3.什么是rank

rank 数学实例 Python 例子
0 纯数字(只有大小) s=352
1 向量(1个基本向量) v = [1.1, 2.2, 3.3]
2 矩阵(两个基本向量) m = [[1, 2, 3], [4, 5, 6], [7, 8, 9]]
3 数据立体(3个基本向量) t = [ [[2], [4], [6]] , [[8], [10], [12]] , [[14], [16], [18]] ]
n n个基本向量

可以发现:可以数括号[ ]的层数来确定张量的维数(阶)

什么是基本向量

基本向量(basis vector):几个basis vector就是从几个方面来描述一组数据。

举例说明:

一维张量:概念和向量完全一样。图中的白线就是一个向量,当然了,在三维空间向量有三个分向量(分别是x方向、y方向、z方向)

浅谈TensorFlow之稀疏张量表示

二维张量:对下面这个长方形施加一个力,怎么来描述?

我们把可以把这个长方形就xoy、xoz、yoz三个平面截下来,之后在每一个平面上再分析受力情况。

两个basis vector出来了:一个用来描述截面方向(这是一个三维向量);另一个用来描述此截面的受力情况(当然这也是一个三维向量)

浅谈TensorFlow之稀疏张量表示

那么我们可以用作用在yoz平面(此平面的法向量是x轴单位向量),受力的x轴分量用Pxx来表示,以此推广到含有9个元素的矩阵,这就是一个2维张量。

换句话来解释:在一个三维空间,我们从2个基本向量来描述一个东西,那么这个张量所含有的元素个数应该是3的2次方等于9个。每个元素能得到2个基本向量的注释。这就是一个2维的张量

浅谈TensorFlow之稀疏张量表示

三维张量:

继续推广,每个元素有三个基本向量注释。三维的张量形状就像是叠起来的矩阵。

浅谈TensorFlow之稀疏张量表示

最后品一品这句话

浅谈TensorFlow之稀疏张量表示

4.什么是shape

shape指明每一层有多少个元素。

比如[2,3,4]是指第一层2个元素,第二层3个元素,第三层4个元素,通过这个我们就可以知道这个张量一共有2 × 3 × 4=24 个元素。而且它有3层,因此可以知道这个张量的rank=3

注意:读取元素,从外括号往内括号读

下面这个代码也能说明问题。

import tensorflow as tf
# 定义了一个张量,有6个元素,设置他的形状是[2.3]
a = tf.constant([1, 2, 3, 4, 5, 6], shape=[2,3])
with tf.Session() as session:
  print(session.run(a))

打印的结果是

[[1 2 3] [4 5 6]]

以上这篇浅谈TensorFlow之稀疏张量表示就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python bsddb模块操作Berkeley DB数据库介绍
Apr 08 Python
python定时检查某个进程是否已经关闭的方法
May 20 Python
Python的Flask框架中SQLAlchemy使用时的乱码问题解决
Nov 07 Python
从CentOS安装完成到生成词云python的实例
Dec 01 Python
Python类的继承和多态代码详解
Dec 27 Python
python3+PyQt5实现柱状图
Apr 24 Python
pandas 选择某几列的方法
Jul 03 Python
在python中使用xlrd获取合并单元格的方法
Dec 26 Python
Python使用MyQR制作专属动态彩色二维码功能
Jun 04 Python
Django的Modelforms用法简介
Jul 27 Python
基于logstash实现日志文件同步elasticsearch
Aug 06 Python
OpenCV实现常见的四种图像几何变换
Apr 01 Python
tensorflow图像裁剪进行数据增强操作
Jun 30 #Python
浅谈tensorflow 中的图片读取和裁剪方式
Jun 30 #Python
Python openpyxl模块实现excel读写操作
Jun 30 #Python
tensorflow下的图片标准化函数per_image_standardization用法
Jun 30 #Python
Python的控制结构之For、While、If循环问题
Jun 30 #Python
关于tensorflow softmax函数用法解析
Jun 30 #Python
基于tensorflow for循环 while循环案例
Jun 30 #Python
You might like
PHP合并数组+与array_merge的区别分析
2010/08/01 PHP
php从右向左/从左向右截取字符串的实现方法
2011/11/28 PHP
微信支付开发动态链接Native支付
2016/07/12 PHP
JavaScript的面向对象(一)
2006/11/09 Javascript
jQuery向上遍历DOM树之parents(),parent(),closest()之间的区别
2013/12/02 Javascript
Java/JS获取flash高宽的具体方法
2013/12/27 Javascript
深入理解javascript原型链和继承
2014/09/23 Javascript
leaflet的开发入门教程
2016/11/17 Javascript
js实现鼠标左右移动,图片也跟着移动效果
2017/01/25 Javascript
详解从NodeJS搭建中间层再谈前后端分离
2018/11/13 NodeJs
Vue项目部署在Spring Boot出现页面空白问题的解决方案
2018/11/26 Javascript
鸿蒙系统中的 JS 开发框架
2020/09/18 Javascript
javascript canvas封装动态时钟
2020/09/30 Javascript
js获取图片的base64编码并压缩
2020/12/05 Javascript
如何在vue-cli中使用css-loader实现css module
2021/01/07 Vue.js
Python使用time模块实现指定时间触发器示例
2017/05/18 Python
一条命令解决mac版本python IDLE不能输入中文问题
2018/05/15 Python
python面向对象多线程爬虫爬取搜狐页面的实例代码
2018/05/31 Python
Windows下将Python文件打包成.EXE可执行文件的方法
2018/08/03 Python
Python正则表达式指南 推荐
2018/10/09 Python
解决pycharm安装后代码区不能编辑的问题
2018/10/28 Python
在交互式环境中执行Python程序过程详解
2019/07/12 Python
Django  ORM 练习题及答案
2019/07/19 Python
Django框架组成结构、基本概念与文件功能分析
2019/07/30 Python
Python CSS选择器爬取京东网商品信息过程解析
2020/06/01 Python
英国家庭珠宝商:T. H. Baker
2018/02/08 全球购物
沙龙级头发造型工具:FOXYBAE
2018/07/01 全球购物
应届生求职自荐信范文
2014/04/07 职场文书
公休请假条
2014/04/11 职场文书
2014医学院领导干部四风对照检查材料思想汇报
2014/09/16 职场文书
2014年第四季度入党积极分子思想汇报(十八届四中全会)
2014/11/03 职场文书
2014年行风建设工作总结
2014/12/01 职场文书
违反工作规定检讨书范文
2014/12/14 职场文书
工作自我评价范文
2019/03/21 职场文书
pytorch显存一直变大的解决方案
2021/04/08 Python
oracle删除超过N天数据脚本的方法
2022/02/28 Oracle