使用pytorch进行图像的顺序读取方法


Posted in Python onJuly 27, 2018

产生此次实验的原因:当我使用pytorch进行神经网络的训练时,需要每次向CNN传入一组图像,并且这些图片的存放位置是在两个文件夹中:

A文件夹:图片1a,图片2a,图片3a……图片1000a

B文件夹:图片1b, 图片2b,图片3b……图片1000b

所以在每个循环里,我都希望能从A中取出图片Na,同时从B文件夹中取出对应的图片Nb。

测试一:通过pytorch官方文档中的dataloader搭配python中的迭代器iterator

dataset = dset.ImageFolder( 
 root='./folder1', 
 transform=transforms.Compose([ 
  transforms.ToTensor(), 
  transforms.Normalize((0.5,0.5,0.5), (0.5,0.5,0.5)), # bring images to (-1,1) 
 ]) 
) 
dataloader1 = torch.utils.data.DataLoader(dataset, batch_size=opt.batchSize, shuffle=True, num_workers=opt.workers) 
iterator1 = iter(dataloader1)
for i in range(1,1001):
data = iterator1.next() 
data2 = iterator2.next()

将两个dataloader当作数据集,然后分别调用迭代器iter(),然后在每次调用的时候使用next()来得到数据。

测试一下:将每次读入的图像输出,不对!发现图像并不是按照图像1,图像2,图像3......这样顺序读取的,而是很奇怪的顺序。所以为了要顺序读取数据,我们需要使用别的方法。

测试一的实验结果:此路不通!

from PIL import Image
pathDir = os.listdir('./folder') #获取文件夹内所有文件的名称,生成数组 
 pathDir.sort() #对所有文件名进行排序
 for allDir in pathDir: 
 child = os.path.join('%s/%s' % ('./folder', allDir))#合成文件名 
 fopen = Image.open(child).convert('RGB') #通过PIL读取文件
 transform_list = [transforms.ToTensor(), 
    transforms.Normalize((0.5, 0.5, 0.5), 
  (0.5, 0.5, 0.5))] 
 transform = transforms.Compose(transform_list)#将PIL格式的文件转换成 tensor
 image = transform(fopen) #转换

测试二:首先得到文件夹下的所有文件名,将文件名数组做sort()排序,然后每次通过文件名读取图像。

输出每次读入的图片,发现每次排序不正确,它的排序方法是图片1,图片10,图片100……

与我们的期望不一样,所以这种方法也不对(可以重写sort函数来进行自定义的排序,这里不做深入探究)

测试二的实验结果:此路或许可通!

测试三:通过自己构造每次访问的文件名来访问

for i in range(1,1001): 
 drain = irain.next() 
 dnorain = iground.next() 
 drain = os.path.join('%s/图像%s' % ('./rainy_img', i)) #跟上面一样,不过因为已经知道文件的取名顺序,所以拼出需要访问的文件名
 fopen = Image.open(drain).convert('RGB') 
 drain = transform(fopen) 
 print(drain)

测试三的实验结果:此路畅通无阻!

以上这篇使用pytorch进行图像的顺序读取方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python 随机生成中文验证码的实例代码
Mar 20 Python
Python多线程编程(八):使用Event实现线程间通信
Apr 05 Python
详解在Python程序中使用Cookie的教程
Apr 30 Python
Python实现数据库编程方法详解
Jun 09 Python
解决Python2.7读写文件中的中文乱码问题
Apr 12 Python
Python动态导入模块的方法实例分析
Jun 28 Python
python3 面向对象__类的内置属性与方法的实例代码
Nov 09 Python
pandas.read_csv参数详解(小结)
Jun 21 Python
python将excel转换为csv的代码方法总结
Jul 03 Python
pandas数据处理进阶详解
Oct 11 Python
哈工大自然语言处理工具箱之ltp在windows10下的安装使用教程
May 07 Python
利用python绘制正态分布曲线
Jan 04 Python
PyTorch读取Cifar数据集并显示图片的实例讲解
Jul 27 #Python
pytorch 数据集图片显示方法
Jul 26 #Python
mac安装pytorch及系统的numpy更新方法
Jul 26 #Python
浅谈pytorch和Numpy的区别以及相互转换方法
Jul 26 #Python
pytorch: tensor类型的构建与相互转换实例
Jul 26 #Python
pytorch中tensor的合并与截取方法
Jul 26 #Python
Python爬虫框架Scrapy常用命令总结
Jul 26 #Python
You might like
PHP新手上路(八)
2006/10/09 PHP
php通过array_merge()函数合并两个数组的方法
2015/03/18 PHP
PHP函数实现从一个文本字符串中提取关键字的方法
2015/07/01 PHP
PHP Header失效的原因分析及解决方法
2016/11/16 PHP
关于PHP中协程和阻塞的一些理解与思考
2017/08/11 PHP
IE/FireFox具备兼容性的拖动代码
2007/08/13 Javascript
原生js的弹出层且其内的窗口居中
2014/05/14 Javascript
详谈JavaScript 匿名函数及闭包
2014/11/14 Javascript
js采用concat和sort将N个数组拼接起来的方法
2016/01/21 Javascript
javascript获取select标签选中的值
2016/06/04 Javascript
EasyUI为Numberbox添加blur事件的方法
2017/03/05 Javascript
node.js+jQuery实现用户登录注册AJAX交互
2017/04/28 jQuery
简单实现JavaScript弹幕效果
2020/08/27 Javascript
详解用Node.js实现Restful风格webservice
2017/09/29 Javascript
node.js的exports、module.exports与ES6的export、export default深入详解
2017/10/26 Javascript
vue 之 css module的使用方法
2018/12/04 Javascript
解决layer图标icon不加载的问题
2019/09/04 Javascript
让mocha支持ES6模块的方法实现
2020/01/14 Javascript
JavaScript检测浏览器是否支持CSS变量代码实例
2020/04/03 Javascript
JS代码实现页面切换效果
2021/01/10 Javascript
python清除函数占用的内存方法
2018/06/25 Python
python使用Turtle库绘制动态钟表
2018/11/19 Python
python 实现selenium断言和验证的方法
2019/02/13 Python
Python Numpy数组扩展repeat和tile使用实例解析
2019/12/09 Python
Pytorch GPU显存充足却显示out of memory的解决方式
2020/01/13 Python
python3 sleep 延时秒 毫秒实例
2020/05/04 Python
墨西哥皇宫度假村预订:Palace Resorts
2018/06/16 全球购物
描述内存分配方式以及它们的区别
2016/10/15 面试题
2014旅游局党组书记党建工作汇报材料
2014/11/02 职场文书
幼儿园大班毕业评语
2014/12/31 职场文书
庆七一晚会主持词
2015/06/30 职场文书
新闻稿件写作技巧
2015/07/18 职场文书
公司客户答谢酒会祝酒词
2015/08/11 职场文书
MySQL数据库压缩版本安装与配置详细教程
2021/05/21 MySQL
详解Python flask的前后端交互
2022/03/31 Python
JS开发前端团队展示控制器来为成员引流
2022/08/14 Javascript