深入学习python的yield和generator


Posted in Python onMarch 10, 2016

前言
没有用过的东西,没有深刻理解的东西很难说自己会,而且被别人一问必然破绽百出。虽然之前有接触过python协程的概念,但是只是走马观花,这两天的一次交谈中,别人问到了协程,顿时语塞,死活想不起来曾经看过的东西,之后突然想到了yield,但为时已晚,只能说概念不清,所以本篇先缕缕python的生成器和yield关键字。

什么是生成器
1、生成器是一个特殊的程序,可以被用作控制循环的迭代行为
2、生成器类似于返回值为数组的一个函数,这个函数可以接收参数,可以被调用,但是,不同于一般的函数会一次性返回包含了所有数值的数组,生成器一次只产生一个值,这样消耗的内粗数量大大减少,而且允许调用函数可以很快的开始处理前几个返回值。因此,生成器看起来像一个函数但是表现的却像一个迭代器。
python中的生成器
python提供了两种基本的方式。

1)、生成器函数:也是用def来定义,利用关键字yield一次返回一个结果,阻塞,重新开始
2)、生成器表达式:返回一个对象,这个对象只有在需要的时候才产生结果
下面详细讲解。

1、生成器函数
为什么叫生成器函数?因为他随着时间的推移生成了一个数值队列。一般的函数在执行完毕之后会返回一个值然后退出,但是生成器函数会自动挂起,然后重新拾起继续执行,他会利用yield关键字关起函数,给调用者返回一个值,同时保留了当前的足够多的状态,可以使函数继续执行。生成器和迭代协议是密切相关的,可迭代的对象都有一个__next()__成员方法,这个方法要么返回迭代的下一项,要么引起异常结束迭代。
为了支持迭代协议,拥有yield语句的函数被编译为生成器,这类函数被调用时返回一个生成器对象,返回的对象支持迭代接口,即成员方法__next()__继续从中断处执行执行。
看下面的例子:

# codes
def create_counter(n):
 print "create counter"
 while True:
  yield n
  print 'increment n'
  n += 1

cnt = create_counter(2)
print cnt
print next(cnt)
print next(cnt)

# output
<generator object create_counter at 0x0000000001D141B0>
create counter
2
increment n
3

分析一下这个例子:

  • 在create_counter函数中出现了关键字yield,预示着这个函数每次只产生一个结果值,这个函数返回一个生成器(通过第一行输出可以看出来),用来产生连续的n值
  • 在创造生成器实例的时候,只需要像普通函数一样调用就可以,但是这个调用却不会执行这个函数,这个可以通过输出看出来
  • next()函数将生成器对象作为自己的参数,在第一次调用的时候,他执行了create_counter()函数到yield语句,返回产生的值2
  • 我们重复的调用next()函数,每次他都会从上次被挂起的地方开始执行,直到再次遇到了yield关键字

为了更加深刻的理解,我们再举一个例子。

#coding
def cube(n):
 for i in range(n):
  yield i ** 3

for i in cube(5):
 print i

#output
0
1
8
27
64

所以从理解函数的角度出发我们可以将yield类比为return,但是功能确实完全不同,在for循环中,会自动遵循迭代规则,每次调用next()函数,所以上面的结果不难理解。

2、生成器表达式
生成器表达式来自于迭代和列表解析的组合,关于列表解析的概念和用法可以参见我之前的博客,生成器表达式和列表解析类似,但是他使用尖括号而不是方括号括起来的。如下代码:

>>> # 列表解析生成列表
>>> [ x ** 3 for x in range(5)]
[0, 1, 8, 27, 64]
>>> 
>>> # 生成器表达式
>>> (x ** 3 for x in range(5))
<generator object <genexpr> at 0x000000000315F678>
>>> # 两者之间转换
>>> list(x ** 3 for x in range(5))
[0, 1, 8, 27, 64]

就操作而言,生成器表如果使用大量的next()函数会显得十分不方便,for循环会自动出发next函数,所以可以按下面方式使用:

>>> for n in (x ** 3 for x in range(5)):
 print('%s, %s' % (n, n * n))

 
0, 0
1, 1
8, 64
27, 729
64, 4096
>>>

两者比较
一个迭代既可以被写成生成器函数,也可以被协程生成器表达式,均支持自动和手动迭代。而且这些生成器只支持一个active迭代,也就是说生成器的迭代器就是生成器本身。

总结
想起了初中时候老师经常说的,眼观千遍,不如手动一遍。

Python 相关文章推荐
python获取标准北京时间的方法
Mar 24 Python
简单的Python的curses库使用教程
Apr 11 Python
介绍Python中内置的itertools模块
Apr 29 Python
python使用socket进行简单网络连接的方法
Apr 29 Python
python中while循环语句用法简单实例
May 07 Python
Python登录并获取CSDN博客所有文章列表代码实例
Dec 28 Python
Python中sort和sorted函数代码解析
Jan 25 Python
Python装饰器模式定义与用法分析
Aug 06 Python
Python引用计数操作示例
Aug 23 Python
Django使用Jinja2模板引擎的示例代码
Aug 09 Python
Python变量格式化输出实现原理解析
Aug 06 Python
pycharm无法安装cv2模块问题
May 20 Python
Python中random模块生成随机数详解
Mar 10 #Python
python生成器表达式和列表解析
Mar 10 #Python
python迭代器与生成器详解
Mar 10 #Python
Python装饰器基础详解
Mar 09 #Python
Python求算数平方根和约数的方法汇总
Mar 09 #Python
Python实现Linux命令xxd -i功能
Mar 06 #Python
基于Python实现一个简单的银行转账操作
Mar 06 #Python
You might like
PHP中ob_start函数的使用说明
2013/11/11 PHP
自编函数解决pathinfo()函数处理中文问题
2014/11/03 PHP
php绘制一条弧线的方法
2015/01/24 PHP
PHP7安装Redis扩展教程【Linux与Windows平台】
2016/09/30 PHP
Laravel学习笔记之Artisan命令生成自定义模板的方法
2018/11/22 PHP
Firefox div高度自适应
2009/04/28 Javascript
jquery 操作DOM的基本用法分享
2012/04/05 Javascript
jQuery+Ajax实现限制查询间隔的方法
2016/06/07 Javascript
微信小程序 网络API 上传、下载详解
2016/11/09 Javascript
angularjs过滤器--filter与ng-repeat配合有奇效
2017/04/20 Javascript
使用Bootstrap4 + Vue2实现分页查询的示例代码
2017/12/21 Javascript
vue2.0学习之axios的封装与vuex介绍
2018/05/28 Javascript
利用JS动态生成隔行换色HTML表格的两种方法
2018/10/09 Javascript
详解react阻止无效重渲染的多种方式
2018/12/11 Javascript
Python函数式编程指南(一):函数式编程概述
2015/06/24 Python
详解Numpy中的广播原则/机制
2018/09/20 Python
python 定时器,实现每天凌晨3点执行的方法
2019/02/20 Python
django admin.py 外键,反向查询的实例
2019/07/26 Python
Python Web程序搭建简单的Web服务器
2019/07/31 Python
Python解析json代码实例解析
2019/11/25 Python
python GUI库图形界面开发之PyQt5信号与槽事件处理机制详细介绍与实例解析
2020/03/08 Python
python3+opencv 使用灰度直方图来判断图片的亮暗操作
2020/06/02 Python
Python利用Pillow(PIL)库实现验证码图片的全过程
2020/10/04 Python
详解pandas中利用DataFrame对象的.loc[]、.iloc[]方法抽取数据
2020/12/13 Python
简洁自适应404页面HTML好看的404源码
2020/12/16 HTML / CSS
全球最大化妆品零售网站:SkinStore
2020/10/24 全球购物
2013年入党人员的自我鉴定
2013/10/25 职场文书
广播节目策划方案
2014/05/23 职场文书
大学第二课堂活动总结
2014/07/08 职场文书
十佳好少年事迹材料
2014/08/21 职场文书
招标授权委托书样本
2014/09/23 职场文书
2014年政协工作总结
2014/12/09 职场文书
2014年药品销售工作总结
2014/12/16 职场文书
Python常遇到的错误和异常
2021/11/02 Python
电脑无法安装Windows 11怎么办?无法安装Win11的解决方法
2021/11/21 数码科技
利用For循环遍历Python字典的三种方法实例
2022/03/25 Python