python async with和async for的使用


Posted in Python onJune 20, 2019

网上async with和async for的中文资料比较少,我把PEP 492中的官方陈述翻译一下。

异步上下文管理器”async with”

异步上下文管理器指的是在enter和exit方法处能够暂停执行的上下文管理器。

为了实现这样的功能,需要加入两个新的方法:__aenter__ 和__aexit__。这两个方法都要返回一个 awaitable类型的值。

异步上下文管理器的一种使用方法是:

class AsyncContextManager:
  async def __aenter__(self):
    await log('entering context')

  async def __aexit__(self, exc_type, exc, tb):
    await log('exiting context')

新语法

异步上下文管理器使用一种新的语法:

async with EXPR as VAR:
  BLOCK

这段代码在语义上等同于:

mgr = (EXPR)
aexit = type(mgr).__aexit__
aenter = type(mgr).__aenter__(mgr)
exc = True

VAR = await aenter
try:
  BLOCK
except:
  if not await aexit(mgr, *sys.exc_info()):
    raise
else:
  await aexit(mgr, None, None, None)

和常规的with表达式一样,可以在一个async with表达式中指定多个上下文管理器。

如果向async with表达式传入的上下文管理器中没有__aenter__ 和__aexit__方法,这将引起一个错误 。如果在async def函数外面使用async with,将引起一个SyntaxError(语法错误)。

例子

使用async with能够很容易地实现一个数据库事务管理器。

async def commit(session, data):
  ...

  async with session.transaction():
    ...
    await session.update(data)
    ...

需要使用锁的代码也很简单:

async with lock:
  ...

而不是:

with (yield from lock):
  ...

异步迭代器 “async for”

一个异步可迭代对象(asynchronous iterable)能够在迭代过程中调用异步代码,而异步迭代器就是能够在next方法中调用异步代码。为了支持异步迭代:

1、一个对象必须实现__aiter__方法,该方法返回一个异步迭代器(asynchronous iterator)对象。
2、一个异步迭代器对象必须实现__anext__方法,该方法返回一个awaitable类型的值。
3、为了停止迭代,__anext__必须抛出一个StopAsyncIteration异常。

异步迭代的一个例子如下:

class AsyncIterable:
  def __aiter__(self):
    return self

  async def __anext__(self):
    data = await self.fetch_data()
    if data:
      return data
    else:
      raise StopAsyncIteration

  async def fetch_data(self):
    ...

新语法

通过异步迭代器实现的一个新的迭代语法如下:

async for TARGET in ITER:
  BLOCK
else:
  BLOCK2

这在语义上等同于:

iter = (ITER)
iter = type(iter).__aiter__(iter)
running = True
while running:
  try:
    TARGET = await type(iter).__anext__(iter)
  except StopAsyncIteration:
    running = False
  else:
    BLOCK
else:
  BLOCK2

把一个没有__aiter__方法的迭代对象传递给 async for将引起TypeError。如果在async def函数外面使用async with,将引起一个SyntaxError(语法错误)。

和常规的for表达式一样, async for也有一个可选的else 分句。.

例子1

使用异步迭代器能够在迭代过程中异步地缓存数据:

async for data in cursor:
  ...

这里的cursor是一个异步迭代器,能够从一个数据库中每经过N次迭代预取N行数据。

下面的语法展示了这种新的异步迭代协议的用法:

class Cursor:
  def __init__(self):
    self.buffer = collections.deque()

  async def _prefetch(self):
    ...

  def __aiter__(self):
    return self

  async def __anext__(self):
    if not self.buffer:
      self.buffer = await self._prefetch()
      if not self.buffer:
        raise StopAsyncIteration
    return self.buffer.popleft()

接下来这个Cursor 类可以这样使用:

async for row in Cursor():
  print(row)
which would be equivalent to the following code:

i = Cursor().__aiter__()
while True:
  try:
    row = await i.__anext__()
  except StopAsyncIteration:
    break
  else:
    print(row)

例子2

下面的代码可以将常规的迭代对象变成异步迭代对象。尽管这不是一个非常有用的东西,但这段代码说明了常规迭代器和异步迭代器之间的关系。

class AsyncIteratorWrapper:
  def __init__(self, obj):
    self._it = iter(obj)

  def __aiter__(self):
    return self

  async def __anext__(self):
    try:
      value = next(self._it)
    except StopIteration:
      raise StopAsyncIteration
    return value

async for letter in AsyncIteratorWrapper("abc"):
  print(letter)

为什么要抛出StopAsyncIteration?

协程(Coroutines)内部仍然是基于生成器的。因此在PEP 479之前,下面两种写法没有本质的区别:

def g1():
  yield from fut
  return 'spam'

def g2():
  yield from fut
  raise StopIteration('spam')

自从 PEP 479 得到接受并成为协程 的默认实现,下面这个例子将StopIteration包装成一个RuntimeError。

async def a1():
  await fut
  raise StopIteration('spam')

告知外围代码迭代已经结束的唯一方法就是抛出StopIteration。因此加入了一个新的异常类StopAsyncIteration。

由PEP 479的规定 , 所有协程中抛出的StopIteration异常都被包装在RuntimeError中。

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
在Python中利用Into包整洁地进行数据迁移的教程
Mar 30 Python
列举Python中吸引人的一些特性
Apr 09 Python
Python制作爬虫抓取美女图
Jan 20 Python
简单掌握Python中glob模块查找文件路径的用法
Jul 05 Python
Python守护进程和脚本单例运行详解
Jan 06 Python
Python 模拟员工信息数据库操作的实例
Oct 23 Python
python3+PyQt5泛型委托详解
Apr 24 Python
python通过zabbix api获取主机
Sep 17 Python
解决Python一行输出不显示的问题
Dec 03 Python
基于python生成器封装的协程类
Mar 20 Python
python里运用私有属性和方法总结
Jul 08 Python
Python实现打包成库供别的模块调用
Jul 13 Python
python aiohttp的使用详解
Jun 20 #Python
Python 中Django验证码功能的实现代码
Jun 20 #Python
Puppeteer使用示例详解
Jun 20 #Python
获取django框架orm query执行的sql语句实现方法分析
Jun 20 #Python
Python使用LDAP做用户认证的方法
Jun 20 #Python
Python OpenCV中的resize()函数的使用
Jun 20 #Python
python中的句柄操作的方法示例
Jun 20 #Python
You might like
PHP类的声明与实例化及构造方法与析构方法详解
2016/01/26 PHP
Laravel中9个不经常用的小技巧汇总
2019/04/16 PHP
提高Laravel应用性能方法详解
2019/06/24 PHP
javascript编程起步(第四课)
2007/02/27 Javascript
javascript 添加和移除函数的通用方法
2009/10/20 Javascript
jQuery解决iframe高度自适应代码
2009/12/20 Javascript
无刷新预览所选择的图片示例代码
2014/04/02 Javascript
JavaScript学习笔记之ES6数组方法
2016/03/25 Javascript
JS图片等比例缩放方法完整示例
2016/08/03 Javascript
AngularJs bootstrap搭载前台框架——基础页面
2016/09/01 Javascript
Bootstrap常用组件学习(整理)
2017/03/24 Javascript
vue中计算属性(computed)、methods和watched之间的区别
2017/07/27 Javascript
JS实现将二维数组转为json格式字符串操作示例
2018/07/12 Javascript
bootstrap table表格插件之服务器端分页实例代码
2018/09/12 Javascript
Vue 第三方字体图标引入 Font Awesome的方法
2018/09/28 Javascript
详解JavaScript 的变量
2019/03/08 Javascript
JQuery发送ajax请求时中文乱码问题解决
2019/11/14 jQuery
python判断给定的字符串是否是有效日期的方法
2015/05/13 Python
Python基础入门之seed()方法的使用
2015/05/15 Python
python利用装饰器进行运算的实例分析
2015/08/04 Python
Android基于TCP和URL协议的网络编程示例【附demo源码下载】
2018/01/23 Python
Python3.5运算符操作实例详解
2019/04/25 Python
Python 实现大整数乘法算法的示例代码
2019/09/17 Python
Python利用多线程同步锁实现多窗口订票系统(推荐)
2019/12/22 Python
浅谈pytorch、cuda、python的版本对齐问题
2020/01/15 Python
Python通过TensorFLow进行线性模型训练原理与实现方法详解
2020/01/15 Python
Django ORM filter() 的运用详解
2020/05/14 Python
Python实现淘宝秒杀功能的示例代码
2021/01/19 Python
CSS3样式linear-gradient的使用实例
2017/01/16 HTML / CSS
Solid & Striped官网:美国泳装品牌
2019/06/19 全球购物
出纳岗位职责模板
2013/11/27 职场文书
农贸市场管理制度
2014/01/31 职场文书
刑事辩护授权委托书
2014/09/13 职场文书
银行催款通知书
2015/04/17 职场文书
餐厅如何利用“营销策略”扭转亏本局面
2019/10/15 职场文书
浅谈Python类的单继承相关知识
2021/05/12 Python