Python中的上下文管理器相关知识详解


Posted in Python onSeptember 19, 2019

前言

with 这个关键字,对于每一学习Python的人,都不会陌生。

操作文本对象的时候,几乎所有的人都会让我们要用 with open ,这就是一个上下文管理的例子。你一定已经相当熟悉了,我就不再废话了。

with open('test.txt') as f:
  print f.readlines()

什么是上下文管理器?

基本语法

with EXPR as VAR:
  BLOCK

先理清几个概念

1. 上下文表达式:with open('test.txt') as f:

2. 上下文管理器:open('test.txt')

3. f 不是上下文管理器,应该是资源对象。

如何写上下文管理器?

要自己实现这样一个上下文管理,要先知道上下文管理协议。

简单点说,就是在一个类里,实现了__enter__和__exit__的方法,这个类的实例就是一个上下文管理器。

例如这个示例:

class Resource():
  def __enter__(self):
    print('===connect to resource===')
    return self
  def __exit__(self, exc_type, exc_val, exc_tb):
    print('===close resource connection===')     
  def operate(self):
    print('===in operation===')     
with Resource() as res:
  res.operate()

我们执行一下,通过日志的打印顺序。可以知道其执行过程。
===connect to resource==
===in operation===
===close resource connection===

从这个示例可以很明显的看出,在编写代码时,可以将资源的连接或者获取放在__enter__中,而将资源的关闭写在__exit__ 中。

为什么要用上下文管理器?

学习时多问自己几个为什么,养成对一些细节的思考,有助于加深对知识点的理解。

为什么要使用上下文管理器?

在我看来,这和 Python 崇尚的优雅风格有关。

  • 可以以一种更加优雅的方式,操作(创建/获取/释放)资源,如文件操作、数据库连接;
  • 可以以一种更加优雅的方式,处理异常;

第一种,我们上面已经以资源的连接为例讲过了。

而第二种,会被大多数人所忽略。这里会重点讲一下。

大家都知道,处理异常,通常都是使用 try...execept.. 来捕获处理的。这样做一个不好的地方是,在代码的主逻辑里,会有大量的异常处理代理,这会很大的影响我们的可读性。

好一点的做法呢,可以使用 with 将异常的处理隐藏起来。

仍然是以上面的代码为例,我们将1/0 这个一定会抛出异常的代码写在 operate 里

class Resource():
  def __enter__(self):
    print('===connect to resource===')
    return self
 
  def __exit__(self, exc_type, exc_val, exc_tb):
    print('===close resource connection===')
    return True
 
  def operate(self):
    1/0
 
with Resource() as res:
  res.operate()

运行一下,惊奇地发现,居然不会报错。

这就是上下文管理协议的一个强大之处,异常可以在__exit__ 进行捕获并由你自己决定如何处理,是抛出呢还是在这里就解决了。在__exit__ 里返回 True(没有return 就默认为 return False),就相当于告诉 Python解释器,这个异常我们已经捕获了,不需要再往外抛了。

在 写__exit__ 函数时,需要注意的事,它必须要有这三个参数:

  • exc_type:异常类型
  • exc_val:异常值
  • exc_tb:异常的错误栈信息

当主逻辑代码没有报异常时,这三个参数将都为None。

理解并使用 contextlib

在上面的例子中,我们只是为了构建一个上下文管理器,却写了一个类。如果只是要实现一个简单的功能,写一个类未免有点过于繁杂。这时候,我们就想,如果只写一个函数就可以实现上下文管理器就好了。

这个点Python早就想到了。它给我们提供了一个装饰器,你只要按照它的代码协议来实现函数内容,就可以将这个函数对象变成一个上下文管理器。

我们按照 contextlib 的协议来自己实现一个打开文件(with open)的上下文管理器。

import contextlib
 @contextlib.contextmanager
def open_func(file_name):
  # __enter__方法
  print('open file:', file_name, 'in __enter__')
  file_handler = open(file_name, 'r')
     # 【重点】:yield
  yield file_handler
   # __exit__方法
  print('close file:', file_name, 'in __exit__')
  file_handler.close()
  return
 with open_func('/Users/MING/mytest.txt') as file_in:
  for line in file_in:
    print(line)

在被装饰函数里,必须是一个生成器(带有yield),而yield之前的代码,就相当于__enter__里的内容。yield 之后的代码,就相当于__exit__ 里的内容。

上面这段代码只能实现上下文管理器的第一个目的(管理资源),并不能实现第二个目的(处理异常)。

如果要处理异常,可以改成下面这个样子。

import contextlib
@contextlib.contextmanager
def open_func(file_name):
  # __enter__方法
  print('open file:', file_name, 'in __enter__')
  file_handler = open(file_name, 'r')
  try:
    yield file_handler
  except Exception as exc:
    # deal with exception
    print('the exception was thrown')
  finally:
    print('close file:', file_name, 'in __exit__')
    file_handler.close()
    return
with open_func('/Users/MING/mytest.txt') as file_in:
  for line in file_in:
    1/0
    print(line)

好像只要讲到上下文管理器,大多数人都会谈到打开文件这个经典的例子。

但是在实际开发中,可以使用到上下文管理器的例子也不少。我这边举个我自己的例子。

在OpenStack中,给一个虚拟机创建快照时,需要先创建一个临时文件夹,来存放这个本地快照镜像,等到本地快照镜像创建完成后,再将这个镜像上传到Glance。然后删除这个临时目录。

这段代码的主逻辑是创建快照,而创建临时目录,属于前置条件,删除临时目录,是收尾工作。

虽然代码量很少,逻辑也不复杂,但是“创建临时目录,使用完后再删除临时目录”这个功能,在一个项目中很多地方都需要用到,如果可以将这段逻辑处理写成一个工具函数作为一个上下文管理器,那代码的复用率也大大提高。

代码是这样的

Python中的上下文管理器相关知识详解

总结起来,使用上下文管理器有三个好处:

  • 提高代码的复用率;
  • 提高代码的优雅度;
  • 提高代码的可读性;

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
学习python处理python编码问题
Mar 13 Python
跟老齐学Python之dict()的操作方法
Sep 24 Python
在Python程序中操作文件之flush()方法的使用教程
May 24 Python
Python实现Youku视频批量下载功能
Mar 14 Python
python 中的divmod数字处理函数浅析
Oct 17 Python
python+PyQT实现系统桌面时钟
Jun 16 Python
Python 脚本拉取 Docker 镜像问题
Nov 10 Python
浅谈Python type的使用
Nov 19 Python
OpenCV+Python--RGB转HSI的实现
Nov 27 Python
python求一个字符串的所有排列的实现方法
Feb 04 Python
在PyTorch中使用标签平滑正则化的问题
Apr 03 Python
python 批量压缩图片的脚本
Jun 02 Python
Python Opencv提取图片中某种颜色组成的图形的方法
Sep 19 #Python
pandas read_excel()和to_excel()函数解析
Sep 19 #Python
python openvc 裁剪、剪切图片 提取图片的行和列
Sep 19 #Python
vscode 配置 python3开发环境的方法
Sep 19 #Python
python实现简易学生信息管理系统
Apr 05 #Python
Python字符串大小写转换拼接删除空白
Sep 19 #Python
python BlockingScheduler定时任务及其他方式的实现
Sep 19 #Python
You might like
Protoss兵种介绍
2020/03/14 星际争霸
php类中的$this,static,final,const,self这几个关键字使用方法
2015/12/14 PHP
Javascript调试工具(下载)
2007/01/09 Javascript
深入认识javascript中的eval函数
2009/11/02 Javascript
JavaScript 学习历程和心得分享
2010/12/12 Javascript
关于JavaScript的with 语句的使用方法
2011/05/09 Javascript
各浏览器对click方法的支持差异小结
2011/07/31 Javascript
Jquery左右滑动插件之实现超级炫酷动画效果附源码下载
2015/12/02 Javascript
js下将金额数字每三位一逗号分隔
2016/02/19 Javascript
每日十条JavaScript经验技巧(二)
2016/06/23 Javascript
根据Bootstrap Paginator改写的js分页插件
2016/12/25 Javascript
通俗解释JavaScript正则表达式快速记忆
2017/08/23 Javascript
微信小程序slider组件使用详解
2018/01/31 Javascript
jQuery实现的点击标题文字切换字体效果示例【测试可用】
2018/04/26 jQuery
vuejs 切换导航条高亮(路由菜单高亮)的方法示例
2018/05/29 Javascript
在vue中更换字体,本地存储字体非引用在线字体库的方法
2018/09/28 Javascript
微信小程序module.exports模块化操作实例浅析
2018/12/20 Javascript
JSON字符串操作移除空串更改key/value的介绍
2019/01/05 Javascript
vue下的@change事件的实现
2019/10/25 Javascript
python条件变量之生产者与消费者操作实例分析
2017/03/22 Python
python和flask中返回JSON数据的方法
2018/03/26 Python
PyTorch上实现卷积神经网络CNN的方法
2018/04/28 Python
numpy返回array中元素的index方法
2018/06/27 Python
python计算阶乘和的方法(1!+2!+3!+...+n!)
2019/02/01 Python
在Keras中实现保存和加载权重及模型结构
2020/06/15 Python
材料化学应届生求职信
2013/10/09 职场文书
应届生污水处理求职信
2013/11/06 职场文书
师范学院美术系毕业生自我鉴定
2014/01/29 职场文书
酒店员工职业生涯规划
2014/02/25 职场文书
企业环保标语
2014/06/10 职场文书
秋季运动会广播稿(30篇)
2014/09/13 职场文书
单身证明格式样本
2015/06/15 职场文书
公司安全管理制度范本
2015/08/05 职场文书
旅游安全责任协议书
2016/03/22 职场文书
Python 读写 Matlab Mat 格式数据的操作
2021/05/19 Python
Apache SkyWalking 监控 MySQL Server 实战解析
2022/09/23 Servers