详解python with 上下文管理器


Posted in Python onSeptember 02, 2020

作为一个 Java 为母语的程序员来讲,学习起其他新的语言就难免任何事都与 Java 进行横向对比。Java 7 引入了能省去许多重复代码的 try-with-resources 特性,不用每回 try/finally 来释放资源(不便之处有局部变量必须声明在 try 之前,finally 里还要嵌套 try/catch 来处理异常)。比如下面的 Java 代码

try(InputStream inputStream = new FileInputStream("abc.txt")) {
  System.out.println(inputStream.read());
} catch (Exception ex) {
}

它相应的不使用 try-with-resources 语法的代码就是

InputStream inputStream = null;
try {
  inputStream = new FileInputStream("abc.txt");
} catch (Exception ex) {
} finally {
  if(inputStream != null) {
    try {
      inputStream.close();
    } catch (Exception ex) {
    }
  }
}

类似的 Python 也有自己的 try-with-resources 写法,就是 with 关键字,它的概念叫做上下文管理器(Context Manager)。

with 关键字的使用

with open('some_file', 'w') as opened_file:
  opened_file.write('Hola!')

以上的代码相当于

opened_file = open('some_file', 'w')
try:
  opened_file.write('Hola!')
finally:
  opened_file.close()

也就是 with 关键字打开的资源会在 with 语句块结束后自动调用相应的方法自动释放(无论 with 中操作是否有异常)。

with 用起来是很方便的,但是什么样的资源可以用 with 关键字?Python 是怎么知道要调用哪个方法来关闭资源的?进而如何实现自己的支持上下文管理器的 Python 类。

再次回顾 Java 的 try-with-resources 语法,try(...) 括号支持的类必须是实现了 AutoCloseable 接口,它的接口方法是

public void close() throws IOException

也就是 Java 的 try-with-resources 语法会自动调用以上方法来释放资源,要实现可被自动释放的 Java 就只须遵照这一规则就行。

而在 Python 中,能被 with 的类有两种实现方式

实现基本方法以支持上下文管理器的类

一个 Python 类要能被用于 with 上下文,必须实现至少 __enter__ __exit__ 方法。这两个方法的意思好理解,一个是创建资源后,后者是退出 with 语句块后。请看下面的例子

class File(object):
  def __init__(self, file_name, method):
    self.file_obj = open(file_name, method)
 
  def __enter__(self):
    print("---enter")
    return self.file_obj
 
  def __exit__(self, type, value, traceback):
    print("---exit")
    self.file_obj.close()
 
 
with File('data.txt', 'r') as data_file:
  print(data_file.read())

假设 data.txt 文件中的内容是

hello
world

那么以上程序执行后的输出就是

--enter
hello
world
---exit

  1. __enter__ 返回的值作为 with ... as data_file 中的 data_file 变量的值,如果 __enter__ 没有返回,data_file 得到的就是 NoneType object 了。
  2. __exit__ 可利用来释放资源
  3. 没有 __enter__ 方法试图用 with 的写法执行时会得到 AttributeErro: __enter__ 异常
  4. 同样,没有 __exit__ 方法试图用 with 的写法执行时会得到 AttributeErro: __exit__ 异常
  5. __exit__ 有其他额外的三个参数,可获得资源的值,以及能处理 with 块中执行出现异常的情况
  6. __exit__ 的返回值也有用途,如果它返回 True 则出现的异常不再向外传播,其他值的话直接向外抛

利用生成器(Generator) 和装饰器创建支持上下文管理器的方法

此种方式比较简单,不过逻辑控制上没有这么强。

from contextlib import contextmanager
 
@contextmanager
def open_file(name, method):
  f = open(name, method)
  yield f
  f.close()

使用 f 的执行代码将被放置在 yield f 所处的位置,with 使用以上方法。yield 后的 f 变量将是 with...as 后的变量值

with open_file('some_file', 'w') as file_object:
  file_object.write('hola!')

这里也要注意异常处理的情况,比如把上面代码打开文件的模式换作 r, 仍然试图去写文件,这样在 open_file 方法的 yield f 位置将产生异常,会造成 f.close() 得不到执行,不能正确释放该资源。

欲更具防御性,前面的 yield f 可以扩展也如下的形式

try:
  yield f
except Exception as ex:
  pass #处理异常,或继续向外抛
finally:
  f.close()

@contextmanager 装饰器内部也是封装为一个实现了 __enter__ __exit__ 方法的对象。

参考链接:Context Managers

以上就是详解python with 上下文管理器的详细内容,更多关于python with 上下文管理器的资料请关注三水点靠木其它相关文章!

Python 相关文章推荐
Python检测QQ在线状态的方法
May 09 Python
使用python装饰器计算函数运行时间的实例
Apr 21 Python
python中yaml配置文件模块的使用详解
Apr 27 Python
Python中pip更新和三方插件安装说明
Jul 08 Python
Python 生成 -1~1 之间的随机数矩阵方法
Aug 04 Python
python在html中插入简单的代码并加上时间戳的方法
Oct 16 Python
python 应用之Pycharm 新建模板默认添加编码格式-作者-时间等信息【推荐】
Jun 17 Python
Python实现最大子序和的方法示例
Jul 05 Python
Python拆分大型CSV文件代码实例
Oct 07 Python
TFRecord文件查看包含的所有Features代码
Feb 17 Python
关于Python 解决Python3.9 pandas.read_excel(‘xxx.xlsx‘)报错的问题
Nov 28 Python
Python按顺序遍历并读取文件夹中文件
Apr 29 Python
Python 的 __str__ 和 __repr__ 方法对比
Sep 02 #Python
Python datetime 如何处理时区信息
Sep 02 #Python
浅析python中的del用法
Sep 02 #Python
浅析NumPy 切片和索引
Sep 02 #Python
详解Python 函数参数的拆解
Sep 02 #Python
Python 常用日期处理 -- calendar 与 dateutil 模块的使用
Sep 02 #Python
python 常用日期处理-- datetime 模块的使用
Sep 02 #Python
You might like
PHP实现生成唯一编号(36进制的不重复编号)
2014/07/01 PHP
PHP多进程编程总结(推荐)
2016/07/18 PHP
Yii框架 session 数据库存储操作方法示例
2019/11/18 PHP
JS中style属性
2006/10/11 Javascript
javascript delete 使用示例代码
2010/03/29 Javascript
使用phantomjs进行网页抓取的实现代码
2014/09/29 Javascript
javascript结合ajax读取txt文件内容
2014/12/05 Javascript
jquery trigger函数执行两次的解决方法
2016/02/29 Javascript
JavaScript利用HTML DOM进行文档操作的方法
2016/03/28 Javascript
JS获取checkbox的个数简单实例
2016/08/19 Javascript
jQuery插件FusionCharts绘制的3D环饼图效果示例【附demo源码】
2017/04/02 jQuery
AngularJs定时器$interval 和 $timeout详解
2017/05/25 Javascript
IScroll5实现下拉刷新上拉加载的功能实例
2017/08/11 Javascript
基于Bootstrap实现城市三级联动
2017/11/23 Javascript
Node.js调用fs.renameSync报错(Error: EXDEV, cross-device link not permitted)
2017/12/27 Javascript
JS实现深度优先搜索求解两点间最短路径
2019/01/17 Javascript
vue 实现通过vuex 存储值 在不同界面使用
2019/11/11 Javascript
Python高效编程技巧
2013/01/07 Python
python使用Image处理图片常用技巧分析
2015/06/01 Python
详解Python函数可变参数定义及其参数传递方式
2017/08/02 Python
Python进度条实时显示处理进度的示例代码
2018/01/30 Python
Python3多进程 multiprocessing 模块实例详解
2018/06/11 Python
Centos 升级到python3后pip 无法使用的解决方法
2018/06/12 Python
Python图像处理之图像的缩放、旋转与翻转实现方法示例
2019/01/04 Python
在pycharm中使用git版本管理以及同步github的方法
2019/01/16 Python
python pandas获取csv指定行 列的操作方法
2019/07/12 Python
python+opencv边缘提取与各函数参数解析
2020/03/09 Python
python中线程和进程有何区别
2020/06/17 Python
ABOUT YOU匈牙利:500个最受欢迎的时尚品牌
2019/07/19 全球购物
DELPHI面试题研发笔试试卷
2015/11/08 面试题
药学专业大学生自荐信
2013/09/28 职场文书
法律系毕业生求职信
2014/05/28 职场文书
拾金不昧锦旗标语
2014/06/27 职场文书
MySQL读取JSON转换的方式
2022/03/18 MySQL
德劲DE1105机评
2022/04/05 无线电
mysql通过group by分组取最大时间对应数据的两种有效方法
2022/09/23 MySQL