正确理解python中的关键字“with”与上下文管理器


Posted in Python onApril 21, 2017

前言

如果你有阅读源码的习惯,可能会看到一些优秀的代码经常出现带有 “with” 关键字的语句,它通常用在什么场景呢?今天就来说说 with 和 上下文管理器。

对于系统资源如文件、数据库连接、socket 而言,应用程序打开这些资源并执行完业务逻辑之后,必须做的一件事就是要关闭(断开)该资源。

比如 Python 程序打开一个文件,往文件中写内容,写完之后,就要关闭该文件,否则会出现什么情况呢?极端情况下会出现 "Too many open files" 的错误,因为系统允许你打开的最大文件数量是有限的。

同样,对于数据库,如果连接数过多而没有及时关闭的话,就可能会出现 "Can not connect to MySQL server Too many connections",因为数据库连接是一种非常昂贵的资源,不可能无限制的被创建。

来看看如何正确关闭一个文件。

普通版:

def m1():
 f = open("output.txt", "w")
 f.write("python之禅")
 f.close()

这样写有一个潜在的问题,如果在调用 write 的过程中,出现了异常进而导致后续代码无法继续执行,close 方法无法被正常调用,因此资源就会一直被该程序占用者释放。那么该如何改进代码呢?

进阶版:

def m2():
 f = open("output.txt", "w")
 try:
 f.write("python之禅")
 except IOError:
 print("oops error")
 finally:
 f.close()

改良版本的程序是对可能发生异常的代码处进行 try 捕获,使用 try/finally 语句,该语句表示如果在 try 代码块中程序出现了异常,后续代码就不再执行,而直接跳转到 except 代码块。而无论如何,finally 块的代码最终都会被执行。因此,只要把 close 放在 finally 代码中,文件就一定会关闭。

高级版:

def m3():
 with open("output.txt", "w") as f:
 f.write("Python之禅")

一种更加简洁、优雅的方式就是用 with 关键字。open 方法的返回值赋值给变量 f,当离开 with 代码块的时候,系统会自动调用 f.close() 方法, with 的作用和使用 try/finally 语句是一样的。那么它的实现原理是什么?

在讲 with 的原理前要涉及到另外一个概念,就是上下文管理器(Context Manager)。

上下文管理器

任何实现了 __enter__() __exit__() 方法的对象都可称之为上下文管理器,上下文管理器对象可以使用 with 关键字。显然,文件(file)对象也实现了上下文管理器。

那么文件对象是如何实现这两个方法的呢?我们可以模拟实现一个自己的文件类,让该类实现 __enter__() __exit__() 方法。

class File():

 def __init__(self, filename, mode):
 self.filename = filename
 self.mode = mode

 def __enter__(self):
 print("entering")
 self.f = open(self.filename, self.mode)
 return self.f

 def __exit__(self, *args):
 print("will exit")
 self.f.close()

__enter__() 方法返回资源对象,这里就是你将要打开的那个文件对象, __exit__() 方法处理一些清除工作。

因为 File 类实现了上下文管理器,现在就可以使用 with 语句了。

with File('out.txt', 'w') as f:
 print("writing")
 f.write('hello, python')

这样,你就无需显示地调用 close 方法了,由系统自动去调用,哪怕中间遇到异常 close 方法也会被调用。

contextlib

Python 还提供了一个 contextmanager 的装饰器,更进一步简化了上下文管理器的实现方式。通过 yield 将函数分割成两部分,yield 之前的语句在 __enter__ 方法中执行,yield 之后的语句在 __exit__ 方法中执行。紧跟在 yield 后面的值是函数的返回值。

from contextlib import contextmanager

@contextmanager
def my_open(path, mode):
 f = open(path, mode)
 yield f
 f.close()

调用

with my_open('out.txt', 'w') as f:
 f.write("hello , the simplest context manager")

总结

Python 提供了 with 语法用于简化资源操作的后续清除操作,是 try/finally 的替代方法,实现原理建立在上下文管理器之上。此外,Python 还提供了一个 contextmanager 装饰器,更进一步简化上下管理器的实现方式。以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作能带来一定的帮助,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

Python 相关文章推荐
Python3 入门教程 简单但比较不错
Nov 29 Python
利用Python获取操作系统信息实例
Sep 02 Python
浅谈Python基础之I/O模型
May 11 Python
python多进程实现进程间通信实例
Nov 24 Python
利用Python如何生成hash值示例详解
Dec 20 Python
python 调用钉钉机器人的方法
Feb 20 Python
python实现动态数组的示例代码
Jul 15 Python
python实现一行输入多个值和一行输出多个值的例子
Jul 16 Python
pandas中read_csv的缺失值处理方式
Dec 19 Python
Python 跨.py文件调用自定义函数说明
Jun 01 Python
python如何停止递归
Sep 09 Python
Django框架中表单的用法
Jun 10 Python
python妙用之编码的转换详解
Apr 21 #Python
简单谈谈Python中的元祖(Tuple)和字典(Dict)
Apr 21 #Python
Python学习笔记之解析json的方法分析
Apr 21 #Python
Python正则抓取网易新闻的方法示例
Apr 21 #Python
Python中shape计算矩阵的方法示例
Apr 21 #Python
Python使用正则表达式抓取网页图片的方法示例
Apr 21 #Python
用python找出那些被“标记”的照片
Apr 20 #Python
You might like
ecshop 订单确认中显示省市地址信息的方法
2010/03/15 PHP
gearman中worker常驻后台,导致MySQL server has gone away的解决方法
2020/02/27 PHP
javascript jQuery $.post $.ajax用法
2008/07/09 Javascript
google地图的路线实现代码
2009/08/20 Javascript
jQuery解决iframe高度自适应代码
2009/12/20 Javascript
jQuery autocomplate 自扩展插件、自动完成示例代码
2011/03/28 Javascript
js setTimeout 常见问题小结
2013/08/13 Javascript
JS对HTML标签select的获取、添加、删除操作
2013/10/17 Javascript
Node.js node-schedule定时任务隔多少分钟执行一次的方法
2015/02/10 Javascript
学习javascript的闭包,原型,和匿名函数之旅
2015/10/18 Javascript
浅谈js里面的InttoStr和StrtoInt
2016/06/14 Javascript
JQuery DIV 动态隐藏和显示的方法
2016/06/23 Javascript
JS+html5 canvas实现的简单绘制折线图效果示例
2017/03/13 Javascript
Angular 封装并发布组件的方法示例
2018/04/19 Javascript
微信小程序发送短信验证码完整实例
2019/01/07 Javascript
vue项目中在外部js文件中直接调用vue实例的方法比如说this
2019/04/28 Javascript
vue3 源码解读之 time slicing的使用方法
2019/10/31 Javascript
electron 安装,调试,打包的具体使用
2019/11/06 Javascript
js构造函数constructor和原型prototype原理与用法实例分析
2020/03/02 Javascript
在vue中获取wangeditor的html和text的操作
2020/10/23 Javascript
Python3网络爬虫之使用User Agent和代理IP隐藏身份
2017/11/23 Python
Python实现嵌套列表去重方法示例
2017/12/28 Python
Python一句代码实现找出所有水仙花数的方法
2018/11/13 Python
Python使用QQ邮箱发送邮件实例与QQ邮箱设置详解
2020/02/18 Python
Styleonme中文网:韩国高档人气品牌
2017/06/21 全球购物
简述使用ftp进行文件传输时的两种登录方式?它们的区别是什么?常用的ftp文件传输命令是什么?
2016/11/20 面试题
高级Java程序员面试要点
2013/08/02 面试题
《会变的花树叶》教学反思
2014/02/10 职场文书
2014年度个人工作总结范文
2015/03/09 职场文书
2015关于重阳节的演讲稿
2015/03/20 职场文书
2015新生加入学生会自荐书
2015/03/24 职场文书
2015年城管执法工作总结
2015/07/23 职场文书
初中语文教师研修日志
2015/11/13 职场文书
乡镇团代会开幕词
2016/03/04 职场文书
会议主持词通用版
2019/04/02 职场文书
Prometheus 监控MySQL使用grafana展示
2021/08/30 MySQL