浅谈python锁与死锁问题


Posted in Python onAugust 14, 2020

如果你学过操作系统,那么对于锁应该不陌生。锁的含义是线程锁,可以用来指定某一个逻辑或者是资源同一时刻只能有一个线程访问。这个很好理解,就好像是有一个房间被一把锁锁住了,只有拿到钥匙的人才能进入。每一个人从房间门口拿到钥匙进入房间,出房间的时候会把钥匙再放回到门口。这样下一个到门口的人就可以拿到钥匙了。这里的房间就是某一个资源或者是一段逻辑,而拿取钥匙的人其实指的是一个线程。

加锁的原因

我们明白了锁的原理,不禁有了一个问题,我们为什么需要锁呢,它在哪些场景当中会用到呢?

其实它的使用场景非常广,我们举一个非常简单的例子,就是淘宝买东西。我们都知道商家的库存都是有限的,卖掉一个少一个。假如说当前某个商品库存只剩下一个,但当下却有两个人同时购买。两个人同时购买也就是有两个请求同时发起购买请求,如果我们不加锁的话,两个线程同时查询到商品的库存是1,大于0,进行购买逻辑之后,减一。由于两个线程同时执行,所以最后商品的库存会变成-1。

显然商品的库存不应该是一个负数,所以我们需要避免这种情况发生。通过加锁可以完美解决这个问题。我们规定一次只能有一个线程发起购买的请求,那么这样当一个线程将库存减到0的时候,第二个请求就无法修改了,就保证了数据的准确性。

代码实现

那么在Python当中,我们怎么样来实现这个锁呢?

其实很简单,threading库当中已经为我们提供了线程的工具,我们直接拿过来用就可以了。我们通过使用threading当中的Lock对象, 可以很轻易的实现方法加锁的功能。

import threading

class PurchaseRequest:
  '''
  初始化库存与锁
  '''
  def __init__(self, initial_value = 0):
    self._value = initial_value
    self._lock = threading.Lock()

  def incr(self,delta=1):
    '''
    加库存
    '''
    self._lock.acquire()
    self._value += delta
    self._lock.release()

  def decr(self,delta=1):
    '''
    减库存
    '''
    self._lock.acquire()
    self._value -= delta
    self._lock.release()

我们从代码当中就可以很轻易的看出Lock这个对象的使用方法,我们在进入加锁区(资源抢占区)之前,我们需要先使用lock.acquire()方法获取锁。Lock对象可以保证同一时刻只能有一个线程获取锁,只有获取了锁之后才会继续往下执行。当我们执行完成之后,我们需要把锁“放回门口”,所以需要再调用一下release方法,表示锁的释放。

这里有一个小问题是很多程序员在编程的时候总是会忘记release,导致不必要的bug,而且这种分布式场景当中的bug很难通过测试发现。因为测试的时候往往很难测试并发场景,code review的时候也很容易忽略,因此一旦泄露了还是挺难发现的。

为了解决这个问题,Lock还提供了一种改进的用法,就是使用with语句。with语句我们之前在使用文件的时候用到过,使用with可以替我们完成try catch以及资源回收等工作,我们只管用就完事了。这里也是一样,使用with之后我们就可以不用管锁的申请和释放了,直接写代码就行,所以上面的代码可以改写成这样:

import threading

class PurchaseRequest:
  '''
  初始化库存与锁
  '''
  def __init__(self, initial_value = 0):
    self._value = initial_value
    self._lock = threading.Lock()

  def incr(self,delta=1):
    '''
    加库存
    '''
 with self._lock:
     self._value += delta

  def decr(self,delta=1):
    '''
    减库存
    '''
    with self._lock:
     self._value -= delta

这样看起来是不是清爽很多?

可重入锁

上面介绍的只是最简单的锁,我们经常使用的往往是可重入锁。

什么叫可重入锁呢?简单解释一下,就是在一个线程已经持有了锁的情况下,它可以再次进入被加锁的区域。但是既然线程还持有锁没有释放,那么它不应该还是在加锁区域吗,怎么会有需要再次进入被加锁区域的情况呢?其实是有的,道理也很简单,就是递归。

我们把上面的例子稍微改一点点,就完全不一样了。

import threading

class PurchaseRequest:
  '''
  初始化库存与锁
  '''
  def __init__(self, initial_value = 0):
    self._value = initial_value
    self._lock = threading.Lock()

  def incr(self,delta=1):
    '''
    加库存
    '''
 with self._lock:
     self._value += delta

  def decr(self,delta=1):
    '''
    减库存
    '''
    with self._lock:
     self.incr(-delta)

我们关注一下上面的decr方法,我们用incr来代替了原本的逻辑实现了decr。但是有一个问题是decr也是一个加锁的方法,需要前一个锁释放了才能进入。但它已经持有了锁了,那么这种情况下就会发生死锁。

我们只需要把Lock换成可重入锁就可以解决这个问题,只需要修改一行代码。

import threading

class PurchaseRequest:
  '''
  初始化库存与锁
  我们使用RLock代替了Lock,也可重入锁代替了普通锁
  '''
  def __init__(self, initial_value = 0):
    self._value = initial_value
    self._lock = threading.RLock()

  def incr(self,delta=1):
    '''
    加库存
    '''
 with self._lock:
     self._value += delta

  def decr(self,delta=1):
    '''
    减库存
    '''
    with self._lock:
     self.incr(-delta)

总结

今天我们的文章介绍了Python当中锁的使用方法,以及可重入锁的概念。在并发场景下开发和调试都是一个比较困难的工作,稍微不小心就会踩到各种各样的坑,死锁只是其中一种比较常见并且比较容易解决的问题,除此之外还有很多其他各种各样的问题。

针对死锁的问题,Python还提供了其他的解决方案,我们放到下一篇文章当中再和大家分享。

以上就是浅谈python并发锁与死锁问题的详细内容,更多关于python并发锁与死锁的资料请关注三水点靠木其它相关文章!

Python 相关文章推荐
对于Python的框架中一些会话程序的管理
Apr 20 Python
Python常用算法学习基础教程
Apr 13 Python
python面向对象_详谈类的继承与方法的重载
Jun 07 Python
用Python进行简单图像识别(验证码)
Jan 19 Python
Python如何发布程序的详细教程
Oct 09 Python
关于python之字典的嵌套,递归调用方法
Jan 21 Python
Python实现的大数据分析操作系统日志功能示例
Feb 11 Python
详解Ubuntu16.04安装Python3.7及其pip3并切换为默认版本
Feb 25 Python
python3下载抖音视频的完整代码
Jun 05 Python
Python网络编程之使用TCP方式传输文件操作示例
Nov 01 Python
Python函数的返回值、匿名函数lambda、filter函数、map函数、reduce函数用法实例分析
Dec 26 Python
Python使用enumerate获取迭代元素下标
Feb 03 Python
Python3.8安装Pygame教程步骤详解
Aug 14 #Python
Python configparser模块应用过程解析
Aug 14 #Python
PyCharm 2020.2 安装详细教程
Sep 25 #Python
Python logging模块handlers用法详解
Aug 14 #Python
Python代码注释规范代码实例解析
Aug 14 #Python
Python发送邮件实现基础解析
Aug 14 #Python
Python压缩模块zipfile实现原理及用法解析
Aug 14 #Python
You might like
用PHP实现维护文件代码
2007/06/14 PHP
如何用php获取程序执行的时间
2013/06/09 PHP
ThinkPHP安装和设置
2015/07/27 PHP
PHP+MySQL之Insert Into数据插入用法分析
2015/09/27 PHP
深入解析WordPress中加载模板的get_template_part函数
2016/01/11 PHP
jQuery.extend 函数及用法详细
2015/09/06 Javascript
JS日期加减,日期运算代码
2015/11/05 Javascript
使用JavaScript脚本判断页面是否在微信中被打开
2016/03/06 Javascript
jquery分页插件jquery.pagination.js实现无刷新分页
2016/04/01 Javascript
JS工作中的小贴士之”闭包“与事件委托的”阻止冒泡“
2016/06/16 Javascript
vue.js实现表格合并示例代码
2016/11/30 Javascript
js实现带缓动动画的导航栏效果
2017/01/16 Javascript
vue请求本地自己编写的json文件的方法
2019/04/25 Javascript
微信小程序开发之点击按钮退出小程序的实现方法
2019/04/26 Javascript
js实现的在本地预览图片功能示例
2019/11/09 Javascript
Vue组件通信$attrs、$listeners实现原理解析
2020/09/03 Javascript
swiperjs实现导航与tab页的联动
2020/12/13 Javascript
使用PDB模式调试Python程序介绍
2015/04/05 Python
以一个投票程序的实例来讲解Python的Django框架使用
2016/02/18 Python
Numpy 将二维图像矩阵转换为一维向量的方法
2018/06/05 Python
使用 Python 实现微信群友统计器的思路详解
2018/09/26 Python
python使用magic模块进行文件类型识别方法
2018/12/08 Python
python3爬虫学习之数据存储txt的案例详解
2019/04/24 Python
Python3远程监控程序的实现方法
2019/07/15 Python
python如何查看网页代码
2020/06/07 Python
Python经纬度坐标转换为距离及角度的实现
2020/11/01 Python
Book Depository欧盟:一家领先的国际图书零售商
2019/05/21 全球购物
vue 中 get / delete 传递数组参数方法
2021/03/23 Vue.js
小学国庆节活动方案
2014/02/11 职场文书
管理失职检讨书
2014/02/12 职场文书
活动总结结尾怎么写
2014/08/30 职场文书
乡镇领导班子四风整顿行动工作汇报
2014/10/25 职场文书
企业财务人员岗位职责
2015/04/14 职场文书
新闻通讯稿模板
2015/07/22 职场文书
部门主管竞聘书
2015/09/15 职场文书
python保存大型 .mat 数据文件报错超出 IO 限制的操作
2021/05/10 Python