浅析Python多线程下的变量问题


Posted in Python onApril 28, 2015

在多线程环境下,每个线程都有自己的数据。一个线程使用自己的局部变量比使用全局变量好,因为局部变量只有线程自己能看见,不会影响其他线程,而全局变量的修改必须加锁。

但是局部变量也有问题,就是在函数调用的时候,传递起来很麻烦:

def process_student(name):
  std = Student(name)
  # std是局部变量,但是每个函数都要用它,因此必须传进去:
  do_task_1(std)
  do_task_2(std)

def do_task_1(std):
  do_subtask_1(std)
  do_subtask_2(std)

def do_task_2(std):
  do_subtask_2(std)
  do_subtask_2(std)

每个函数一层一层调用都这么传参数那还得了?用全局变量?也不行,因为每个线程处理不同的Student对象,不能共享。

如果用一个全局dict存放所有的Student对象,然后以thread自身作为key获得线程对应的Student对象如何?

global_dict = {}

def std_thread(name):
  std = Student(name)
  # 把std放到全局变量global_dict中:
  global_dict[threading.current_thread()] = std
  do_task_1()
  do_task_2()

def do_task_1():
  # 不传入std,而是根据当前线程查找:
  std = global_dict[threading.current_thread()]
  ...

def do_task_2():
  # 任何函数都可以查找出当前线程的std变量:
  std = global_dict[threading.current_thread()]
  ...

这种方式理论上是可行的,它最大的优点是消除了std对象在每层函数中的传递问题,但是,每个函数获取std的代码有点丑。

有没有更简单的方式?

ThreadLocal应运而生,不用查找dict,ThreadLocal帮你自动做这件事:

import threading

# 创建全局ThreadLocal对象:
local_school = threading.local()

def process_student():
  print 'Hello, %s (in %s)' % (local_school.student, threading.current_thread().name)

def process_thread(name):
  # 绑定ThreadLocal的student:
  local_school.student = name
  process_student()

t1 = threading.Thread(target= process_thread, args=('Alice',), name='Thread-A')
t2 = threading.Thread(target= process_thread, args=('Bob',), name='Thread-B')
t1.start()
t2.start()
t1.join()
t2.join()

执行结果:

Hello, Alice (in Thread-A)
Hello, Bob (in Thread-B)

全局变量local_school就是一个ThreadLocal对象,每个Thread对它都可以读写student属性,但互不影响。你可以把local_school看成全局变量,但每个属性如local_school.student都是线程的局部变量,可以任意读写而互不干扰,也不用管理锁的问题,ThreadLocal内部会处理。

可以理解为全局变量local_school是一个dict,不但可以用local_school.student,还可以绑定其他变量,如local_school.teacher等等。

ThreadLocal最常用的地方就是为每个线程绑定一个数据库连接,HTTP请求,用户身份信息等,这样一个线程的所有调用到的处理函数都可以非常方便地访问这些资源。

Python 相关文章推荐
python字符串替换的2种方法
Nov 30 Python
python批量制作雷达图的实现方法
Jul 26 Python
python中异常报错处理方法汇总
Nov 20 Python
python 生成器协程运算实例
Sep 04 Python
基于python select.select模块通信的实例讲解
Sep 21 Python
Python实现的多进程和多线程功能示例
May 29 Python
python PyQt5/Pyside2 按钮右击菜单实例代码
Aug 17 Python
python实现图片二值化及灰度处理方式
Dec 07 Python
python 图像插值 最近邻、双线性、双三次实例
Jul 05 Python
matplotlib之pyplot模块之标题(title()和suptitle())
Feb 22 Python
Python入门之基础语法详解
May 11 Python
Python还能这么玩之只用30行代码从excel提取个人值班表
Jun 05 Python
python实现向ppt文件里插入新幻灯片页面的方法
Apr 28 #Python
Python实现对PPT文件进行截图操作的方法
Apr 28 #Python
在Python下尝试多线程编程
Apr 28 #Python
Python输出PowerPoint(ppt)文件中全部文字信息的方法
Apr 28 #Python
python使用append合并两个数组的方法
Apr 28 #Python
python实现的简单文本类游戏实例
Apr 28 #Python
初步解析Python下的多进程编程
Apr 28 #Python
You might like
php flush无效,IIS7下php实时输出的方法
2016/08/25 PHP
thinkPHP框架中layer.js的封装与使用方法示例
2019/01/18 PHP
五个jQuery图片画廊插件 推荐
2011/05/12 Javascript
chrome下img加载对height()的影响示例探讨
2014/05/26 Javascript
js获取时间并实现字符串和时间戳之间的转换
2015/01/05 Javascript
jQuery UI设置固定日期选择特效代码分享
2015/08/27 Javascript
jQuery的Ajax用户认证和注册技术实例教程(附demo源码)
2015/12/08 Javascript
JavaScript中对象的不同创建方法
2016/08/12 Javascript
vue+canvas实现炫酷时钟效果的倒计时插件(已发布到npm的vue2插件,开箱即用)
2018/11/05 Javascript
JS实现时间校验的代码
2020/05/25 Javascript
jquery实现简单自动轮播图效果
2020/07/29 jQuery
[01:06:30]DOTA2-DPC中国联赛定级赛 Phoenix vs DLG BO3第二场 1月9日
2021/03/11 DOTA
python 解析XML python模块xml.dom解析xml实例代码
2014/02/07 Python
Python实现的HMacMD5加密算法示例
2018/04/03 Python
基于python 二维数组及画图的实例详解
2018/04/03 Python
Python中py文件引用另一个py文件变量的方法
2018/04/29 Python
Django Form 实时从数据库中获取数据的操作方法
2019/07/25 Python
浅谈图像处理中掩膜(mask)的意义
2020/02/19 Python
Python itertools.product方法代码实例
2020/03/27 Python
解决django无法访问本地static文件(js,css,img)网页里js,cs都加载不了
2020/04/07 Python
Python实现清理微信僵尸粉功能示例【基于itchat模块】
2020/05/29 Python
Python实现数字的格式化输出
2020/08/01 Python
Python爬虫实战案例之爬取喜马拉雅音频数据详解
2020/12/07 Python
Omio葡萄牙:全欧洲低价大巴、火车和航班搜索和比价
2019/02/09 全球购物
2014自荐信的写作技巧
2014/01/28 职场文书
反四风个人对照检查材料思想汇报
2014/09/25 职场文书
大专毕业生自我鉴定范文(2篇)
2014/09/27 职场文书
党的群众路线教育实践活动总结材料
2014/10/30 职场文书
惊天动地观后感
2015/06/10 职场文书
2015暑期社会实践通讯稿
2015/07/18 职场文书
房产销售员2015年终工作总结
2015/10/22 职场文书
2015年秋学期师德师风建设工作总结
2015/10/23 职场文书
《全神贯注》教学反思
2016/02/22 职场文书
用python批量解压带密码的压缩包
2021/05/31 Python
Nginx实现负载均衡的项目实践
2022/03/18 Servers
xhunter1.sys可以删除嘛? win11提示xhunter1.sys驱动不兼容解决办法
2022/09/23 数码科技