python 进程的几种创建方式详解


Posted in Python onAugust 29, 2019

在新创建的子进程中,会把父进程的所有信息复制一份,它们之间的数据互不影响。

使用os.fork()创建

该方式只能用于Unix/Linux操作系统中,在windows不能用。

import os
# 注意,fork函数,只在Unix/Linux/Mac上运行,windows不可以
pid = os.fork()
# 子进程永远返回0,而父进程返回子进程的ID。
if pid == 0:
  print('子进程')
else:
  print('父进程')

使用Process类类创建

multiprocessing模块提供了一个Process类来代表一个进程对象,下面的例子演示了启动一个子进程并等待其结束:

from multiprocessing import Process
import time

def test(name, age):
  for i in range(5):
    print("--test--%s\t%d" % (name, age))
    time.sleep(1)
  print("子进程结束")
if __name__ == '__main__':
  p = Process(target=test, args=("aaa", 18))
  p.start()
  # 等待进程实例执⾏结束,或等待多少秒;
  p.join() # 等待的最长时间
  print("主进程结束")
"""
输出结果:
--test--aaa 18
--test--aaa 18
--test--aaa 18
--test--aaa 18
--test--aaa 18
子进程结束
主进程结束
"""

join()方法表示主进程等待子进程执行完成后继续往下执行,如果把join()注释掉,则主进程开启子进程后不停顿继续往下执行,然后等待子进程完成程序结束。

把join()方法注释掉的结果:

"""
输出结果:
主进程结束
--test--aaa 18
--test--aaa 18
--test--aaa 18
--test--aaa 18
--test--aaa 18
子进程结束
"""

使用Process子类创建

创建新的进程还能够使用类的方式,可以自定义一个类,继承Process类,每次实例化这个类的时候,就等同于实例化一个进程对象,请看下面的实例:

from multiprocessing import Process
import time
import os
class MyProcess(Process):
  def __init__(self):
    # 如果子类要重写__init__是必须要先调用父类的__init__否则会报错
    # Process.__init__(self)  
    super(MyProcess,self).__init__()
  # 重写Porcess的run()方法
  def run(self):
    print("子进程(%s)开始执行,父进程(%s)" % (os.getpid(), os.getppid()))
    for i in range(5):
      print("--1--")
      time.sleep(1)
if __name__ == '__main__':
  t_start = time.time()
  p = MyProcess()
  p.start()
  # p.join()
  print("main")
  for i in range(5):
    print("--main--")
    time.sleep(1)

使用进程池Pool创建

当需要创建的子进程数量不多时,可以直接利用multiprocessing中的Process动态成生多个进程,但如果是上百甚至上千个目标,手动的去创建进程的工作量巨大,此时就可以用到multiprocessing模块提供的Pool方法。

初始化Pool时,可以指定一个最大进程数,当有新的请求提交到Pool中时,如果池还没有满,那么就会创建一个新的进程用来执行该请求;但如果池中的进程数已经达到指定的最大值,那么该请求就会等待,直到池中有进程结束,才会创建新的进程来执行,请看下面的实例:

from multiprocessing import Pool
import os
import time


def worker(num):
  # for i in range(3):
  print("----pid=%d num=%d---" % (os.getpid(), num))
  time.sleep(1)

if __name__ == '__main__':
  # 定义一个进程池,最大进程数3
  pool = Pool(3)
  for i in range(10):
    print("---%d--" % i)
    # 使用非阻塞方式调用func(并行执行),一般用这个。
    # apply堵塞方式必须等待上一个进程退出才能执行下一个进程,用的不多。
    pool.apply_async(worker, (i,))
  # 关闭进程池
  pool.close()
  # 等待所有子进程结束,主进程一般用来等待
  pool.join() # 进程池后面无操作时必须有这句

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python sort、sorted高级排序技巧
Nov 21 Python
Python中的迭代器漫谈
Feb 03 Python
python通过邮件服务器端口发送邮件的方法
Apr 30 Python
Windows中使用wxPython和py2exe开发Python的GUI程序的实例教程
Jul 11 Python
利用python爬取软考试题之ip自动代理
Mar 28 Python
Python+selenium实现自动循环扔QQ邮箱漂流瓶
May 29 Python
使用python创建Excel工作簿及工作表过程图解
May 27 Python
基于nexus3配置Python仓库过程详解
Jun 15 Python
python定时截屏实现
Nov 02 Python
Django利用AJAX技术实现博文实时搜索
May 06 Python
Python+Appium自动化测试的实战
Jun 30 Python
Python经常使用的一些内置函数
Apr 11 Python
python 列表推导式使用详解
Aug 29 #Python
django 数据库连接模块解析及简单长连接改造方法
Aug 29 #Python
解决Django连接db遇到的问题
Aug 29 #Python
Python pandas实现excel工作表合并功能详解
Aug 29 #Python
python openCV获取人脸部分并存储功能
Aug 28 #Python
python lambda表达式在sort函数中的使用详解
Aug 28 #Python
python实现微信小程序用户登录、模板推送
Aug 28 #Python
You might like
PHP iconv 解决utf-8和gb2312编码转换问题
2010/04/12 PHP
PHP-CGI远程代码执行漏洞分析与防范
2017/05/07 PHP
Jquery实现鼠标移上弹出提示框、移出消失思路及代码
2013/05/19 Javascript
jquery submit ie6下失效的原因分析及解决方法
2013/11/15 Javascript
ajax提交表单实现网页无刷新注册示例
2014/05/08 Javascript
javascript实现的HashMap类代码
2014/06/27 Javascript
javascript实现动态标签云
2015/10/16 Javascript
基于javascript实现图片预加载
2016/01/05 Javascript
JQuery学习总结【一】
2016/12/01 Javascript
vue实现ajax滚动下拉加载,同时具有loading效果(推荐)
2017/01/11 Javascript
vuejs2.0运用原生js实现简单的拖拽元素功能示例
2017/02/24 Javascript
JavaScript实现类似淘宝的购物车效果
2017/03/16 Javascript
vue实现tab切换外加样式切换方法
2018/03/16 Javascript
详解VUE 对element-ui中的ElTableColumn扩展
2018/03/28 Javascript
使用layui 渲染table数据表格的实例代码
2018/08/19 Javascript
element-ui 表格数据时间格式化的方法
2018/08/24 Javascript
JS常见构造模式实例对比分析
2018/08/27 Javascript
JS监听事件的叠加和移除功能
2018/11/19 Javascript
vue实现购物车小案例
2019/09/27 Javascript
node.js使用yargs处理命令行参数操作示例
2020/02/11 Javascript
vue全屏事件开发详解
2020/06/17 Javascript
Pthon批量处理将pdb文件生成dssp文件
2015/06/21 Python
python查找指定具有相同内容文件的方法
2015/06/28 Python
Python实现拷贝多个文件到同一目录的方法
2016/09/19 Python
python线程中同步锁详解
2018/04/27 Python
win8下python3.4安装和环境配置图文教程
2018/07/31 Python
对python打乱数据集中X,y标签对的方法详解
2018/12/14 Python
opencv导入头文件时报错#include的解决方法
2019/07/31 Python
使用python模拟高斯分布例子
2019/12/09 Python
美国最大的旗帜经销商:Carrot-Top
2018/02/26 全球购物
工程总经理工作职责
2013/12/09 职场文书
某某同志考察材料
2014/05/28 职场文书
学校党的群众路线教育实践活动领导班子对照检查材料
2014/09/25 职场文书
2014年纪检部工作总结
2014/11/12 职场文书
试用期旷工辞退通知书
2015/04/17 职场文书
2015年班主任德育工作总结
2015/05/21 职场文书