Python的subprocess模块总结


Posted in Python onNovember 07, 2014

subprocess意在替代其他几个老的模块或者函数,比如:os.system os.spawn* os.popen* popen2.* commands.*
subprocess最简单的用法就是调用shell命令了,另外也可以调用程序,并且可以通过stdout,stdin和stderr进行交互。

subprocess的主类

subprocess.Popen(

      args, 

      bufsize=0, 

      executable=None,

      stdin=None,

      stdout=None, 

      stderr=None, 

      preexec_fn=None, 

      close_fds=False, 

      shell=False, 

      cwd=None, 

      env=None, 

      universal_newlines=False, 

      startupinfo=None, 

      creationflags=0)

1)、args可以是字符串或者序列类型(如:list,元组),用于指定进程的可执行文件及其参数。如果是序列类型,第一个元素通常是可执行文件的路径。我们也可以显式的使用executeable参数来指定可执行文件的路径。

2)、bufsize:指定缓冲。0 无缓冲,1 行缓冲,其他 缓冲区大小,负值 系统缓冲(全缓冲)

3)、stdin, stdout, stderr分别表示程序的标准输入、输出、错误句柄。他们可以是PIPE,文件描述符或文件对象,也可以设置为None,表示从父进程继承。

4)、preexec_fn只在Unix平台下有效,用于指定一个可执行对象(callable object),它将在子进程运行之前被调用。

5)、Close_sfs:在windows平台下,如果close_fds被设置为True,则新创建的子进程将不会继承父进程的输入、输出、错误管道。我们不能将close_fds设置为True同时重定向子进程的标准输入、输出与错误(stdin, stdout, stderr)。

6)、shell设为true,程序将通过shell来执行。

7)、cwd用于设置子进程的当前目录

8)、env是字典类型,用于指定子进程的环境变量。如果env = None,子进程的环境变量将从父进程中继承。
Universal_newlines:不同操作系统下,文本的换行符是不一样的。如:windows下用'/r/n'表示换,而Linux下用'/n'。如果将此参数设置为True,Python统一把这些换行符当作'/n'来处理。startupinfo与createionflags只在windows下用效,它们将被传递给底层的CreateProcess()函数,用于设置子进程的一些属性,如:主窗口的外观,进程的优先级等等。

9)、startupinfo与createionflags只在windows下有效,它们将被传递给底层的CreateProcess()函数,用于设置子进程的一些属性,如:主窗口的外观,进程的优先级等等。

Popen方法

1)、Popen.poll():用于检查子进程是否已经结束。设置并返回returncode属性。

2)、Popen.wait():等待子进程结束。设置并返回returncode属性。

3)、Popen.communicate(input=None):与子进程进行交互。向stdin发送数据,或从stdout和stderr中读取数据。可选参数input指定发送到子进程的参数。Communicate()返回一个元组:(stdoutdata, stderrdata)。注意:如果希望通过进程的stdin向其发送数据,在创建Popen对象的时候,参数stdin必须被设置为PIPE。同样,如果希望从stdout和stderr获取数据,必须将stdout和stderr设置为PIPE。

4)、Popen.send_signal(signal):向子进程发送信号。

5)、Popen.terminate():停止(stop)子进程。在windows平台下,该方法将调用Windows API TerminateProcess()来结束子进程。

6)、Popen.kill():杀死子进程。

7)、Popen.stdin:如果在创建Popen对象是,参数stdin被设置为PIPE,Popen.stdin将返回一个文件对象用于策子进程发送指令。否则返回None。

8)、Popen.stdout:如果在创建Popen对象是,参数stdout被设置为PIPE,Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回None。

9)、Popen.stderr:如果在创建Popen对象是,参数stdout被设置为PIPE,Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回None。

10)、Popen.pid:获取子进程的进程ID。

11)、Popen.returncode:获取进程的返回值。如果进程还没有结束,返回None。

12)、subprocess.call(*popenargs, **kwargs):运行命令。该函数将一直等待到子进程运行结束,并返回进程的returncode。文章一开始的例子就演示了call函数。如果子进程不需要进行交互,就可以使用该函数来创建。

13)、subprocess.check_call(*popenargs, **kwargs):与subprocess.call(*popenargs, **kwargs)功能一样,只是如果子进程返回的returncode不为0的话,将触发CalledProcessError异常。在异常对象中,包括进程的returncode信息。

以上全是抄的

在程序中运行其他程序或shell

可以这样写

subprocess.Popen('脚本/shell', shell=True)

也可以这样

subprocess.call('脚本/shell', shell=True)

两者的区别是前者无阻塞,会和主程序并行运行,后者必须等待命令执行完毕,如果想要前者编程阻塞可以这样
s = subprocess.Popen('脚本/shell', shell=True)

s.wait()

程序返回运行结果

有时候我们需要程序的返回结果,可以这样做。

>>> s = subprocess.Popen('ls -l', shell=True, stdout=subprocess.PIPE) 

>>> s.communicate() 

('\xe6\x80\xbb\xe7\x94\xa8\xe9\x87\x8f 152\n-rw------- 1 limbo limbo   808  7\xe6\x9c\x88  6 17:46 0000-00-00-welcome-to-jekyll.markdown.erb\ndrwx------ 2 limbo limbo  4096  8\xe6\x9c\x88 15 18:43 arg\ndrwx------ 2 limbo limbo  4096  8\xe6\x9c\x88  7 17:37 argv\ndrwxrwxr-x 2 limbo limbo  4096  9\xe6\x9c\x88 10 15:27 c\ndrwxrwxr-x 3 limbo limbo  4096  9\xe6\x9c\x88 11 14:35 d3\ndrwxrwxr-x 3 limbo limbo  4096  9\xe6\x9n', None)

它会返回一个元组:(stdoutdata, stderrdata)

subprocess还有另一种更简单方法,效果一样,它会返回stdout

>>> s = subprocess.check_output('ls -l', shell=True)

>>> s

'\xe6\x80\xbb\xe7\x94\xa8\xe9\x87\x8f 152\n-rw------- 1 limbo limbo   808  7\xe6\x9c\x88  6 17:46 0000-00-00-welcome-to-jekyll.markdown.erb\ndrwx------ 2 limbo limbo  4096  8\xe6\x9c\x88 15 18:43 arg\ndrwx------ 2 limbo limbo  4096  8\xe6\x9c\x88  7 17:37 argv\ndrwxrwxr-x 2 limbo limbo  4096  9\xe6\x9c\x88 10 15:27 c\ndrwxrwxr-x 3 limbo limbo  4096  9\xe6\x9c\x88 11 14:35 d3\ndrwxrwxr-x 3 limbo limbo  4096  9\xe6\x9n'

前者可以实现更多的交互,如stderr和stdin,但是在前面调用Popen的时候要实现定义Popen(stdin=subprocess.PIPE, stderr=subprocess)

给子进程输入

import subprocess

child = subprocess.Popen(["cat"], stdin=subprocess.PIPE)

child.communicate("vamei")

()不为空,则写入subprocess.PIPE,为空,则从subprocess.PIPE读取

subprocess.PIPE

#!/usr/bin/env python

import subprocess

child1 = subprocess.Popen(["ls","-l"], stdout=subprocess.PIPE)

child2 = subprocess.Popen(["wc"], stdin=child1.stdout,stdout=subprocess.PIPE)

out = child2.communicate()

print out

实际上是这样的过程

child1.stdout-->subprocess.PIPE
child2.stdin<--subprocess.PIPE
child2.stdout-->subprocess.PIPE

要注意的是,communicate()是Popen对象的一个方法,该方法会阻塞父进程,直到子进程完成。

subprocess.PIPE实际上为文本流提供一个缓存区。直到communicate()方法从PIPE中读取出PIPE中的文本.要注意的是,communicate()是Popen对象的一个方法,该方法会阻塞父进程,直到子进程完成。

Python 相关文章推荐
Python编写百度贴吧的简单爬虫
Apr 02 Python
python基于pygame实现响应游戏中事件的方法(附源码)
Nov 11 Python
教你用Type Hint提高Python程序开发效率
Aug 08 Python
Python爬虫番外篇之Cookie和Session详解
Dec 27 Python
python3爬取数据至mysql的方法
Jun 26 Python
PyCharm配置mongo插件的方法
Nov 30 Python
Falsk 与 Django 过滤器的使用与区别详解
Jun 04 Python
Python Django框架防御CSRF攻击的方法分析
Oct 18 Python
PYcharm 激活方法(推荐)
Mar 23 Python
python构造IP报文实例
May 05 Python
Python约瑟夫生者死者小游戏实例讲解
Jan 04 Python
python操作xlsx格式文件并读取
Jun 02 Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
零基础写python爬虫之爬虫框架Scrapy安装配置
Nov 06 #Python
零基础写python爬虫之爬虫编写全记录
Nov 06 #Python
零基础写python爬虫之打包生成exe文件
Nov 06 #Python
You might like
一个阿拉伯数字转中文数字的函数
2006/10/09 PHP
PHP学习 变量使用总结
2011/03/24 PHP
php中flush()、ob_flush()、ob_end_flush()的区别介绍
2013/02/17 PHP
深入PHP nl2br()格式化输出的详解
2013/06/05 PHP
神盾加密解密教程(一)PHP变量可用字符
2014/05/28 PHP
PHP 前加at符合@的作用解析
2015/07/31 PHP
PHP使用PDO操作数据库的乱码问题解决方法
2016/04/08 PHP
Javascript图片上传前的本地预览实例
2014/06/16 Javascript
详解AngularJS中自定义指令的使用
2015/06/17 Javascript
JS获取CSS样式(style/getComputedStyle/currentStyle)
2016/01/19 Javascript
js控制文本框只能输入中文、英文、数字与指定特殊符号的实现代码
2016/09/09 Javascript
微信小程序开发之麦克风动画 帧动画 放大 淡出
2017/04/18 Javascript
微信小程序 支付后台java实现实例
2017/05/09 Javascript
Angular.js组件之input mask对input输入进行格式化详解
2017/07/10 Javascript
详谈js对url进行编码和解码(三种方式的区别)
2017/08/16 Javascript
详解如何让Express支持async/await
2017/10/09 Javascript
详解微信小程序-获取用户session_key,openid,unionid - 后端为nodejs
2019/04/29 NodeJs
element表格翻页第2页从1开始编号(后端从0开始分页)
2019/12/10 Javascript
JS Html转义和反转义(html编码和解码)的实现与使用方法总结
2020/03/10 Javascript
Nuxt的路由动画效果案例
2020/11/06 Javascript
Python实用技巧之利用元组代替字典并为元组元素命名
2018/07/11 Python
python 判断linux进程,并杀死进程的实现方法
2019/07/01 Python
利用ImageAI库只需几行python代码实现目标检测
2019/08/09 Python
如何用Anaconda搭建虚拟环境并创建Django项目
2020/08/02 Python
python3.7.3版本和django2.2.3版本是否可以兼容
2020/09/01 Python
HTML5通用接口详解
2016/06/12 HTML / CSS
上海某公司.net方向笔试题
2014/09/14 面试题
审计主管岗位职责
2014/01/31 职场文书
商学院大学生求职的自我评价
2014/03/12 职场文书
环保公益策划方案
2014/08/15 职场文书
学校感恩节活动策划方案
2014/10/06 职场文书
公司离职证明标准格式
2014/11/18 职场文书
陕西导游词
2015/02/04 职场文书
2015年工会工作总结
2015/03/30 职场文书
行政上诉状范文
2015/05/23 职场文书
Python绘制分类图的方法
2021/04/20 Python