Python_cmd的各种实现方法及优劣（subprocess.Popen, os.system和commands.getstatusoutput）

目前我使用到的python中执行cmd的方式有三种：

1. 使用os.system("cmd")

这是最简单的一种方法，特点是执行的时候程序会打出cmd在linux上执行的信息。使用前需要import os。

[python] view plaincopyprint?

1. os.system("ls")  

2. 使用Popen模块产生新的process

现在大部分人都喜欢使用Popen。Popen方法不会打印出cmd在linux上执行的信息。的确，Popen非常强大，支持多种参数和模式。使用前需要from subprocess import Popen, PIPE。但是Popen函数有一个缺陷，就是它是一个阻塞的方法。如果运行cmd时产生的内容非常多，函数非常容易阻塞住。解决办法是不使用wait()方法，但是也不能获得执行的返回值了。

Popen原型是：

[python] view plaincopyprint?

1. subprocess.Popen(args, bufsize=0, executable=None, stdin=None, stdout=None, stderr=None, preexec_fn=None, close_fds=False, shell=False, cwd=None, env=None, universal_newlines=False, startupinfo=None, creationflags=0)  

参数bufsize：指定缓冲。我到现在还不清楚这个参数的具体含义，望各个大牛指点。

参数executable用于指定可执行程序。一般情况下我们通过args参数来设置所要运行的程序。如果将参数shell设为 True，executable将指定程序使用的shell。在windows平台下，默认的shell由COMSPEC环境变量来指定。

参数stdin, stdout, stderr分别表示程序的标准输入、输出、错误句柄。他们可以是PIPE，文件描述符或文件对象，也可以设置为None，表示从父进程继承。

参数preexec_fn只在Unix平台下有效，用于指定一个可执行对象（callable object），它将在子进程运行之前被调用。

参数Close_sfs：在windows平台下，如果close_fds被设置为True，则新创建的子进程将不会继承父进程的输入、输出、错误管 道。我们不能将close_fds设置为True同时重定向子进程的标准输入、输出与错误(stdin, stdout, stderr)。

如果参数shell设为true，程序将通过shell来执行。

参数cwd用于设置子进程的当前目录。

参数env是字典类型，用于指定子进程的环境变量。如果env = None，子进程的环境变量将从父进程中继承。

参数Universal_newlines:不同操作系统下，文本的换行符是不一样的。如：windows下用’/r/n’表示换，而Linux下用 ‘/n’。如果将此参数设置为True，Python统一把这些换行符当作’/n’来处理。

参数startupinfo与createionflags只在windows下用效，它们将被传递给底层的CreateProcess()函数，用 于设置子进程的一些属性，如：主窗口的外观，进程的优先级等等。

subprocess.PIPE
在创建Popen对象时，subprocess.PIPE可以初始化stdin, stdout或stderr参数，表示与子进程通信的标准流。

subprocess.STDOUT
创建Popen对象时，用于初始化stderr参数，表示将错误通过标准输出流输出。

Popen的方法：

Popen.poll() 
用于检查子进程是否已经结束。设置并返回returncode属性。

Popen.wait() 
等待子进程结束。设置并返回returncode属性。

Popen.communicate(input=None)
与子进程进行交互。向stdin发送数据，或从stdout和stderr中读取数据。可选参数input指定发送到子进程的参数。 Communicate()返回一个元组：(stdoutdata, stderrdata)。注意：如果希望通过进程的stdin向其发送数据，在创建Popen对象的时候，参数stdin必须被设置为PIPE。同样，如 果希望从stdout和stderr获取数据，必须将stdout和stderr设置为PIPE。

Popen.send_signal(signal) 
向子进程发送信号。

Popen.terminate()
停止(stop)子进程。在windows平台下，该方法将调用Windows API TerminateProcess（）来结束子进程。

Popen.kill()
杀死子进程。

Popen.stdin 
如果在创建Popen对象是，参数stdin被设置为PIPE，Popen.stdin将返回一个文件对象用于策子进程发送指令。否则返回None。

Popen.stdout 
如果在创建Popen对象是，参数stdout被设置为PIPE，Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回 None。

Popen.stderr 
如果在创建Popen对象是，参数stdout被设置为PIPE，Popen.stdout将返回一个文件对象用于策子进程发送指令。否则返回 None。

Popen.pid 
获取子进程的进程ID。

Popen.returncode 
获取进程的返回值。如果进程还没有结束，返回None。

例如：

[python] view plaincopyprint?

1. p = Popen("cp -rf a/* b/", shell=True, stdout=PIPE, stderr=PIPE)  

2. p.wait()  

3. if p.returncode != 0:  

4.     print "Error."  

5.     return -1  

3. 使用commands.getstatusoutput方法

这个方法也不会打印出cmd在linux上执行的信息。这个方法唯一的优点是，它不是一个阻塞的方法。即没有Popen函数阻塞的问题。使用前需要import commands。

例如：

[python] view plaincopyprint?

1. status, output = commands.getstatusoutput("ls")  

还有只获得output和status的方法：

[python] view plaincopyprint?

1. commands.getoutput("ls")  

2. commands.getstatus("ls")  

要获得shell命令的输出只需要`cmd`就可以了,

需要得到命令执行的状态则需要判断$?的值, 在Python中有一个模块commands也很容易做到以上的效果.

看一下三个函数:

1). commands.getstatusoutput(cmd)

用os.popen()执行命令cmd, 然后返回两个元素的元组(status, result). cmd执行的方式是{ cmd ; } 2>&1, 这样返回结果里面就会包含标准输出和标准错误.

2). commands.getoutput(cmd)

只返回执行的结果, 忽略返回值.

3). commands.getstatus(file)

返回ls -ld file执行的结果.

看一下这些函数使用的例子:

>>> import commands

>>> commands.getstatusoutput('ls /bin/ls')

(0, '/bin/ls')

>>> commands.getstatusoutput('cat /bin/junk')

(256, 'cat: /bin/junk: No such file or directory')

>>> commands.getstatusoutput('/bin/junk')

(256, 'sh: /bin/junk: not found')

>>> commands.getoutput('ls /bin/ls')

'/bin/ls'

>>> commands.getstatus('/bin/ls')

'-rwxr-xr-x 1 root 13352 Oct 14 1994 /bin/ls'

Python中执行系统命令常见方法有两种：

两者均需 import os

(1) os.system

# 仅仅在一个子终端运行系统命令，而不能获取命令执行后的返回信息

system(command) -> exit_status
Execute the command (a string) in a subshell.

# 如果再命令行下执行，结果直接打印出来

1	>>> os.system('ls')

3	11.wmv            books     downloads   Pictures  python

02

>>>tmp

04	['dump_db_pickle.py ',

06	'dump_db_shelve.py ',

08	'__init__.py ',

10	'make_db_pickle_recs.py ',

12	'peopleinteract_query.py ',

14	'testargv.py ',

16	'update_db_pickle.py ',

2	>>> subprocess.call (["cmd", "arg1", "arg2"],shell=True)

获取返回和输出:

1	import subprocess

3	for line in p.stdout.readlines():

5	retval = p.wait()

(4)  使用模块commands模块

1	>>> import commands

3	['__all__', '__builtins__', '__doc__', '__file__', '__name__', 'getoutput', 'getstatus','getstatusoutput', 'mk2arg', 'mkarg']

5	'Wed Jun 10 19:39:57 CST 2009'

7	>>> commands.getstatusoutput("date")

查看源代码

打印

1	Traceback (most recent call last):

3

main()

5	fax.sendFax()

7	os.popen(cmd)

<div alt2"="" style="margin: 0px !important; padding: 0px !important; border: 0px !important; outline: 0px !important; font-size: 1em !important; vertical-align: baseline !important; background-image: none !important; background-color: rgb(248, 248, 248) !important; float: none !important; position: static !important; left: auto !important; top: auto !important; right: auto !important; bottom: auto !important; height: auto !important; width: auto !important; line-height: 1.1em !important; direction: ltr !important;">

8	UnicodeEncodeError: 'ascii' codec can't encode characters in position 46-52: ordinal not inrange(128)

​os.system('cat /proc/cpuinfo')


output = os.popen('cat /proc/cpuinfo')


print output.read()


通过 os.popen() 返回的是 file read 的对象，对其进行读取 read() 的操作可以看到执行的输出。但是怎么读取程序执行的返回值呢。Google 给我指向了 commands — Utilities for running commands。


这样通过 commands.getstatusoutput() 一个方法就可以获得到返回值和输出，非常好用。


(status, output) = commands.getstatusoutput('cat /proc/cpuinfo')


print status, output


Python Document 中给的一个例子，很清楚的给出了各方法的返回。


>>> import commands


>>> commands.getstatusoutput('ls /bin/ls')


(0, '/bin/ls')


>>> commands.getstatusoutput('cat /bin/junk')


(256, 'cat: /bin/junk: No such file or directory')


>>> commands.getstatusoutput('/bin/junk')


(256, 'sh: /bin/junk: not found')


>>> commands.getoutput('ls /bin/ls')


'/bin/ls'
>>> commands.getstatus('/bin/ls')


'-rwxr-xr-x 1 root 13352 Oct 14 1994 /bin/ls' 










os.system(cmd)的返回值只会有0(成功),1,2


os.popen(cmd)会把执行的cmd的输出作为值返回。
 
Python调用Shell脚本，有两种方法：os.system(cmd)或os.popen(cmd),前者返回值是脚本的退出状态码，后者的返回值是脚本执行过程中的输出内容。实际使用时视需求情况而选择。
现假定有一个shell脚本test.sh：
#!/bin/bash
1. echo "hello world!"
2. exit 3




os.system(cmd):


该方法在调用完shell脚本后，返回一个16位的二进制数，低位为杀死所调用脚本的信号号码，高位为脚本的退出状态码，即脚本中“exit 1”的代码执行后，os.system函数返回值的高位数则是1，如果低位数是0的情况下，则函数的返回值是0×100,换算为10进制得到256。


如果我们需要获得os.system的正确返回值，那使用位移运算可以还原返回值：
1. >>>  n = os.system(test.sh)
2. >>> n >> 8
3. >>> 3
os.popen(cmd):


这种调用方式是通过管道的方式来实现，函数返回一个file-like的对象，里面的内容是脚本输出的内容（可简单理解为echo输出的内容）。使用os.popen调用test.sh的情况：


python调用Shell脚本，有两种方法：os.system(cmd)或os.popen(cmd),前者返回值是脚本的退出状态码，后者的返回值是脚本执行过程中的输出内容。实际使用时视需求情况而选择。


明显地，像调用”ls”这样的shell命令，应该使用popen的方法来获得内容


以前就疑惑popen和system有什么不同，今天实际的应用，才让我恍然大悟


os.popen（）可以实现一个“管道”，从这个命令获取的值可以继续被调用。而os.system不同，它只是调用，调用完后自身退出，可能返回个0吧


比如，我想得到ntpd的进程id，就要这么做：


os.popen('ps -C ntpd | grep -v CMD |awk '{ print $1 }').readlines()[0]