Python Popen：同时写入标准输出和日志文件

Question

我正在使用Popen调用一个不断将其stdout和stderr写入日志文件的shell脚本。有什么办法可以连续（到屏幕上）同时输出日志文件，或者让shell脚本同时写入日志文件和stdout？

我基本上想要做这样的事情在Python：

cat file 2>&1 | tee -a logfile #"cat file" will be replaced with some script 

同样，这种管标准错误/标准输出一起三通，它都写入到标准输出和我的日志文件。

我知道如何将stdout和stderr写入Python中的日志文件。当我被困在是如何把这些复制到屏幕：

subprocess.Popen("cat file", shell=True, stdout=logfile, stderr=logfile) 

当然我可以做这样的事情，但有什么办法做到这一点没有三通和外壳文件描述符重定向？：

subprocess.Popen("cat file 2>&1 | tee -a logfile", shell=True) 

Answer 1

您可以使用一个管道，从程序的stdout读取数据并将其写入到所有你想要的地方：

import sys 
import subprocess 

logfile = open('logfile', 'w') 
proc=subprocess.Popen(['cat', 'file'], stdout=subprocess.PIPE, stderr=subprocess.STDOUT) 
for line in proc.stdout: 
    sys.stdout.write(line) 
    logfile.write(line) 
proc.wait() 

UPDATE

在Python 3中，universal_newlines参数控制着如何使用管道。如果False，管道读取返回bytes对象，并可能需要解码（例如，line.decode('utf-8')）以获取字符串。如果True，蟒蛇为你做

Changed in version 3.3: When universal_newlines is True, the class uses the encoding locale.getpreferredencoding(False) instead of locale.getpreferredencoding(). See the io.TextIOWrapper class for more information on this change.

Answer 2

解码为模拟：subprocess.call("command 2>&1 | tee -a logfile", shell=True)，而不必调用tee命令：

#!/usr/bin/env python2 
from subprocess import Popen, PIPE, STDOUT 

p = Popen("command", stdout=PIPE, stderr=STDOUT, bufsize=1) 
with p.stdout, open('logfile', 'ab') as file: 
    for line in iter(p.stdout.readline, b''): 
     print line, #NOTE: the comma prevents duplicate newlines (softspace hack) 
     file.write(line) 
p.wait() 

要解决可能的缓冲问题（如果输出延迟），请参阅Python: read streaming input from subprocess.communicate()链接。

这里是Python 3的版本：

#!/usr/bin/env python3 
import sys 
from subprocess import Popen, PIPE, STDOUT 

with Popen("command", stdout=PIPE, stderr=STDOUT, bufsize=1) as p, \ 
    open('logfile', 'ab') as file: 
    for line in p.stdout: # b'\n'-separated lines 
     sys.stdout.buffer.write(line) # pass bytes as is 
     file.write(line)