Python subprocess.Popen 通过管道进行通信

Question

我希望能够使用 Popen.communicate 并将标准输出记录到文件中（除了从 communicate() 返回之外）。

这就是我想要的 - 但是这真的是一个好主意吗？

cat_task = subprocess.Popen(["cat"],  stdout=subprocess.PIPE, stdin=subprocess.PIPE)
tee_task = subprocess.Popen(["tee", "-a", "/tmp/logcmd"], stdin=cat_task.stdout, 
    stdout = subprocess.PIPE, close_fds=True)
cat_task.stdout = tee_task.stdout #since cat's stdout is consumed by tee, read from tee.
cat_task.communicate("hello there")
('hello there', None)

这有什么问题吗？看看 communications 的 impl 看起来不错，但是有更好的方法吗？

Answer 1

根据您对“更好”的定义，我想说以下内容可能更好，因为它避免了额外的发球流程：

import subprocess

def logcommunicate(self, s):
    std = self.oldcommunicate(s)
    self.logfilehandle.write(std[0])
    return std

subprocess.Popen.oldcommunicate = subprocess.Popen.communicate
subprocess.Popen.communicate = logcommunicate
logfh = open("/tmp/communicate.log", "a")

proc = subprocess.Popen(['cat'], stdin=subprocess.PIPE, stdout=subprocess.PIPE)
proc.logfilehandle = logfh

result = proc.communicate("hello there\n")
print result

简而言之，它为 communicate() 提供了一个包装器将 stdout 写入您选择的文件句柄，然后返回原始元组供您使用。我省略了异常处理；如果程序更关键，您可能应该添加这一点。另外，如果您希望创建多个 Popen 对象并希望它们全部记录到同一个文件，您可能应该将 logcommunicate() 安排为线程安全的（同步的）每个文件句柄）。您可以轻松扩展此解决方案以写入 stdout 和 stderr 的单独文件。

请注意，如果您希望来回传递大量数据，那么 communicate() 可能不是最佳选择，因为它会在内存中缓冲所有内容。