如何在Python中使用子进程重定向输出？

Question

我在命令行中做什么：

cat file1 file2 file3 > myfile

我想用 python 做什么：

import subprocess, shlex
my_cmd = 'cat file1 file2 file3 > myfile'
args = shlex.split(my_cmd)
subprocess.call(args) # spits the output in the window i call my python program

Answer 1

在 Python 3.5+ 中，要重定向输出，只需将 stdout 参数的打开文件句柄传递给 subprocess.run：

# Use a list of args instead of a string
input_files = ['file1', 'file2', 'file3']
my_cmd = ['cat'] + input_files
with open('myfile', "w") as outfile:
    subprocess.run(my_cmd, stdout=outfile)

正如其他人指出的那样，为此目的使用像 cat 这样的外部命令是完全无关的。

Answer 2

更新：不鼓励使用 os.system，尽管它在 Python 3 中仍然可用。

---

使用 os.system：

os.system(my_cmd)

如果你真的想使用子进程，这里是解决方案（主要来自子进程的文档）：

p = subprocess.Popen(my_cmd, shell=True)
os.waitpid(p.pid, 0)

OTOH，您可以完全避免系统调用：

import shutil

with open('myfile', 'w') as outfile:
    for infile in ('file1', 'file2', 'file3'):
        shutil.copyfileobj(open(infile), outfile)

Answer 3

@PoltoS 我想加入一些文件，然后处理生成的文件。我认为使用 cat 是最简单的选择。有没有更好/Pythonic 的方法来做到这一点？

当然：

with open('myfile', 'w') as outfile:
    for infilename in ['file1', 'file2', 'file3']:
        with open(infilename) as infile:
            outfile.write(infile.read())

Answer 4

size = 'ffprobe -v error -show_entries format=size -of default=noprint_wrappers=1:nokey=1 dump.mp4 > file'
proc = subprocess.Popen(shlex.split(size), shell=True)
time.sleep(1)
proc.terminate() #proc.kill() modify it by a suggestion
size = ""
with open('file', 'r') as infile:
    for line in infile.readlines():
        size += line.strip()

print(size)
os.remove('file')

当你使用 subprocess 时，必须杀死该进程。这是一个例子。如果你不杀死该进程，file 将是空的，你什么也读不到。可以在Windows上运行。我无法确保它可以在Unix上运行。

Answer 5

如果您的 args 看起来像 ['sh', '-c', 'cat file1 file2 file3 > ，它将起作用。 myfile'] 这将意味着 cat 的输出不会传递 Python 并在 shell 中生成（插入 sh -c 你可以使用 bash-c)

Answer 6

一个有趣的情况是通过向文件附加类似的文件来更新文件。这样就不必在此过程中创建新文件。它在需要附加大文件的情况下特别有用。这是直接从 python 使用终端命令行的一种可能性。

import subprocess32 as sub

with open("A.csv","a") as f:
    f.flush()
    sub.Popen(["cat","temp.csv"],stdout=f)