从子进程运行的子进程的乱码输出

Question

我正在使用以下代码来运行另一个 python 脚本。我面临的问题是该脚本的输出以无序的方式出现。 从命令行运行它时，我得到正确的输出，即：

这里有一些输出
编辑 xml 文件并保存更改
正在上传 xml 文件..

使用子进程运行脚本时，我以相反的顺序获取一些输出：

在此之前输出正确
正在上传 xml 文件..
编辑 xml 文件并保存更改

脚本正在执行，没有错误，并进行了正确的更改。所以我认为罪魁祸首可能是调用子脚本的代码，但我找不到问题：

    cmd = "child_script.py"
    proc = subprocess.Popen(cmd.split(), stdout=subprocess.PIPE,stderr=subprocess.STDOUT)
    (fout ,ferr) = ( proc.stdout, proc.stderr )
    print "Going inside while - loop"
    while True:
        line = proc.stdout.readline()
        print line
        fo.write(line)
        try : 
            err = ferr.readline()
            fe.write(err)
        except Exception, e:
            pass
        if not line:
            pass
            break

[编辑]：fo 和 fe 是输出和错误日志的文件句柄。此外，该脚本正在 Windows 上运行。很抱歉缺少这些详细信息。

Answer 1

恐怕您引用的脚本部分存在一些问题：

• 正如 detly' 中提到的s 注释，fo 和 fe 是什么？想必这些是您将子进程的输出写入其中的对象？ （更新：您指出这些都是用于写入输出日志。）
• 第 3 行存在缩进错误。（更新：我已在原始帖子中修复了该问题。） >
• 您指定了 stderr=subprocess.STDOUT，因此：(a) ferr 在循环中将始终为 None，并且 (b) 由于缓冲、标准输出和错误可能以不可预测的方式混合。但是，从您的代码看来，您实际上想分别处理标准输出和标准错误，因此也许可以尝试使用 stderr=subprocess.PIPE 来代替。

最好按照 jsbueno 建议重写循环：

from subprocess import Popen, PIPE
proc = Popen(["child_script.py"], stdout=PIPE, stderr=PIPE)
fout, ferr = proc.stdout, proc.stderr
for line in fout:
    print(line.rstrip())
    fo.write(line)
for line in ferr:
    fe.write(line)

...或者进一步减少它，因为它似乎目标本质上是您只想将子进程的标准输出和标准错误写入 fo 和 fe，只需执行以下操作：

proc = subprocess.Popen(["child_script.py"], stdout=fo, stderr=fe)

如果您仍然看到输出在 fo 正在写入的文件中交换了行，那么我们只能假设有某种方式可以在子脚本中发生这种情况。例如子脚本是多线程的吗？其中一行是通过另一个函数的回调打印的吗？

Answer 2

大多数时候，我看到输出顺序因执行而异，一些输出被发送到 C 标准 IO 流 stdin，一些输出被发送到 stderr。 stdout 和 stderr 的缓冲特性根据它们是否连接到终端、管道、文件等而有所不同：

NOTES
   The stream stderr is unbuffered.  The stream stdout is
   line-buffered when it points to a terminal.  Partial lines
   will not appear until fflush(3) or exit(3) is called, or a
   newline is printed.  This can produce unexpected results,
   especially with debugging output.  The buffering mode of
   the standard streams (or any other stream) can be changed
   using the setbuf(3) or setvbuf(3) call.  Note that in case
   stdin is associated with a terminal, there may also be
   input buffering in the terminal driver, entirely unrelated
   to stdio buffering.  (Indeed, normally terminal input is
   line buffered in the kernel.)  This kernel input handling
   can be modified using calls like tcsetattr(3); see also
   stty(1), and termios(3).

因此，也许您应该将 stdout 和 stderr 配置为转到相同的源，以便将相同的缓冲应用于两个流。

此外，某些程序直接打开终端 open("/dev/tty",...) （主要是为了读取密码），因此将终端输出与管道输出进行比较并不总是有效工作。

此外，如果您的程序将直接 write(2) 调用与标准 IO 调用混合在一起，则输出顺序可能会根据不同的缓冲选择而有所不同。

我希望其中之一是正确的:)请告诉我哪一个（如果有的话）。