子进程运行结束后如何获取其环境变量？

Question

我正在寻找一种方法来执行此操作，以便我可以将其传递到另一个子流程的环境。

Answer 1

这是一个简单的函数，它在子进程中运行命令，然后将其环境提取到当前进程中。

它基于 Fnord 的版本，没有临时文件，并带有一个标记行来区分 SET 命令和进程本身的任何输出。它不是防弹的，但它适合我的目的。

def setenv(cmd):
    cmd = cmd + ' && echo ~~~~START_ENVIRONMENT_HERE~~~~ && set'

    env = (subprocess.Popen(cmd, shell=True, stdout=subprocess.PIPE)
                     .stdout
                     .read()
                     .decode('utf-8')
                     .splitlines())

    record = False
    for e in env:
        if record:
            e = e.strip().split('=')
            os.environ[e[0]] = e[1]
        elif e.strip() == '~~~~START_ENVIRONMENT_HERE~~~~': 
            record = True

Answer 2

不幸的是，孩子的环境一旦退出就会消失，即使你在 Unix 上使用 /proc 文件系统 特殊文件 /proc/[pid]/environ 它不会反映子进程所做的更改。

即使上述方法确实有效，您也会遇到竞争条件：父母需要确定读取环境的“正确时间”，最好是在孩子修改环境之后立即确定。要做到这一点，父母需要与孩子协调，只要你在协调，你就可以明确地沟通。

您需要通过套接字、管道、共享内存等在父级和子级之间传递状态。 多处理模块可以使这变得更容易一些，让您可以通过队列或管道将数据从子级传递到父级。

已更新 下面是使用multiprocessing 模块让父进程与子进程共享值以及让子进程通过队列相互通信的简要概述。它使它变得非常简单：

import os
from multiprocessing import Process, Manager, Queue

def worker1(d, q):
    # receive value from worker2
    msg = q.get()
    d['value'] += 1
    d['worker1'] = os.getpid(), msg

def worker2(d, q):
    # send value to worker1
    q.put('hi from worker2')
    d['value'] += 1
    d['worker2'] = os.getpid()

if __name__ == '__main__':
    mgr = Manager()
    d = mgr.dict()
    q = Queue()
    d['value'] = 1
    p1 = Process(target=worker1, args=(d,q))
    p1.start()
    p2 = Process(target=worker2, args=(d,q))
    p2.start()
    p1.join()
    p2.join()
    print d

结果：

{'worker1': (47395, 'hi from worker2'), 'worker2': 47396, 'value': 3}

Answer 3

在 Windows 中，您可以使用 SET 命令来获取您想要的内容，如下所示：

import os, tempfile, subprocess

def set_env(bat_file):
    ''' Set current os.environ variables by sourcing an existing .bat file
        Note that because of a bug with stdout=subprocess.PIPE in my environment
        i use '>' to pipe out the output of 'set' into a text file, instead of
        of using stdout. So you could simplify this a bit...
    '''

    # Run the command and pipe to a tempfile
    temp = tempfile.mktemp()
    cmd = '%s && set > %s'%(bat_file,temp)
    login = subprocess.Popen(cmd, shell=True)
    state = login.wait()

    # Parse the output
    data = []
    if os.path.isfile(temp):
        with open(temp,'r') as file:
            data = file.readlines()
        os.remove(temp)

    # Every line will set an env variable
    for env in data:
        env = env.strip().split('=')
        os.environ[env[0]] = env[1]


# Make an environment variable
os.environ['SOME_AWESOME_VARIABLE']='nothing'

# Run a batch file which you expect, amongst other things, to change this env variable
set_env('C:/do_something_awesome.bat')

# Lets see what happened
os.environ['SOME_AWESOME_VARIABLE']
// RESULT: 'AWESOME'

因此，现在如果您可以使用它来读取 .bat 文件，然后根据需要使用它生成的环境变量，请修改/添加到它们，传递到新流程......等等......

Answer 4

你能在第一个子进程中打印它们并在 python 中处理该字符串吗？

Answer 5

韦德的回答近乎完美。显然我的环境中有一个“'”，没有第二个元素 - 这破坏了 env[0] = env[1]

def setenv(cmd):
    cmd = cmd + ' && echo ~~~~START_ENVIRONMENT_HERE~~~~ && set'

    env = (subprocess.Popen(cmd, shell=True, stdout=subprocess.PIPE)
                     .stdout
                     .read()
                     .decode('utf-8')
                     .splitlines())

    record = False
    for e in env:
        if record:
            e = e.strip().split('=')
            if len(e) > 1:
                os.environ[e[0]] = e[1]
        elif e.strip() == '~~~~START_ENVIRONMENT_HERE~~~~': 
            record = True