子进程运行完成后如何获取其环境变量？

Question

我正在寻找一种方法来做到这一点，以便我可以将它传递给另一个子进程的环境。

Answer 1

这是一个简单的函数，它在子进程中运行命令，然后将其环境提取到当前进程中。

它基于 Fnord 的版本，没有临时文件，并带有标记行以将 SET 命令与进程本身的任何输出区分开来。 它不是防弹的，但它适用于我的目的。

def setenv(cmd):
    cmd = cmd + ' && echo ~~~~START_ENVIRONMENT_HERE~~~~ && set'

    env = (subprocess.Popen(cmd, shell=True, stdout=subprocess.PIPE)
                     .stdout
                     .read()
                     .decode('utf-8')
                     .splitlines())

    record = False
    for e in env:
        if record:
            e = e.strip().split('=')
            os.environ[e[0]] = e[1]
        elif e.strip() == '~~~~START_ENVIRONMENT_HERE~~~~': 
            record = True

Answer 2

不幸的是，子进程一旦退出，它的环境就会消失，即使您在 Unix特殊文件/proc/[pid]/environ上使用/proc 文件系统，它也不会反映子进程所做的更改。

即使上述方法确实有效，您也会遇到竞争条件：父母需要确定阅读环境的“正确时间”，最好是在孩子修改环境之后。 要做到这一点，父母需要与孩子协调，只要你在协调，你就可以明确地沟通。

您需要通过套接字、管道、共享内存等在父级和子级之间传递状态。多处理模块可以使这更容易一些，让您可以通过队列或管道将数据从子级传递到父级。

更新这是使用multiprocessing模块让父进程与子进程共享值以及子进程跨队列相互通信的快速草图。 它使它变得非常简单：

import os
from multiprocessing import Process, Manager, Queue

def worker1(d, q):
    # receive value from worker2
    msg = q.get()
    d['value'] += 1
    d['worker1'] = os.getpid(), msg

def worker2(d, q):
    # send value to worker1
    q.put('hi from worker2')
    d['value'] += 1
    d['worker2'] = os.getpid()

if __name__ == '__main__':
    mgr = Manager()
    d = mgr.dict()
    q = Queue()
    d['value'] = 1
    p1 = Process(target=worker1, args=(d,q))
    p1.start()
    p2 = Process(target=worker2, args=(d,q))
    p2.start()
    p1.join()
    p2.join()
    print d

结果：

{'worker1': (47395, 'hi from worker2'), 'worker2': 47396, 'value': 3}

Answer 3

在 Windows 中，您可以使用SET命令来获取您想要的内容，如下所示：

import os, tempfile, subprocess

def set_env(bat_file):
    ''' Set current os.environ variables by sourcing an existing .bat file
        Note that because of a bug with stdout=subprocess.PIPE in my environment
        i use '>' to pipe out the output of 'set' into a text file, instead of
        of using stdout. So you could simplify this a bit...
    '''

    # Run the command and pipe to a tempfile
    temp = tempfile.mktemp()
    cmd = '%s && set > %s'%(bat_file,temp)
    login = subprocess.Popen(cmd, shell=True)
    state = login.wait()

    # Parse the output
    data = []
    if os.path.isfile(temp):
        with open(temp,'r') as file:
            data = file.readlines()
        os.remove(temp)

    # Every line will set an env variable
    for env in data:
        env = env.strip().split('=')
        os.environ[env[0]] = env[1]


# Make an environment variable
os.environ['SOME_AWESOME_VARIABLE']='nothing'

# Run a batch file which you expect, amongst other things, to change this env variable
set_env('C:/do_something_awesome.bat')

# Lets see what happened
os.environ['SOME_AWESOME_VARIABLE']
// RESULT: 'AWESOME'

所以现在，如果您可以使用它来读取 .bat 文件，然后根据需要使用它生成的环境变量，请修改/添加到它们，传递给一个新进程......等等......

Answer 4

你能在第一个子进程中打印出来并在 python 中处理那个字符串吗？

Answer 5

韦德的回答近乎完美。 显然我的环境中有一个 "'" 没有第二个元素 - 这破坏了env[0] = env[1]

def setenv(cmd):
    cmd = cmd + ' && echo ~~~~START_ENVIRONMENT_HERE~~~~ && set'

    env = (subprocess.Popen(cmd, shell=True, stdout=subprocess.PIPE)
                     .stdout
                     .read()
                     .decode('utf-8')
                     .splitlines())

    record = False
    for e in env:
        if record:
            e = e.strip().split('=')
            if len(e) > 1:
                os.environ[e[0]] = e[1]
        elif e.strip() == '~~~~START_ENVIRONMENT_HERE~~~~': 
            record = True