如何在python进程中获取多处理数组

Question

我想在每个进程中访问“ gs”变量。 如何从过程中引用initargs？

# file exec.py
import time
import os
import random


def f(letter):
    sleep_time = random.randint(3, 20)
    pid = os.getppid()
    g_id = # gs.pop() (how to access gs?)
    print('-------\nsleep: {}\npid: {}\nletter: {}'.format(sleep_time, pid, letter))
    time.sleep(sleep_time)
    print('===========\n{} ended\n==========='.format(letter))

    # gs.add(g_id) (return g_id so it can be used by others)
    return letter

这是主文件：

from multiprocessing import Pool, TimeoutError, Array

# file main.py
if __name__ == '__main__':
    gs = Array('B', [66, 67, 68, 69], lock=False)
    pool = Pool(processes=4, initargs=(gs, ))

    hopts = ['a', 'b', 'c', 'd', 'e', 'f', 'g', 'h']

    pool.map(f, hopts)

Answer 1

您缺少的关键是需要使用pool的初始化参数。 这个答案是一个很好的例子，说明了如何做到这一点以及为什么需要那样做。

这是将此类工作流程应用于您的问题的示例：

from multiprocessing import Pool, Array
import time
import os
import random

def f(letter):
    sleep_time = random.randint(3, 20)
    pid = os.getppid()
    g_id = gs[0]
    print('-------\nsleep: {}\npid: {}\nletter: {}'.format(sleep_time, pid, letter))
    time.sleep(sleep_time)
    print('===========\n{} ended\n==========='.format(letter))

    # gs.add(g_id) (return g_id so it can be used by others)
    return letter

def init(local_gs):
    global gs
    gs = local_gs

if __name__ == '__main__':
    gs = Array('B', [66, 67, 68, 69], lock=False)
    pool = Pool(initializer=init, initargs=(gs,))

    hopts = ['a', 'b', 'c', 'd', 'e', 'f', 'g', 'h']
    pool.map(f, hopts)

（我不确定您的最终目标是什么，因此我尝试尽可能少地进行修改。）