使用multiprocessing.Pool Python类异步调度顺序过程

Question

我正在使用可执行文件与Python multiprocessing.Pool类并行运行模拟，如下所示：

self._pool = Pool()

return self._pool.apply_async(run_executable, [],
    dict(simulator=self,
    params=params,
    command=self._command,
    results=self._results))

假设我们要在具有4个CPU的计算机上运行5个仿真，然后（如果我理解正确的话）按以下方式安排进程：

当我需要先前模拟的结果来启动具有调整参数的新模拟时，就会出现问题。 如果我们使用与之前相同的数字，并让模拟i.j+1跟随模拟ij ，那么对于模拟次数等于CPU数量的简单情况，调度应如下所示：

如何等待正确的过程完成，进行后处理，然后以异步模式再次开始新的仿真？ （我不太在乎是否由同一个CPU完成，我只想使用可用的最大CPU功率）。

Answer 1

以此替换您的代码，看看它的作用。

self._pool = Pool()

def process_ended_callback(result):
    print(self._command, "resulted in", result)

return self._pool.apply_async(run_executable, [],
    dict(simulator=self,
    params=params,
    command=self._command,
    results=self._results), 
    process_ended_callback)

它应该打印哪个命令刚刚结束。