多重处理和清单

Question

我一直在尝试使用多处理模块来优化我的代码，但是我想我已经陷入了过早优化的陷阱。

例如，运行此代码时：

num = 1000000
l = mp.Manager().list()
for i in range(num):
    l.append(i)
l_ = Counter(l)

它花费的时间比这更长：

num = 1000000
l = []
for i in range(num):
    l.append(i)
l_ = Counter(l)

多处理列表比常规列表慢的原因是什么？ 有没有办法使它们高效？

Answer 1

共享的内存数据结构旨在在进程之间共享。 要同步访问，需要将其锁定。 另一方面， list （ [] ）不需要锁定。

有/无锁定会有所不同。